大數(shù)據(jù)架構(gòu)師工作的職責

　　大數(shù)據(jù)架構(gòu)師負責大數(shù)據(jù)系統(tǒng)設(shè)計、功能模塊設(shè)計，數(shù)據(jù)平臺的搭建、維護和優(yōu)化。下面是學習啦小編整理的大數(shù)據(jù)架構(gòu)師工作的職責。

　　大數(shù)據(jù)架構(gòu)師工作的職責1

　　職責：

　　1、負責大數(shù)據(jù)項目平臺架構(gòu)的評估、規(guī)劃和設(shè)計

　　2、開發(fā)大數(shù)據(jù)平臺的核心模塊代碼，負責大數(shù)據(jù)平臺的搭建，完成系統(tǒng)調(diào)試、集成與實施，保證大數(shù)據(jù)產(chǎn)品的上線運行

　　3、根據(jù)業(yè)務(wù)需求整合優(yōu)化數(shù)據(jù)架構(gòu)，保證產(chǎn)品的可靠性、穩(wěn)定性

　　4、指導開發(fā)人員完成數(shù)據(jù)模型規(guī)劃建設(shè)，分析模型構(gòu)建及分析呈現(xiàn)

　　5、深入研究大數(shù)據(jù)相關(guān)技術(shù)和產(chǎn)品，跟進業(yè)界先進技術(shù);

　　6、根據(jù)項目要求編寫相關(guān)技術(shù)文檔;

　　7、負責大數(shù)據(jù)平臺的架構(gòu)評審，代碼評審，上線評審;參與數(shù)據(jù)應用需求、設(shè)計、審核和評審;

　　8、負責核心模塊研發(fā)，負責大數(shù)據(jù)平臺的搭建，完成系統(tǒng)調(diào)試、集成與實施;

　　9. 負責關(guān)鍵功能的開發(fā)，技術(shù)難題的解決，以及輸出代碼的關(guān)鍵把控;

　　10. 負責對使用關(guān)鍵技術(shù)的預研和選型，完成 PoC ;

　　11. 指導工程師完成開發(fā)工作，并能分享技術(shù)經(jīng)驗。

　　任職資格:

　　1、精通Linux操作系統(tǒng)，熟練使用Java;

　　2、3年以上大數(shù)據(jù)項目實戰(zhàn)經(jīng)驗，兩個項目的架構(gòu)設(shè)計經(jīng)驗，熟悉Hadoop、Hbase、Storm、Spark、Pig等開源框架，并熟悉其工作原理;

　　3、有Hadoop、Spark、Hbase平臺性能調(diào)優(yōu)經(jīng)驗;

　　4、熟悉其它分布式存儲相關(guān)技術(shù)，包括HDFS，Hive、Redis、Mongodb、 Flume、Kafaka、Sqoop、Zookeeper、ElasticSearch等;

　　5、熟悉Java開發(fā)常用框架.如Spring、MyBatis等;

　　6、熟悉關(guān)系型數(shù)據(jù)庫如oracle及數(shù)據(jù)庫編程。

　　7、能夠根據(jù)項目情況安排人力、分配任務(wù)，具有較強的團隊管理能力。

　　8、碩士以上學歷，10年以上的工作經(jīng)驗。

　　大數(shù)據(jù)架構(gòu)師工作的職責2

　　職責：

　　1. 負責設(shè)計企業(yè)級大數(shù)據(jù)平臺的整體架構(gòu)，從技術(shù)層面制定清晰的大數(shù)據(jù)產(chǎn)品與系統(tǒng)技術(shù)架構(gòu)，并負責實現(xiàn)關(guān)鍵技術(shù)和產(chǎn)品。

　　2. 負責設(shè)計具有創(chuàng)新價值的大數(shù)據(jù)底層平臺、大數(shù)據(jù)上層應用系統(tǒng)等，帶領(lǐng)團隊完成有質(zhì)變的技術(shù)解決方案。

　　3. 負責組織同事研究行內(nèi)最前沿的技術(shù)發(fā)展方向，突破現(xiàn)有的技術(shù)難題。

　　4. 負責研究院對外項目合作協(xié)調(diào)與支持，編寫項目建設(shè)方案及后期項目建設(shè)支持。

　　任職要求：

　　1. 碩士及以上學歷，計算機相關(guān)專業(yè)。

　　2. JAVA基礎(chǔ)扎實,不少于8年的一線開發(fā)經(jīng)驗，精通Spring boot/MyBatis/Restful API的開發(fā)與管理. 熟悉ReactJS/Angular/Vue之一前端開發(fā)技術(shù)，熟悉Maven或Ant.，熟悉Python語言開發(fā)加分。

　　3. 不少于4年大數(shù)據(jù)的直接研發(fā)經(jīng)驗，精通Hadoop/Spark系統(tǒng)，有hands-on的架構(gòu)設(shè)計、性能調(diào)優(yōu)、開發(fā)經(jīng)驗。有MongoDB、Kafka、Hbase/Cassandra/Storm/Hive 等系統(tǒng)的開發(fā)經(jīng)驗。

　　4. 掌握分布式系統(tǒng)原理，對分布式存儲、流式計算、消息隊列中的一項或多項有深入的理解和認識。

　　5. 熟悉分布式系統(tǒng)的監(jiān)控、運維、故障恢復，高可用原理和設(shè)計理念。

　　6. 算法基礎(chǔ)扎實，熟悉常見的數(shù)據(jù)結(jié)構(gòu)，掌握大規(guī)模高并發(fā)訪問、大數(shù)據(jù)開發(fā)等處理經(jīng)驗;熟練的Linux系統(tǒng), 網(wǎng)絡(luò), 內(nèi)存和存儲等方面知識。

　　7. 必須要有千萬級別的項目管理經(jīng)驗，包括但不限于前期需求溝通，建設(shè)方案編寫，中期項目實施，進度匯報，后期項目維護。

　　大數(shù)據(jù)架構(gòu)師工作的職責3

　　職責：

　　把控大數(shù)據(jù)系統(tǒng)及全公司的產(chǎn)品做技術(shù)選型和架構(gòu)設(shè)計;

　　負責公司產(chǎn)品需求技術(shù)解決方案的編制設(shè)計工作,并能夠?qū)⒔鉀Q方案清晰地傳達給項目組成員;

　　主導項目關(guān)鍵技術(shù)問題的攻關(guān),協(xié)助項目管理對技術(shù)問題進行跟進;

　　協(xié)助解決具體研發(fā)過程中的問題;

　　定期進行新技術(shù)研究和匯報;

　　對產(chǎn)品線進行技術(shù)方案支持，及客戶、市場技術(shù)調(diào)研

　　任職要求：

　　1. 全日制綜合類大學本科及以上學歷，計算機科學與技術(shù)、信息工程、大數(shù)據(jù)、通訊相關(guān)專業(yè)(如有特殊經(jīng)歷者酌情考慮);

　　2. 擁有多年系統(tǒng)設(shè)計與開發(fā)工作經(jīng)驗，深刻理解計算機、互聯(lián)網(wǎng)有關(guān)技術(shù)與理論、設(shè)計模式，深刻理解多線程、內(nèi)存數(shù)據(jù)庫、分布式系統(tǒng)、大數(shù)據(jù)相關(guān)的設(shè)計、架構(gòu)規(guī)劃、開發(fā)經(jīng)驗者優(yōu)先;

　　3. 深入理解各類技術(shù)與產(chǎn)品的原理與思想，有較強需求分析和技術(shù)設(shè)計與實現(xiàn)能力;

　　大數(shù)據(jù)架構(gòu)師工作的職責4

　　職責：

　　1、正確理解業(yè)務(wù)需求，對需求進行工作量評估;

　　2、參與項目相關(guān)的需求、設(shè)計、投產(chǎn)手冊等文檔的編寫;

　　3、根據(jù)進度計劃，完成所承擔功能模塊的設(shè)計、開發(fā)、單元測試、聯(lián)調(diào)測試;

　　4、配合測試組修復代碼缺陷，確保功能實現(xiàn)與代碼質(zhì)量;

　　5、負責所承擔功能模塊投產(chǎn)、部署，及上線后的日常維護;

　　6、完成項目經(jīng)理或者架構(gòu)師安排的其他工作;

　　任職資格：

　　1、本科以上學歷，計算機相關(guān)專業(yè)，兩年以上大數(shù)據(jù)開發(fā)經(jīng)驗;

　　2、熟悉Linux 環(huán)境，掌握shell或python;

　　3、熟練使用hadoop，hive，HBase，YARN，kafka，spark等大數(shù)據(jù)開發(fā)組件;

　　4、精通 ETL，數(shù)據(jù)倉庫的設(shè)計和開發(fā);

　　5、有大數(shù)據(jù)處理實戰(zhàn)經(jīng)驗，熟悉整個大數(shù)據(jù)的完整處理流程，包括數(shù)據(jù)的采集、清洗、存儲;

　　6、較強的動手能力和學習能力，良好的溝通能力、團隊協(xié)調(diào)能力;

　　7、具有銀行、金融行業(yè)從業(yè)背景者優(yōu)先。

　　大數(shù)據(jù)架構(gòu)師工作的職責5

　　職責：

　　1. 負責大數(shù)據(jù)基礎(chǔ)平臺、海量數(shù)據(jù)存儲/處理分布式平臺、數(shù)據(jù)分析系統(tǒng)架構(gòu)設(shè)計和研發(fā);

　　2. 負責實時計算平臺基礎(chǔ)架構(gòu)設(shè)計、部署、監(jiān)控、優(yōu)化升級;

　　3. 制定項目/數(shù)據(jù)倉庫設(shè)計及實現(xiàn)規(guī)范，指導設(shè)計研發(fā)和部署;

　　4. 協(xié)助策略和算法團隊工作，保障數(shù)據(jù)挖掘建模和工程化;

　　5. 深入研究大數(shù)據(jù)相關(guān)技術(shù)和產(chǎn)品，跟進業(yè)界先進技術(shù)。

　　任職要求：

　　1. 全日制本科及以上學歷，5年以上軟件和分布式系統(tǒng)研發(fā)經(jīng)驗，3年以上大數(shù)據(jù)系統(tǒng)架構(gòu)經(jīng)驗;

　　2. 精通Hadoop/HBase/Spark/Storm/Redis技術(shù)及其生態(tài)圈;

　　3. 具備Java/C++/Scala等開發(fā)經(jīng)驗，熟悉數(shù)據(jù)挖掘和分析的策略與算法;

　　4. 具備良好的系統(tǒng)分析能力、故障診斷能力;

　　5. 有大數(shù)據(jù)策略、算法、可視化經(jīng)驗優(yōu)先;

　　6、211/985 重點學校畢業(yè)優(yōu)先。