大數(shù)據(jù)平臺架構(gòu)師崗位職責有哪些？崗位職責是一個具象化的工作描述，可將其歸類于不同職位類型范疇。下面小編給大家?guī)砹舜髷?shù)據(jù)平臺架構(gòu)師崗位職責10篇，供大家參考，希望可以幫助到你。

大數(shù)據(jù)平臺架構(gòu)師崗位職責篇1

職責：

根據(jù)大數(shù)據(jù)業(yè)務(wù)需求，設(shè)計大數(shù)據(jù)方案及架構(gòu)，實現(xiàn)相關(guān)功能;

搭建和維護大數(shù)據(jù)集群，保證集群規(guī)模持續(xù)、穩(wěn)定、高效平穩(wěn)運行;

負責大數(shù)據(jù)業(yè)務(wù)的設(shè)計和指導具體開發(fā)工作;

負責公司產(chǎn)品研發(fā)過程中的數(shù)據(jù)及存儲設(shè)計;

針對數(shù)據(jù)分析工作，能夠完成和指導負責業(yè)務(wù)數(shù)據(jù)建模。

職位要求：

計算機、自動化或相關(guān)專業(yè)(如統(tǒng)計學、數(shù)學)本科以上學歷，3年以上大數(shù)據(jù)處理相關(guān)工作經(jīng)驗;

精通大數(shù)據(jù)主流框架(如 Hadoop、hive、Spark等);

熟悉 MySQL、NoSQL(MongoDB、Redis)等主流數(shù)據(jù)庫，以及rabbit MQ等隊列技術(shù);

熟悉hadoop/spark生態(tài)的原理、特性且有實戰(zhàn)開發(fā)經(jīng)驗;

熟悉常用的數(shù)據(jù)挖掘算法優(yōu)先.

大數(shù)據(jù)平臺架構(gòu)師崗位職責篇2

職責：

1、正確理解業(yè)務(wù)需求，對需求進行工作量評估;

2、參與項目相關(guān)的需求、設(shè)計、投產(chǎn)手冊等文檔的編寫;

3、根據(jù)進度計劃，完成所承擔功能模塊的設(shè)計、開發(fā)、單元測試、聯(lián)調(diào)測試;

4、配合測試組修復代碼缺陷，確保功能實現(xiàn)與代碼質(zhì)量;

5、負責所承擔功能模塊投產(chǎn)、部署，及上線后的日常維護;

6、完成項目經(jīng)理或者架構(gòu)師安排的其他工作;

任職資格：

1、本科以上學歷，計算機相關(guān)專業(yè)，兩年以上大數(shù)據(jù)開發(fā)經(jīng)驗;

2、熟悉Linu_ 環(huán)境，掌握shell或python;

3、熟練使用hadoop，hive，HBase，YARN，kafka，spark等大數(shù)據(jù)開發(fā)組件;

4、精通 ETL，數(shù)據(jù)倉庫的設(shè)計和開發(fā);

5、有大數(shù)據(jù)處理實戰(zhàn)經(jīng)驗，熟悉整個大數(shù)據(jù)的完整處理流程，包括數(shù)據(jù)的采集、清洗、存儲;

6、較強的動手能力和學習能力，良好的溝通能力、團隊協(xié)調(diào)能力;

7、具有銀行、金融行業(yè)從業(yè)背景者優(yōu)先。

大數(shù)據(jù)平臺架構(gòu)師崗位職責篇3

職責：

1.負責企業(yè)數(shù)據(jù)中心建設(shè)，設(shè)計數(shù)據(jù)邏輯模型和物理模型，并完成相關(guān)開發(fā)

2.梳理公司各業(yè)務(wù)線常用的指標和維度，統(tǒng)一指標定義口徑

3.根據(jù)數(shù)據(jù)應(yīng)用開發(fā)和數(shù)據(jù)分析需求，設(shè)計數(shù)據(jù)倉庫信息層模型，提高數(shù)據(jù)開發(fā)的效率

4.負責數(shù)據(jù)模型的運營和優(yōu)化，及時響應(yīng)業(yè)務(wù)邏輯變更，保證模型的數(shù)據(jù)質(zhì)量和穩(wěn)定性

5.負責公司數(shù)據(jù)標簽體系的建設(shè)，并推動標簽體系在實際業(yè)務(wù)場景中落地

崗位要求：

1.5年以上DW/BI數(shù)據(jù)架構(gòu)設(shè)計、模型設(shè)計和性能調(diào)優(yōu)等相關(guān)經(jīng)驗

2.有較強的數(shù)據(jù)分析能力，精通數(shù)據(jù)倉庫架構(gòu)，熟悉Erwin或PowerDesigner建模工具

3.精通一種主流關(guān)系數(shù)據(jù)庫(如mysql等)，熟悉Hive開發(fā)

4.有電商業(yè)務(wù)經(jīng)驗，元數(shù)據(jù)管理，數(shù)據(jù)質(zhì)量管理或標簽體系搭建經(jīng)驗者優(yōu)先

5.優(yōu)秀的協(xié)調(diào)溝通與團隊協(xié)作能力，極強的責任心，能承受一定的工作壓力，認同企業(yè)文化和團隊價值

大數(shù)據(jù)平臺架構(gòu)師崗位職責篇4

1、建設(shè)大數(shù)據(jù)平臺，主要技術(shù)為k8s, docker;

2、跟進開源社區(qū)的更新，閱讀文檔，驗證feature;

3、閱讀容器生態(tài)圈各組件的開源項目代碼，開發(fā)新功能;

4、持續(xù)提升平臺的性能和穩(wěn)定性。

大數(shù)據(jù)平臺架構(gòu)師崗位職責篇5

職責：

1、負責公司大數(shù)據(jù)產(chǎn)品的架構(gòu)設(shè)計，包含數(shù)據(jù)收集、數(shù)據(jù)存儲、數(shù)據(jù)應(yīng)用，并完成相關(guān)架構(gòu)設(shè)計文檔的撰寫;

2、參與規(guī)劃從數(shù)據(jù)源到數(shù)據(jù)應(yīng)用的整體流程，并參與相關(guān)產(chǎn)品的決策;

3、負責解決核心技術(shù)問題，對技術(shù)方案進行決策;

4、負責大數(shù)據(jù)研發(fā)團隊建設(shè)、人才梯隊培養(yǎng)和技術(shù)團隊管理;

5、積極了解業(yè)界發(fā)展，研究與跟蹤大數(shù)據(jù)新技術(shù)發(fā)展方向。

任職要求：

1、精通GoldenGate For BigData相關(guān)理論，具備大型數(shù)據(jù)利用的生產(chǎn)實戰(zhàn)經(jīng)驗;

2、精通數(shù)據(jù)驅(qū)動的理論，設(shè)計并生產(chǎn)上線相關(guān)數(shù)據(jù)驅(qū)動的產(chǎn)品;

3、精通常用消息中間件的使用，例如kafka/RocketMQ/Apache Pulsar，有解讀相關(guān)源碼者優(yōu)先;

4、掌握hadoop、spark生態(tài)體系相關(guān)產(chǎn)品的使用，掌握MapReduce編程或Spark編程;

5、了解傳統(tǒng)數(shù)據(jù)倉庫理論及相關(guān)ETL工具，例如kettle/datastage;

6、熟悉Oracle、Mongodb、Mysql數(shù)據(jù)庫的使用;

7、扎實的Java語言基礎(chǔ)，熟悉Java開發(fā)工具和調(diào)試工具的使用;

8、良好的團隊協(xié)作精神，有能力對團隊在軟件設(shè)計、實現(xiàn)和測試方面進行指導;

9、良好的邏輯分析能力和溝通能力，執(zhí)行力強、對待工作認真嚴謹、責任心強、具備出色的學習能力和團隊合作精神，有一定的推動能力;

10、計算機科學、信息技術(shù)或相關(guān)領(lǐng)域本科以上學歷，具有5年以上數(shù)據(jù)平臺項目開發(fā)經(jīng)驗，3年以上的架構(gòu)設(shè)計經(jīng)驗，具有大數(shù)據(jù)平臺應(yīng)用大型項目架構(gòu)設(shè)計經(jīng)驗優(yōu)先;

大數(shù)據(jù)平臺架構(gòu)師崗位職責篇6

職責：

1、負責大數(shù)據(jù)開發(fā)團隊建設(shè);

2、負責行業(yè)大數(shù)據(jù)產(chǎn)品架構(gòu)設(shè)計與研發(fā);

3、負責帶領(lǐng)團隊進行行業(yè)大數(shù)據(jù)產(chǎn)品關(guān)鍵技術(shù)攻關(guān)。

任職要求：

1、有三年以上大數(shù)據(jù)應(yīng)用、開發(fā)經(jīng)驗;具備海量數(shù)據(jù)加工處理(ETL)相關(guān)經(jīng)驗，對數(shù)據(jù)挖掘及機器學習有較為深刻的理解;

2、熟悉Hadoop相關(guān)技術(shù)，對HDFS、MapReduce、Hive、HBase有一定的使用和開發(fā)經(jīng)驗;

3、熟悉Linu_，熟練使用Shell或Python，進行腳本編寫;

4、對數(shù)據(jù)結(jié)構(gòu)和數(shù)據(jù)統(tǒng)計分析算法有較為深刻理解;

5、掌握至少一種主流關(guān)系數(shù)據(jù)庫開發(fā)技術(shù)：Oracle、SQL Server、MySQL等;

6、掌握實時流計算技術(shù)，有Spark、Storm開發(fā)經(jīng)驗者優(yōu)先;

7、需要具備2年以上研發(fā)團隊管理經(jīng)驗。

大數(shù)據(jù)平臺架構(gòu)師崗位職責篇7

職責:

1)負責公司軟件產(chǎn)品整體架構(gòu)的設(shè)計和關(guān)鍵功能實現(xiàn)

2)負責公司架構(gòu)長期看護以及優(yōu)化;

3)負責軟件部門各模組間的協(xié)調(diào)配合;

4)提高鞏固軟件代碼質(zhì)量;

5)負責大數(shù)據(jù)流式框架的設(shè)計、優(yōu)化及部署;

6)規(guī)劃研發(fā)部門員工的技術(shù)發(fā)展路線并提供必要的幫助和指導

任職資格:

1)本科及以上學歷，計算機相關(guān)專業(yè)，5年以上工作經(jīng)驗;

2)頻繁換工作，比如一年一個公司，請繞路;

3)3年以上產(chǎn)品架構(gòu)經(jīng)驗，主導過產(chǎn)品的成功上線;

4)對底層設(shè)備通訊協(xié)議，B/S系統(tǒng)，手機APP開發(fā)等都有一定的了解;

5)對各種主流語言C#\Java\Pathon有一定的了解

5)精通各種大數(shù)據(jù)架構(gòu)，并深入研究過其中一種，有storm\kafka等流式實時處理經(jīng)驗為佳

6)能夠承擔較強的工作壓力，有良好的自我驅(qū)動能力和責任感;

7)具備優(yōu)秀的邏輯思維能力、表達能力、溝通協(xié)調(diào)能力。

大數(shù)據(jù)平臺架構(gòu)師崗位職責篇8

職責：

1、搭建基于Hadoop/Spark的數(shù)據(jù)挖掘體系和大數(shù)據(jù)分析系統(tǒng)架構(gòu);

2、研究大數(shù)據(jù)領(lǐng)域前沿數(shù)據(jù)挖掘技術(shù)，并引入相應(yīng)技術(shù)在數(shù)據(jù)中心的使用;

3、進行大數(shù)據(jù)系統(tǒng)框架設(shè)計、模型算法開發(fā);

4、負責大型數(shù)據(jù)挖掘項目方案制定、項目實施落地及優(yōu)化等 ;

5、開展數(shù)據(jù)爬取、聚類分析、輿情分析、魚骨圖分析、定價策略等領(lǐng)域數(shù)據(jù)挖掘工作;

任職資格：

1、本科以上學歷(持有學士學位)(985，211優(yōu)先)，計算機相關(guān)專業(yè)，五年工作經(jīng)驗;

2、二年以上數(shù)據(jù)挖掘項目經(jīng)驗，完整參與過數(shù)據(jù)挖掘大數(shù)據(jù)平臺的架構(gòu)開發(fā)過程，具備互聯(lián)網(wǎng)行業(yè)背景優(yōu)先;

3、精通分布式計算框架(hadoop、spark、Storm等)及相關(guān)經(jīng)驗，熟練掌握Hive/SQL，Python，熟悉Python、R相關(guān)數(shù)值科學計算庫(NumPy,SciPy等);

4、了解傳統(tǒng)的BI/DW 理論，能結(jié)合傳統(tǒng)BI實踐設(shè)計大數(shù)據(jù)平臺;

5、熟悉常用機器學習算法(如分類、回歸、聚類、關(guān)聯(lián)規(guī)則等)及其原理，具備應(yīng)用場景經(jīng)驗，如用戶畫像、商品關(guān)聯(lián)度分析、輿情分析;

6、熟悉主數(shù)據(jù)、元數(shù)據(jù)、數(shù)據(jù)質(zhì)量、和數(shù)據(jù)建模等數(shù)據(jù)治理相關(guān)的體系和方法;

7、具備較強的邏輯思維能力、數(shù)據(jù)敏感度，擅于利用數(shù)據(jù)發(fā)現(xiàn)問題及解決問題;

大數(shù)據(jù)平臺架構(gòu)師崗位職責篇9

職責：

1. 深刻理解政府行業(yè)業(yè)務(wù)模式，構(gòu)建政府行業(yè)的數(shù)據(jù)模型，制定公司大數(shù)據(jù)技術(shù)發(fā)展路線;

2. 對接業(yè)務(wù)研究和技術(shù)部門，主動搜集和轉(zhuǎn)化需求，組織數(shù)據(jù)中心業(yè)務(wù)開發(fā)，進行數(shù)據(jù)相關(guān)產(chǎn)品需求分析和設(shè)計;

3. 搭建數(shù)據(jù)倉庫，研發(fā)數(shù)據(jù)庫管理系統(tǒng)，搜集、提取、處理業(yè)務(wù)積累的海量數(shù)據(jù)，開展數(shù)據(jù)分析和挖掘;

4. 根據(jù)公司戰(zhàn)略和發(fā)展需要，規(guī)劃數(shù)據(jù)中心重點工作和任務(wù);落實部門人員、事務(wù)管理，開展跨部門、跨地區(qū)協(xié)作，協(xié)助對外交流與合作。

職位要求：

1. 5年以上相關(guān)工作經(jīng)驗，有團隊管理和項目管理經(jīng)驗者優(yōu)先;

2.了解政府運作機制，掌握財政行業(yè)知識，有電子政務(wù)行業(yè)經(jīng)驗者優(yōu)先;

3. 熟練掌握使用Java或Python,精通數(shù)據(jù)庫查詢語言如SQL，Oracle等,在機器學習模型和算法方向有應(yīng)用經(jīng)驗者優(yōu)先;

4. 具備數(shù)據(jù)中心產(chǎn)品策劃整體思維，有大數(shù)據(jù)處理、分析、挖掘經(jīng)驗者優(yōu)先;

5. 邏輯思維嚴密，具備業(yè)務(wù)抽象、分解和標準化的能力，口頭和書面表達優(yōu)秀;

6. 有較強的大局意識和良好的團隊合作意識，富有領(lǐng)導力，具備優(yōu)秀的人際交往和溝通能力。

大數(shù)據(jù)平臺架構(gòu)師崗位職責篇10

職責：

1、 基于公司大數(shù)據(jù)基礎(chǔ)和數(shù)據(jù)資產(chǎn)積累，負責大數(shù)據(jù)應(yīng)用整體技術(shù)架構(gòu)的設(shè)計、優(yōu)化，建設(shè)大數(shù)據(jù)能力開放平臺;負責大數(shù)據(jù)應(yīng)用產(chǎn)品的架構(gòu)設(shè)計、技術(shù)把控工作。

2、 負責制定大數(shù)據(jù)應(yīng)用系統(tǒng)的數(shù)據(jù)安全管控體系和數(shù)據(jù)使用規(guī)范。

3、 作為大數(shù)據(jù)技術(shù)方案到產(chǎn)品實現(xiàn)的技術(shù)負責人，負責關(guān)鍵技術(shù)點攻堅工作，負責內(nèi)部技術(shù)推廣、培訓及知識轉(zhuǎn)移工作。

4、 負責大數(shù)據(jù)系統(tǒng)研發(fā)項目任務(wù)規(guī)劃、整體進度、風險把控，有效協(xié)同團隊成員并組織跨團隊技術(shù)協(xié)作，保證項目質(zhì)量與進度。

5、 負責提升產(chǎn)品技術(shù)團隊的技術(shù)影響力，針對新人、普通開發(fā)人員進行有效輔導，幫助其快速成長。

任職資格：

1、 計算機、數(shù)學或相關(guān)專業(yè)本科以上學歷，5-20__年工作經(jīng)驗，具有大型系統(tǒng)的技術(shù)架構(gòu)\應(yīng)用架構(gòu)\數(shù)據(jù)架構(gòu)相關(guān)的實踐工作經(jīng)驗。

2、 有分布式系統(tǒng)分析及架構(gòu)設(shè)計經(jīng)驗，熟悉基于計算集群的軟件系統(tǒng)架構(gòu)和實施經(jīng)驗。

3、 掌握Hadoop/Spark/Storm生態(tài)圈的主流技術(shù)及產(chǎn)品，深入了解Hadoop/Spark/Storm生態(tài)圈產(chǎn)品的工作原理及應(yīng)用場景。

4、 掌握Mysql/Oracle等常用關(guān)系型數(shù)據(jù)庫，能夠?qū)QL進行優(yōu)化。

5、 熟悉分布式系統(tǒng)基礎(chǔ)設(shè)施中常用的技術(shù)，如緩存(Varnish、Memcache、Redis)、消息中間件(Rabbit MQ、Active MQ、Kafka、NSQ)等;有實踐經(jīng)驗者優(yōu)先。

6、 熟悉Linu_，Java基礎(chǔ)扎實，至少3-5年以上Java應(yīng)用開發(fā)經(jīng)驗，熟悉常用的設(shè)計模式和開源框架。