大數(shù)據(jù)架構(gòu)師的基本職責(zé)有哪些？崗位職責(zé)的明確對(duì)于企業(yè)規(guī)范用工、避免風(fēng)險(xiǎn)是非常重要的。下面小編給大家?guī)?lái)了大數(shù)據(jù)架構(gòu)師的基本職責(zé)(10篇)，供大家參考，希望可以幫助到你。

大數(shù)據(jù)架構(gòu)師的基本職責(zé)【篇1】

職責(zé)：

1、負(fù)責(zé)公司大數(shù)據(jù)產(chǎn)品的架構(gòu)設(shè)計(jì)，包含數(shù)據(jù)收集、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)應(yīng)用，并完成相關(guān)架構(gòu)設(shè)計(jì)文檔的撰寫(xiě);

2、參與規(guī)劃從數(shù)據(jù)源到數(shù)據(jù)應(yīng)用的整體流程，并參與相關(guān)產(chǎn)品的決策;

3、負(fù)責(zé)解決核心技術(shù)問(wèn)題，對(duì)技術(shù)方案進(jìn)行決策;

4、負(fù)責(zé)大數(shù)據(jù)研發(fā)團(tuán)隊(duì)建設(shè)、人才梯隊(duì)培養(yǎng)和技術(shù)團(tuán)隊(duì)管理;

5、積極了解業(yè)界發(fā)展，研究與跟蹤大數(shù)據(jù)新技術(shù)發(fā)展方向。

任職要求：

1、精通GoldenGate For BigData相關(guān)理論，具備大型數(shù)據(jù)利用的生產(chǎn)實(shí)戰(zhàn)經(jīng)驗(yàn);

2、精通數(shù)據(jù)驅(qū)動(dòng)的理論，設(shè)計(jì)并生產(chǎn)上線相關(guān)數(shù)據(jù)驅(qū)動(dòng)的產(chǎn)品;

3、精通常用消息中間件的使用，例如kafka/RocketMQ/Apache Pulsar，有解讀相關(guān)源碼者優(yōu)先;

4、掌握hadoop、spark生態(tài)體系相關(guān)產(chǎn)品的使用，掌握MapReduce編程或Spark編程;

5、了解傳統(tǒng)數(shù)據(jù)倉(cāng)庫(kù)理論及相關(guān)ETL工具，例如kettle/datastage;

6、熟悉Oracle、Mongodb、Mysql數(shù)據(jù)庫(kù)的使用;

7、扎實(shí)的Java語(yǔ)言基礎(chǔ)，熟悉Java開(kāi)發(fā)工具和調(diào)試工具的使用;

8、良好的團(tuán)隊(duì)協(xié)作精神，有能力對(duì)團(tuán)隊(duì)在軟件設(shè)計(jì)、實(shí)現(xiàn)和測(cè)試方面進(jìn)行指導(dǎo);

9、良好的邏輯分析能力和溝通能力，執(zhí)行力強(qiáng)、對(duì)待工作認(rèn)真嚴(yán)謹(jǐn)、責(zé)任心強(qiáng)、具備出色的學(xué)習(xí)能力和團(tuán)隊(duì)合作精神，有一定的推動(dòng)能力;

10、計(jì)算機(jī)科學(xué)、信息技術(shù)或相關(guān)領(lǐng)域本科以上學(xué)歷，具有5年以上數(shù)據(jù)平臺(tái)項(xiàng)目開(kāi)發(fā)經(jīng)驗(yàn)，3年以上的架構(gòu)設(shè)計(jì)經(jīng)驗(yàn)，具有大數(shù)據(jù)平臺(tái)應(yīng)用大型項(xiàng)目架構(gòu)設(shè)計(jì)經(jīng)驗(yàn)優(yōu)先;

大數(shù)據(jù)架構(gòu)師的基本職責(zé)【篇2】

職責(zé)：

1、負(fù)責(zé)大數(shù)據(jù)開(kāi)發(fā)團(tuán)隊(duì)建設(shè);

2、負(fù)責(zé)行業(yè)大數(shù)據(jù)產(chǎn)品架構(gòu)設(shè)計(jì)與研發(fā);

3、負(fù)責(zé)帶領(lǐng)團(tuán)隊(duì)進(jìn)行行業(yè)大數(shù)據(jù)產(chǎn)品關(guān)鍵技術(shù)攻關(guān)。

任職要求：

1、有三年以上大數(shù)據(jù)應(yīng)用、開(kāi)發(fā)經(jīng)驗(yàn);具備海量數(shù)據(jù)加工處理(ETL)相關(guān)經(jīng)驗(yàn)，對(duì)數(shù)據(jù)挖掘及機(jī)器學(xué)習(xí)有較為深刻的理解;

2、熟悉Hadoop相關(guān)技術(shù)，對(duì)HDFS、MapReduce、Hive、HBase有一定的使用和開(kāi)發(fā)經(jīng)驗(yàn);

3、熟悉Linu_，熟練使用Shell或Python，進(jìn)行腳本編寫(xiě);

4、對(duì)數(shù)據(jù)結(jié)構(gòu)和數(shù)據(jù)統(tǒng)計(jì)分析算法有較為深刻理解;

5、掌握至少一種主流關(guān)系數(shù)據(jù)庫(kù)開(kāi)發(fā)技術(shù)：Oracle、SQL Server、MySQL等;

6、掌握實(shí)時(shí)流計(jì)算技術(shù)，有Spark、Storm開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先;

7、需要具備2年以上研發(fā)團(tuán)隊(duì)管理經(jīng)驗(yàn)。

大數(shù)據(jù)架構(gòu)師的基本職責(zé)【篇3】

職責(zé):

1)負(fù)責(zé)公司軟件產(chǎn)品整體架構(gòu)的設(shè)計(jì)和關(guān)鍵功能實(shí)現(xiàn)

2)負(fù)責(zé)公司架構(gòu)長(zhǎng)期看護(hù)以及優(yōu)化;

3)負(fù)責(zé)軟件部門各模組間的協(xié)調(diào)配合;

4)提高鞏固軟件代碼質(zhì)量;

5)負(fù)責(zé)大數(shù)據(jù)流式框架的設(shè)計(jì)、優(yōu)化及部署;

6)規(guī)劃研發(fā)部門員工的技術(shù)發(fā)展路線并提供必要的幫助和指導(dǎo)

任職資格:

1)本科及以上學(xué)歷，計(jì)算機(jī)相關(guān)專業(yè)，5年以上工作經(jīng)驗(yàn);

2)頻繁換工作，比如一年一個(gè)公司，請(qǐng)繞路;

3)3年以上產(chǎn)品架構(gòu)經(jīng)驗(yàn)，主導(dǎo)過(guò)產(chǎn)品的成功上線;

4)對(duì)底層設(shè)備通訊協(xié)議，B/S系統(tǒng)，手機(jī)APP開(kāi)發(fā)等都有一定的了解;

5)對(duì)各種主流語(yǔ)言C#\Java\Pathon有一定的了解

5)精通各種大數(shù)據(jù)架構(gòu)，并深入研究過(guò)其中一種，有storm\kafka等流式實(shí)時(shí)處理經(jīng)驗(yàn)為佳

6)能夠承擔(dān)較強(qiáng)的工作壓力，有良好的自我驅(qū)動(dòng)能力和責(zé)任感;

7)具備優(yōu)秀的邏輯思維能力、表達(dá)能力、溝通協(xié)調(diào)能力。

大數(shù)據(jù)架構(gòu)師的基本職責(zé)【篇4】

職責(zé)：

1、搭建基于Hadoop/Spark的數(shù)據(jù)挖掘體系和大數(shù)據(jù)分析系統(tǒng)架構(gòu);

2、研究大數(shù)據(jù)領(lǐng)域前沿?cái)?shù)據(jù)挖掘技術(shù)，并引入相應(yīng)技術(shù)在數(shù)據(jù)中心的使用;

3、進(jìn)行大數(shù)據(jù)系統(tǒng)框架設(shè)計(jì)、模型算法開(kāi)發(fā);

4、負(fù)責(zé)大型數(shù)據(jù)挖掘項(xiàng)目方案制定、項(xiàng)目實(shí)施落地及優(yōu)化等 ;

5、開(kāi)展數(shù)據(jù)爬取、聚類分析、輿情分析、魚(yú)骨圖分析、定價(jià)策略等領(lǐng)域數(shù)據(jù)挖掘工作;

任職資格：

1、本科以上學(xué)歷(持有學(xué)士學(xué)位)(985，211優(yōu)先)，計(jì)算機(jī)相關(guān)專業(yè)，五年工作經(jīng)驗(yàn);

2、二年以上數(shù)據(jù)挖掘項(xiàng)目經(jīng)驗(yàn)，完整參與過(guò)數(shù)據(jù)挖掘大數(shù)據(jù)平臺(tái)的架構(gòu)開(kāi)發(fā)過(guò)程，具備互聯(lián)網(wǎng)行業(yè)背景優(yōu)先;

3、精通分布式計(jì)算框架(hadoop、spark、Storm等)及相關(guān)經(jīng)驗(yàn)，熟練掌握Hive/SQL，Python，熟悉Python、R相關(guān)數(shù)值科學(xué)計(jì)算庫(kù)(NumPy,SciPy等);

4、了解傳統(tǒng)的BI/DW 理論，能結(jié)合傳統(tǒng)BI實(shí)踐設(shè)計(jì)大數(shù)據(jù)平臺(tái);

5、熟悉常用機(jī)器學(xué)習(xí)算法(如分類、回歸、聚類、關(guān)聯(lián)規(guī)則等)及其原理，具備應(yīng)用場(chǎng)景經(jīng)驗(yàn)，如用戶畫(huà)像、商品關(guān)聯(lián)度分析、輿情分析;

6、熟悉主數(shù)據(jù)、元數(shù)據(jù)、數(shù)據(jù)質(zhì)量、和數(shù)據(jù)建模等數(shù)據(jù)治理相關(guān)的體系和方法;

7、具備較強(qiáng)的邏輯思維能力、數(shù)據(jù)敏感度，擅于利用數(shù)據(jù)發(fā)現(xiàn)問(wèn)題及解決問(wèn)題;

大數(shù)據(jù)架構(gòu)師的基本職責(zé)【篇5】

職責(zé)：

1. 深刻理解政府行業(yè)業(yè)務(wù)模式，構(gòu)建政府行業(yè)的數(shù)據(jù)模型，制定公司大數(shù)據(jù)技術(shù)發(fā)展路線;

2. 對(duì)接業(yè)務(wù)研究和技術(shù)部門，主動(dòng)搜集和轉(zhuǎn)化需求，組織數(shù)據(jù)中心業(yè)務(wù)開(kāi)發(fā)，進(jìn)行數(shù)據(jù)相關(guān)產(chǎn)品需求分析和設(shè)計(jì);

3. 搭建數(shù)據(jù)倉(cāng)庫(kù)，研發(fā)數(shù)據(jù)庫(kù)管理系統(tǒng)，搜集、提取、處理業(yè)務(wù)積累的海量數(shù)據(jù)，開(kāi)展數(shù)據(jù)分析和挖掘;

4. 根據(jù)公司戰(zhàn)略和發(fā)展需要，規(guī)劃數(shù)據(jù)中心重點(diǎn)工作和任務(wù);落實(shí)部門人員、事務(wù)管理，開(kāi)展跨部門、跨地區(qū)協(xié)作，協(xié)助對(duì)外交流與合作。

職位要求：

1. 5年以上相關(guān)工作經(jīng)驗(yàn)，有團(tuán)隊(duì)管理和項(xiàng)目管理經(jīng)驗(yàn)者優(yōu)先;

2.了解政府運(yùn)作機(jī)制，掌握財(cái)政行業(yè)知識(shí)，有電子政務(wù)行業(yè)經(jīng)驗(yàn)者優(yōu)先;

3. 熟練掌握使用Java或Python,精通數(shù)據(jù)庫(kù)查詢語(yǔ)言如SQL，Oracle等,在機(jī)器學(xué)習(xí)模型和算法方向有應(yīng)用經(jīng)驗(yàn)者優(yōu)先;

4. 具備數(shù)據(jù)中心產(chǎn)品策劃整體思維，有大數(shù)據(jù)處理、分析、挖掘經(jīng)驗(yàn)者優(yōu)先;

5. 邏輯思維嚴(yán)密，具備業(yè)務(wù)抽象、分解和標(biāo)準(zhǔn)化的能力，口頭和書(shū)面表達(dá)優(yōu)秀;

6. 有較強(qiáng)的大局意識(shí)和良好的團(tuán)隊(duì)合作意識(shí)，富有領(lǐng)導(dǎo)力，具備優(yōu)秀的人際交往和溝通能力。

大數(shù)據(jù)架構(gòu)師的基本職責(zé)【篇6】

職責(zé)：

1、 基于公司大數(shù)據(jù)基礎(chǔ)和數(shù)據(jù)資產(chǎn)積累，負(fù)責(zé)大數(shù)據(jù)應(yīng)用整體技術(shù)架構(gòu)的設(shè)計(jì)、優(yōu)化，建設(shè)大數(shù)據(jù)能力開(kāi)放平臺(tái);負(fù)責(zé)大數(shù)據(jù)應(yīng)用產(chǎn)品的架構(gòu)設(shè)計(jì)、技術(shù)把控工作。

2、 負(fù)責(zé)制定大數(shù)據(jù)應(yīng)用系統(tǒng)的數(shù)據(jù)安全管控體系和數(shù)據(jù)使用規(guī)范。

3、 作為大數(shù)據(jù)技術(shù)方案到產(chǎn)品實(shí)現(xiàn)的技術(shù)負(fù)責(zé)人，負(fù)責(zé)關(guān)鍵技術(shù)點(diǎn)攻堅(jiān)工作，負(fù)責(zé)內(nèi)部技術(shù)推廣、培訓(xùn)及知識(shí)轉(zhuǎn)移工作。

4、 負(fù)責(zé)大數(shù)據(jù)系統(tǒng)研發(fā)項(xiàng)目任務(wù)規(guī)劃、整體進(jìn)度、風(fēng)險(xiǎn)把控，有效協(xié)同團(tuán)隊(duì)成員并組織跨團(tuán)隊(duì)技術(shù)協(xié)作，保證項(xiàng)目質(zhì)量與進(jìn)度。

5、 負(fù)責(zé)提升產(chǎn)品技術(shù)團(tuán)隊(duì)的技術(shù)影響力，針對(duì)新人、普通開(kāi)發(fā)人員進(jìn)行有效輔導(dǎo)，幫助其快速成長(zhǎng)。

任職資格：

1、 計(jì)算機(jī)、數(shù)學(xué)或相關(guān)專業(yè)本科以上學(xué)歷，5-20__年工作經(jīng)驗(yàn)，具有大型系統(tǒng)的技術(shù)架構(gòu)\應(yīng)用架構(gòu)\數(shù)據(jù)架構(gòu)相關(guān)的實(shí)踐工作經(jīng)驗(yàn)。

2、 有分布式系統(tǒng)分析及架構(gòu)設(shè)計(jì)經(jīng)驗(yàn)，熟悉基于計(jì)算集群的軟件系統(tǒng)架構(gòu)和實(shí)施經(jīng)驗(yàn)。

3、 掌握Hadoop/Spark/Storm生態(tài)圈的主流技術(shù)及產(chǎn)品，深入了解Hadoop/Spark/Storm生態(tài)圈產(chǎn)品的工作原理及應(yīng)用場(chǎng)景。

4、 掌握Mysql/Oracle等常用關(guān)系型數(shù)據(jù)庫(kù)，能夠?qū)QL進(jìn)行優(yōu)化。

5、 熟悉分布式系統(tǒng)基礎(chǔ)設(shè)施中常用的技術(shù)，如緩存(Varnish、Memcache、Redis)、消息中間件(Rabbit MQ、Active MQ、Kafka、NSQ)等;有實(shí)踐經(jīng)驗(yàn)者優(yōu)先。

6、 熟悉Linu_，Java基礎(chǔ)扎實(shí)，至少3-5年以上Java應(yīng)用開(kāi)發(fā)經(jīng)驗(yàn)，熟悉常用的設(shè)計(jì)模式和開(kāi)源框架。

大數(shù)據(jù)架構(gòu)師的基本職責(zé)【篇7】

職責(zé)：

根據(jù)大數(shù)據(jù)業(yè)務(wù)需求，設(shè)計(jì)大數(shù)據(jù)方案及架構(gòu)，實(shí)現(xiàn)相關(guān)功能;

搭建和維護(hù)大數(shù)據(jù)集群，保證集群規(guī)模持續(xù)、穩(wěn)定、高效平穩(wěn)運(yùn)行;

負(fù)責(zé)大數(shù)據(jù)業(yè)務(wù)的設(shè)計(jì)和指導(dǎo)具體開(kāi)發(fā)工作;

負(fù)責(zé)公司產(chǎn)品研發(fā)過(guò)程中的數(shù)據(jù)及存儲(chǔ)設(shè)計(jì);

針對(duì)數(shù)據(jù)分析工作，能夠完成和指導(dǎo)負(fù)責(zé)業(yè)務(wù)數(shù)據(jù)建模。

職位要求：

計(jì)算機(jī)、自動(dòng)化或相關(guān)專業(yè)(如統(tǒng)計(jì)學(xué)、數(shù)學(xué))本科以上學(xué)歷，3年以上大數(shù)據(jù)處理相關(guān)工作經(jīng)驗(yàn);

精通大數(shù)據(jù)主流框架(如 Hadoop、hive、Spark等);

熟悉 MySQL、NoSQL(MongoDB、Redis)等主流數(shù)據(jù)庫(kù)，以及rabbit MQ等隊(duì)列技術(shù);

熟悉hadoop/spark生態(tài)的原理、特性且有實(shí)戰(zhàn)開(kāi)發(fā)經(jīng)驗(yàn);

熟悉常用的數(shù)據(jù)挖掘算法優(yōu)先.

大數(shù)據(jù)架構(gòu)師的基本職責(zé)【篇8】

職責(zé)：

1、正確理解業(yè)務(wù)需求，對(duì)需求進(jìn)行工作量評(píng)估;

2、參與項(xiàng)目相關(guān)的需求、設(shè)計(jì)、投產(chǎn)手冊(cè)等文檔的編寫(xiě);

3、根據(jù)進(jìn)度計(jì)劃，完成所承擔(dān)功能模塊的設(shè)計(jì)、開(kāi)發(fā)、單元測(cè)試、聯(lián)調(diào)測(cè)試;

4、配合測(cè)試組修復(fù)代碼缺陷，確保功能實(shí)現(xiàn)與代碼質(zhì)量;

5、負(fù)責(zé)所承擔(dān)功能模塊投產(chǎn)、部署，及上線后的日常維護(hù);

6、完成項(xiàng)目經(jīng)理或者架構(gòu)師安排的其他工作;

任職資格：

1、本科以上學(xué)歷，計(jì)算機(jī)相關(guān)專業(yè)，兩年以上大數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn);

2、熟悉Linu_ 環(huán)境，掌握shell或python;

3、熟練使用hadoop，hive，HBase，YARN，kafka，spark等大數(shù)據(jù)開(kāi)發(fā)組件;

4、精通 ETL，數(shù)據(jù)倉(cāng)庫(kù)的設(shè)計(jì)和開(kāi)發(fā);

5、有大數(shù)據(jù)處理實(shí)戰(zhàn)經(jīng)驗(yàn)，熟悉整個(gè)大數(shù)據(jù)的完整處理流程，包括數(shù)據(jù)的采集、清洗、存儲(chǔ);

6、較強(qiáng)的動(dòng)手能力和學(xué)習(xí)能力，良好的溝通能力、團(tuán)隊(duì)協(xié)調(diào)能力;

7、具有銀行、金融行業(yè)從業(yè)背景者優(yōu)先。

大數(shù)據(jù)架構(gòu)師的基本職責(zé)【篇9】

職責(zé)：

1.負(fù)責(zé)企業(yè)數(shù)據(jù)中心建設(shè)，設(shè)計(jì)數(shù)據(jù)邏輯模型和物理模型，并完成相關(guān)開(kāi)發(fā)

2.梳理公司各業(yè)務(wù)線常用的指標(biāo)和維度，統(tǒng)一指標(biāo)定義口徑

3.根據(jù)數(shù)據(jù)應(yīng)用開(kāi)發(fā)和數(shù)據(jù)分析需求，設(shè)計(jì)數(shù)據(jù)倉(cāng)庫(kù)信息層模型，提高數(shù)據(jù)開(kāi)發(fā)的效率

4.負(fù)責(zé)數(shù)據(jù)模型的運(yùn)營(yíng)和優(yōu)化，及時(shí)響應(yīng)業(yè)務(wù)邏輯變更，保證模型的數(shù)據(jù)質(zhì)量和穩(wěn)定性

5.負(fù)責(zé)公司數(shù)據(jù)標(biāo)簽體系的建設(shè)，并推動(dòng)標(biāo)簽體系在實(shí)際業(yè)務(wù)場(chǎng)景中落地

崗位要求：

1.5年以上DW/BI數(shù)據(jù)架構(gòu)設(shè)計(jì)、模型設(shè)計(jì)和性能調(diào)優(yōu)等相關(guān)經(jīng)驗(yàn)

2.有較強(qiáng)的數(shù)據(jù)分析能力，精通數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)，熟悉Erwin或PowerDesigner建模工具

3.精通一種主流關(guān)系數(shù)據(jù)庫(kù)(如mysql等)，熟悉Hive開(kāi)發(fā)

4.有電商業(yè)務(wù)經(jīng)驗(yàn)，元數(shù)據(jù)管理，數(shù)據(jù)質(zhì)量管理或標(biāo)簽體系搭建經(jīng)驗(yàn)者優(yōu)先

5.優(yōu)秀的協(xié)調(diào)溝通與團(tuán)隊(duì)協(xié)作能力，極強(qiáng)的責(zé)任心，能承受一定的工作壓力，認(rèn)同企業(yè)文化和團(tuán)隊(duì)價(jià)值

大數(shù)據(jù)架構(gòu)師的基本職責(zé)【篇10】

1、建設(shè)大數(shù)據(jù)平臺(tái)，主要技術(shù)為k8s, docker;

2、跟進(jìn)開(kāi)源社區(qū)的更新，閱讀文檔，驗(yàn)證feature;

3、閱讀容器生態(tài)圈各組件的開(kāi)源項(xiàng)目代碼，開(kāi)發(fā)新功能;

4、持續(xù)提升平臺(tái)的性能和穩(wěn)定性。