大數(shù)據(jù)架構(gòu)師的工作職責(zé)描述
大數(shù)據(jù)架構(gòu)師的工作職責(zé)描述
大數(shù)據(jù)架構(gòu)師需要負(fù)責(zé)公司大數(shù)據(jù)產(chǎn)品的架構(gòu)設(shè)計(jì)，包含數(shù)據(jù)收集、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)應(yīng)用，并完成相關(guān)架構(gòu)設(shè)計(jì)文檔的撰寫。下面是學(xué)習(xí)啦小編為您精心整理的大數(shù)據(jù)架構(gòu)師的工作職責(zé)描述。
大數(shù)據(jù)架構(gòu)師的工作職責(zé)描述1
職責(zé)：
1、 基于公司大數(shù)據(jù)基礎(chǔ)和數(shù)據(jù)資產(chǎn)積累，負(fù)責(zé)大數(shù)據(jù)應(yīng)用整體技術(shù)架構(gòu)的設(shè)計(jì)、優(yōu)化，建設(shè)大數(shù)據(jù)能力開放平臺(tái);負(fù)責(zé)大數(shù)據(jù)應(yīng)用產(chǎn)品的架構(gòu)設(shè)計(jì)、技術(shù)把控工作。
2、 負(fù)責(zé)制定大數(shù)據(jù)應(yīng)用系統(tǒng)的數(shù)據(jù)安全管控體系和數(shù)據(jù)使用規(guī)范。
3、 作為大數(shù)據(jù)技術(shù)方案到產(chǎn)品實(shí)現(xiàn)的技術(shù)負(fù)責(zé)人，負(fù)責(zé)關(guān)鍵技術(shù)點(diǎn)攻堅(jiān)工作，負(fù)責(zé)內(nèi)部技術(shù)推廣、培訓(xùn)及知識(shí)轉(zhuǎn)移工作。
4、 負(fù)責(zé)大數(shù)據(jù)系統(tǒng)研發(fā)項(xiàng)目任務(wù)規(guī)劃、整體進(jìn)度、風(fēng)險(xiǎn)把控，有效協(xié)同團(tuán)隊(duì)成員并組織跨團(tuán)隊(duì)技術(shù)協(xié)作，保證項(xiàng)目質(zhì)量與進(jìn)度。
5、 負(fù)責(zé)提升產(chǎn)品技術(shù)團(tuán)隊(duì)的技術(shù)影響力，針對(duì)新人、普通開發(fā)人員進(jìn)行有效輔導(dǎo)，幫助其快速成長(zhǎng)。
任職資格：
1、 計(jì)算機(jī)、數(shù)學(xué)或相關(guān)專業(yè)本科以上學(xué)歷，5-10年工作經(jīng)驗(yàn)，具有大型系統(tǒng)的技術(shù)架構(gòu)\應(yīng)用架構(gòu)\數(shù)據(jù)架構(gòu)相關(guān)的實(shí)踐工作經(jīng)驗(yàn)。
2、 有分布式系統(tǒng)分析及架構(gòu)設(shè)計(jì)經(jīng)驗(yàn)，熟悉基于計(jì)算集群的軟件系統(tǒng)架構(gòu)和實(shí)施經(jīng)驗(yàn)。
3、 掌握Hadoop/Spark/Storm生態(tài)圈的主流技術(shù)及產(chǎn)品，深入了解Hadoop/Spark/Storm生態(tài)圈產(chǎn)品的工作原理及應(yīng)用場(chǎng)景。
4、 掌握Mysql/Oracle等常用關(guān)系型數(shù)據(jù)庫，能夠?qū)QL進(jìn)行優(yōu)化。
5、 熟悉分布式系統(tǒng)基礎(chǔ)設(shè)施中常用的技術(shù)，如緩存(Varnish、Memcache、Redis)、消息中間件(Rabbit MQ、Active MQ、Kafka、NSQ)等;有實(shí)踐經(jīng)驗(yàn)者優(yōu)先。
6、 熟悉Linux，Java基礎(chǔ)扎實(shí)，至少3-5年以上Java應(yīng)用開發(fā)經(jīng)驗(yàn)，熟悉常用的設(shè)計(jì)模式和開源框架。
大數(shù)據(jù)架構(gòu)師的工作職責(zé)描述2
職責(zé)：
1、負(fù)責(zé)面向政府信領(lǐng)域的企業(yè)(不限于)大數(shù)據(jù)平臺(tái)、大數(shù)據(jù)應(yīng)用等系統(tǒng)的架構(gòu)設(shè)計(jì)、技術(shù)規(guī)劃、技術(shù)選型
2、跟進(jìn)業(yè)界大數(shù)據(jù)技術(shù)發(fā)展動(dòng)態(tài)，匹配行業(yè)應(yīng)用訴求，制定大數(shù)據(jù)策略，提前識(shí)別關(guān)鍵技術(shù)并完成技術(shù)驗(yàn)證;
3、支撐售前完成項(xiàng)目解決方案技術(shù)架構(gòu)的設(shè)計(jì)及重要客戶的交流;
4、負(fù)責(zé)指導(dǎo)研發(fā)完成大數(shù)據(jù)產(chǎn)品的開發(fā)
5、帶領(lǐng)團(tuán)隊(duì)進(jìn)行產(chǎn)品核心技術(shù)的創(chuàng)新和積累
崗位要求：
1、熟悉BI和大數(shù)據(jù)領(lǐng)域的解決方案，具備該領(lǐng)域全面的技術(shù)積累，包括報(bào)表平臺(tái)，OLAP引擎和DB，ETL，數(shù)據(jù)倉庫建模和設(shè)計(jì)，海量分布式數(shù)據(jù)處理分析架構(gòu);
2、在大數(shù)據(jù)處理和分析領(lǐng)域具有3年或者以上的技術(shù)規(guī)劃、架構(gòu)設(shè)計(jì)經(jīng)驗(yàn)，并有成功的項(xiàng)目實(shí)踐;
3、4年以上Hadoop實(shí)戰(zhàn)經(jīng)驗(yàn)，熟悉Hadoop底層文件系統(tǒng)及分布式計(jì)算框架，具備傳統(tǒng)數(shù)據(jù)倉庫、MPP、Hadoop等混搭平臺(tái)架構(gòu)的設(shè)計(jì)能力和數(shù)據(jù)建模能力，對(duì)大規(guī)模數(shù)據(jù)并行計(jì)算、傳輸、處理等有豐富的經(jīng)驗(yàn);
4、有實(shí)際應(yīng)用storm、spark、flume、kafka等項(xiàng)目經(jīng)驗(yàn)優(yōu)先;
5、卓越的技術(shù)領(lǐng)導(dǎo)力，善于溝通、發(fā)現(xiàn)和解決產(chǎn)品需求階段、開發(fā)階段和測(cè)試階段的問題，并能提供合理解決方案，有大中型互聯(lián)網(wǎng)企業(yè)工作背景優(yōu)先。
大數(shù)據(jù)架構(gòu)師的工作職責(zé)描述3
職責(zé)：
1、負(fù)責(zé)公司大數(shù)據(jù)平臺(tái)架構(gòu)的技術(shù)選型和技術(shù)難點(diǎn)攻關(guān)工作;
2、依據(jù)行業(yè)數(shù)據(jù)現(xiàn)狀和客戶需求，完成行業(yè)大數(shù)據(jù)的特定技術(shù)方案設(shè)計(jì)與撰寫;
3、負(fù)責(zé)研究跟進(jìn)大數(shù)據(jù)架構(gòu)領(lǐng)域新興技術(shù)并在公司內(nèi)部進(jìn)行分享;
4、參與公司大數(shù)據(jù)項(xiàng)目的技術(shù)交流、解決方案定制以及項(xiàng)目的招投標(biāo)工作;
5、參與公司大數(shù)據(jù)項(xiàng)目前期的架構(gòu)設(shè)計(jì)工作;
任職要求：
1、計(jì)算機(jī)及相關(guān)專業(yè)本科以上，5年以上數(shù)據(jù)類項(xiàng)目(數(shù)據(jù)倉庫、商務(wù)智能)實(shí)施經(jīng)驗(yàn)，至少2年以上大數(shù)據(jù)架構(gòu)設(shè)計(jì)和開發(fā)經(jīng)驗(yàn)，至少主導(dǎo)過一個(gè)大數(shù)據(jù)平臺(tái)項(xiàng)目架構(gòu)設(shè)計(jì);
2、精通大數(shù)據(jù)生態(tài)圈的技術(shù)，包括但不限于MapReduce、Spark、Hadoop、Kafka、Mongodb、Redis、Flume、Storm、Hbase、Hive，具備數(shù)據(jù)統(tǒng)計(jì)查詢性能優(yōu)化能力。熟悉星環(huán)大數(shù)據(jù)產(chǎn)品線及有過產(chǎn)品項(xiàng)目實(shí)施經(jīng)驗(yàn)者優(yōu)先;
3、優(yōu)秀的方案撰寫能力，思路清晰，邏輯思維強(qiáng)，能夠根據(jù)業(yè)務(wù)需求設(shè)計(jì)合理的解決方案;
4、精通ORACLE、DB2、mySql等主流關(guān)系型數(shù)據(jù)庫，熟悉數(shù)據(jù)倉庫建設(shè)思路和數(shù)據(jù)分層架構(gòu)思想;
5. 熟練掌握java、R、python等1-2門數(shù)據(jù)挖掘開發(fā)語言;
6. 熟悉云服務(wù)平臺(tái)及微服務(wù)相關(guān)架構(gòu)思想和技術(shù)路線，熟悉阿里云或騰訊云產(chǎn)品者優(yōu)先;
7、有煙草或制造行業(yè)大數(shù)據(jù)解決方案售前經(jīng)驗(yàn)者優(yōu)先;
8、能適應(yīng)售前支持和項(xiàng)目實(shí)施需要的短期出差;
大數(shù)據(jù)架構(gòu)師的工作職責(zé)描述4
職責(zé)：
1、負(fù)責(zé)規(guī)劃大數(shù)據(jù)平臺(tái)及應(yīng)用產(chǎn)品的需求和技術(shù)方案設(shè)計(jì);
2、負(fù)責(zé)數(shù)據(jù)對(duì)接和對(duì)外服務(wù)設(shè)計(jì)、開發(fā)和維護(hù)，并能保證質(zhì)量和性能;
3、負(fù)責(zé)基于大數(shù)據(jù)平臺(tái)的應(yīng)用設(shè)計(jì)、開發(fā)和維護(hù);
4、能從系統(tǒng)全局和各子系統(tǒng)的角度思考可能存在的問題，并提出改進(jìn)方案建議;
任職要求：
1、大學(xué)本科6年以上工作經(jīng)驗(yàn)，計(jì)算機(jī)相關(guān)專業(yè)。
2、至少4年以上的Java開發(fā)經(jīng)驗(yàn)，3年以上大數(shù)據(jù)應(yīng)用系統(tǒng)的開發(fā)和設(shè)計(jì)經(jīng)驗(yàn)。
3、熟悉Hadoop生態(tài)圈技術(shù)體系， 對(duì)離線計(jì)算、內(nèi)存計(jì)算和流式計(jì)算均有深刻理解， 如Hadoop、Storm、Spark三個(gè)中的任意二個(gè)， 能進(jìn)行平臺(tái)和組件優(yōu)化。
4、精通Hive、HBase倉庫設(shè)計(jì)，深刻理解MR運(yùn)行原理和機(jī)制，能進(jìn)行以提供高任務(wù)執(zhí)行效率的優(yōu)化。
5、精通Java開發(fā)，熟悉JVM調(diào)優(yōu)， 對(duì)GC有深刻理解。
6、熟悉Linux、Shell、Kafka、Oracle、Mysql、Redis等相關(guān)技術(shù)， 能進(jìn)行hbase可靠性診斷和維護(hù)。
7、快速研究和學(xué)習(xí)技術(shù)能力。
大數(shù)據(jù)架構(gòu)師的工作職責(zé)描述5
職責(zé)：
1、負(fù)責(zé)相關(guān)開源系統(tǒng)/組件的性能、穩(wěn)定性、可靠性等方面的深度優(yōu)化;
2、負(fù)責(zé)解決項(xiàng)目上線后生產(chǎn)環(huán)境的各種實(shí)際問題，保障大數(shù)據(jù)平臺(tái)在生產(chǎn)上的安全、平穩(wěn)運(yùn)行;
3、推動(dòng)優(yōu)化跨部門的業(yè)務(wù)流程， 參與業(yè)務(wù)部門的技術(shù)方案設(shè)計(jì)、評(píng)審、指導(dǎo);
4、負(fù)責(zé)技術(shù)團(tuán)隊(duì)人員培訓(xùn)、人員成長(zhǎng)指導(dǎo)。
5、應(yīng)項(xiàng)目要求本月辦公地址在錦江區(qū)金石路316號(hào)新希望中鼎國際辦公，月底項(xiàng)目結(jié)束后在總部公司辦公
任職要求：
1、熟悉linux、JVM底層原理，能作為技術(shù)擔(dān)當(dāng)，解決核心技術(shù)問題;
2、3年以上大數(shù)據(jù)平臺(tái)項(xiàng)目架構(gòu)或開發(fā)經(jīng)驗(yàn)，對(duì)大數(shù)據(jù)生態(tài)技術(shù)體系有全面了解，如Yarn、Spark、HBase、Hive、Elasticsearch、Kafka、PrestoDB、Phoenix等;
3、掌握git、maven、gradle、junit等工具和實(shí)踐， 注重文檔管理、注重工程規(guī)范優(yōu)先;
4、熟悉Java后臺(tái)開發(fā)體系，具備微服務(wù)架構(gòu)的項(xiàng)目實(shí)施經(jīng)驗(yàn)，有Dubbo/Spring cloud微服務(wù)架構(gòu)設(shè)計(jì)經(jīng)驗(yàn)優(yōu)先;
5、性格開朗、善于溝通，有極強(qiáng)的技術(shù)敏感性和自我驅(qū)動(dòng)學(xué)習(xí)能力，注重團(tuán)隊(duì)意識(shí)。