大數(shù)據(jù)開發(fā)工程師崗位的工作職責(zé)說明
大數(shù)據(jù)開發(fā)工程師崗位的工作職責(zé)說明
大數(shù)據(jù)開發(fā)工程師負(fù)責(zé)大數(shù)據(jù)平臺(tái)及應(yīng)用場景的構(gòu)建、部署、測試。以下是學(xué)習(xí)啦小編整理的大數(shù)據(jù)開發(fā)工程師崗位的工作職責(zé)說明。
大數(shù)據(jù)開發(fā)工程師崗位的工作職責(zé)說明1
職責(zé)：
1、負(fù)責(zé)基于Hadoop框架的海量數(shù)據(jù)平臺(tái)建設(shè)
2、參與大數(shù)據(jù)平臺(tái)的數(shù)據(jù)架構(gòu)設(shè)計(jì)，完成從業(yè)務(wù)模型到數(shù)據(jù)模型的設(shè)計(jì)
3、基于海量數(shù)據(jù)的數(shù)據(jù)倉庫，為業(yè)務(wù)搭建通用的查詢和分析解決方案
4、管理并優(yōu)化存儲(chǔ)&計(jì)算資源利用效率、監(jiān)控并維護(hù)例行ETL任務(wù)
5、梳理整體業(yè)務(wù)指標(biāo)，可視化報(bào)表開發(fā)
應(yīng)聘要求：
1、計(jì)算機(jī)本科及以上學(xué)歷，5年以上大型數(shù)據(jù)倉庫架構(gòu)設(shè)計(jì)、模型設(shè)計(jì)、ETL設(shè)計(jì)相關(guān)經(jīng)驗(yàn)
2、熟悉Hadoop生態(tài)，熟悉Oracle、SQL數(shù)據(jù)庫中的一個(gè)或多個(gè)，有一定的性能優(yōu)化經(jīng)驗(yàn)
3、熟練掌握J(rèn)ava語言，MapReduce編程，Python/Shell等腳本語言，Linux操作系統(tǒng)
4、具備大數(shù)據(jù)云平臺(tái)、計(jì)算存儲(chǔ)平臺(tái)、可視化開發(fā)平臺(tái)經(jīng)驗(yàn)
5、業(yè)務(wù)理解力強(qiáng)，對(duì)數(shù)據(jù)敏感，有互聯(lián)網(wǎng)行業(yè)產(chǎn)品數(shù)據(jù)分析經(jīng)驗(yàn)者優(yōu)先
大數(shù)據(jù)開發(fā)工程師崗位的工作職責(zé)說明2
職責(zé)：
1、根據(jù)工作安排高效、高質(zhì)地完成代碼編寫，確保符合規(guī)范的前端代碼規(guī)范;
2、負(fù)責(zé)公司現(xiàn)有項(xiàng)目和新項(xiàng)目的前端修改調(diào)試和開發(fā)工作;
3、與設(shè)計(jì)團(tuán)隊(duì)緊密配合，能夠?qū)崿F(xiàn)實(shí)現(xiàn)設(shè)計(jì)師的設(shè)計(jì)想法;
4、與后端開發(fā)團(tuán)隊(duì)緊密配合，確保代碼有效對(duì)接，優(yōu)化網(wǎng)站前端性能;
5、頁面通過標(biāo)準(zhǔn)校驗(yàn)，兼容各主流瀏覽器。
任職要求:
1. 本科及以上學(xué)歷，熟悉j2ee，精通web開發(fā)有5年工作經(jīng)驗(yàn)以上(學(xué)習(xí)能力好放寬至4年)，熟悉jsp，spring框架;
2.悉主流移動(dòng)web開發(fā)框架,并有過實(shí)際項(xiàng)目開發(fā)經(jīng)驗(yàn);
3.有kylin,atlas,oozie,azkaban,spark,ranger任意一種使用項(xiàng)目使用經(jīng)驗(yàn)。
大數(shù)據(jù)開發(fā)工程師崗位的工作職責(zé)說明3
職責(zé)：
1、負(fù)責(zé)公司大數(shù)據(jù)基礎(chǔ)平臺(tái)產(chǎn)品開發(fā)工作;
2、完成產(chǎn)品/項(xiàng)目劃分的研發(fā)任務(wù)，按需求規(guī)范進(jìn)行研發(fā);
3、具備良好的需求分析能力、業(yè)務(wù)建模能力，參與產(chǎn)品和項(xiàng)目相關(guān)模塊的需求討論，概要、詳細(xì)設(shè)計(jì);
4、具備良好的架構(gòu)分析能力與設(shè)計(jì)能力，積極參與前期設(shè)計(jì);
5、能根據(jù)設(shè)計(jì)方案和計(jì)劃進(jìn)行編碼實(shí)現(xiàn)，在進(jìn)度和質(zhì)量上符合方案和計(jì)劃的要求;
6、及時(shí)對(duì)BUG庫中的軟件問題進(jìn)行跟蹤修正。
崗位要求：
1、三年以上工作經(jīng)驗(yàn)，一年以上大數(shù)據(jù)平臺(tái)架構(gòu)及ETL相關(guān)經(jīng)驗(yàn)，可獨(dú)立搭建/運(yùn)維CDH/Spark整套平臺(tái)架構(gòu);
2、精通Python/Java/Scala/SQL/Shell等語言中兩種以上，熟悉Spark/Hadoop/Hive/MR/Hbase/ZK/YARN等三種以上開源框架的原理和源碼;
3、熟悉容器平臺(tái)開發(fā)或者開發(fā)優(yōu)先考慮，有docker、kubernetes相關(guān)開發(fā)經(jīng)驗(yàn)更佳;
4、學(xué)習(xí)能力強(qiáng)，適應(yīng)能力好，有豐富的問題原因定位及運(yùn)維技術(shù)支持經(jīng)驗(yàn);
5、有市場上成熟的大數(shù)據(jù)平臺(tái)產(chǎn)品實(shí)際架構(gòu)/開發(fā)經(jīng)驗(yàn)優(yōu)先。
大數(shù)據(jù)開發(fā)工程師崗位的工作職責(zé)說明4
職責(zé)：
1. 負(fù)責(zé)公司大數(shù)據(jù)業(yè)務(wù)集群的運(yùn)維工作確保高可用;
2. 負(fù)責(zé)基礎(chǔ)運(yùn)維、故障定位、容量規(guī)劃、擴(kuò)容及性能優(yōu)化;
3. 設(shè)計(jì)實(shí)現(xiàn)大規(guī)模分布式集群的運(yùn)維、報(bào)警監(jiān)控和管理平臺(tái);
4. 參與業(yè)務(wù)架構(gòu)設(shè)計(jì)，在設(shè)計(jì)階段給出可運(yùn)維性改進(jìn)建議;
5. 深入研究大數(shù)據(jù)業(yè)務(wù)相關(guān)運(yùn)維技術(shù)，持續(xù)優(yōu)化集群服務(wù)架構(gòu)，探索新的大數(shù)據(jù)運(yùn)維技術(shù)及發(fā)展方向。
任職資格：
1.大專以上學(xué)歷，2年及以上大數(shù)據(jù)運(yùn)維工作經(jīng)驗(yàn)，熟悉hadoop/hbase/hive/Yarn/Spark等分布式相關(guān)技術(shù)，熟悉源碼尤佳，至少掌握python/shell中的一種語言，接受優(yōu)秀應(yīng)屆畢業(yè)生;
2.了解大數(shù)據(jù)平臺(tái)應(yīng)用架構(gòu)，具備常見問題的基本分析和解決能力;
3.熟悉Linux操作系統(tǒng)的配置、管理及優(yōu)化，能夠獨(dú)立排查及解決操作系統(tǒng)層面的問題;
4.熟悉nginx/emq/tomca、mysql/mongodb/redis等web應(yīng)用/中間件及主流開源數(shù)據(jù)庫的使用和配置。
大數(shù)據(jù)開發(fā)工程師崗位的工作職責(zé)說明5
職責(zé)：
1、負(fù)責(zé)公司c端產(chǎn)品以及廣告數(shù)據(jù)的平臺(tái)數(shù)據(jù)基礎(chǔ)建設(shè);
2、大數(shù)據(jù)平臺(tái)的搭建與維護(hù);
3、優(yōu)化算法提高執(zhí)行效率;
4、數(shù)據(jù)挖掘相關(guān)開發(fā)。
職位要求：
1. 本科及以上，計(jì)算機(jī)、軟件工程、統(tǒng)計(jì)學(xué)、數(shù)據(jù)挖掘、機(jī)器學(xué)習(xí)等相關(guān)專業(yè);
2. 熟悉JAVA語言及JAVA生態(tài)下的開發(fā),了解多線程并發(fā),能獨(dú)立完成應(yīng)用開發(fā)和部署;
3. 3年及以上大數(shù)據(jù)流程架構(gòu)經(jīng)驗(yàn)，熟悉Hbase/Hive/Hadoop/Spark或等主流分布式開發(fā)平臺(tái)，有高性能集群設(shè)計(jì)和開發(fā)經(jīng)驗(yàn);
4. 能熟練操作Linux,熟練掌握SQL數(shù)據(jù)庫語言 HiveSQL/Mysql/Sqlserver;
5. 對(duì)有廣告營銷大數(shù)據(jù)算法/開發(fā)經(jīng)驗(yàn)者優(yōu)先，有大型數(shù)據(jù)項(xiàng)目經(jīng)驗(yàn)優(yōu)先，有用戶行為分析、用戶建模、業(yè)務(wù)建模經(jīng)驗(yàn)者優(yōu)先;
6. 具有良好的邏輯分析能力、溝通能力和協(xié)調(diào)能力;
相關(guān)文章：
1.大數(shù)據(jù)開發(fā)工程師崗位的職責(zé)描述
2.大數(shù)據(jù)架構(gòu)師的工作職責(zé)描述