- 目錄
崗位職責是什么
大數(shù)據(jù)研發(fā)崗位是企業(yè)信息化建設中的關鍵角色，負責設計、開發(fā)和維護大數(shù)據(jù)處理系統(tǒng)，以支持企業(yè)的戰(zhàn)略決策和業(yè)務運營。
崗位職責要求
1. 熟練掌握hadoop、spark等大數(shù)據(jù)處理框架，具備扎實的java、python等編程能力。
2. 精通數(shù)據(jù)倉庫建模和etl（提取、轉(zhuǎn)換、加載）流程。
3. 具備良好的數(shù)據(jù)庫管理知識，包括sql優(yōu)化和nosql數(shù)據(jù)庫應用。
4. 對大數(shù)據(jù)分析和挖掘算法有深入理解，如機器學習、深度學習等。
5. 了解云計算平臺，如aws、azure或google cloud，能進行大數(shù)據(jù)解決方案的云端部署。
6. 具備良好的問題解決能力和團隊協(xié)作精神，能在壓力下工作。
7. 對業(yè)務需求敏感，能將技術與業(yè)務需求有效結合。
崗位職責描述
大數(shù)據(jù)研發(fā)人員的工作涵蓋數(shù)據(jù)采集、存儲、處理和分析的全過程。他們構建高效的數(shù)據(jù)管道，確保數(shù)據(jù)的準確性和實時性。通過與業(yè)務團隊緊密合作，他們理解業(yè)務需求，利用大數(shù)據(jù)技術提供洞見，驅(qū)動業(yè)務創(chuàng)新。此外，他們還需要持續(xù)關注技術發(fā)展，優(yōu)化現(xiàn)有系統(tǒng)，以應對不斷增長的數(shù)據(jù)量和復雜性。
有哪些內(nèi)容
1. 數(shù)據(jù)架構設計：規(guī)劃和實現(xiàn)大數(shù)據(jù)存儲架構，確保數(shù)據(jù)的高可用性和可擴展性。
2. 數(shù)據(jù)處理開發(fā)：編寫和優(yōu)化數(shù)據(jù)處理代碼，實現(xiàn)數(shù)據(jù)清洗、轉(zhuǎn)換和整合。
3. 數(shù)據(jù)分析與建模：運用統(tǒng)計學和機器學習方法，建立預測模型，為決策提供依據(jù)。
4. 平臺運維與監(jiān)控：維護大數(shù)據(jù)平臺的穩(wěn)定運行，定期進行性能調(diào)優(yōu)和故障排查。
5. 項目協(xié)作：與產(chǎn)品經(jīng)理、業(yè)務分析師等跨部門團隊協(xié)作，確保項目順利實施。
6. 技術研究與創(chuàng)新：跟蹤最新大數(shù)據(jù)技術和行業(yè)趨勢，探索新技術在企業(yè)中的應用可能性。
總結，大數(shù)據(jù)研發(fā)崗位在企業(yè)中扮演著數(shù)據(jù)驅(qū)動創(chuàng)新的關鍵角色，不僅需要深厚的技術功底，更需要對業(yè)務的深刻理解和持續(xù)的技術探索。
大數(shù)據(jù)研發(fā)崗位職責范文
第1篇 大數(shù)據(jù)研發(fā)工程師-抖音/火山職位描述與崗位職責任職要求
職位描述：
工作職責：
1、負責抖音/火山等多個業(yè)務線的策略算法建設與優(yōu)化工作；
2、通過海量數(shù)據(jù)，分析與挖掘各種潛在關聯(lián)，不斷優(yōu)化策略效果，保障用戶體驗；
4、負責實時及離線特征抽取、融合，為數(shù)據(jù)挖掘及策略平臺提供特征服務；
5、負責大數(shù)據(jù)能力在產(chǎn)品功能上的落地，推動產(chǎn)品數(shù)據(jù)化和智能化。
任職要求：
1、計算機等相關專業(yè)，碩士或以上學歷，3年以上大數(shù)據(jù)、人工智能相關經(jīng)驗；
2、熟悉hive/hadoop/spark/flink/clickhouse/druid等大數(shù)據(jù)開發(fā)技術；
3、有良好的業(yè)務和產(chǎn)品sense，執(zhí)行力、推動力強優(yōu)先；
4、有豐富的行業(yè)經(jīng)驗，豐富的專業(yè)知識，獨特的行業(yè)見解，有戰(zhàn)略視野和規(guī)劃能力優(yōu)先；
5、優(yōu)秀的理解溝通能力，崇尚數(shù)據(jù)說話，深信數(shù)據(jù)在驅(qū)動業(yè)務、支撐決策上的價值優(yōu)先。
第2篇 大數(shù)據(jù)研發(fā)工程師-平臺服務方向職位描述與崗位職責任職要求
職位描述：
工作職責：
1、針對字節(jié)跳動全局性數(shù)據(jù)分析要求，打造行業(yè)領先的數(shù)據(jù)平臺，對全球用戶數(shù)據(jù)，打造高效穩(wěn)定的batch和rt數(shù)據(jù)流；
2、利用大數(shù)據(jù)工具，打造計算，傳輸，分析，監(jiān)控平臺；滿足字節(jié)跳動全球用戶產(chǎn)品的指標計算，多維分析等需求；
3、構建高效穩(wěn)定的數(shù)據(jù)服務，支撐字節(jié)跳動全球各重要業(yè)務的用戶增長。
任職要求：
1、計算機、數(shù)學相關專業(yè)本科及以上學歷，一年以上大數(shù)據(jù)開發(fā)工作經(jīng)驗，數(shù)據(jù)挖掘和bi分析領域優(yōu)先；
2、熟悉多項大數(shù)據(jù)領域的開源框架，e.g. hadoop， hive， presto， storm， spark， kafka， hbase， redis， rocksdb， elasticsearch， druid等；
3、強悍的編碼和學習能力；善于發(fā)現(xiàn)問題，積極探索原因。
第3篇 大數(shù)據(jù)研發(fā)經(jīng)理崗位職責
大數(shù)據(jù)研發(fā)經(jīng)理 崗位職責:
1. 負責公司大數(shù)據(jù)平臺的規(guī)劃與建設。
2.組建大數(shù)據(jù)領域技術團隊,以數(shù)據(jù)為依據(jù)向運營提供決策建議。
3.負責機器學習產(chǎn)品總體架構,攻克技術難關和主導關鍵技術決策。
4.負責底層系統(tǒng)的設計和搭建工作。
5.指導研發(fā)團隊成員工作,提升團隊研發(fā)能力。
任職要求:
1.數(shù)學、電子及計算機、金融類專業(yè),碩士以上學歷,博士優(yōu)先;
2.較扎實的機器學習基本功,熟悉經(jīng)典的算法并有實踐經(jīng)驗,包括lr、svm、gbdt、dnn、lstm、nlp等; 對以下至少一個領域有深入研究或者資深的工作經(jīng)驗;
(a)深度學習;
(b)自然語言處理;
(c)搜索/推薦算法;
(d)知識表示及推理、問答系統(tǒng);
(e)圖像識別;
(f)統(tǒng)計機器學習。
3.熟悉tensorflow/caffe等至少一種深度學習框架,有二次開發(fā)經(jīng)驗者優(yōu)先;
4.熟悉python 和java 或c++。
5.學習能力強、善于溝通、對技術創(chuàng)新充滿激情 崗位職責:
1. 負責公司大數(shù)據(jù)平臺的規(guī)劃與建設。
2.組建大數(shù)據(jù)領域技術團隊,以數(shù)據(jù)為依據(jù)向運營提供決策建議。
3.負責機器學習產(chǎn)品總體架構,攻克技術難關和主導關鍵技術決策。
4.負責底層系統(tǒng)的設計和搭建工作。
5.指導研發(fā)團隊成員工作,提升團隊研發(fā)能力。
任職要求:
1.數(shù)學、電子及計算機、金融類專業(yè),碩士以上學歷,博士優(yōu)先;
2.較扎實的機器學習基本功,熟悉經(jīng)典的算法并有實踐經(jīng)驗,包括lr、svm、gbdt、dnn、lstm、nlp等; 對以下至少一個領域有深入研究或者資深的工作經(jīng)驗;
(a)深度學習;
(b)自然語言處理;
(c)搜索/推薦算法;
(d)知識表示及推理、問答系統(tǒng);
(e)圖像識別;
(f)統(tǒng)計機器學習。
3.熟悉tensorflow/caffe等至少一種深度學習框架,有二次開發(fā)經(jīng)驗者優(yōu)先;
4.熟悉python 和java 或c++。
5.學習能力強、善于溝通、對技術創(chuàng)新充滿激情
第4篇 品牌廣告大數(shù)據(jù)研發(fā)工程師-核心廣告系統(tǒng)職位描述與崗位職責任職要求
職位描述：
工作職責：
1、負責品牌廣告業(yè)務平臺及其相關系統(tǒng)的研發(fā)
2、負責現(xiàn)有系統(tǒng)的問題分析和改進，提高系統(tǒng)性能，保證系統(tǒng)穩(wěn)定性
3、持續(xù)改進系統(tǒng)架構、核心算法或者核心技術等，保證系統(tǒng)高性能、高可用性和高可擴展性
4、新技術預研，完成項目的選型和設計，難點公關
任職要求：
1、本科及以上學歷，一年以上大數(shù)據(jù)系統(tǒng)開發(fā)經(jīng)驗
2、熟悉python語言， 熟練使用linu_
3、對常用的redis、kafka等工具系統(tǒng)有一定的了解
4、有大數(shù)據(jù)集、分布式計算工具(hadoop，spark，hive，storm， es)等應用開發(fā)經(jīng)驗優(yōu)先
5、有良好的團隊合作精神，較強的溝通能力
6、愿意深入了解業(yè)務知識，并能敏銳的發(fā)現(xiàn)業(yè)務痛點
7、有品牌廣告系統(tǒng)、dmp、輿情、指數(shù)平臺方向開發(fā)經(jīng)驗者優(yōu)先
第5篇 高級實時大數(shù)據(jù)研發(fā)工程師/數(shù)據(jù)技術專家職位描述與崗位職責任職要求
職位描述：
職責描述：
基于flink開源大數(shù)據(jù)計算平臺，在集團整體業(yè)務場景下，
1. 研發(fā)實時流計算數(shù)據(jù)研發(fā)平臺，支持包括核心電商、云計算、大文娛、創(chuàng)新業(yè)務在內(nèi)的等各個綜合業(yè)務板塊務；
2. 研發(fā)實時olap（elasticsearch，druid）賦能業(yè)務
3. 研發(fā)實時智能化（算法加工程）賦能業(yè)務
任職要求：
1.具備扎實的計算機理論基礎， 對數(shù)據(jù)結構及算法有較強的功底
2.精通java語言編程，具備優(yōu)秀的系統(tǒng)debug/profiling能力和經(jīng)驗
3. 熟悉常見的面向?qū)ο笤O計模式，具備優(yōu)秀的系統(tǒng)架構設計能力
4.熟悉hadoop/hbase/flink/spark streaming等開源大數(shù)據(jù)技術，在開源社區(qū)活躍者優(yōu)先
5.熟悉elasticsearch/druid 等olap開源技術優(yōu)先
6.具備實際的大數(shù)據(jù)業(yè)務開發(fā)經(jīng)驗以及良好的項目溝通和協(xié)調(diào)能力
7. 具備實時流計算數(shù)據(jù)開發(fā)經(jīng)驗、全棧開發(fā)經(jīng)驗優(yōu)先
第6篇 實時大數(shù)據(jù)研發(fā)工程師/數(shù)據(jù)技術專家（p6-p8）職位描述與崗位職責任職要求
職位描述：
職責描述：
基于flink開源大數(shù)據(jù)計算平臺，在阿里集團整體業(yè)務場景下，
1. 研發(fā)實時流計算數(shù)據(jù)研發(fā)平臺，支持包括核心電商、云計算、大文娛、創(chuàng)新業(yè)務在內(nèi)的等各個綜合業(yè)務板塊務；
2. 研發(fā)實時olap（elasticsearch，druid）賦能業(yè)務
3. 研發(fā)實時智能化（算法加工程）賦能業(yè)務
任職要求：
1.具備扎實的計算機理論基礎， 對數(shù)據(jù)結構及算法有較強的功底
2.精通java語言編程，具備優(yōu)秀的系統(tǒng)debug/profiling能力和經(jīng)驗
3. 熟悉常見的面向?qū)ο笤O計模式，具備優(yōu)秀的系統(tǒng)架構設計能力
4.熟悉hadoop/hbase/flink/spark streaming等開源大數(shù)據(jù)技術，在開源社區(qū)活躍者優(yōu)先
5.熟悉elasticsearch/druid 等olap開源技術優(yōu)先
6.具備實際的大數(shù)據(jù)業(yè)務開發(fā)經(jīng)驗以及良好的項目溝通和協(xié)調(diào)能力
7. 具備實時流計算數(shù)據(jù)開發(fā)經(jīng)驗、全棧開發(fā)經(jīng)驗優(yōu)先
第7篇 大數(shù)據(jù)研發(fā)工程師-廣告系統(tǒng)數(shù)據(jù)平臺職位描述與崗位職責任職要求
職位描述：
工作職責：
1、廣告各類在線業(yè)務的離線數(shù)據(jù)加工與在線數(shù)據(jù)服務開發(fā)與維護；
2、數(shù)據(jù)服務接口及產(chǎn)品需求研發(fā)迭代，代碼review、bug修復及日常服務運維；
3、針對海量數(shù)據(jù)處理和查詢需求，設計適應業(yè)務變化的合理的多維數(shù)據(jù)分析系統(tǒng)架構，滿足多樣性的需求；
4、海量日志清洗加工，并抽象出可以多業(yè)務復用的數(shù)據(jù)模型。
任職要求：
1、計算機相關專業(yè)本科及以上學歷，熟悉hadoop架構和工作原理，精通mapreduce編程；精通hive，有hql優(yōu)化經(jīng)驗；
2、熟悉java，python等多種編程技術，編程能力強，有web服務開發(fā)經(jīng)驗，具備獨立完成模塊開發(fā)能力；
3、理解基本的設計模式，能將業(yè)務需求快速理解成技術需求；
4、熟練使用mysql，熟練使用elasticsearch、druid者優(yōu)先；熟悉其原理者優(yōu)先；
5、善于溝通，工作積極主動，責任心強，具備良好的團隊協(xié)作能力；
6、具備良好的問題分析與解決能力，有較強學習能力和邏輯思維能力。
額外加分項:：
github等開源社區(qū)貢獻者；
具備大規(guī)模分布式服務設計能力和經(jīng)驗。
第8篇 大數(shù)據(jù)研發(fā)經(jīng)理職位描述與崗位職責任職要求
職位描述：
崗位職責：
1、負責大數(shù)據(jù)團隊建設和管理工作；
2、負責公司的大數(shù)據(jù)平臺的建設與開發(fā)；
3、參與大數(shù)據(jù)關鍵技術方案論證評審和技術投標方案編寫；
4、負責產(chǎn)品/項目的需求調(diào)研、數(shù)據(jù)分析及數(shù)據(jù)挖掘建模等工作;
5、大數(shù)據(jù)平臺的新技術調(diào)研，指導和培養(yǎng)工程師。
任職要求：
1、計算機相關專業(yè)，5年及以上工作經(jīng)驗，有至少2個以上的大數(shù)據(jù)項目研發(fā)和管理經(jīng)驗；
2、熟練使用hadoop及hadoop生態(tài)圈中的常用組件原理及應用，對基于spark、sqoop、hbase、hive、
flume、kafka、storm、mapreduce、hdfs、yarn等組件開發(fā)使用有深入理解；
3、熟悉linu_開發(fā)環(huán)境及java開發(fā)，熟悉spring、springmvc、mybatis等常用java框架；
4、對數(shù)據(jù)結構和算法設計具有深刻的理解，熟悉常用數(shù)據(jù)挖掘算法，并有一定的算法實現(xiàn)調(diào)優(yōu)經(jīng)驗；
5、具有良好的方案編寫能力，良好溝通能力和團隊合作精神，工作認真細致，責任心強。
第9篇 廣告大數(shù)據(jù)研發(fā)工程師/專家（p6-p8）3職位描述與崗位職責任職要求
職位描述：
職責描述：
社交廣告系統(tǒng)數(shù)據(jù)工程平臺研發(fā)，偏重系統(tǒng)架構設計與實現(xiàn)，參加以下一到多項工作：
1. 搭建數(shù)據(jù)倉庫，存儲并處理海量的實時、批量數(shù)據(jù)，滿足廣告業(yè)務的定向、分析和模型特征等業(yè)務需要
2. 建設數(shù)據(jù)發(fā)布系統(tǒng)，將數(shù)據(jù)倉庫的數(shù)據(jù)應用到廣告在線業(yè)務
3. 特征工程工程系統(tǒng)建設，為模型方提供特征數(shù)據(jù)流和特征離線調(diào)研、評估平臺，并保證模型訓練和預測階段的特征線上與線下一致性；
4. 用戶標識映射、畫像數(shù)據(jù)在線服務的開發(fā)與維護；
5. 廣告后臺海量日志數(shù)據(jù)和廣告主數(shù)據(jù)處理平臺；
6. 報表和廣告策略的統(tǒng)計數(shù)據(jù)生成和存儲；
7. 多維透視業(yè)務索引和存儲；
任職要求：
重點大學本科以上學歷，計算機相關專業(yè)；
具有扎實的數(shù)據(jù)結構和算法功底；
熟練使用 java，scala，c/c++， python；
有海量數(shù)據(jù)處理經(jīng)驗，熟悉 hadoop，spark，hbase，beam等開源框架 ；
有分布式系統(tǒng)，tensorflow等機器學習系統(tǒng)等經(jīng)驗優(yōu)先 ；
有較強學習能力和邏輯思維能力，具備良好的問題分析與解決能力；
善于溝通，工作積極主動，責任心強，具備良好的團隊協(xié)作能力
第10篇 高級/資深大數(shù)據(jù)研發(fā)工程師職位描述與崗位職責任職要求
職位描述：
工作職責：
1、負責字節(jié)跳動用戶行為的理解和建模，幫助公司各項業(yè)務滿足用戶需求，提升用戶覆蓋；
2、負責在數(shù)據(jù)建設層面，對用戶隱私進行脫敏處理，保證后續(xù)數(shù)據(jù)研發(fā)過程中保護用戶隱私；
3、探索、挖掘公司各項指標、用戶滿意度、用戶增長上的各項規(guī)律，并利用這些規(guī)律幫助產(chǎn)品提升和擴展，增加用戶滿意度，擴展用戶群體。
任職要求：
1、本科及以上學歷，計算機、統(tǒng)計學、數(shù)學等相關專業(yè)；
2、強的編程和數(shù)據(jù)工具運用能力，有hadoop，hive，spark，kafka，elasticsearch或者其他的大數(shù)據(jù)工具的使用經(jīng)驗；
3、對數(shù)據(jù)倉庫、數(shù)據(jù)建模有一定認知；有過數(shù)據(jù)使用相關經(jīng)驗。
第11篇 高級大數(shù)據(jù)研發(fā)工程師（數(shù)據(jù)可視化）職位描述與崗位職責任職要求
職位描述：
崗位職責：
1.負責全公司的數(shù)據(jù)平臺數(shù)據(jù)可視化研發(fā)工作
2.獨立完成數(shù)據(jù)可視化研發(fā)工作
任職要求：
1.計算機、電子通信、數(shù)學、統(tǒng)計或者相關專業(yè)本科及以上學歷
2.熟練掌握java/python中的一種語言
3.熟悉數(shù)據(jù)可視化開發(fā)，熟悉echarts應用開發(fā)的優(yōu)先
4.熟悉web開發(fā)，熟悉html，js，css
5.熟悉quick bi的優(yōu)先
6.具備良好的團隊合作精神，工作有激情
7.對數(shù)據(jù)敏感，有產(chǎn)品思維的優(yōu)先
第12篇 大數(shù)據(jù)研發(fā)負責人職位描述與崗位職責任職要求
職位描述：
工作職責：
1、負責字節(jié)跳動旗下在上海多條產(chǎn)品線的數(shù)據(jù)倉庫建設，包括但不限于抖音（海外版），泡芙社區(qū)，半次元等；
2、與業(yè)務團隊緊密合作，深入理解并抽象業(yè)務需求，產(chǎn)出數(shù)據(jù)工具/應用，發(fā)揮數(shù)據(jù)價值。
任職要求：
1、精通數(shù)據(jù)倉庫實施方法論、深入了解數(shù)據(jù)倉庫體系，并支撐過實際的互聯(lián)網(wǎng)業(yè)務場景；
2、具備較強的編碼能力，對hadoop生態(tài)的大數(shù)據(jù)基礎設施有較強理解，包括但不限于hive/spark/flink/kafka等，有數(shù)據(jù)工具的研發(fā)經(jīng)驗者優(yōu)先；
3、善于溝通，具備優(yōu)秀的技術與業(yè)務結合能力；
4、有pb級以上海量數(shù)據(jù)處理經(jīng)驗者優(yōu)先；
5、有團隊管理經(jīng)驗者優(yōu)先。
第13篇 大數(shù)據(jù)研發(fā)總監(jiān)職位描述與崗位職責任職要求
職位描述：
崗位職責：
1. 負責整個公司數(shù)據(jù)系統(tǒng)的整體架構設計
2. 負責數(shù)據(jù)倉庫、大數(shù)據(jù)平臺、報表可視化的搭建及研發(fā)；
3. 按時完成各個業(yè)務和產(chǎn)品部門的數(shù)據(jù)服務需求，不斷優(yōu)化現(xiàn)有的平臺架構；
4. 負責數(shù)據(jù)團隊的職位描述與崗位職責任職要求、組織架構設計、梯隊培養(yǎng)和日常管理；
5. 帶領團隊設計、開發(fā)具有創(chuàng)新價值的大數(shù)據(jù)分析平臺；
任職要求：
1. 統(tǒng)招本科以上學歷，計算機、通信、數(shù)學相關專業(yè)，具有8年以上研發(fā)工作經(jīng)驗；
2. 有5年以上bi、大數(shù)據(jù)研發(fā)經(jīng)驗，4年以上團隊管理經(jīng)驗，有良好的團隊管理能力；
3. 有較強的溝通和表達的能力，有較強的同理心，能夠合理調(diào)度資源及時滿足和匹配業(yè)務需求；
4. 精通hadoop、spark、hive、hbase等主流的大數(shù)據(jù)技術；
5. 具有高度責任心，較強的抗壓能力，意愿強烈；
6. 有較強的數(shù)據(jù)挖掘、機器學習經(jīng)驗者優(yōu)先；
7. 有一線互聯(lián)網(wǎng)公司或醫(yī)療行業(yè)經(jīng)驗者優(yōu)先。
第14篇 大數(shù)據(jù)研發(fā)工程師-產(chǎn)品運營方向職位描述與崗位職責任職要求
職位描述：
工作職責：
1、負責企業(yè)級大數(shù)據(jù)平臺的研發(fā)，服務于今日頭條公司內(nèi)外的幾十條產(chǎn)品線；
2、不局限于按部就班的研發(fā)工作，有強烈的產(chǎn)品sense，對用戶體驗敏感，能夠綜合運用技術/產(chǎn)品/運營方案，提升終端用戶體驗；
3、平臺產(chǎn)品包括但不限于：用戶行為分析，查詢中心，bi報表，元數(shù)據(jù)管理，abtest系統(tǒng)，數(shù)據(jù)開發(fā)套件等；
任職要求：
1、計算機等相關專業(yè)優(yōu)先，本科及以上學歷；
2、復合型人才，有研發(fā)能力的pm，或有產(chǎn)品運營能力的研發(fā)等均可投遞；
3、做事積極主動，優(yōu)秀的組織協(xié)調(diào)，推進執(zhí)行能力，思路手段靈活，對用戶體驗負責；有數(shù)據(jù)分析，大數(shù)據(jù)研發(fā)，數(shù)據(jù)產(chǎn)品設計，售前售后等經(jīng)驗之一者，優(yōu)先考慮；
第15篇 大數(shù)據(jù)研發(fā)經(jīng)理崗位職責任職要求
大數(shù)據(jù)研發(fā)經(jīng)理崗位職責
大數(shù)據(jù)平臺研發(fā)經(jīng)理 北京構力科技有限公司 北京構力科技有限公司，構力 1. 負責大數(shù)據(jù)平臺核心模塊的概要設計、代碼編寫、調(diào)試驗證
2. 負責大數(shù)據(jù)平臺的重構優(yōu)化，不斷提升產(chǎn)品的穩(wěn)定性和性能
3. 負責大數(shù)據(jù)平臺的關鍵技術的預研、培訓工作
大數(shù)據(jù)研發(fā)經(jīng)理崗位
第16篇 大數(shù)據(jù)研發(fā)工程師職位描述與崗位職責任職要求
職位描述：
工作職責：
1、打造業(yè)界領先的通用數(shù)據(jù)平臺，包括實時數(shù)據(jù)流、數(shù)據(jù)倉庫、調(diào)度系統(tǒng)、查詢引擎，用戶行為分析，abtest 實驗系統(tǒng)等，降低數(shù)據(jù)的使用門檻，實現(xiàn)數(shù)據(jù)的最大價值
2、打造業(yè)界領先的存儲、計算等分布式系統(tǒng)，為海量數(shù)據(jù)和大規(guī)模業(yè)務系統(tǒng)提供可靠的基礎設施
任職要求：
1、熟悉多項大數(shù)據(jù)領域的開源框架，e.g. hadoop， hive， presto， storm， spark， kafka， hbase， redis， rocksdb， elasticsearch， druid， etc.
2、強悍的編碼和 troubleshooting 能力
3、樂于挑戰(zhàn)沒有明顯答案的問題，對新技術有強烈的學習熱情
第17篇 空間大數(shù)據(jù)研發(fā)工程師職位描述與崗位職責任職要求
職位描述：
崗位職責:
1、研究空間大數(shù)據(jù)前沿技術，參與空間大數(shù)據(jù)分析平臺的設計和開發(fā)；
2、與算法工程師對接，參與空間大數(shù)據(jù)分析算法的代碼實現(xiàn)；
3、其它相關的gis開發(fā)工作；
任職資格:
1、計算機、地理信息等相關專業(yè)背景，本科及以上學歷；
2、對空間數(shù)據(jù)結構有深刻理解，熟悉空間數(shù)據(jù)庫引擎；
3、扎實的編程基礎，能夠熟練運用java/scala語言；
4、熟悉大數(shù)據(jù)管理系統(tǒng)和分布式計算框架，如：hbase、cassandra、mongodb、spark/flink等；
5、熟悉gis領域主流的分布式數(shù)據(jù)存儲方案，有geomesa、geowave、geotrellis、geoserver、geotools、arcgis soe使用經(jīng)驗者優(yōu)先；
6、具備較強的學習創(chuàng)新能力，能夠通過快速學習解決實際問題；
第18篇 大數(shù)據(jù)研發(fā)專家職位描述與崗位職責任職要求
職位描述：
職責描述：
1、負責全域數(shù)據(jù)和應用產(chǎn)品的數(shù)據(jù)體系的建設，通過數(shù)據(jù)+算法+工程化能力，處理和萃取數(shù)據(jù)，讓其成為應用和產(chǎn)品的能源；
2、參與大數(shù)據(jù)基礎架構和技術體系的規(guī)劃建設，包括數(shù)據(jù)采集平臺、數(shù)據(jù)資產(chǎn)管理與治理平臺、數(shù)據(jù)質(zhì)量及穩(wěn)定性保障體系、數(shù)據(jù)處理智能化和自動化體系的建設。
3、 以上工作職責有具體的細分，你可以基于你的興趣和愛好選擇不同的方向發(fā)展；
任職要求：
以下能力項不是全部要求，我們有多個細分崗位供您選擇
1、有從事分布式數(shù)據(jù)存儲與計算平臺應用開發(fā)經(jīng)驗，熟悉hadoop生態(tài)相關技術并有相關開發(fā)經(jīng)驗，有spark/flink的開發(fā)經(jīng)驗尤佳；
2、較為豐富的數(shù)據(jù)倉庫及數(shù)據(jù)平臺的架構經(jīng)驗，精通數(shù)據(jù)倉庫建模及etl設計開發(fā)；有較為系統(tǒng)的海量數(shù)據(jù)性能處理經(jīng)驗；在大數(shù)據(jù)資產(chǎn)管理與治理有一定成功產(chǎn)品化經(jīng)驗；
3、具備豐富的大型互聯(lián)網(wǎng)日志采集系統(tǒng)設計或架構經(jīng)驗，具備較扎實的理論基礎和工程能力，熟悉http、http等協(xié)議，有ngin_、apache等web服務器上的模塊開發(fā)或子系統(tǒng)的架構設計能力，有ios或android客戶端sdk及服務端架構設計經(jīng)驗；
4、具備一定的java、python語言的開發(fā)能力，具備機器學習算法能力尤佳；
5、 良好的思維邏輯性、語言表達能力；有較好英語口語能力，將安排海外崗位；
第19篇 大數(shù)據(jù)研發(fā)崗位職責
大數(shù)據(jù)研發(fā) 職位描述:
1、理解數(shù)據(jù)的產(chǎn)品應用場景邏輯,通過統(tǒng)計方法和通用分布式框架工具語言如hadoop,不斷加強數(shù)據(jù)服務質(zhì)量;
2、負責數(shù)據(jù)清洗、轉(zhuǎn)換、建模等工作,對海量用戶行為數(shù)據(jù)通過hadoop/spark等進行離線和實時處理;
3、參與用戶畫像、個性化推薦系統(tǒng)等數(shù)據(jù)產(chǎn)品的開發(fā)工作
4、參與數(shù)據(jù)、工具平臺相關的功能接口、數(shù)據(jù)接口開發(fā),完成業(yè)務功能;
崗位要求:
1、精通java或scala語言,具有面向?qū)ο缶幊趟枷?對底層實現(xiàn)有一定研究;
2、精通spark sql、spark streaming等編程,具有實際大型分布式集群項目開發(fā)經(jīng)驗;
3、熟悉linu_操作系統(tǒng),熟悉linu_ shell編程;
4、熟悉mysql,redis等常用數(shù)據(jù)庫,jetty等中間件;
5、熟悉分布式存儲或nosql數(shù)據(jù)庫技術,如hbase等;
6、熟悉hadoop生態(tài)環(huán)境,精通以下一種或多種大數(shù)據(jù)技術,如flume、kafka、hdfs、mr、elastic search;
7、熟悉常用的數(shù)據(jù)挖掘算法優(yōu)先。 職位描述:
1、理解數(shù)據(jù)的產(chǎn)品應用場景邏輯,通過統(tǒng)計方法和通用分布式框架工具語言如hadoop,不斷加強數(shù)據(jù)服務質(zhì)量;
2、負責數(shù)據(jù)清洗、轉(zhuǎn)換、建模等工作,對海量用戶行為數(shù)據(jù)通過hadoop/spark等進行離線和實時處理;
3、參與用戶畫像、個性化推薦系統(tǒng)等數(shù)據(jù)產(chǎn)品的開發(fā)工作
4、參與數(shù)據(jù)、工具平臺相關的功能接口、數(shù)據(jù)接口開發(fā),完成業(yè)務功能;
崗位要求:
1、精通java或scala語言,具有面向?qū)ο缶幊趟枷?對底層實現(xiàn)有一定研究;
2、精通spark sql、spark streaming等編程,具有實際大型分布式集群項目開發(fā)經(jīng)驗;
3、熟悉linu_操作系統(tǒng),熟悉linu_ shell編程;
4、熟悉mysql,redis等常用數(shù)據(jù)庫,jetty等中間件;
5、熟悉分布式存儲或nosql數(shù)據(jù)庫技術,如hbase等;
6、熟悉hadoop生態(tài)環(huán)境,精通以下一種或多種大數(shù)據(jù)技術,如flume、kafka、hdfs、mr、elastic search;
7、熟悉常用的數(shù)據(jù)挖掘算法優(yōu)先。
