- 目錄
崗位職責(zé)是什么
數(shù)據(jù)研發(fā)崗位是企業(yè)中至關(guān)重要的角色,負責(zé)構(gòu)建、維護和優(yōu)化數(shù)據(jù)處理系統(tǒng),以支持業(yè)務(wù)決策、戰(zhàn)略規(guī)劃和運營優(yōu)化。這個職位的核心在于通過數(shù)據(jù)挖掘、分析和建模,將海量的原始數(shù)據(jù)轉(zhuǎn)化為有價值的洞見,為企業(yè)創(chuàng)造競爭優(yōu)勢。
崗位職責(zé)要求
1. 精通至少一種編程語言,如python、r或java,用于數(shù)據(jù)處理和分析。
2. 熟練掌握數(shù)據(jù)庫管理系統(tǒng),如sql,具備大數(shù)據(jù)處理技術(shù),如hadoop或spark。
3. 具備統(tǒng)計學(xué)和機器學(xué)習(xí)基礎(chǔ),能應(yīng)用到數(shù)據(jù)建模和預(yù)測分析中。
4. 對數(shù)據(jù)結(jié)構(gòu)、算法和計算效率有深刻理解。
5. 良好的問題解決能力,能夠從復(fù)雜數(shù)據(jù)中發(fā)現(xiàn)關(guān)鍵信息。
6. 能夠與業(yè)務(wù)團隊有效溝通,將技術(shù)解決方案轉(zhuǎn)化為業(yè)務(wù)價值。
7. 嚴謹?shù)倪壿嬎季S和良好的項目管理能力。
崗位職責(zé)描述
數(shù)據(jù)研發(fā)人員日常工作包括但不限于:
1. 設(shè)計和實施數(shù)據(jù)采集方案,確保數(shù)據(jù)質(zhì)量和完整性。
2. 構(gòu)建高效的數(shù)據(jù)處理管道,自動化數(shù)據(jù)提取、轉(zhuǎn)換和加載(etl)流程。
3. 進行數(shù)據(jù)清洗、整合和預(yù)處理,為分析做好準備。
4. 開發(fā)和優(yōu)化數(shù)據(jù)模型,以支持業(yè)務(wù)預(yù)測和決策支持。
5. 與業(yè)務(wù)部門合作,理解需求,開發(fā)定制化的數(shù)據(jù)分析報告和可視化工具。
6. 持續(xù)監(jiān)控和優(yōu)化數(shù)據(jù)系統(tǒng)的性能,確保數(shù)據(jù)安全和合規(guī)性。
7. 參與數(shù)據(jù)治理活動,推動企業(yè)數(shù)據(jù)標準的制定和執(zhí)行。
有哪些內(nèi)容
1. 數(shù)據(jù)架構(gòu)設(shè)計:構(gòu)建和優(yōu)化數(shù)據(jù)倉庫、數(shù)據(jù)湖或數(shù)據(jù)中臺,確保數(shù)據(jù)的存儲、訪問和共享。
2. 數(shù)據(jù)分析:運用統(tǒng)計方法和機器學(xué)習(xí)技術(shù),進行深度分析,揭示業(yè)務(wù)趨勢和模式。
3. 報告與可視化:創(chuàng)建直觀的儀表板和報告,幫助管理層快速理解和解讀數(shù)據(jù)。
4. 項目協(xié)作:與業(yè)務(wù)團隊、產(chǎn)品經(jīng)理、數(shù)據(jù)科學(xué)家等跨部門合作,確保數(shù)據(jù)驅(qū)動的項目成功落地。
5. 技術(shù)研究:關(guān)注最新數(shù)據(jù)技術(shù)和工具,評估并引入適合企業(yè)需求的新技術(shù)。
6. 數(shù)據(jù)安全:遵守數(shù)據(jù)保護法規(guī),實施數(shù)據(jù)加密、訪問控制等措施,保障數(shù)據(jù)安全。
7. 培訓(xùn)與指導(dǎo):為團隊成員提供數(shù)據(jù)相關(guān)的培訓(xùn),提升整個組織的數(shù)據(jù)素養(yǎng)。
作為數(shù)據(jù)研發(fā)人員,不僅需要扎實的技術(shù)功底,還需要具備敏銳的業(yè)務(wù)洞察力,通過持續(xù)改進和創(chuàng)新,推動企業(yè)數(shù)據(jù)資產(chǎn)的價值最大化。
數(shù)據(jù)研發(fā)崗位職責(zé)范文
第1篇 空間大數(shù)據(jù)研發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1、研究空間大數(shù)據(jù)前沿技術(shù),參與空間大數(shù)據(jù)分析平臺的設(shè)計和開發(fā);
2、與算法工程師對接,參與空間大數(shù)據(jù)分析算法的代碼實現(xiàn);
3、其它相關(guān)的gis開發(fā)工作;
任職資格:
1、計算機、地理信息等相關(guān)專業(yè)背景,本科及以上學(xué)歷;
2、對空間數(shù)據(jù)結(jié)構(gòu)有深刻理解,熟悉空間數(shù)據(jù)庫引擎;
3、扎實的編程基礎(chǔ),能夠熟練運用java/scala語言;
4、熟悉大數(shù)據(jù)管理系統(tǒng)和分布式計算框架,如:hbase、cassandra、mongodb、spark/flink等;
5、熟悉gis領(lǐng)域主流的分布式數(shù)據(jù)存儲方案,有g(shù)eomesa、geowave、geotrellis、geoserver、geotools、arcgis soe使用經(jīng)驗者優(yōu)先;
6、具備較強的學(xué)習(xí)創(chuàng)新能力,能夠通過快速學(xué)習(xí)解決實際問題;
第2篇 大數(shù)據(jù)研發(fā)工程師-廣告系統(tǒng)數(shù)據(jù)平臺職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、廣告各類在線業(yè)務(wù)的離線數(shù)據(jù)加工與在線數(shù)據(jù)服務(wù)開發(fā)與維護;
2、數(shù)據(jù)服務(wù)接口及產(chǎn)品需求研發(fā)迭代,代碼review、bug修復(fù)及日常服務(wù)運維;
3、針對海量數(shù)據(jù)處理和查詢需求,設(shè)計適應(yīng)業(yè)務(wù)變化的合理的多維數(shù)據(jù)分析系統(tǒng)架構(gòu),滿足多樣性的需求;
4、海量日志清洗加工,并抽象出可以多業(yè)務(wù)復(fù)用的數(shù)據(jù)模型。
任職要求:
1、計算機相關(guān)專業(yè)本科及以上學(xué)歷,熟悉hadoop架構(gòu)和工作原理,精通mapreduce編程;精通hive,有hql優(yōu)化經(jīng)驗;
2、熟悉java,python等多種編程技術(shù),編程能力強,有web服務(wù)開發(fā)經(jīng)驗,具備獨立完成模塊開發(fā)能力;
3、理解基本的設(shè)計模式,能將業(yè)務(wù)需求快速理解成技術(shù)需求;
4、熟練使用mysql,熟練使用elasticsearch、druid者優(yōu)先;熟悉其原理者優(yōu)先;
5、善于溝通,工作積極主動,責(zé)任心強,具備良好的團隊協(xié)作能力;
6、具備良好的問題分析與解決能力,有較強學(xué)習(xí)能力和邏輯思維能力。
額外加分項::
github等開源社區(qū)貢獻者;
具備大規(guī)模分布式服務(wù)設(shè)計能力和經(jīng)驗。
第3篇 資深數(shù)據(jù)研發(fā)工程師-(python/java)職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1.參與建設(shè)投融資數(shù)據(jù)體系,持續(xù)集成相關(guān)工具產(chǎn)品,以及搭建大數(shù)據(jù)業(yè)務(wù)統(tǒng)一計算層等相關(guān)工作;
2.參與公司數(shù)據(jù)倉庫的架構(gòu)設(shè)計和研發(fā),挖掘數(shù)據(jù)價值, 實現(xiàn)高質(zhì)量數(shù)據(jù)的互通與共享;
3.助力數(shù)據(jù)化運營業(yè)務(wù),構(gòu)建豐富多樣的bi應(yīng)用;
4.對數(shù)據(jù)采集、數(shù)據(jù)融合、數(shù)據(jù)質(zhì)量、數(shù)據(jù)應(yīng)用鏈路有深入理解,并能協(xié)助業(yè)務(wù)數(shù)據(jù)集市建設(shè),搭建業(yè)務(wù)領(lǐng)域模型。
任職要求:
1.數(shù)學(xué)、計算機、統(tǒng)計學(xué)等相關(guān)專業(yè)本科以上學(xué)歷,5年以上相關(guān)工作經(jīng)歷;
2.從事數(shù)據(jù)倉庫領(lǐng)域至少5年以上,熟悉數(shù)據(jù)倉庫模型設(shè)計與etl開發(fā)經(jīng)驗;
3.有從事分布式數(shù)據(jù)存儲與計算平臺應(yīng)用開發(fā)經(jīng)驗,熟悉hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實踐經(jīng)驗著優(yōu)先,重點考察hdfs、mapreduce、hive、hbase;
4.有實時etl研發(fā)經(jīng)驗,對分布式實時大數(shù)據(jù)處理系統(tǒng)有深入理解,包括但不限于spark streaming、flink、storm...;
5.熟悉數(shù)據(jù)倉庫領(lǐng)域知識和技能者優(yōu)先,對數(shù)據(jù)質(zhì)量管理有獨到的見解;
6.業(yè)務(wù)sense,能夠通過梳理設(shè)計業(yè)務(wù)模型發(fā)現(xiàn)業(yè)務(wù)問題,并驅(qū)動業(yè)務(wù)目標實現(xiàn);
7.有neo4j,word2vec經(jīng)驗優(yōu)先。
第4篇 高級實時大數(shù)據(jù)研發(fā)工程師/數(shù)據(jù)技術(shù)專家職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
基于flink開源大數(shù)據(jù)計算平臺,在集團整體業(yè)務(wù)場景下,
1. 研發(fā)實時流計算數(shù)據(jù)研發(fā)平臺,支持包括核心電商、云計算、大文娛、創(chuàng)新業(yè)務(wù)在內(nèi)的等各個綜合業(yè)務(wù)板塊務(wù);
2. 研發(fā)實時olap(elasticsearch,druid)賦能業(yè)務(wù)
3. 研發(fā)實時智能化(算法加工程)賦能業(yè)務(wù)
任職要求:
1.具備扎實的計算機理論基礎(chǔ), 對數(shù)據(jù)結(jié)構(gòu)及算法有較強的功底
2.精通java語言編程,具備優(yōu)秀的系統(tǒng)debug/profiling能力和經(jīng)驗
3. 熟悉常見的面向?qū)ο笤O(shè)計模式,具備優(yōu)秀的系統(tǒng)架構(gòu)設(shè)計能力
4.熟悉hadoop/hbase/flink/spark streaming等開源大數(shù)據(jù)技術(shù),在開源社區(qū)活躍者優(yōu)先
5.熟悉elasticsearch/druid 等olap開源技術(shù)優(yōu)先
6.具備實際的大數(shù)據(jù)業(yè)務(wù)開發(fā)經(jīng)驗以及良好的項目溝通和協(xié)調(diào)能力
7. 具備實時流計算數(shù)據(jù)開發(fā)經(jīng)驗、全棧開發(fā)經(jīng)驗優(yōu)先
第5篇 大數(shù)據(jù)研發(fā)經(jīng)理崗位職責(zé)任職要求
大數(shù)據(jù)研發(fā)經(jīng)理崗位職責(zé)
大數(shù)據(jù)平臺研發(fā)經(jīng)理 北京構(gòu)力科技有限公司 北京構(gòu)力科技有限公司,構(gòu)力 1. 負責(zé)大數(shù)據(jù)平臺核心模塊的概要設(shè)計、代碼編寫、調(diào)試驗證
2. 負責(zé)大數(shù)據(jù)平臺的重構(gòu)優(yōu)化,不斷提升產(chǎn)品的穩(wěn)定性和性能
3. 負責(zé)大數(shù)據(jù)平臺的關(guān)鍵技術(shù)的預(yù)研、培訓(xùn)工作
大數(shù)據(jù)研發(fā)經(jīng)理崗位
第6篇 大數(shù)據(jù)研發(fā)工程師-平臺服務(wù)方向職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、針對字節(jié)跳動全局性數(shù)據(jù)分析要求,打造行業(yè)領(lǐng)先的數(shù)據(jù)平臺,對全球用戶數(shù)據(jù),打造高效穩(wěn)定的batch和rt數(shù)據(jù)流;
2、利用大數(shù)據(jù)工具,打造計算,傳輸,分析,監(jiān)控平臺;滿足字節(jié)跳動全球用戶產(chǎn)品的指標計算,多維分析等需求;
3、構(gòu)建高效穩(wěn)定的數(shù)據(jù)服務(wù),支撐字節(jié)跳動全球各重要業(yè)務(wù)的用戶增長。
任職要求:
1、計算機、數(shù)學(xué)相關(guān)專業(yè)本科及以上學(xué)歷,一年以上大數(shù)據(jù)開發(fā)工作經(jīng)驗,數(shù)據(jù)挖掘和bi分析領(lǐng)域優(yōu)先;
2、熟悉多項大數(shù)據(jù)領(lǐng)域的開源框架,e.g. hadoop, hive, presto, storm, spark, kafka, hbase, redis, rocksdb, elasticsearch, druid等;
3、強悍的編碼和學(xué)習(xí)能力;善于發(fā)現(xiàn)問題,積極探索原因。
第7篇 ai 數(shù)據(jù)研發(fā)工程師 - 語音 & 對話方向職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、設(shè)計構(gòu)建智能語音對話數(shù)據(jù)體系,打造一體化多媒體數(shù)據(jù)存儲、索引、處理能力
2、打造 pb 級數(shù)據(jù)處理引擎,應(yīng)對日均 tb 級數(shù)據(jù)增長
3、你有機會為字節(jié)跳動全系產(chǎn)品(頭條、抖音、火山、西瓜等)提供 ai 數(shù)據(jù)處理及索引技術(shù),用數(shù)據(jù)技術(shù)影響數(shù)億國內(nèi)國際用戶
任職要求:
1、擁有計算機及相關(guān)專業(yè)本科以上學(xué)歷,兩年以上 c++/java/go/python 項目開發(fā)經(jīng)驗
2、精通數(shù)據(jù)結(jié)構(gòu)和算法設(shè)計,熟悉系統(tǒng)性能調(diào)優(yōu)的方式,熟悉 linu_ 開發(fā)環(huán)境
3、玩轉(zhuǎn) spark/storm/hive 等大數(shù)據(jù)工具,熟知 mysql/redis/mongodb 等常用數(shù)據(jù)庫,不再滿足于常規(guī)文本處理,渴望挑戰(zhàn)大規(guī)模多媒體數(shù)據(jù)處理任務(wù)
4、在 acm/noi/ioi/topcoder 中打遍天下無敵手,在算法領(lǐng)域追求極致,渴望挑戰(zhàn)更深更廣更帶感的技術(shù)算法問題
第8篇 數(shù)據(jù)研發(fā)工程師崗位職責(zé)
數(shù)據(jù)研發(fā)工程師 投中信息 上海投中信息咨詢股份有限公司,投中信息 職責(zé)描述:
1.負責(zé)數(shù)據(jù)源調(diào)研、入庫、開發(fā)的全流程工作(數(shù)據(jù)采集、清洗、匯總、集成等),并保證數(shù)據(jù)質(zhì)量;
2.有較強的自學(xué)能力,能夠根據(jù)需要學(xué)習(xí)相關(guān)業(yè)務(wù)和技術(shù)知識,并能靈活運用;
3.負責(zé)對公司平臺的數(shù)據(jù)進行整理、挖掘及分析工作;
4.基于公司現(xiàn)有產(chǎn)品,提出可擴展,高性能,高可用性設(shè)計方案;
任職要求:
1.熟練掌握java編程語言,熟悉python腳本語言,并靈活運用到實際工作中及解決技術(shù)問題;
2.熟悉hadoop+spark大數(shù)據(jù)處理工具和技術(shù),有兩年以上的實際大數(shù)據(jù)處理經(jīng)驗;
3.熟練掌握一至兩種開源etl工具軟件;
4.熟悉常見機器學(xué)習(xí)算法(如邏輯回歸、svm、神經(jīng)網(wǎng)絡(luò)、決策樹、貝葉斯等);
5.對機器學(xué)習(xí)/深度學(xué)習(xí)有興趣,并具有一定的理解和研究,熟悉tensorflow、torch等常見框架;有實際項目開發(fā)經(jīng)驗者優(yōu)先;
6.善于分析和解決問題,富有想象力和學(xué)習(xí)能力,良好的團隊合作精神;
7.責(zé)任心強,工作踏實,團隊協(xié)作精神,具備快速解決問題的能力。
第9篇 資深數(shù)據(jù)研發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
【崗位職責(zé)】
1. 負責(zé)數(shù)據(jù)工具的的開發(fā),維護,推廣工作;
2. 基于離線/流式計算技術(shù)進行數(shù)據(jù)分析的處理。
【任職要求】
1. 計算機相關(guān)專業(yè)本科及以上學(xué)歷,5年及以上相關(guān)工作經(jīng)驗;
2. 掌握java/scala 中至少一種開發(fā)語言, 熟悉spring相關(guān)框架;
3. 熟悉mysql. es. hbase 等存儲引擎的使用;
4. 有強烈的技術(shù)好奇心與動手能力。
第10篇 實時大數(shù)據(jù)研發(fā)工程師/數(shù)據(jù)技術(shù)專家(p6-p8)職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
基于flink開源大數(shù)據(jù)計算平臺,在阿里集團整體業(yè)務(wù)場景下,
1. 研發(fā)實時流計算數(shù)據(jù)研發(fā)平臺,支持包括核心電商、云計算、大文娛、創(chuàng)新業(yè)務(wù)在內(nèi)的等各個綜合業(yè)務(wù)板塊務(wù);
2. 研發(fā)實時olap(elasticsearch,druid)賦能業(yè)務(wù)
3. 研發(fā)實時智能化(算法加工程)賦能業(yè)務(wù)
任職要求:
1.具備扎實的計算機理論基礎(chǔ), 對數(shù)據(jù)結(jié)構(gòu)及算法有較強的功底
2.精通java語言編程,具備優(yōu)秀的系統(tǒng)debug/profiling能力和經(jīng)驗
3. 熟悉常見的面向?qū)ο笤O(shè)計模式,具備優(yōu)秀的系統(tǒng)架構(gòu)設(shè)計能力
4.熟悉hadoop/hbase/flink/spark streaming等開源大數(shù)據(jù)技術(shù),在開源社區(qū)活躍者優(yōu)先
5.熟悉elasticsearch/druid 等olap開源技術(shù)優(yōu)先
6.具備實際的大數(shù)據(jù)業(yè)務(wù)開發(fā)經(jīng)驗以及良好的項目溝通和協(xié)調(diào)能力
7. 具備實時流計算數(shù)據(jù)開發(fā)經(jīng)驗、全棧開發(fā)經(jīng)驗優(yōu)先
第11篇 搜索數(shù)據(jù)研發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、負責(zé)bytedance鏈接理解的研發(fā)工作,用最前沿的機器學(xué)習(xí)算法,進行全網(wǎng)鏈接分析;
2、負責(zé)鏈接規(guī)??刂?,進行有效性和價值度判斷,實現(xiàn)鏈接反垃圾、反作弊等;
3、負責(zé)鏈接關(guān)系深度挖掘,實現(xiàn)鏈接歸一化、鏡像站、pc移動站等。
任職要求:
1、計算機或相關(guān)專業(yè),本科及以上學(xué)歷,對數(shù)據(jù)結(jié)構(gòu)和算法設(shè)計有較為深刻的理解;
2、精通c/c++或python語言編程,熟悉linu_平臺、shell編程;
3、出色的分析問題,解決問題能力;
4、熟悉搜索相關(guān)領(lǐng)域,有機器學(xué)習(xí)/深度學(xué)習(xí)經(jīng)驗者優(yōu)先。
第12篇 廣告業(yè)務(wù)數(shù)據(jù)研發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、廣告各類在線業(yè)務(wù)的離線數(shù)據(jù)加工與在線數(shù)據(jù)服務(wù)開發(fā)與維護
2、數(shù)據(jù)服務(wù)接口及產(chǎn)品需求研發(fā)迭代,代碼review、bug修復(fù)及日常服務(wù)運維
3、針對海量數(shù)據(jù)處理和查詢需求,設(shè)計適應(yīng)業(yè)務(wù)變化的合理的多維數(shù)據(jù)分析系統(tǒng)架構(gòu),滿足多樣性的需求
4、海量日志清洗加工,并抽象出可以多業(yè)務(wù)復(fù)用的數(shù)據(jù)模型
任職要求:
1、熟悉hadoop架構(gòu)和工作原理,精通mapreduce編程;精通hive,有hql優(yōu)化經(jīng)驗
2、有web服務(wù)開發(fā)經(jīng)驗,具備獨立完成模塊開發(fā)能力,具備大規(guī)模分布式服務(wù)設(shè)計能力和經(jīng)驗
3、理解基本的設(shè)計模式,能將業(yè)務(wù)需求快速理解成技術(shù)需求
4、熟練使用mysql,熟練使用elasticsearch、druid者優(yōu)先;熟悉其原理者優(yōu)先
5、善于溝通,工作積極主動,責(zé)任心強,具備良好的團隊協(xié)作能力
6、具備良好的問題分析與解決能力,有較強學(xué)習(xí)能力和邏輯思維能力
第13篇 搜索研發(fā)負責(zé)人-數(shù)據(jù)研發(fā)職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、負責(zé)bytedance鏈接理解的研發(fā)工作,用最前沿的機器學(xué)習(xí)算法,進行全網(wǎng)鏈接分析;
2、負責(zé)鏈接規(guī)??刂?,進行有效性和價值度判斷,實現(xiàn)鏈接反垃圾、反作弊等;
3、負責(zé)鏈接關(guān)系深度挖掘,實現(xiàn)鏈接歸一化、鏡像站、pc移動站等。
任職要求:
1、計算機或相關(guān)專業(yè),本科及以上學(xué)歷,對數(shù)據(jù)結(jié)構(gòu)和算法設(shè)計有較為深刻的理解;
2、精通c/c++或python語言編程,熟悉linu_平臺、shell編程;
3、出色的分析問題,解決問題能力;
4、熟悉搜索相關(guān)領(lǐng)域,有機器學(xué)習(xí)/深度學(xué)習(xí)經(jīng)驗者優(yōu)先。
第14篇 數(shù)據(jù)研發(fā)工程師-新業(yè)務(wù)職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1. 負責(zé)業(yè)務(wù)相關(guān)的數(shù)據(jù)平臺建設(shè);
2. 包括數(shù)據(jù)pipeline建設(shè)、數(shù)據(jù)倉庫建設(shè)、運營系統(tǒng)建設(shè)等;
3. 通過海量數(shù)據(jù),分析用戶行為,進行特征挖掘建設(shè)。
任職要求:
1. 工作經(jīng)驗1-3年,學(xué)歷本科及以上;
2. 有扎實的編程能力,有優(yōu)秀的代碼品位,對解決具有挑戰(zhàn)性問題充滿激情;
3. 編程語言不限,有python經(jīng)驗更佳,熟悉常用算法和數(shù)據(jù)結(jié)構(gòu);
4. 熟悉常用的開源組件:hadoop/hive/kafka/flink/spark等,并了解其特性和使用場景優(yōu)先;
5. 優(yōu)秀的溝通理解能力,能快速理解業(yè)務(wù),用數(shù)據(jù)解讀業(yè)務(wù)。
第15篇 大數(shù)據(jù)研發(fā)總監(jiān)職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1. 負責(zé)整個公司數(shù)據(jù)系統(tǒng)的整體架構(gòu)設(shè)計
2. 負責(zé)數(shù)據(jù)倉庫、大數(shù)據(jù)平臺、報表可視化的搭建及研發(fā);
3. 按時完成各個業(yè)務(wù)和產(chǎn)品部門的數(shù)據(jù)服務(wù)需求,不斷優(yōu)化現(xiàn)有的平臺架構(gòu);
4. 負責(zé)數(shù)據(jù)團隊的職位描述與崗位職責(zé)任職要求、組織架構(gòu)設(shè)計、梯隊培養(yǎng)和日常管理;
5. 帶領(lǐng)團隊設(shè)計、開發(fā)具有創(chuàng)新價值的大數(shù)據(jù)分析平臺;
任職要求:
1. 統(tǒng)招本科以上學(xué)歷,計算機、通信、數(shù)學(xué)相關(guān)專業(yè),具有8年以上研發(fā)工作經(jīng)驗;
2. 有5年以上bi、大數(shù)據(jù)研發(fā)經(jīng)驗,4年以上團隊管理經(jīng)驗,有良好的團隊管理能力;
3. 有較強的溝通和表達的能力,有較強的同理心,能夠合理調(diào)度資源及時滿足和匹配業(yè)務(wù)需求;
4. 精通hadoop、spark、hive、hbase等主流的大數(shù)據(jù)技術(shù);
5. 具有高度責(zé)任心,較強的抗壓能力,意愿強烈;
6. 有較強的數(shù)據(jù)挖掘、機器學(xué)習(xí)經(jīng)驗者優(yōu)先;
7. 有一線互聯(lián)網(wǎng)公司或醫(yī)療行業(yè)經(jīng)驗者優(yōu)先。
第16篇 品牌廣告大數(shù)據(jù)研發(fā)工程師-核心廣告系統(tǒng)職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、負責(zé)品牌廣告業(yè)務(wù)平臺及其相關(guān)系統(tǒng)的研發(fā)
2、負責(zé)現(xiàn)有系統(tǒng)的問題分析和改進,提高系統(tǒng)性能,保證系統(tǒng)穩(wěn)定性
3、持續(xù)改進系統(tǒng)架構(gòu)、核心算法或者核心技術(shù)等,保證系統(tǒng)高性能、高可用性和高可擴展性
4、新技術(shù)預(yù)研,完成項目的選型和設(shè)計,難點公關(guān)
任職要求:
1、本科及以上學(xué)歷,一年以上大數(shù)據(jù)系統(tǒng)開發(fā)經(jīng)驗
2、熟悉python語言, 熟練使用linu_
3、對常用的redis、kafka等工具系統(tǒng)有一定的了解
4、有大數(shù)據(jù)集、分布式計算工具(hadoop,spark,hive,storm, es)等應(yīng)用開發(fā)經(jīng)驗優(yōu)先
5、有良好的團隊合作精神,較強的溝通能力
6、愿意深入了解業(yè)務(wù)知識,并能敏銳的發(fā)現(xiàn)業(yè)務(wù)痛點
7、有品牌廣告系統(tǒng)、dmp、輿情、指數(shù)平臺方向開發(fā)經(jīng)驗者優(yōu)先
第17篇 廣告大數(shù)據(jù)研發(fā)工程師/專家(p6-p8)3職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
社交廣告系統(tǒng)數(shù)據(jù)工程平臺研發(fā),偏重系統(tǒng)架構(gòu)設(shè)計與實現(xiàn),參加以下一到多項工作:
1. 搭建數(shù)據(jù)倉庫,存儲并處理海量的實時、批量數(shù)據(jù),滿足廣告業(yè)務(wù)的定向、分析和模型特征等業(yè)務(wù)需要
2. 建設(shè)數(shù)據(jù)發(fā)布系統(tǒng),將數(shù)據(jù)倉庫的數(shù)據(jù)應(yīng)用到廣告在線業(yè)務(wù)
3. 特征工程工程系統(tǒng)建設(shè),為模型方提供特征數(shù)據(jù)流和特征離線調(diào)研、評估平臺,并保證模型訓(xùn)練和預(yù)測階段的特征線上與線下一致性;
4. 用戶標識映射、畫像數(shù)據(jù)在線服務(wù)的開發(fā)與維護;
5. 廣告后臺海量日志數(shù)據(jù)和廣告主數(shù)據(jù)處理平臺;
6. 報表和廣告策略的統(tǒng)計數(shù)據(jù)生成和存儲;
7. 多維透視業(yè)務(wù)索引和存儲;
任職要求:
重點大學(xué)本科以上學(xué)歷,計算機相關(guān)專業(yè);
具有扎實的數(shù)據(jù)結(jié)構(gòu)和算法功底;
熟練使用 java,scala,c/c++, python;
有海量數(shù)據(jù)處理經(jīng)驗,熟悉 hadoop,spark,hbase,beam等開源框架 ;
有分布式系統(tǒng),tensorflow等機器學(xué)習(xí)系統(tǒng)等經(jīng)驗優(yōu)先 ;
有較強學(xué)習(xí)能力和邏輯思維能力,具備良好的問題分析與解決能力;
善于溝通,工作積極主動,責(zé)任心強,具備良好的團隊協(xié)作能力
第18篇 大數(shù)據(jù)研發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、打造業(yè)界領(lǐng)先的通用數(shù)據(jù)平臺,包括實時數(shù)據(jù)流、數(shù)據(jù)倉庫、調(diào)度系統(tǒng)、查詢引擎,用戶行為分析,abtest 實驗系統(tǒng)等,降低數(shù)據(jù)的使用門檻,實現(xiàn)數(shù)據(jù)的最大價值
2、打造業(yè)界領(lǐng)先的存儲、計算等分布式系統(tǒng),為海量數(shù)據(jù)和大規(guī)模業(yè)務(wù)系統(tǒng)提供可靠的基礎(chǔ)設(shè)施
任職要求:
1、熟悉多項大數(shù)據(jù)領(lǐng)域的開源框架,e.g. hadoop, hive, presto, storm, spark, kafka, hbase, redis, rocksdb, elasticsearch, druid, etc.
2、強悍的編碼和 troubleshooting 能力
3、樂于挑戰(zhàn)沒有明顯答案的問題,對新技術(shù)有強烈的學(xué)習(xí)熱情
第19篇 高級/資深大數(shù)據(jù)研發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、負責(zé)字節(jié)跳動用戶行為的理解和建模,幫助公司各項業(yè)務(wù)滿足用戶需求,提升用戶覆蓋;
2、負責(zé)在數(shù)據(jù)建設(shè)層面,對用戶隱私進行脫敏處理,保證后續(xù)數(shù)據(jù)研發(fā)過程中保護用戶隱私;
3、探索、挖掘公司各項指標、用戶滿意度、用戶增長上的各項規(guī)律,并利用這些規(guī)律幫助產(chǎn)品提升和擴展,增加用戶滿意度,擴展用戶群體。
任職要求:
1、本科及以上學(xué)歷,計算機、統(tǒng)計學(xué)、數(shù)學(xué)等相關(guān)專業(yè);
2、強的編程和數(shù)據(jù)工具運用能力,有hadoop,hive,spark,kafka,elasticsearch或者其他的大數(shù)據(jù)工具的使用經(jīng)驗;
3、對數(shù)據(jù)倉庫、數(shù)據(jù)建模有一定認知;有過數(shù)據(jù)使用相關(guān)經(jīng)驗。
第20篇 數(shù)據(jù)研發(fā)工程師-廣告數(shù)據(jù)平臺職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、廣告各類在線業(yè)務(wù)的離線數(shù)據(jù)加工與在線數(shù)據(jù)服務(wù)開發(fā)與維護
2、數(shù)據(jù)服務(wù)接口及產(chǎn)品需求研發(fā)迭代,代碼review、bug修復(fù)及日常服務(wù)運維
3、針對海量數(shù)據(jù)處理和查詢需求,設(shè)計適應(yīng)業(yè)務(wù)變化的合理的多維數(shù)據(jù)分析系統(tǒng)架構(gòu),滿足多樣性的需求
4、海量日志清洗加工,并抽象出可以多業(yè)務(wù)復(fù)用的數(shù)據(jù)模型
任職要求:
1、計算機相關(guān)專業(yè)本科以上學(xué)歷,熟悉hadoop架構(gòu)和工作原理,精通mapreduce編程;精通hive,有hql優(yōu)化經(jīng)驗
2、熟悉java,python等多種編程技術(shù),編程能力強,有web服務(wù)開發(fā)經(jīng)驗,具備獨立完成模塊開發(fā)能力
3、理解基本的設(shè)計模式,能將業(yè)務(wù)需求快速理解成技術(shù)需求
4、熟練使用mysql,熟練使用elasticsearch、druid者優(yōu)先;熟悉其原理者優(yōu)先
5、善于溝通,工作積極主動,責(zé)任心強,具備良好的團隊協(xié)作能力
6、具備良好的問題分析與解決能力,有較強學(xué)習(xí)能力和邏輯思維能力
額外加分項::
github等開源社區(qū)貢獻者
具備大規(guī)模分布式服務(wù)設(shè)計能力和經(jīng)驗