大數(shù)據(jù)開發(fā)工程師15-30k
發(fā)布人:
高邦獵頭 發(fā)布時間:2021-09-07
公司名稱:某大型研究院
工作地點:北京
崗位職責:
1. 負責大數(shù)據(jù)產(chǎn)品需求分析、開發(fā)和建設
2. 負責提供數(shù)據(jù)分析處理解決方案
3. 參與公司大數(shù)據(jù)平臺的設計和建設
4. 參與數(shù)據(jù)倉庫建設工作,完成數(shù)據(jù)集成、處理。
任職要求:
1. 有3年以上實際工作經(jīng)驗,熟悉整個大數(shù)據(jù)的完整處理流程,包括數(shù)據(jù)的采集、清洗、預處理、存儲、分析挖據(jù)、機器學習和數(shù)據(jù)可視化;
2. 對大數(shù)據(jù)基礎架構(gòu)和平臺有深刻理解,對大數(shù)據(jù)的發(fā)展方向具備前瞻性、對大數(shù)據(jù)生態(tài)體系有深入認識,熟悉Hadoop相關(guān)各種開源項目,掌握Hive、Spark、Streaming、Storm、Kafka等數(shù)據(jù)處理核心組件。
3. 熟悉各種離線采集和實時采集組件的使用和組合搭配方案;
4. 熟悉各種存儲和計算組件的使用和組合搭配方式;
5. 對Linux操作系統(tǒng)熟練掌握,熟悉shell腳本編程;
6. 至少熟練使用Java、Python、C++的一種,能夠完成數(shù)據(jù)預處理等常規(guī)工作.