大數(shù)據(jù)工程師一直是互聯(lián)網(wǎng)行業(yè)委托獵頭招聘比較熱門的崗位,這個崗位人才非常多,但客戶個性化的要求,絕大多數(shù)人才又不太滿足,所以需要獵頭針對性去獵聘或從競爭對手那里尋找。大數(shù)據(jù)工程師是干嘛的?高邦互聯(lián)網(wǎng)獵頭和大家分享一下。
崗位職責:
1.負責爬蟲架構設計和研發(fā);
2.負責爬蟲核心搜索策略、算法、數(shù)據(jù)聚類、重組的設計與開發(fā);
3.負責網(wǎng)絡爬蟲或數(shù)據(jù)采集軟件的優(yōu)化改進以及采集規(guī)則編寫;
4.解決封賬號、封IP等采集難點攻克;
5.確保所負責的站點按周期采集及時,全面。