大數(shù)據(jù)工程師一直是互聯(lián)網(wǎng)行業(yè)委托獵頭招聘比較熱門的崗位,這個(gè)崗位人才非常多,但客戶個(gè)性化的要求,絕大多數(shù)人才又不太滿足,所以需要獵頭針對性去獵聘或從競爭對手那里尋找。大數(shù)據(jù)工程師是干嘛的?高邦互聯(lián)網(wǎng)獵頭和大家分享一下。
崗位職責(zé):
1.負(fù)責(zé)爬蟲架構(gòu)設(shè)計(jì)和研發(fā);
2.負(fù)責(zé)爬蟲核心搜索策略、算法、數(shù)據(jù)聚類、重組的設(shè)計(jì)與開發(fā);
3.負(fù)責(zé)網(wǎng)絡(luò)爬蟲或數(shù)據(jù)采集軟件的優(yōu)化改進(jìn)以及采集規(guī)則編寫;
4.解決封賬號、封IP等采集難點(diǎn)攻克;
5.確保所負(fù)責(zé)的站點(diǎn)按周期采集及時(shí),全面。