大數(shù)據(jù)開發(fā)工程師15-30k
發(fā)布人：
高邦獵頭 發(fā)布時(shí)間:2021-09-07
公司名稱：某大型研究院
工作地點(diǎn)：北京
崗位職責(zé)：
1. 負(fù)責(zé)大數(shù)據(jù)產(chǎn)品需求分析、開發(fā)和建設(shè)
2. 負(fù)責(zé)提供數(shù)據(jù)分析處理解決方案
3. 參與公司大數(shù)據(jù)平臺(tái)的設(shè)計(jì)和建設(shè)
4. 參與數(shù)據(jù)倉(cāng)庫(kù)建設(shè)工作，完成數(shù)據(jù)集成、處理。
任職要求：
1. 有3年以上實(shí)際工作經(jīng)驗(yàn)，熟悉整個(gè)大數(shù)據(jù)的完整處理流程，包括數(shù)據(jù)的采集、清洗、預(yù)處理、存儲(chǔ)、分析挖據(jù)、機(jī)器學(xué)習(xí)和數(shù)據(jù)可視化;
2. 對(duì)大數(shù)據(jù)基礎(chǔ)架構(gòu)和平臺(tái)有深刻理解，對(duì)大數(shù)據(jù)的發(fā)展方向具備前瞻性、對(duì)大數(shù)據(jù)生態(tài)體系有深入認(rèn)識(shí)，熟悉Hadoop相關(guān)各種開源項(xiàng)目，掌握Hive、Spark、Streaming、Storm、Kafka等數(shù)據(jù)處理核心組件。
3. 熟悉各種離線采集和實(shí)時(shí)采集組件的使用和組合搭配方案;
4. 熟悉各種存儲(chǔ)和計(jì)算組件的使用和組合搭配方式;
5. 對(duì)Linux操作系統(tǒng)熟練掌握，熟悉shell腳本編程;
6. 至少熟練使用Java、Python、C++的一種，能夠完成數(shù)據(jù)預(yù)處理等常規(guī)工作.
