職位描述
數(shù)據(jù)開發(fā)專家:
1、基于大數(shù)據(jù)技術(shù)體系,負(fù)責(zé)大數(shù)據(jù)基礎(chǔ)架構(gòu)和技術(shù)體系的規(guī)劃建設(shè),包括數(shù)據(jù)采集平臺(tái)、數(shù)據(jù)資產(chǎn)管理與治理平臺(tái)、數(shù)據(jù)質(zhì)量及穩(wěn)定性保障體系、數(shù)據(jù)處理智能化和自動(dòng)化體系的建設(shè);
2、跟蹤和調(diào)研大數(shù)據(jù)處理和分析的新技術(shù),推動(dòng)大數(shù)據(jù)平臺(tái)技術(shù)持續(xù)演進(jìn);
3、構(gòu)建大數(shù)據(jù)質(zhì)量體系,持續(xù)提升數(shù)據(jù)質(zhì)量;
4、促進(jìn)跨業(yè)務(wù)線的數(shù)據(jù)融合,通過(guò)技術(shù)和業(yè)務(wù)場(chǎng)景的緊密結(jié)合,讓數(shù)據(jù)發(fā)揮最大業(yè)務(wù)價(jià)值。
職位描述
1、5年以上大數(shù)據(jù)處理研發(fā)經(jīng)驗(yàn);
2、扎實(shí)的JAVA開發(fā)能力,熟悉shell、python或其他腳本語(yǔ)言中的任意一門;
3、熟練使用數(shù)據(jù)庫(kù)同步、日志采集工具;
4、精通hadoop、HDFS、Hbase、Hive等技術(shù);
5、精通flink、storm或spark streaming等流式或流批一體處理框架中的一種或多種;
6、熟練掌握數(shù)據(jù)倉(cāng)庫(kù)建模和ETL設(shè)計(jì)方法論;
7、有基于數(shù)據(jù)分析推動(dòng)業(yè)務(wù)提升或優(yōu)化的實(shí)際案例;
8、有數(shù)據(jù)挖掘、機(jī)器學(xué)習(xí)經(jīng)驗(yàn)者優(yōu)先考慮;
9、有大型電商系統(tǒng)大數(shù)據(jù)分析經(jīng)驗(yàn)者優(yōu)先考慮。