技能要求:
1、熟悉Hadoop、HBase等分布式計(jì)算平臺(tái)開發(fā),3年以上hadoop使用經(jīng)驗(yàn),有大數(shù)據(jù)應(yīng)用系統(tǒng)開發(fā)經(jīng)驗(yàn)
2、熟悉Kettle 等ETL 工具的使用和開發(fā);具有一定數(shù)據(jù)模型和數(shù)據(jù)架構(gòu)基礎(chǔ),熟悉hadoop\hive和常用數(shù)據(jù)庫
3、熟悉SQL/HQL,有較好的SQL性能調(diào)優(yōu)經(jīng)驗(yàn);熟悉hive sql的開發(fā)
4、熟悉ETL設(shè)計(jì)、調(diào)度、監(jiān)控、算法等,能夠熟練的進(jìn)行事實(shí)表、維度表的開發(fā)
5、有一定的分布式開發(fā)經(jīng)驗(yàn),使用HBase進(jìn)行過2項(xiàng)目開發(fā)、或支撐過HBase高并發(fā)項(xiàng)目的系統(tǒng)工程師優(yōu)先 簡(jiǎn)歷搜索關(guān)鍵詞:Hadoop spark hive starrock qbi 特征工程