工作職責(zé):
參與大數(shù)據(jù)平臺(tái)/倉(cāng)庫(kù)項(xiàng)目實(shí)施與開(kāi)發(fā)
1?數(shù)據(jù)接入:各類數(shù)據(jù)庫(kù)(達(dá)夢(mèng),mysql等)、API接口(python/json/repuest)、手工數(shù)據(jù)(excel)歸集到大數(shù)據(jù)平臺(tái)(離線、實(shí)時(shí));平臺(tái)內(nèi)數(shù)據(jù)開(kāi)發(fā)(ods/dwd/dws等,新建集市,指標(biāo)口徑梳理與開(kāi)發(fā),問(wèn)題排查,手工指標(biāo)更新)
2?數(shù)據(jù)梳理:梳理各主題庫(kù)內(nèi)表情況(表字段清單,碼值,表間關(guān)系,數(shù)據(jù)來(lái)源,血緣分析,數(shù)據(jù)更新情況,常用統(tǒng)計(jì)口徑等)
3?數(shù)據(jù)服務(wù):與各下游(各單位)溝通,接收需求,確認(rèn)口徑,整理數(shù)據(jù)映射關(guān)系,數(shù)據(jù)加工
任職/崗位要求:
1?【必備】計(jì)算機(jī)、統(tǒng)計(jì)學(xué)、數(shù)學(xué)等相關(guān)專業(yè)碩士
2?【必備】24屆及以后,每周5天,實(shí)習(xí)6個(gè)月以上,盡量穩(wěn)定
3?【必備】有2個(gè)月以上數(shù)據(jù)開(kāi)發(fā)或分析實(shí)習(xí)經(jīng)驗(yàn)
4?【必備】熟練操作SQL語(yǔ)言(增刪改查,聚合,窗口,正則,開(kāi)發(fā)規(guī)范),有MySQL/Oracle等庫(kù)使用經(jīng)驗(yàn)
5?【必備】熟練Python基本操作(讀寫庫(kù),API訪問(wèn),Excel操作),了解Linux基本操作(目錄操作,文件操作,系統(tǒng)資源管理,進(jìn)程管理,端口管理)
6?【必備】了解數(shù)倉(cāng)基本概念
7?【必備】接受適當(dāng)加班;有耐心處理數(shù)據(jù);工作認(rèn)真負(fù)責(zé)
8?【加分】有大數(shù)據(jù)平臺(tái)動(dòng)手經(jīng)驗(yàn);了解容器化相關(guān)知識(shí)和操作;熟練操作Excel(常用函數(shù),數(shù)據(jù)入庫(kù))PPT等;有ETL工作經(jīng)驗(yàn):數(shù)據(jù)抽取,清洗,合計(jì),導(dǎo)出,工作流調(diào)度及相關(guān)工作:kettle,?datax,?datastage,airflow等;對(duì)數(shù)據(jù)有一定敏感性,通過(guò)數(shù)據(jù)推演業(yè)務(wù)