- etl崗位職責(zé) 推薦度:
- etl工程師崗位職責(zé) 推薦度:
- 相關(guān)推薦
etl崗位職責(zé)15篇
在我們平凡的日常里,需要使用崗位職責(zé)的場合越來越多,崗位職責(zé)是指工作者具體工作的內(nèi)容、所負(fù)的責(zé)任,及達(dá)到上級要求的標(biāo)準(zhǔn),完成上級交付的任務(wù)。那么相關(guān)的崗位職責(zé)到底是怎么制定的呢?下面是小編幫大家整理的etl崗位職責(zé),歡迎大家分享。
etl崗位職責(zé)1
職責(zé)描述:
1、負(fù)責(zé)數(shù)據(jù)分析、加工、清理、處理程序的開發(fā)
2、負(fù)責(zé)數(shù)據(jù)相關(guān)平臺的'搭建、開發(fā)、維護(hù)、優(yōu)化
3、分布式平臺應(yīng)用開發(fā)(hadoop/spark/hive/hbase)
4、開發(fā)數(shù)據(jù)統(tǒng)計系統(tǒng),各類統(tǒng)計程序報表。
任職要求:
1、2年以上java或python開發(fā)工作經(jīng)驗,java基礎(chǔ)扎實;
2、熟悉常見在線與離線大數(shù)據(jù)系統(tǒng), 如hive, hbase, es, kafka等的工作原理與開發(fā)調(diào)優(yōu); 具有mapreduce開發(fā)經(jīng)驗,有實際大數(shù)據(jù)項目經(jīng)驗;
3、熟練掌握oracle、mysql等主流數(shù)據(jù)庫上的開發(fā);
4、具有良好的溝通能力、組織能力及團(tuán)隊協(xié)作精神,有較強的分析和解決問題的能力.
etl崗位職責(zé)2
職位描述:
1.基于公司數(shù)據(jù)建設(shè)需要,完成數(shù)據(jù)平臺構(gòu)建、數(shù)據(jù)內(nèi)容開發(fā)等工作。包括:數(shù)據(jù)平臺基礎(chǔ)設(shè)施建設(shè)、數(shù)據(jù)采集、etl、數(shù)倉及數(shù)據(jù)集市、數(shù)據(jù)應(yīng)用產(chǎn)品等開發(fā)工作;
2.充分理解需求文檔,基于此進(jìn)行自測,交付高質(zhì)量的開發(fā)代碼和數(shù)據(jù)內(nèi)容;
3.工作中對數(shù)據(jù)平臺基礎(chǔ)設(shè)施、數(shù)據(jù)內(nèi)容建設(shè)等工作主動深度思考,提升效能并積極建言、促進(jìn)組織和系統(tǒng)發(fā)展;
4.團(tuán)隊日常管理,及其他根據(jù)部門需要安排事宜。
崗位要求:
1.信息技術(shù)類、數(shù)學(xué)、統(tǒng)計學(xué)、計量經(jīng)濟學(xué)類專業(yè),本科,工作年限5年以上;
2.熟悉數(shù)據(jù)倉庫模型設(shè)計和精通etl開發(fā)經(jīng)驗,掌握3nf,kimball的維度建模設(shè)計方法,具備海量數(shù)據(jù)加工處理(etl)相關(guān)經(jīng)驗;
3.掌握至少一種數(shù)據(jù)庫開發(fā)技術(shù):oracle、teradata、db2、mysql等,精通并靈活運用sql實現(xiàn)海量數(shù)據(jù)etl加工處理;
4.熟悉linux系統(tǒng)常規(guī)shell處理命令,靈活運用shell做的'文本處理和系統(tǒng)操作;
5.有從事分布式數(shù)據(jù)存儲與計算平臺應(yīng)用開發(fā)經(jīng)驗;
6.熟練掌握一門或多門編程語言,并有大型項目建設(shè)經(jīng)驗者優(yōu)先,重點考察python、perl、java;
7.熟悉數(shù)據(jù)倉庫領(lǐng)域知識和技能者優(yōu)先,包括但不局限于:數(shù)據(jù)開發(fā)測試工具與方法、數(shù)據(jù)質(zhì)量等;
8.良好的語言溝通與表達(dá)能力和自我驅(qū)動動力。
注:此崗位需在杭州一個月
etl崗位職責(zé)3
崗位職責(zé):
1、負(fù)責(zé)大數(shù)據(jù)、bi系統(tǒng)相關(guān)模塊的實施,項目管理工作,包括但不限于需求管理、項目規(guī)劃、過程實施、上線驗收、交付運營等;
2、依據(jù)業(yè)務(wù)場景、分析需求提供技術(shù)、業(yè)務(wù)解決方案并加以實現(xiàn);
3、與技術(shù)部門對接,解決數(shù)據(jù)建模、報表和報告在系統(tǒng)開發(fā)遇到的.問題;
4、協(xié)助項目經(jīng)理進(jìn)行項目交付或協(xié)助商務(wù)開展售前支持或poc工作。
任職資格:
1、本科及以上學(xué)歷,計算機、統(tǒng)計學(xué)、應(yīng)用數(shù)學(xué)等相關(guān)專業(yè);
2、熟悉hadoop平臺,2年以上hive、sqoop開發(fā)經(jīng)驗;
3、了解bi系統(tǒng),有數(shù)據(jù)管理經(jīng)驗,有維度建模相關(guān)經(jīng)驗;
4、3年以上相關(guān)工作經(jīng)驗,有銀行或金融數(shù)據(jù)分析經(jīng)驗者優(yōu)先;
5、熟悉db2、oracle等數(shù)據(jù)庫及sql數(shù)據(jù)查詢,熟悉hadoop者優(yōu)先;
6、熟悉linux開發(fā)環(huán)境和shell腳本;
7、具備銀行項目設(shè)計、開發(fā)、優(yōu)化等經(jīng)驗者加分;
8、優(yōu)秀的業(yè)務(wù)理解能力、邏輯性和溝通能力,能跨部門合作溝通。
etl數(shù)據(jù)開發(fā)工程師
崗位職責(zé):
1、負(fù)責(zé)大數(shù)據(jù)、bi系統(tǒng)相關(guān)模塊的實施,項目管理工作,包括但不限于需求管理、項目規(guī)劃、過程實施、上線驗收、交付運營等;
2、依據(jù)業(yè)務(wù)場景、分析需求提供技術(shù)、業(yè)務(wù)解決方案并加以實現(xiàn);
3、與技術(shù)部門對接,解決數(shù)據(jù)建模、報表和報告在系統(tǒng)開發(fā)遇到的問題;
4、協(xié)助項目經(jīng)理進(jìn)行項目交付或協(xié)助商務(wù)開展售前支持或poc工作。
任職資格:
1、本科及以上學(xué)歷,計算機、統(tǒng)計學(xué)、應(yīng)用數(shù)學(xué)等相關(guān)專業(yè);
2、熟悉hadoop平臺,2年以上hive、sqoop開發(fā)經(jīng)驗;
3、了解bi系統(tǒng),有數(shù)據(jù)管理經(jīng)驗,有維度建模相關(guān)經(jīng)驗;
4、3年以上相關(guān)工作經(jīng)驗,有銀行或金融數(shù)據(jù)分析經(jīng)驗者優(yōu)先;
5、熟悉db2、oracle等數(shù)據(jù)庫及sql數(shù)據(jù)查詢,熟悉hadoop者優(yōu)先;
6、熟悉linux開發(fā)環(huán)境和shell腳本;
7、具備銀行項目設(shè)計、開發(fā)、優(yōu)化等經(jīng)驗者加分;
8、優(yōu)秀的業(yè)務(wù)理解能力、邏輯性和溝通能力,能跨部門合作溝通。
etl崗位職責(zé)4
職位描述:
職責(zé):
1.按業(yè)務(wù)分析需求進(jìn)行建模;
2.進(jìn)行數(shù)據(jù)倉庫需求分析、方案設(shè)計、etl裝載過程設(shè)計;
3.從業(yè)務(wù)數(shù)據(jù)庫到數(shù)據(jù)倉庫的etl開發(fā);
4.結(jié)合業(yè)務(wù)流程和需求進(jìn)行數(shù)據(jù)分析;
任職資格:
1.本科以上學(xué)歷,計算機等信息技術(shù)相關(guān)專業(yè);
2.有互聯(lián)網(wǎng)金融相關(guān)工作經(jīng)驗,了解相關(guān)數(shù)據(jù)流和業(yè)務(wù)背景優(yōu)先;
3.兩年及以上數(shù)據(jù)倉庫相關(guān)工作經(jīng)驗,對數(shù)據(jù)倉庫系統(tǒng)架構(gòu)具有良好的認(rèn)識,熟悉數(shù)據(jù)倉庫相關(guān)技術(shù),如etl、報表開發(fā),具備數(shù)據(jù)分析技術(shù)并具有相關(guān)項目經(jīng)驗;
4.具有hive、spark、mysql、oracle等至少一種大型數(shù)據(jù)庫的'應(yīng)用開發(fā)經(jīng)驗,熟悉數(shù)據(jù)標(biāo)準(zhǔn)管理、元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理;
5.具備python統(tǒng)計和數(shù)據(jù)挖掘相關(guān)基本開發(fā)能力;
6.溝通能力好,善于規(guī)劃和總結(jié),注重團(tuán)隊合作及知識共享,能承擔(dān)一定的工作壓力;
etl崗位職責(zé)5
職責(zé)描述:
1、負(fù)責(zé)數(shù)據(jù)倉庫建模,業(yè)務(wù)數(shù)據(jù)集市建設(shè)開發(fā)
2、負(fù)責(zé)數(shù)據(jù)倉庫etl流程的優(yōu)化及解決etl相關(guān)技術(shù)問題、etl流程監(jiān)控,保障數(shù)據(jù)平臺架構(gòu)穩(wěn)定性
3、建立數(shù)據(jù)分析指標(biāo)體系,不斷完善指標(biāo)體系和分析模型;
4、通過專項分析,輸出專項分析報告
5、負(fù)責(zé)數(shù)據(jù)分析相關(guān)需求和數(shù)據(jù)測試的'工作
任職要求:
學(xué)歷要求:
全日制統(tǒng)考類本科及以上學(xué)歷,計算機、通信、電子、軟件工程、統(tǒng)計學(xué)、應(yīng)用數(shù)學(xué)、數(shù)據(jù)分析等相關(guān)專業(yè)
專業(yè)技能:
1、熟悉數(shù)據(jù)倉庫各類模型建模理論,熟悉數(shù)據(jù)倉庫數(shù)據(jù)分層架構(gòu)和多維數(shù)據(jù)模型設(shè)計;
2、豐富的數(shù)據(jù)分析經(jīng)驗,熟練掌握sql、hql、sparksql,擅長運用其分析并完成復(fù)雜業(yè)務(wù)數(shù)據(jù)查詢
3、掌握至少一種數(shù)據(jù)庫開發(fā)技術(shù):mysql/oracle/db2等,靈活運用sql實現(xiàn)海量數(shù)據(jù)etl加工處理;
4、熟悉hadoop生態(tài)(如:hdfs/mapreduce/hive/hbase等),并有相關(guān)實踐經(jīng)驗;
5、熟練掌握一門或多門編程語言(如:python/shell/java/c++等),并有大型項目建設(shè)經(jīng)驗者優(yōu)先;
素質(zhì):
1、敏銳的數(shù)據(jù)觀察和分析能力,及時發(fā)現(xiàn)和分析其中隱含的變化和問題并給出建議;
2、良好的溝通能力和團(tuán)隊精神,較強的學(xué)習(xí)能力,能承擔(dān)一定的工作壓力。
經(jīng)驗:
至少2年以上數(shù)據(jù)倉庫(離線&實時)模型設(shè)計開發(fā)、etl設(shè)計開發(fā)的相關(guān)經(jīng)驗,有通信運營商o域/b域大數(shù)據(jù)、智慧城市大數(shù)據(jù)的數(shù)據(jù)倉庫、etl設(shè)計研發(fā)經(jīng)驗者優(yōu)先'
etl崗位職責(zé)6
職位描述:
崗位職責(zé):
1、負(fù)責(zé)項目實施過程中所對接的第三方系統(tǒng)的數(shù)據(jù)處理及質(zhì)量分析,并完成項目實施過程中的etl工作;
2、熟練掌握etl設(shè)計過程,參與大數(shù)據(jù)平臺架構(gòu)的設(shè)計、開發(fā)、流程優(yōu)化及解決etl相關(guān)技術(shù)問題;
3、與用戶和項目組進(jìn)行有效溝通,采集項目需求,并提出相應(yīng)的.解決方案;
4、負(fù)責(zé)監(jiān)控etl并解決出現(xiàn)的問題及性能調(diào)優(yōu),協(xié)助完成bi數(shù)據(jù)建模;
5、根據(jù)規(guī)范,完成項目相關(guān)設(shè)計開發(fā)文檔的整理與編寫;
任職要求:
1、統(tǒng)招全日制本科及以上學(xué)歷,具備大數(shù)據(jù)處理經(jīng)驗尤佳;
2、熟悉etl工具,具有一定項目經(jīng)驗,負(fù)責(zé)監(jiān)控etl并解決出現(xiàn)的問題及性能調(diào)優(yōu);
3、熟悉hive和hadoop;
4、具備一定的編程能力,熟悉至少一種常用編程語言,java尤佳;
5、掌握關(guān)系數(shù)據(jù)庫常見用法,熟悉常見軟件的安裝,參與過項目的etl工具開發(fā)項目的完整分析、設(shè)計、開發(fā)流程者優(yōu)先;
6、具備較強的自我學(xué)習(xí)能力、有較強分析問題的能力、人際溝通能力、團(tuán)隊協(xié)作能力和工作責(zé)任感;
etl崗位職責(zé)7
職責(zé)描述:
1、 負(fù)責(zé)數(shù)據(jù)倉庫建模和etl技術(shù)工作,參與數(shù)據(jù)項目各類數(shù)據(jù)源etl的接口設(shè)計和文檔、流程規(guī)范;
2、負(fù)責(zé)項目中數(shù)據(jù)清洗、數(shù)據(jù)處理、數(shù)據(jù)校驗相關(guān)開發(fā)工作;
3. 配合使用主流數(shù)據(jù)挖掘工具、etl工具、bi展現(xiàn)的'設(shè)計和開發(fā);
4、 能夠按照公司全面質(zhì)量管理的要求,高質(zhì)量地完成各類技術(shù)支持工作。
任職要求:
1.計算機相關(guān)專業(yè)本科以上學(xué)歷,3年以上工作經(jīng)驗;
2.熟悉etl開發(fā)、數(shù)據(jù)倉庫設(shè)計流程,熟悉mysql、oracle, ms sql server等主流數(shù)據(jù)庫,表結(jié)構(gòu)設(shè)計,存儲過程編寫;
3.有一定的sql調(diào)優(yōu)知識和經(jīng)驗,具有bi相關(guān)知識;
4.有hana、hive經(jīng)驗優(yōu)先;
5.具備財務(wù)基礎(chǔ)知識或者erp基礎(chǔ)知識者優(yōu)先;
etl崗位職責(zé)8
職位描述:
工作職責(zé):
1、根據(jù)公司數(shù)據(jù)分析需求進(jìn)行基于hadoop平臺的項目開發(fā);
2、根據(jù)需求進(jìn)行數(shù)據(jù)倉庫模型設(shè)計,熟練使用kettle工具進(jìn)行etl程序的開發(fā);包括實時數(shù)據(jù)加工,計算,etl,管理,監(jiān)控等;
3、負(fù)責(zé)針對源系統(tǒng)進(jìn)行數(shù)據(jù)抽取、處理、分析等相關(guān)工作,及項目中涉及到的數(shù)據(jù)庫創(chuàng)建、維護(hù)及提供數(shù)據(jù)接口工作;
4、負(fù)責(zé)設(shè)計并優(yōu)化基于hive的'數(shù)據(jù)倉庫的建設(shè);
5、制定數(shù)據(jù)庫備份和恢復(fù)策略及工作流程與規(guī)范。
6、能出具消費品品牌制造行業(yè)應(yīng)用的數(shù)據(jù)分析技術(shù)解決方案,并落地。
任職資格:
1.從事數(shù)據(jù)倉庫領(lǐng)域至少2年以上,熟悉數(shù)據(jù)倉庫模型設(shè)計與etl開發(fā)經(jīng)驗,具備海量數(shù)據(jù)加工處理相關(guān)經(jīng)驗;
2.熟悉數(shù)據(jù)倉庫領(lǐng)域知識和技能者優(yōu)先,包括但不局限于:元數(shù)據(jù)管理、數(shù)據(jù)開發(fā)測試工具與方法、數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理;
3.有從事分布式數(shù)據(jù)存儲與計算平臺應(yīng)用開發(fā)經(jīng)驗,熟悉hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實踐經(jīng)驗著優(yōu)先,重點考察hive、hdfs、hbase;
4.熟練掌握kettlesqoop、datax、airflow等;
5.有消費品品牌制造、零售行業(yè)經(jīng)驗,尤其快消品行業(yè)和財務(wù)領(lǐng)域數(shù)據(jù)項目經(jīng)驗者優(yōu)先;
6.熟悉分布式計算presto/imapa優(yōu)先;
7.有實時計算方面的經(jīng)驗的優(yōu)先。
etl崗位職責(zé)9
職位描述:
崗位職能:
1.基于公司數(shù)據(jù)建設(shè)需要,完成數(shù)據(jù)平臺構(gòu)建、數(shù)據(jù)內(nèi)容開發(fā)等工作。包括:數(shù)據(jù)平臺基礎(chǔ)設(shè)施建設(shè)、數(shù)據(jù)采集、etl、數(shù)倉及數(shù)據(jù)集市、數(shù)據(jù)應(yīng)用產(chǎn)品等開發(fā)工作;
2.充分理解需求文檔,基于此進(jìn)行自測,交付高質(zhì)量的開發(fā)代碼和數(shù)據(jù)內(nèi)容;
3.工作中對數(shù)據(jù)平臺基礎(chǔ)設(shè)施、數(shù)據(jù)內(nèi)容建設(shè)等工作主動深度思考,提升效能并積極建言、促進(jìn)組織和系統(tǒng)發(fā)展;
4.其他根據(jù)部門需要安排事宜;
崗位要求:
1.信息技術(shù)類、數(shù)學(xué)、統(tǒng)計學(xué)、計量經(jīng)濟學(xué)類專業(yè),研究生及以上學(xué)歷。優(yōu)秀候選人學(xué)歷可以放寬至本科,工作年限5年以上;
2.熟悉數(shù)據(jù)倉庫模型設(shè)計和精通etl開發(fā)經(jīng)驗,掌握3nf,kimball的維度建模設(shè)計方法,具備海量數(shù)據(jù)加工處理(etl)相關(guān)經(jīng)驗;
3.掌握至少一種數(shù)據(jù)庫開發(fā)技術(shù):oracle、teradata、db2、mysql等,精通并靈活運用sql實現(xiàn)海量數(shù)據(jù)etl加工處理;
4.熟悉linux系統(tǒng)常規(guī)shell處理命令,靈活運用shell做的文本處理和系統(tǒng)操作;
5.有從事分布式數(shù)據(jù)存儲與計算平臺應(yīng)用開發(fā)經(jīng)驗,熟悉hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實踐經(jīng)驗著優(yōu)先,重點考察hdfs、hive(hql)、hbase;
6.熟練掌握一門或多門編程語言,并有大型項目建設(shè)經(jīng)驗者優(yōu)先,重點考察python、perl、java;
7.熟悉數(shù)據(jù)倉庫領(lǐng)域知識和技能者優(yōu)先,包括但不局限于:數(shù)據(jù)開發(fā)測試工具與方法、數(shù)據(jù)質(zhì)量等;
8.良好的`語言溝通與表達(dá)能力和自我驅(qū)動動力。
etl崗位職責(zé)10
etl高級工程師職位要求
1、計算機、數(shù)學(xué)或統(tǒng)計等專業(yè),本科以上學(xué)歷;
2、精通sql語言;熟悉數(shù)據(jù)倉庫設(shè)計、建模;
3、精通python,能夠編寫腳本處理、分析數(shù)據(jù);
4、熟悉批量離線式分布式并行計算技術(shù)(如hadoop、mapreduce、hive、spark等)
5、熟悉sqlserver、mysql數(shù)據(jù)庫;了解redis等非關(guān)系型數(shù)據(jù)庫;
6、熟悉至少一種常用etl工具(如kettle、ssis、gobblin);了解常用報表工具(如reporting services以及各類開源報表);
7、了解常用數(shù)據(jù)挖掘方法(回歸、決策樹、聚類等)。
etl高級工程師崗位職責(zé)
1、負(fù)責(zé)國際網(wǎng)站后臺數(shù)據(jù)倉庫搭建、維護(hù);
2、運用各類大數(shù)據(jù)工具設(shè)計etl流程,消費生產(chǎn)環(huán)境埋點、日志等數(shù)據(jù);
3、日常數(shù)據(jù)監(jiān)控以及數(shù)據(jù)預(yù)警,異常數(shù)據(jù)解讀挖掘,并與業(yè)務(wù)同事溝通解決方案;
4、分析用戶的特征和行為數(shù)據(jù),挖掘不同類型用戶的'行為特性,為實際的業(yè)務(wù)運營提供數(shù)據(jù)支持;
5、從數(shù)據(jù)分析結(jié)果中尋找insight和商業(yè)價值,并以簡明扼要的形式傳導(dǎo)到其他部分,指導(dǎo)實際的業(yè)務(wù)運營;
6、處理國際網(wǎng)站的臨時數(shù)據(jù)需求,并對于常用重要需求轉(zhuǎn)化成數(shù)據(jù)產(chǎn)品。
etl崗位職責(zé)11
bi數(shù)據(jù)分析-數(shù)據(jù)開發(fā)(etl工程師)阿里健康阿里健康科技(中國)有限公司,阿里健康,阿里健康科技(北京)有限公司,阿里數(shù)據(jù)開發(fā)
1、構(gòu)建全面的、準(zhǔn)確的、能反映服務(wù)業(yè)務(wù)線特征的整體指標(biāo)體系,并基于業(yè)務(wù)監(jiān)控指標(biāo)體系,及時發(fā)現(xiàn)與定位業(yè)務(wù)問題;
2、根據(jù)日常業(yè)務(wù)及產(chǎn)品團(tuán)隊的需求,提供業(yè)務(wù)監(jiān)控,業(yè)務(wù)評估的各項數(shù)據(jù)指標(biāo);
3、根據(jù)業(yè)務(wù)發(fā)展情況,從數(shù)據(jù)中發(fā)現(xiàn)業(yè)務(wù)及產(chǎn)品的問題點及機會點,給業(yè)務(wù)及產(chǎn)品提供相應(yīng)的方向;
4、沉淀分析思路與框架,提煉數(shù)據(jù)產(chǎn)品需求,與相關(guān)團(tuán)隊(如技術(shù)開發(fā)團(tuán)隊)協(xié)作并推動數(shù)據(jù)產(chǎn)品的落地;
5、與業(yè)務(wù)協(xié)作(行業(yè)團(tuán)隊)組織數(shù)據(jù)的理念、技能、工具的`培訓(xùn)。
崗位描述:
1.負(fù)責(zé)各條業(yè)務(wù)線數(shù)據(jù)倉庫搭建,場景梳理,數(shù)據(jù)維護(hù);
2.負(fù)責(zé)公司內(nèi)部跨部門項目數(shù)據(jù)場景梳理,資源調(diào)配工作;
3.負(fù)責(zé)從已有的數(shù)據(jù)中挖掘?qū)I(yè)務(wù)目標(biāo)起到推動作用的分析結(jié)論。
崗位要求:
1、統(tǒng)計、數(shù)學(xué)、信息技術(shù)、生物統(tǒng)計本科以上學(xué)歷,有電商bi工作經(jīng)驗優(yōu)先;
2、良好的數(shù)據(jù)敏感度,能從海量數(shù)據(jù)提煉核心結(jié)果,有數(shù)據(jù)分析、挖掘、清洗和建模的經(jīng)驗;
3、有從事分布式數(shù)據(jù)存儲與計算平臺應(yīng)用開發(fā)經(jīng)驗,熟悉hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)開發(fā)經(jīng)驗,熟練運用sql,能高效的與數(shù)據(jù)技術(shù)團(tuán)隊進(jìn)行溝通者尤佳;
4、較為豐富的數(shù)據(jù)倉庫及數(shù)據(jù)平臺的架構(gòu)經(jīng)驗,精通數(shù)據(jù)倉庫建模及etl設(shè)計開發(fā)。
etl崗位職責(zé)12
職責(zé)描述:
崗位職責(zé):
1、根據(jù)概要設(shè)計,進(jìn)行詳細(xì)設(shè)計的.文檔編寫;
2、負(fù)責(zé)etl過程的設(shè)計/開發(fā)實施、單元測試;
3、負(fù)責(zé)項目中etl相關(guān)需求調(diào)研、源數(shù)據(jù)調(diào)研、整體設(shè)計;
4、負(fù)責(zé)項目中環(huán)境安裝及配置。
5、維護(hù)和升級現(xiàn)有etl任務(wù)和存儲過程,快速定位并修復(fù)現(xiàn)有系統(tǒng)缺陷
職位要求:
1、大專及以上學(xué)歷,計算機相關(guān)專業(yè),3年以上etl工作經(jīng)驗。
2、熟悉etl開發(fā)流程,有hadoop和etl工作經(jīng)驗;有從傳統(tǒng)數(shù)據(jù)庫抽取數(shù)據(jù)到hive數(shù)據(jù)倉庫經(jīng)驗,了解sqoop應(yīng)用原理者優(yōu)先。
3、熟悉主流數(shù)據(jù)庫sql server、oracle、db2、mysql等;熟悉開源的etl工具。
4、有海量數(shù)據(jù)處理工作經(jīng)驗,數(shù)據(jù)分析和挖掘經(jīng)驗者優(yōu)先;
5、做過數(shù)據(jù)倉庫、ods項目,對數(shù)據(jù)治理、數(shù)據(jù)標(biāo)準(zhǔn)及元數(shù)據(jù)有很好理念及實施經(jīng)驗的優(yōu)先;
6、熟練使用腳本語言:如perl、python、shell等任意一種以上;
7、熟悉linux系統(tǒng)指令和性能優(yōu)化;
8、善于學(xué)習(xí)新技術(shù),對新技術(shù)有較強的接受能力;工作認(rèn)真細(xì)致,愿意于人交流溝通。
9、有大型數(shù)據(jù)倉庫系統(tǒng)研發(fā)、設(shè)計經(jīng)驗者優(yōu)先;
10、熟悉java語言或hadoop技術(shù)者優(yōu)先;
崗位要求:
學(xué)歷要求:大專
語言要求:不限
年齡要求:不限
工作年限:3-4年經(jīng)驗
etl崗位職責(zé)13
職位描述:
崗位職責(zé):
1、數(shù)倉開發(fā)、etl開發(fā);
2、銀行業(yè)數(shù)據(jù)模型的設(shè)計輔助、mapping和落地等;
3、shell腳本開發(fā)維護(hù);
4、銀行業(yè)務(wù)系統(tǒng)的'數(shù)據(jù)調(diào)研和分析;
任職要求:
1、本科及以上學(xué)歷,計算機或相關(guān)專業(yè);
2、2年以上oracle、db2等數(shù)據(jù)庫開發(fā)經(jīng)驗,熟悉數(shù)據(jù)庫體系結(jié)構(gòu);
3、精通pl/sql編程,精通存儲過程開發(fā);
4、熟悉linux操作系統(tǒng);
5、熟悉etl調(diào)度工具和前端工具;
6、軟件基礎(chǔ)理論知識扎實,具備良好的數(shù)據(jù)結(jié)構(gòu)、算法功底,有一定獨立分析、技術(shù)研究能力;
7、良好的溝通能力、團(tuán)隊合作精神、樂于;
8、具備較強的自學(xué)能力,有一點抗壓能力,能夠接受出差性質(zhì)的工作。
如有以下技術(shù)背景優(yōu)先考慮:
1、有銀行業(yè)系統(tǒng)開發(fā)經(jīng)驗;
2、參與過數(shù)倉項目開發(fā)、實施;
3、有數(shù)據(jù)治理項目經(jīng)驗的。
etl崗位職責(zé)14
職位描述:
工作職責(zé):
1、負(fù)責(zé)數(shù)據(jù)平臺的'etl設(shè)計開發(fā)、工作流調(diào)度設(shè)計、存儲過程開發(fā)、自定義函數(shù)開發(fā)。
2、負(fù)責(zé)各業(yè)務(wù)系統(tǒng)數(shù)據(jù)源業(yè)務(wù)調(diào)研、數(shù)據(jù)調(diào)研、準(zhǔn)確性完整性驗證。
3、負(fù)責(zé)項目中與第三方系統(tǒng)基于數(shù)據(jù)庫的數(shù)據(jù)對接、數(shù)據(jù)預(yù)處理、數(shù)據(jù)清洗、數(shù)據(jù)處理、數(shù)據(jù)導(dǎo)入、數(shù)據(jù)校驗相關(guān)開發(fā)工作。
4、負(fù)責(zé)數(shù)據(jù)平臺的etl相關(guān)軟件和工具的研發(fā)和改進(jìn)。
5、負(fù)責(zé)數(shù)據(jù)平臺日常管理、跑批、維護(hù)、監(jiān)控、處理臨時數(shù)據(jù)需求。
任職資格:
1、本科計算機相關(guān)專業(yè),5年工作經(jīng)驗
2、具備3年或以上etl數(shù)據(jù)處理相關(guān)開發(fā)經(jīng)驗
3、擁有3年以上sql開發(fā)
4、掌握hadoop?hive-hql?基礎(chǔ)技能
etl崗位職責(zé)15
崗位職責(zé)
1.負(fù)責(zé)數(shù)據(jù)倉庫模型設(shè)計和優(yōu)化,基于hadoop/hive/odps(maxcouputer)、adb等進(jìn)行數(shù)據(jù)倉庫etl開發(fā)和維護(hù)工作;
2.負(fù)責(zé)日常作業(yè)的部署和調(diào)度研發(fā)及維護(hù)工作;
3.負(fù)責(zé)制定數(shù)據(jù)標(biāo)準(zhǔn)制定,數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn),從而有效的進(jìn)行數(shù)據(jù)治理工作。
4.負(fù)責(zé)各類業(yè)務(wù)數(shù)據(jù)的etl任務(wù)及數(shù)據(jù)倉庫部署和管理,持續(xù)改進(jìn)優(yōu)化etl、分析處理、數(shù)據(jù)呈現(xiàn)等流程,協(xié)調(diào)海量數(shù)據(jù)壓力問題;
任職資格
1.三年以上數(shù)據(jù)倉庫/etl/數(shù)據(jù)處理相關(guān)開發(fā)經(jīng)驗;
2.具備mysql、oracle或hive等主流平臺的數(shù)據(jù)開發(fā)及調(diào)優(yōu)經(jīng)驗,熟悉python或java優(yōu)先;
3.具備良好的學(xué)習(xí)能力,善于溝通,具備較強的'業(yè)務(wù)推動能力和執(zhí)行力;
4.熟悉數(shù)據(jù)倉庫體系架構(gòu)、建模理論和模型設(shè)計思路,能用于項目實踐;
5.有良好的快速學(xué)習(xí)能力和團(tuán)隊協(xié)作能力;
6.有java或python項目研發(fā)經(jīng)驗者先考慮;
7.有產(chǎn)品意識,善于溝通,積極主動,能夠以目標(biāo)為導(dǎo)向理解工作中相關(guān)任務(wù)的處理優(yōu)先級關(guān)系。
【etl崗位職責(zé)】相關(guān)文章:
etl崗位職責(zé)03-06
商場數(shù)據(jù)倉庫ETL系統(tǒng)架構(gòu)設(shè)計05-09
值班崗位職責(zé)-崗位職責(zé)07-25
it部經(jīng)理崗位職責(zé)-崗位職責(zé)07-25
物業(yè)班長崗位職責(zé)-崗位職責(zé)11-03
庫管崗位職責(zé)-崗位職責(zé)01-10