數(shù)據(jù)采集工程師崗位職責(zé)(通用23篇)
數(shù)據(jù)采集工程師崗位職責(zé) 篇1
1.嵌入式bootloader,kernel開發(fā);
2.工業(yè)通訊協(xié)議解析等;
3.windows/linux平臺(tái)網(wǎng)關(guān)應(yīng)用層程序開發(fā);
4.網(wǎng)關(guān)產(chǎn)品的軟件功能測(cè)試驗(yàn)證;
5.工業(yè)網(wǎng)關(guān)產(chǎn)品軟件sdk及l(fā)ibrary開發(fā)。
數(shù)據(jù)采集工程師崗位職責(zé) 篇2
1.負(fù)責(zé)工業(yè)設(shè)備組網(wǎng)及數(shù)據(jù)采集方案設(shè)計(jì);
2.負(fù)責(zé)設(shè)計(jì)方案所需傳感器、儀表選型,布線圖、數(shù)據(jù)存儲(chǔ)方式、數(shù)據(jù)表等詳細(xì)設(shè)計(jì);
3.負(fù)責(zé)與設(shè)備廠商、數(shù)控系統(tǒng)廠商進(jìn)行業(yè)務(wù)協(xié)議、通信協(xié)議及接口協(xié)調(diào);
4.負(fù)責(zé)現(xiàn)場(chǎng)數(shù)據(jù)采集相關(guān)軟硬件安裝調(diào)試;
5.負(fù)責(zé)和用戶現(xiàn)場(chǎng)對(duì)口協(xié)調(diào)、技術(shù)指導(dǎo)及現(xiàn)場(chǎng)培訓(xùn)。
數(shù)據(jù)采集工程師崗位職責(zé) 篇3
1.數(shù)據(jù)采集系統(tǒng)和分布式爬蟲系統(tǒng)的架構(gòu)設(shè)計(jì)和開發(fā)
2.對(duì)接外部數(shù)據(jù)服務(wù)商提供的數(shù)據(jù)及資訊服務(wù),實(shí)現(xiàn)數(shù)據(jù)的'有效沉淀,建立數(shù)據(jù)服務(wù)評(píng)估機(jī)制
3.負(fù)責(zé)大規(guī)模文本、圖像、視頻數(shù)據(jù)的抓取、抽取,去重、分類,垃圾過濾,質(zhì)量識(shí)別等工作
4.研究各種目標(biāo)網(wǎng)站的形態(tài),互聯(lián)網(wǎng)特征挖掘,發(fā)現(xiàn)它們的特點(diǎn)和規(guī)律
數(shù)據(jù)采集工程師崗位職責(zé) 篇4
1.負(fù)責(zé)linux平臺(tái)下應(yīng)用軟件開發(fā),根據(jù)產(chǎn)品與項(xiàng)目要求,開展模塊設(shè)計(jì).編碼等工作;
2.負(fù)責(zé)linux軟件的交叉編譯與移植;
3.參與需求分析.軟件設(shè)計(jì).開發(fā).調(diào)試以及測(cè)試維護(hù)全過程;
4.負(fù)責(zé)協(xié)同硬件工程師或第三方方案商完成系統(tǒng)功能模塊的聯(lián)調(diào)及功能對(duì)接.接口文文件輸出;
5.負(fù)責(zé)嵌入式系統(tǒng)軟件平臺(tái)搭建工作;
數(shù)據(jù)采集工程師崗位職責(zé) 篇5
崗位職責(zé):
業(yè)務(wù)數(shù)據(jù)的收集整理和分析;
負(fù)責(zé)公安、交通領(lǐng)域的業(yè)務(wù)建模和算法設(shè)計(jì);
分析項(xiàng)目數(shù)據(jù)需求,完成系統(tǒng)中數(shù)據(jù)分析模塊的設(shè)計(jì)、實(shí)現(xiàn)和測(cè)試;
設(shè)計(jì)、構(gòu)建和優(yōu)化基于大數(shù)據(jù)的存儲(chǔ)平臺(tái)架構(gòu),編寫相關(guān)技術(shù)文檔;
設(shè)計(jì)并實(shí)現(xiàn)基于開源項(xiàng)目(Cobar,Spark等)的海量數(shù)據(jù)集成與處理平臺(tái);
為其他部門提供數(shù)據(jù)分析支撐。
任職資格:
計(jì)算機(jī)相關(guān)專業(yè);
熟悉數(shù)據(jù)挖掘算法,對(duì)分類、聚類、時(shí)序、圖等算法有很深了解;
熟練掌握Hadoop、Spark生態(tài)系統(tǒng)組件(MR、HBase、Hive、ZooKeeper、Spark SQL、Spark Mlib等),有相關(guān)大數(shù)據(jù)架構(gòu),開發(fā)成功案例;
熟練的使用、開發(fā)ETL工具經(jīng)驗(yàn),有數(shù)據(jù)庫(kù)建模ER建模經(jīng)驗(yàn)優(yōu)先;
有海量數(shù)據(jù)BI或數(shù)據(jù)挖掘項(xiàng)目實(shí)施和管理經(jīng)驗(yàn),對(duì)數(shù)據(jù)挖掘理論方法有一定了解者優(yōu)先;
熟悉的Bash Shell和Python等腳本編程能力;
強(qiáng)烈的責(zé)任心和工作熱情,良好的團(tuán)隊(duì)合作精神。
數(shù)據(jù)采集工程師崗位職責(zé) 篇6
崗位職責(zé):
1.從事數(shù)學(xué)建模及數(shù)據(jù)挖掘應(yīng)用方法研究;
2.與開發(fā)部門配合實(shí)現(xiàn)相應(yīng)的數(shù)據(jù)分析模塊的開發(fā);
3.制定公司數(shù)據(jù)可管理體系,建產(chǎn)研究用數(shù)據(jù)平臺(tái)。
任職要求:
1.應(yīng)用數(shù)學(xué)、統(tǒng)計(jì)學(xué)、計(jì)算機(jī)等專業(yè)碩士以上學(xué)歷;
2.具備常用機(jī)器學(xué)習(xí)、數(shù)據(jù)挖掘相關(guān)知識(shí),會(huì)spark;
3.具備一種或多種開發(fā)語(yǔ)言(如scalapython java等)的.程序和算法開發(fā)能力,掌握常用數(shù)據(jù)結(jié)構(gòu)和算法;
4.有視頻、地圖、文本、社交等大數(shù)據(jù)分析能力;
5.有工業(yè)數(shù)據(jù)分析工作經(jīng)驗(yàn)者優(yōu)先。
數(shù)據(jù)采集工程師崗位職責(zé) 篇7
1、負(fù)責(zé)生產(chǎn)環(huán)境Mysql數(shù)據(jù)庫(kù)系統(tǒng)高可用、高性能架構(gòu)方案,分庫(kù)分表策略,數(shù)據(jù)庫(kù)擴(kuò)展方案;
2、排查數(shù)據(jù)庫(kù)故障,分析和解決疑難問題,提出預(yù)防方案;
3、制定數(shù)據(jù)庫(kù)監(jiān)控策略、備份策略、容災(zāi)策略,探查系統(tǒng)潛在的問題和可能的性能瓶頸并進(jìn)行優(yōu)化;
4、對(duì)開發(fā)工程師的SQL語(yǔ)句進(jìn)行審核及SQL優(yōu)化;
5、負(fù)責(zé)redis、memcache等非關(guān)系數(shù)據(jù)庫(kù)的管理和擴(kuò)展,能夠根據(jù)業(yè)務(wù)需求完成系統(tǒng)設(shè)計(jì)、架構(gòu)設(shè)計(jì)工作;
6、參與前瞻性新技術(shù)研究,解決數(shù)據(jù)庫(kù)相關(guān)疑難問題。
數(shù)據(jù)采集工程師崗位職責(zé) 篇8
1.高質(zhì)量地完成集團(tuán)內(nèi)外各類數(shù)據(jù)生產(chǎn)集成、數(shù)據(jù)分析應(yīng)用建設(shè)工作,涉及投研、市場(chǎng)、ERP、全球金融資訊等四個(gè)業(yè)務(wù)領(lǐng)域方向;
2.需求及源系統(tǒng)數(shù)據(jù)分析,完成數(shù)據(jù)倉(cāng)庫(kù)/EDM等系統(tǒng)數(shù)據(jù)模型及應(yīng)用模型設(shè)計(jì)、數(shù)據(jù)Mapping規(guī)則文檔撰寫、開發(fā)、自測(cè)及上線部署;
3. 數(shù)據(jù)質(zhì)量稽核、問題分析及處理,優(yōu)化數(shù)據(jù)處理程序;
4. 洞察數(shù)據(jù)、滿足業(yè)務(wù)場(chǎng)景需求。
數(shù)據(jù)采集工程師崗位職責(zé) 篇9
1、3年以上etl開發(fā)經(jīng)驗(yàn),熟悉etl開發(fā)規(guī)范和流程;
2、熟練使用datastage、informatica、kettle、hive、plsql、spark、mapreduce等工具中的一個(gè)或多個(gè),有開發(fā)、維護(hù)經(jīng)驗(yàn);
3、熟練編寫存儲(chǔ)過程,擅長(zhǎng)sql優(yōu)化;
4、熟悉oracle、sqlserver等常用數(shù)據(jù)庫(kù)中的`一個(gè)或多個(gè);
5、熟悉perl、shell腳本,linux操作系統(tǒng);
6、有大型數(shù)據(jù)倉(cāng)庫(kù)、bi相關(guān)項(xiàng)目的開發(fā)經(jīng)驗(yàn),精通架構(gòu)、建模者優(yōu)先;
7、熟練使用erwin或powerdesigner等進(jìn)行數(shù)據(jù)建模;
8、以下經(jīng)驗(yàn)優(yōu)先考慮:流式處理、日志處理、數(shù)據(jù)倉(cāng)庫(kù)全日制本科以上學(xué)歷(985/211),計(jì)算機(jī)科學(xué)與技術(shù)/軟件工程/數(shù)據(jù)相關(guān)專業(yè)
1、3年以上etl開發(fā)經(jīng)驗(yàn),熟悉etl開發(fā)規(guī)范和流程;
2、熟練使用datastage、informatica、kettle、hive、plsql、spark、mapreduce等工具中的一個(gè)或多個(gè),有開發(fā)、維護(hù)經(jīng)驗(yàn);
3、熟練編寫存儲(chǔ)過程,擅長(zhǎng)sql優(yōu)化;
4、熟悉oracle、sqlserver等常用數(shù)據(jù)庫(kù)中的一個(gè)或多個(gè);
5、熟悉perl、shell腳本,linux操作系統(tǒng);
6、有大型數(shù)據(jù)倉(cāng)庫(kù)、bi相關(guān)項(xiàng)目的開發(fā)經(jīng)驗(yàn),精通架構(gòu)、建模者優(yōu)先;
7、熟練使用erwin或powerdesigner等進(jìn)行數(shù)據(jù)建模;
8、以下經(jīng)驗(yàn)優(yōu)先考慮:流式處理、日志處理、數(shù)據(jù)倉(cāng)庫(kù)
數(shù)據(jù)采集工程師崗位職責(zé) 篇10
1、針對(duì)具體的業(yè)務(wù)場(chǎng)景需求、定義數(shù)據(jù)分析及挖掘問題;
2、使用統(tǒng)計(jì)學(xué)分析方法、挖掘算法、構(gòu)建有效且通用的數(shù)據(jù)分析模型,對(duì)數(shù)據(jù)挖掘方案進(jìn)行驗(yàn)證、開發(fā)、改進(jìn)和優(yōu)化,實(shí)現(xiàn)數(shù)據(jù)挖掘的功能應(yīng)用;
3、搭建高擴(kuò)展高性能的數(shù)據(jù)分析模型庫(kù),作為數(shù)據(jù)分析團(tuán)隊(duì)的基礎(chǔ)工具;
4、完成領(lǐng)導(dǎo)安排的其他工作。
數(shù)據(jù)采集工程師崗位職責(zé) 篇11
數(shù)據(jù)處理工程師崗位職責(zé)
數(shù)據(jù)處理工程師1)直接面對(duì)客戶,參與項(xiàng)目運(yùn)作中數(shù)據(jù)處理,了解客戶軟硬件要求;
2)參與、協(xié)助數(shù)據(jù)收集和模型建構(gòu);
3)安裝、調(diào)試公司軟件在客戶端上線;
4)開發(fā)常用數(shù)據(jù)處理功能,幫助業(yè)務(wù)團(tuán)隊(duì)提高工作效率;
5)與香港、新加坡和紐約團(tuán)隊(duì)合作,為亞太地區(qū)技術(shù)服務(wù)提供支持。·計(jì)算機(jī)或軟件相關(guān)專業(yè),本科及以上學(xué)歷;
·掌握兩門以及常見數(shù)據(jù)庫(kù)設(shè)計(jì)開發(fā)技術(shù),mysql、oracle、sqlserver、hive等;
·具有參加過etl開發(fā)項(xiàng)目,處理過(大)數(shù)據(jù)經(jīng)驗(yàn)優(yōu)先;
·工作細(xì)心、認(rèn)真負(fù)責(zé)且善于溝通,能快速理解業(yè)務(wù),對(duì)數(shù)據(jù)敏感,并能主導(dǎo)項(xiàng)目的進(jìn)度,保證團(tuán)隊(duì)產(chǎn)出。1)直接面對(duì)客戶,參與項(xiàng)目運(yùn)作中數(shù)據(jù)處理,了解客戶軟硬件要求;
2)參與、協(xié)助數(shù)據(jù)收集和模型建構(gòu);
3)安裝、調(diào)試公司軟件在客戶端上線;
4)開發(fā)常用數(shù)據(jù)處理功能,幫助業(yè)務(wù)團(tuán)隊(duì)提高工作效率;
5)與香港、新加坡和紐約團(tuán)隊(duì)合作,為亞太地區(qū)技術(shù)服務(wù)提供支持。
數(shù)據(jù)采集工程師崗位職責(zé) 篇12
職責(zé)描述:
1、負(fù)責(zé)文本數(shù)據(jù)處理,如格式轉(zhuǎn)換、分詞處理、實(shí)體抽取、專業(yè)詞典整理等;
2、自然語(yǔ)言處理相關(guān)工具開發(fā);
3、協(xié)助訓(xùn)練nlp模型。
任職要求:
1、計(jì)算機(jī)相關(guān)專業(yè)(本科2年以上);
2、精通c/c++或java,熟悉python、bash?shell等腳本語(yǔ)言;
3、熟悉正則表達(dá)式,了解常用分類、聚類算法及相應(yīng)工具;
4、熟悉使用基本分類、聚類算法及相應(yīng)工具;
5、具備nlp相關(guān)工作(特別是數(shù)據(jù)處理與分析)經(jīng)驗(yàn),了解nlp基本知識(shí);
6、其他:耐心、細(xì)致;較強(qiáng)的邏輯思維能力;性格踏實(shí)穩(wěn)定,抗壓能力強(qiáng)。
數(shù)據(jù)采集工程師崗位職責(zé) 篇13
1、利用數(shù)據(jù)倉(cāng)庫(kù)建模及相關(guān)技術(shù),參與數(shù)據(jù)倉(cāng)庫(kù)模型的設(shè)計(jì)。
2、參與企業(yè)級(jí)大數(shù)據(jù)倉(cāng)庫(kù)項(xiàng)目的落地開發(fā)。
3、參與企業(yè)級(jí)主數(shù)據(jù)管理項(xiàng)目的實(shí)施落地。
4、利用hadoop生態(tài)相關(guān)技術(shù),負(fù)責(zé)大數(shù)據(jù)中心的'數(shù)據(jù)處理流程,包括數(shù)據(jù)清洗、融合、統(tǒng)計(jì)、挖掘等。
數(shù)據(jù)采集工程師崗位職責(zé) 篇14
1、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)的設(shè)計(jì)、開發(fā)、部署、維護(hù)和優(yōu)化;
2、參與公司項(xiàng)目數(shù)據(jù)庫(kù)架構(gòu)設(shè)計(jì),及相關(guān)文檔的撰寫;
3、協(xié)助開發(fā)完成數(shù)據(jù)庫(kù)表的設(shè)計(jì)以及SQL調(diào)優(yōu),給開發(fā)人員提供SQL調(diào)優(yōu)指導(dǎo);
4、負(fù)責(zé)數(shù)據(jù)庫(kù)技術(shù)規(guī)范建設(shè)。
數(shù)據(jù)采集工程師崗位職責(zé) 篇15
1. 參加團(tuán)隊(duì)會(huì)議與討論,并給予有意義的建議;
2. 協(xié)助后端團(tuán)隊(duì)和架構(gòu)師完成數(shù)據(jù)庫(kù)相關(guān)的設(shè)計(jì)與開發(fā);
3. 協(xié)助業(yè)務(wù)部門抓取、分析數(shù)據(jù)。
數(shù)據(jù)采集工程師崗位職責(zé) 篇16
1、負(fù)責(zé)公司與阿里巴巴在新行業(yè)方向(新金融、新零售、國(guó)內(nèi)外運(yùn)營(yíng)商)的產(chǎn)品研發(fā);
2、負(fù)責(zé)分析挖掘客戶/行業(yè)對(duì)大數(shù)據(jù)產(chǎn)品的需求(應(yīng)用場(chǎng)景),利用數(shù)據(jù)分析結(jié)論提升客戶業(yè)務(wù)能力。例如:文本挖掘,潛在客戶挖掘,用戶畫像,個(gè)性化推薦,用能預(yù)測(cè)等;
3、進(jìn)行大數(shù)據(jù)場(chǎng)景下的數(shù)據(jù)統(tǒng)計(jì)、數(shù)據(jù)挖掘、機(jī)器學(xué)習(xí)、深度學(xué)習(xí),包括數(shù)據(jù)整理、模型建立、模型應(yīng)用、評(píng)估優(yōu)化等;
4、將客戶需求準(zhǔn)確轉(zhuǎn)化為可執(zhí)行的數(shù)學(xué)模型,針對(duì)不同的應(yīng)用場(chǎng)景,負(fù)責(zé)編寫數(shù)據(jù)挖掘算法及對(duì)其的優(yōu)化;
5、基于需求分析/運(yùn)營(yíng)支持/商業(yè)報(bào)告等成果,抽取典型用戶/客戶/行業(yè)/產(chǎn)品分析模型并與開發(fā)團(tuán)隊(duì)溝通實(shí)施方案及構(gòu)建產(chǎn)品原型。
崗位要求:
1、本科以上學(xué)歷,扎實(shí)的`機(jī)器學(xué)習(xí)、數(shù)據(jù)挖掘、統(tǒng)計(jì)學(xué)理論基礎(chǔ);有統(tǒng)計(jì)、應(yīng)用數(shù)學(xué)、金融等相關(guān)專業(yè)背景優(yōu)先;
2、精通常見機(jī)器學(xué)習(xí)算法(如邏輯回歸、SVM、神經(jīng)網(wǎng)絡(luò)、決策樹、貝葉斯等),有實(shí)際建模經(jīng)驗(yàn),掌握深度學(xué)習(xí)算法優(yōu)先;
3、具有扎實(shí)的計(jì)算機(jī)操作系統(tǒng)、數(shù)據(jù)結(jié)構(gòu)等編程基礎(chǔ),精通至少一門編程語(yǔ)言例如JAVA/python/R等;
4、熟悉Map-Reduce模型,對(duì)Hadoop、Spark、Storm等大規(guī)模數(shù)據(jù)存儲(chǔ)與運(yùn)算平臺(tái)有實(shí)踐經(jīng)驗(yàn)優(yōu)先。
數(shù)據(jù)采集工程師崗位職責(zé) 篇17
1、負(fù)責(zé)應(yīng)用平臺(tái)維護(hù),保證其有效運(yùn)行;
2、負(fù)責(zé)業(yè)務(wù)數(shù)據(jù)的挖掘、整合以及分析模型的建立、優(yōu)化和評(píng)估;為業(yè)務(wù)人員日常工作提供可靠而明確的數(shù)據(jù)支撐;
3、負(fù)責(zé)報(bào)表相關(guān)功能的設(shè)計(jì)、開發(fā)工作,并負(fù)責(zé)報(bào)表優(yōu)化、維護(hù)、數(shù)據(jù)采集;
4、負(fù)責(zé)系統(tǒng)相關(guān)文檔的制定和編寫。
5、有實(shí)際的MY SQL或Oracle等數(shù)據(jù)庫(kù)開發(fā)相關(guān)工作經(jīng)歷,具有高級(jí)工程師技術(shù)能力;
6、有良好的溝通協(xié)調(diào)能力,能與客戶及項(xiàng)目組同事有效的溝通;
7、能夠獨(dú)立分析客戶需求,并能針對(duì)客戶需求編寫需求分析、設(shè)計(jì)等技術(shù)方案;
8、熱愛軟件事業(yè),具有較強(qiáng)的責(zé)任感,有快速掌握新技術(shù)和獨(dú)立解決技術(shù)問題的能力;
數(shù)據(jù)采集工程師崗位職責(zé) 篇18
1.負(fù)責(zé)數(shù)據(jù)分析,數(shù)據(jù)挖掘相關(guān)的算法、應(yīng)用的設(shè)計(jì)與開發(fā);
2.負(fù)責(zé)公司產(chǎn)品各階段數(shù)據(jù)的整理、分析、挖掘及提交數(shù)據(jù)報(bào)告,重點(diǎn)對(duì)車輛行為數(shù)據(jù)進(jìn)行分析和挖掘,利用數(shù)據(jù)分析結(jié)論推動(dòng)業(yè)務(wù)產(chǎn)品的優(yōu)化;
3.對(duì)海量業(yè)務(wù)數(shù)據(jù)進(jìn)行整合、分析挖掘,挖掘產(chǎn)品以及用戶潛在信息,為營(yíng)銷、運(yùn)營(yíng)及決策提供業(yè)務(wù)分析及數(shù)據(jù)支持。
數(shù)據(jù)采集工程師崗位職責(zé) 篇19
1.依據(jù)項(xiàng)目需求建構(gòu)數(shù)據(jù)萃取與轉(zhuǎn)換流程
2.挖掘數(shù)據(jù)特征,進(jìn)行數(shù)據(jù)和特征融合
3.搭建數(shù)學(xué)模型,并對(duì)模型進(jìn)行檢驗(yàn)評(píng)估
職位要求:
1、計(jì)算機(jī)、數(shù)學(xué)、統(tǒng)計(jì)、人工智能等相關(guān)專業(yè)的碩士或以上學(xué)歷;
2、二年以上數(shù)據(jù)挖掘、機(jī)器學(xué)習(xí)相關(guān)工作經(jīng)驗(yàn),熟悉python、spark、pandas、sklearn等數(shù)據(jù)分析工具者優(yōu)先;
3、熟練掌握貝葉斯、隨機(jī)森林、深度學(xué)習(xí)等機(jī)器學(xué)習(xí)算法;
4、突出的分析問題和解決問題能力,自我驅(qū)動(dòng),并且具備較強(qiáng)的學(xué)習(xí)能力、創(chuàng)新應(yīng)用能力及溝通協(xié)調(diào)能力,有良好的'團(tuán)隊(duì)合作意識(shí);
5、有國(guó)際背景或能熟練使用英文溝通者優(yōu)先
數(shù)據(jù)采集工程師崗位職責(zé) 篇20
1、負(fù)責(zé)數(shù)據(jù)接入、數(shù)據(jù)提取、數(shù)據(jù)清洗、底層重構(gòu)、業(yè)務(wù)主題建模等工作;
2、參與數(shù)據(jù)集市開發(fā),用戶畫像標(biāo)簽開發(fā);
3、負(fù)責(zé)接口平臺(tái)、自助分析平臺(tái)等系統(tǒng)的建設(shè)和維護(hù);
4、針對(duì)具體大數(shù)據(jù)應(yīng)用場(chǎng)景,提供有效解決方案,并針對(duì)具體模型落地實(shí)施;
數(shù)據(jù)采集工程師崗位職責(zé) 篇21
•識(shí)別,分析和解決計(jì)劃支持問題。
•與BU利益相關(guān)者合作,確定并優(yōu)先考慮數(shù)據(jù)和統(tǒng)計(jì)要求,包括要收集的特定數(shù)據(jù)元素。
•協(xié)助開發(fā)和實(shí)施數(shù)據(jù)庫(kù),數(shù)據(jù)收集系統(tǒng)/工具,數(shù)據(jù)分析以及其他優(yōu)化統(tǒng)計(jì)效率和質(zhì)量的策略(包括確定流程改進(jìn)以更好地滿足業(yè)務(wù)需求)。
•分析大量數(shù)據(jù)集,提出有見地的業(yè)務(wù)建議。
•通過查看報(bào)告和績(jī)效指標(biāo)來確定和糾正數(shù)據(jù)收集問題,從而確保數(shù)據(jù)的準(zhǔn)確性和完整性。
•識(shí)別,分析,解釋和建模數(shù)據(jù)湖中數(shù)據(jù)的趨勢(shì)或模式。
•為各種受眾設(shè)計(jì)和生成準(zhǔn)確有效的統(tǒng)計(jì)數(shù)據(jù)可視化產(chǎn)品和報(bào)告。
•通過促進(jìn)技術(shù)和非技術(shù)利益相關(guān)者之間的溝通,確保技術(shù)團(tuán)隊(duì)了解計(jì)劃和業(yè)務(wù)工作的短期和長(zhǎng)期目標(biāo)
•準(zhǔn)時(shí)交付優(yōu)質(zhì),易懂,明確的產(chǎn)品。
•參與構(gòu)建機(jī)器學(xué)習(xí)策略平臺(tái)。
•對(duì)數(shù)據(jù)驅(qū)動(dòng)業(yè)務(wù),關(guān)鍵思想家,問題解決者和自我啟動(dòng)者的熱情
•促進(jìn)技術(shù)和非技術(shù)利益相關(guān)者之間交流的能力
•出色的書面和口頭交流能力。
數(shù)據(jù)采集工程師崗位職責(zé) 篇22
崗位職責(zé):
1、對(duì)通信和金融業(yè)務(wù)數(shù)據(jù)進(jìn)行分析和挖掘,滿足研發(fā)和運(yùn)營(yíng)等部門的業(yè)務(wù)需求和決策需求;
2、能根據(jù)業(yè)務(wù)特點(diǎn)選擇最合適的數(shù)據(jù)挖掘算法,并做調(diào)優(yōu);
3、支持?jǐn)?shù)據(jù)分析、挖掘算法平臺(tái)的部署和日常運(yùn)營(yíng);
4、撰寫分析類報(bào)告。
任職資格:
1、大學(xué)本科或本科以上統(tǒng)計(jì)學(xué)、數(shù)學(xué)或其他相關(guān)專業(yè),對(duì)數(shù)據(jù)結(jié)構(gòu)熟悉;
2、熟練使用python進(jìn)行數(shù)據(jù)分析、處理、可視化。熟悉numpy/pandas/matplotlib等常用模塊。熟練使用sql,最好用過hive-sql或spark-sql;
3、對(duì)hadoop/spark有一定了解。能夠簡(jiǎn)單使用hadoop系列命令;
4、對(duì)線性回歸,決策森林,xgboost,評(píng)分卡等數(shù)據(jù)挖掘相關(guān)算法有一定了解;
5、做過web接口調(diào)試,熟悉json者優(yōu)先;
6、熟練掌握PPT和EXCEL制作;
7、具備良好的學(xué)習(xí)、溝通與表達(dá)能力,具有較強(qiáng)的團(tuán)隊(duì)合作精神,對(duì)工作富有熱情,能承受工作壓力;
8、有運(yùn)營(yíng)商或金融類相關(guān)數(shù)據(jù)經(jīng)驗(yàn)工作優(yōu)先考慮;
9、能適應(yīng)中長(zhǎng)期現(xiàn)場(chǎng)出差。
數(shù)據(jù)采集工程師崗位職責(zé) 篇23
1、參與數(shù)據(jù)倉(cāng)庫(kù)建設(shè),負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì);
2、開發(fā)高質(zhì)量可擴(kuò)展的底層數(shù)據(jù)倉(cāng)庫(kù)體系;
3、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)與業(yè)務(wù)系統(tǒng)的接口設(shè)計(jì)和確認(rèn)工作;
4、負(fù)責(zé)數(shù)據(jù)平臺(tái)相關(guān)的管理工作,如數(shù)據(jù)研發(fā)規(guī)范、數(shù)據(jù)質(zhì)量及穩(wěn)定性保證等建設(shè);
5、參與公司各個(gè)業(yè)務(wù)線BI、數(shù)據(jù)產(chǎn)品與應(yīng)用的數(shù)據(jù)研發(fā),發(fā)覺數(shù)據(jù)潛在價(jià)值。