數(shù)據(jù)采集工程師崗位職責(zé)（通用34篇）

數(shù)據(jù)采集工程師崗位職責(zé) 篇1

　　1.嵌入式bootloader，kernel開發(fā)；

　　2.工業(yè)通訊協(xié)議解析等；

　　3.windows/linux平臺(tái)網(wǎng)關(guān)應(yīng)用層程序開發(fā)；

　　4.網(wǎng)關(guān)產(chǎn)品的軟件功能測(cè)試驗(yàn)證；

　　5.工業(yè)網(wǎng)關(guān)產(chǎn)品軟件sdk及l(fā)ibrary開發(fā)。

數(shù)據(jù)采集工程師崗位職責(zé) 篇2

　　1.負(fù)責(zé)linux平臺(tái)下應(yīng)用軟件開發(fā)，根據(jù)產(chǎn)品與項(xiàng)目要求，開展模塊設(shè)計(jì).編碼等工作；

　　2.負(fù)責(zé)linux軟件的交叉編譯與移植；

　　3.參與需求分析.軟件設(shè)計(jì).開發(fā).調(diào)試以及測(cè)試維護(hù)全過程；

　　4.負(fù)責(zé)協(xié)同硬件工程師或第三方方案商完成系統(tǒng)功能模塊的聯(lián)調(diào)及功能對(duì)接.接口文文件輸出；

　　5.負(fù)責(zé)嵌入式系統(tǒng)軟件平臺(tái)搭建工作；

數(shù)據(jù)采集工程師崗位職責(zé) 篇3

　　1.負(fù)責(zé)工業(yè)設(shè)備組網(wǎng)及數(shù)據(jù)采集方案設(shè)計(jì)；

　　2.負(fù)責(zé)設(shè)計(jì)方案所需傳感器、儀表選型，布線圖、數(shù)據(jù)存儲(chǔ)方式、數(shù)據(jù)表等詳細(xì)設(shè)計(jì)；

　　3.負(fù)責(zé)與設(shè)備廠商、數(shù)控系統(tǒng)廠商進(jìn)行業(yè)務(wù)協(xié)議、通信協(xié)議及接口協(xié)調(diào)；

　　4.負(fù)責(zé)現(xiàn)場(chǎng)數(shù)據(jù)采集相關(guān)軟硬件安裝調(diào)試；

　　5.負(fù)責(zé)和用戶現(xiàn)場(chǎng)對(duì)口協(xié)調(diào)、技術(shù)指導(dǎo)及現(xiàn)場(chǎng)培訓(xùn)。

數(shù)據(jù)采集工程師崗位職責(zé) 篇4

　　1.數(shù)據(jù)采集系統(tǒng)和分布式爬蟲系統(tǒng)的架構(gòu)設(shè)計(jì)和開發(fā)

　　2.對(duì)接外部數(shù)據(jù)服務(wù)商提供的數(shù)據(jù)及資訊服務(wù)，實(shí)現(xiàn)數(shù)據(jù)的'有效沉淀，建立數(shù)據(jù)服務(wù)評(píng)估機(jī)制

　　3.負(fù)責(zé)大規(guī)模文本、圖像、視頻數(shù)據(jù)的抓取、抽取，去重、分類，垃圾過濾，質(zhì)量識(shí)別等工作

　　4.研究各種目標(biāo)網(wǎng)站的形態(tài)，互聯(lián)網(wǎng)特征挖掘，發(fā)現(xiàn)它們的特點(diǎn)和規(guī)律

數(shù)據(jù)采集工程師崗位職責(zé) 篇5

　　•識(shí)別，分析和解決計(jì)劃支持問題。

　　•與BU利益相關(guān)者合作，確定并優(yōu)先考慮數(shù)據(jù)和統(tǒng)計(jì)要求，包括要收集的特定數(shù)據(jù)元素。

　　•協(xié)助開發(fā)和實(shí)施數(shù)據(jù)庫(kù)，數(shù)據(jù)收集系統(tǒng)/工具，數(shù)據(jù)分析以及其他優(yōu)化統(tǒng)計(jì)效率和質(zhì)量的策略(包括確定流程改進(jìn)以更好地滿足業(yè)務(wù)需求)。

　　•分析大量數(shù)據(jù)集，提出有見地的業(yè)務(wù)建議。

　　•通過查看報(bào)告和績(jī)效指標(biāo)來確定和糾正數(shù)據(jù)收集問題，從而確保數(shù)據(jù)的準(zhǔn)確性和完整性。

　　•識(shí)別，分析，解釋和建模數(shù)據(jù)湖中數(shù)據(jù)的趨勢(shì)或模式。

　　•為各種受眾設(shè)計(jì)和生成準(zhǔn)確有效的統(tǒng)計(jì)數(shù)據(jù)可視化產(chǎn)品和報(bào)告。

　　•通過促進(jìn)技術(shù)和非技術(shù)利益相關(guān)者之間的溝通，確保技術(shù)團(tuán)隊(duì)了解計(jì)劃和業(yè)務(wù)工作的短期和長(zhǎng)期目標(biāo)

　　•準(zhǔn)時(shí)交付優(yōu)質(zhì)，易懂，明確的產(chǎn)品。

　　•參與構(gòu)建機(jī)器學(xué)習(xí)策略平臺(tái)。

　　•對(duì)數(shù)據(jù)驅(qū)動(dòng)業(yè)務(wù)，關(guān)鍵思想家，問題解決者和自我啟動(dòng)者的熱情

　　•促進(jìn)技術(shù)和非技術(shù)利益相關(guān)者之間交流的能力

　　•出色的書面和口頭交流能力。

數(shù)據(jù)采集工程師崗位職責(zé) 篇6

　　1、學(xué)習(xí)并理解勵(lì)步云學(xué)業(yè)務(wù)及系統(tǒng)，根據(jù)業(yè)務(wù)部門需求對(duì)公司各項(xiàng)業(yè)務(wù)數(shù)據(jù)進(jìn)行統(tǒng)計(jì)分析，出具相關(guān)報(bào)表；

　　2、進(jìn)行數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)、模型開發(fā)、數(shù)據(jù)質(zhì)量校驗(yàn)，報(bào)表開發(fā)；

　　3、進(jìn)行數(shù)據(jù)差異分析，找出統(tǒng)計(jì)口徑、數(shù)據(jù)錯(cuò)誤、操作錯(cuò)誤等造成的差異原因；

　　4、進(jìn)行數(shù)據(jù)查詢優(yōu)化，解決跑數(shù)性能問題。

數(shù)據(jù)采集工程師崗位職責(zé) 篇7

　　•在行業(yè)擔(dān)任數(shù)據(jù)工程師或后端工程師超過4年

　　•您將了解數(shù)據(jù)倉(cāng)庫(kù)的概念(建模，調(diào)整，維護(hù))

　　•您非常精通SQL，并渴望指導(dǎo)和教其他SQL

　　•您精通Python或任何其他腳本語(yǔ)言和軟件開發(fā)

　　•您在分布式數(shù)據(jù)處理/傳統(tǒng)RDBMS / MPP / NoSQL系統(tǒng)和數(shù)據(jù)建模方面有很強(qiáng)的低估/經(jīng)驗(yàn)

　　•您在Spark / Kafka / HBase / Redis / Kettle方面擁有豐富的經(jīng)驗(yàn)

　　•您受到探索數(shù)據(jù)的好奇心和動(dòng)力的驅(qū)動(dòng)

　　•您具有處理數(shù)據(jù)管道的DevOps問題的經(jīng)驗(yàn)

　　•對(duì)數(shù)據(jù)驅(qū)動(dòng)業(yè)務(wù)，關(guān)鍵思想家，問題解決者和自我啟動(dòng)者的熱情

　　•獲得認(rèn)可大學(xué)的相關(guān)學(xué)科的學(xué)士學(xué)位

數(shù)據(jù)采集工程師崗位職責(zé) 篇8

　　數(shù)據(jù)處理工程師（大數(shù)據(jù)項(xiàng)目）全成通信上海全成通信技術(shù)有限公司，全成通信，全成崗位職責(zé)：

　　1、負(fù)責(zé)大數(shù)據(jù)平臺(tái)的日常維護(hù)和監(jiān)控

　　2、負(fù)責(zé)大數(shù)據(jù)項(xiàng)目日?qǐng)?bào)發(fā)布工作

　　3、負(fù)責(zé)日?qǐng)?bào)數(shù)據(jù)的統(tǒng)計(jì)

　　4、負(fù)責(zé)大數(shù)據(jù)項(xiàng)目日常數(shù)據(jù)的計(jì)算、分析和維護(hù)

　　任職要求：

　　1、一年以上相關(guān)工作經(jīng)驗(yàn)，有電信行業(yè)經(jīng)驗(yàn)者優(yōu)先

　　2、熟悉linux和excel，熟練使用perl或者其他的'腳本語(yǔ)言

　　3、具有oracledll/dml技術(shù)的使用經(jīng)驗(yàn)

　　4、具有良好的團(tuán)隊(duì)合作精神，有較強(qiáng)的學(xué)習(xí)能力、適應(yīng)能力、溝通能力

數(shù)據(jù)采集工程師崗位職責(zé) 篇9

　　1、參與部門項(xiàng)目的售前工作，參與現(xiàn)場(chǎng)交流，深入挖掘用戶需求，編寫投標(biāo)方案，參與投標(biāo);

　　2、完成所負(fù)責(zé)項(xiàng)目的需求規(guī)格說明書的編寫，并向項(xiàng)目組開發(fā)人員和測(cè)試人員講解需求，如需求發(fā)生變化及時(shí)調(diào)整需求。

　　3、完成所負(fù)責(zé)項(xiàng)目的概要設(shè)計(jì)，并解決項(xiàng)目進(jìn)展過程中的需求與設(shè)計(jì)問題;

　　4、可承擔(dān)部分項(xiàng)目經(jīng)理的職責(zé)，組織相關(guān)資源對(duì)項(xiàng)目工作進(jìn)行計(jì)劃/控制/調(diào)整;

數(shù)據(jù)采集工程師崗位職責(zé) 篇10

　　1、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)的設(shè)計(jì)、開發(fā)、部署、維護(hù)和優(yōu)化;

　　2、參與公司項(xiàng)目數(shù)據(jù)庫(kù)架構(gòu)設(shè)計(jì),及相關(guān)文檔的撰寫;

　　3、協(xié)助開發(fā)完成數(shù)據(jù)庫(kù)表的設(shè)計(jì)以及SQL調(diào)優(yōu),給開發(fā)人員提供SQL調(diào)優(yōu)指導(dǎo);

　　4、負(fù)責(zé)數(shù)據(jù)庫(kù)技術(shù)規(guī)范建設(shè)。

數(shù)據(jù)采集工程師崗位職責(zé) 篇11

　　崗位職責(zé):

　　1.負(fù)責(zé)銜接大數(shù)據(jù)平臺(tái)與前端的數(shù)據(jù)傳輸；

　　2.根據(jù)客戶需求設(shè)計(jì)大數(shù)據(jù)業(yè)務(wù)平臺(tái)架構(gòu)、配置組件；

　　3.負(fù)責(zé)后臺(tái)服務(wù)的調(diào)試與測(cè)試，梳理接口文檔、開發(fā)文檔與測(cè)試文檔。

　　任職資格:

　　1.碩士以上，或較為優(yōu)秀的本科生；后端開發(fā)經(jīng)驗(yàn)2年以上；

　　2.有基于b/s架構(gòu)進(jìn)行實(shí)際業(yè)務(wù)平臺(tái)開發(fā)的經(jīng)驗(yàn)，有to b軟件開發(fā)經(jīng)驗(yàn)更佳；

　　3.通用軟件開發(fā)基礎(chǔ)、軟件架構(gòu)基礎(chǔ)、scrum敏捷開發(fā)方法，有大數(shù)據(jù)基礎(chǔ)更佳；

　　4.精通java或python語(yǔ)言，有rcp框架經(jīng)驗(yàn)更佳；熟練掌握mybatis、springcloud / springboot、node.js等框架，精通sql技術(shù)；了解以太網(wǎng)通信協(xié)議，熟悉websocket技術(shù)。熟練使用git，svn等工具；

　　5.學(xué)習(xí)能力強(qiáng)，勇于挑戰(zhàn)，代碼質(zhì)量意識(shí)強(qiáng)，篤信“工程即魔法”。

數(shù)據(jù)采集工程師崗位職責(zé) 篇12

　　1、針對(duì)海量用戶行為數(shù)據(jù)進(jìn)行挖掘和建模，深入挖掘數(shù)據(jù)的業(yè)務(wù)價(jià)值。研究機(jī)器學(xué)習(xí)或統(tǒng)計(jì)學(xué)習(xí)領(lǐng)域的前沿技術(shù)，并能活學(xué)活用到項(xiàng)目中。

　　2、基于對(duì)汽車廣告投放業(yè)務(wù)及用戶的理解，參與精準(zhǔn)營(yíng)銷、個(gè)性化推薦等模型建設(shè)和領(lǐng)域研究，提升轉(zhuǎn)化率等業(yè)務(wù)指標(biāo)。

　　3、根據(jù)業(yè)務(wù)需要采集相關(guān)數(shù)據(jù)，對(duì)原始數(shù)據(jù)進(jìn)行ETL和歸類整理，并實(shí)現(xiàn)流程自動(dòng)化。

　　4、其他大數(shù)據(jù)處理及項(xiàng)目開發(fā)工作等。

數(shù)據(jù)采集工程師崗位職責(zé) 篇13

　　崗位職責(zé)：

　　1、對(duì)通信和金融業(yè)務(wù)數(shù)據(jù)進(jìn)行分析和挖掘，滿足研發(fā)和運(yùn)營(yíng)等部門的業(yè)務(wù)需求和決策需求;

　　2、能根據(jù)業(yè)務(wù)特點(diǎn)選擇最合適的數(shù)據(jù)挖掘算法，并做調(diào)優(yōu);

　　3、支持?jǐn)?shù)據(jù)分析、挖掘算法平臺(tái)的部署和日常運(yùn)營(yíng);

　　4、撰寫分析類報(bào)告。

　　任職資格：

　　1、大學(xué)本科或本科以上統(tǒng)計(jì)學(xué)、數(shù)學(xué)或其他相關(guān)專業(yè)，對(duì)數(shù)據(jù)結(jié)構(gòu)熟悉;

　　2、熟練使用python進(jìn)行數(shù)據(jù)分析、處理、可視化。熟悉numpy/pandas/matplotlib等常用模塊。熟練使用sql,最好用過hive-sql或spark-sql;

　　3、對(duì)hadoop/spark有一定了解。能夠簡(jiǎn)單使用hadoop系列命令;

　　4、對(duì)線性回歸，決策森林，xgboost，評(píng)分卡等數(shù)據(jù)挖掘相關(guān)算法有一定了解;

　　5、做過web接口調(diào)試，熟悉json者優(yōu)先;

　　6、熟練掌握PPT和EXCEL制作;

　　7、具備良好的學(xué)習(xí)、溝通與表達(dá)能力，具有較強(qiáng)的團(tuán)隊(duì)合作精神，對(duì)工作富有熱情，能承受工作壓力;

　　8、有運(yùn)營(yíng)商或金融類相關(guān)數(shù)據(jù)經(jīng)驗(yàn)工作優(yōu)先考慮;

　　9、能適應(yīng)中長(zhǎng)期現(xiàn)場(chǎng)出差。

數(shù)據(jù)采集工程師崗位職責(zé) 篇14

　　1、熟悉掌握業(yè)務(wù)系統(tǒng)功能，靈活制定不同業(yè)務(wù)的推廣策略，通過活動(dòng)運(yùn)營(yíng)、內(nèi)容運(yùn)營(yíng)等方式策劃并落地項(xiàng)目推廣方案，拓展系統(tǒng)用戶量及影響力。

　　2、熟悉公文寫作，配合完成工作匯報(bào)材料的撰寫及分析報(bào)告。

　　3、與企業(yè)及海關(guān)關(guān)系的協(xié)調(diào)和維護(hù)，強(qiáng)化合作關(guān)系，維護(hù)好項(xiàng)目參與方的'關(guān)系。

　　4、面向進(jìn)出口企業(yè)開展調(diào)研，主動(dòng)挖掘系統(tǒng)需求，進(jìn)行需求分析，形成調(diào)研報(bào)告或業(yè)務(wù)需求報(bào)告。

　　5、項(xiàng)目管理相關(guān)工作，包括組織業(yè)務(wù)需求論證、項(xiàng)目立項(xiàng)、進(jìn)度管理等根據(jù)項(xiàng)目管理規(guī)范開展相關(guān)工作。

　　6、完成領(lǐng)導(dǎo)交辦的其他工作事項(xiàng)。

數(shù)據(jù)采集工程師崗位職責(zé) 篇15

　　1、負(fù)責(zé)數(shù)據(jù)接入、數(shù)據(jù)提取、數(shù)據(jù)清洗、底層重構(gòu)、業(yè)務(wù)主題建模等工作;

　　2、參與數(shù)據(jù)集市開發(fā)，用戶畫像標(biāo)簽開發(fā);

　　3、負(fù)責(zé)接口平臺(tái)、自助分析平臺(tái)等系統(tǒng)的建設(shè)和維護(hù);

　　4、針對(duì)具體大數(shù)據(jù)應(yīng)用場(chǎng)景，提供有效解決方案，并針對(duì)具體模型落地實(shí)施;

數(shù)據(jù)采集工程師崗位職責(zé) 篇16

　　1.負(fù)責(zé)企業(yè)級(jí)數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)、規(guī)劃、建設(shè)、實(shí)施、管理,數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)設(shè)計(jì)與數(shù)據(jù)開發(fā)，創(chuàng)建數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)集市

　　2.熟悉數(shù)據(jù)倉(cāng)庫(kù)領(lǐng)域知識(shí)，從架構(gòu)和技術(shù)層面參與建設(shè)數(shù)據(jù)倉(cāng)庫(kù)，包括元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理、性能優(yōu)化和調(diào)優(yōu)。

　　3.負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)平臺(tái)相關(guān)數(shù)據(jù)管理工作，如研發(fā)規(guī)范、質(zhì)量規(guī)范、保障規(guī)范的制定與推動(dòng)實(shí)施落地

　　4.配合和協(xié)助數(shù)據(jù)分析/數(shù)據(jù)挖掘形成底層/中間層的業(yè)務(wù)邏輯切片

數(shù)據(jù)采集工程師崗位職責(zé) 篇17

　　1、負(fù)責(zé)生產(chǎn)環(huán)境Mysql數(shù)據(jù)庫(kù)系統(tǒng)高可用、高性能架構(gòu)方案，分庫(kù)分表策略，數(shù)據(jù)庫(kù)擴(kuò)展方案;

　　2、排查數(shù)據(jù)庫(kù)故障，分析和解決疑難問題，提出預(yù)防方案;

　　3、制定數(shù)據(jù)庫(kù)監(jiān)控策略、備份策略、容災(zāi)策略，探查系統(tǒng)潛在的問題和可能的性能瓶頸并進(jìn)行優(yōu)化;

　　4、對(duì)開發(fā)工程師的SQL語(yǔ)句進(jìn)行審核及SQL優(yōu)化;

　　5、負(fù)責(zé)redis、memcache等非關(guān)系數(shù)據(jù)庫(kù)的管理和擴(kuò)展，能夠根據(jù)業(yè)務(wù)需求完成系統(tǒng)設(shè)計(jì)、架構(gòu)設(shè)計(jì)工作;

　　6、參與前瞻性新技術(shù)研究，解決數(shù)據(jù)庫(kù)相關(guān)疑難問題。

數(shù)據(jù)采集工程師崗位職責(zé) 篇18

　　1、負(fù)責(zé)每日的數(shù)據(jù)倉(cāng)庫(kù)運(yùn)維工作，保障數(shù)據(jù)的穩(wěn)定性、一致性等;

　　2、參與數(shù)據(jù)倉(cāng)庫(kù)的優(yōu)化設(shè)計(jì)，如元數(shù)據(jù)、數(shù)據(jù)權(quán)限、調(diào)度優(yōu)化;

　　3、負(fù)責(zé)數(shù)據(jù)質(zhì)量和數(shù)據(jù)標(biāo)準(zhǔn)化的設(shè)計(jì)與開發(fā);

　　4、負(fù)責(zé)滿足業(yè)務(wù)部門的日常業(yè)務(wù)提數(shù)與報(bào)表需求的開發(fā)。

數(shù)據(jù)采集工程師崗位職責(zé) 篇19

　　崗位職責(zé)：

　　業(yè)務(wù)數(shù)據(jù)的收集整理和分析;

　　負(fù)責(zé)公安、交通領(lǐng)域的業(yè)務(wù)建模和算法設(shè)計(jì);

　　分析項(xiàng)目數(shù)據(jù)需求，完成系統(tǒng)中數(shù)據(jù)分析模塊的設(shè)計(jì)、實(shí)現(xiàn)和測(cè)試;

　　設(shè)計(jì)、構(gòu)建和優(yōu)化基于大數(shù)據(jù)的存儲(chǔ)平臺(tái)架構(gòu)，編寫相關(guān)技術(shù)文檔;

　　設(shè)計(jì)并實(shí)現(xiàn)基于開源項(xiàng)目(Cobar，Spark等)的海量數(shù)據(jù)集成與處理平臺(tái);

　　為其他部門提供數(shù)據(jù)分析支撐。

　　任職資格：

　　計(jì)算機(jī)相關(guān)專業(yè);

　　熟悉數(shù)據(jù)挖掘算法，對(duì)分類、聚類、時(shí)序、圖等算法有很深了解;

　　熟練掌握Hadoop、Spark生態(tài)系統(tǒng)組件(MR、HBase、Hive、ZooKeeper、Spark SQL、Spark Mlib等)，有相關(guān)大數(shù)據(jù)架構(gòu),開發(fā)成功案例;

　　熟練的使用、開發(fā)ETL工具經(jīng)驗(yàn)，有數(shù)據(jù)庫(kù)建模ER建模經(jīng)驗(yàn)優(yōu)先;

　　有海量數(shù)據(jù)BI或數(shù)據(jù)挖掘項(xiàng)目實(shí)施和管理經(jīng)驗(yàn)，對(duì)數(shù)據(jù)挖掘理論方法有一定了解者優(yōu)先;

　　熟悉的Bash Shell和Python等腳本編程能力;

　　強(qiáng)烈的責(zé)任心和工作熱情，良好的團(tuán)隊(duì)合作精神。

數(shù)據(jù)采集工程師崗位職責(zé) 篇20

　　崗位職責(zé)：

　　深入研究業(yè)內(nèi)領(lǐng)先的技術(shù)思路，輸出具有創(chuàng)新價(jià)值的預(yù)研項(xiàng)目可行性分析報(bào)告以及相關(guān)實(shí)驗(yàn)數(shù)據(jù);

　　負(fù)責(zé)產(chǎn)品、銷售、供應(yīng)鏈、電商等公司數(shù)據(jù)的海量挖掘，并建立和優(yōu)化用戶標(biāo)簽、特征模型、產(chǎn)品精準(zhǔn)匹配、異常預(yù)警等;

　　負(fù)責(zé)大數(shù)據(jù)下傳統(tǒng)機(jī)器學(xué)習(xí)算法的并行化實(shí)現(xiàn)及應(yīng)用，并提出改進(jìn)方法和思路;

　　參與公司大數(shù)據(jù)架構(gòu)，負(fù)責(zé)BI實(shí)施中的數(shù)據(jù)挖掘模塊算法研究、模型建立和優(yōu)化，幫助實(shí)現(xiàn)數(shù)據(jù)挖掘和分析平臺(tái)的建設(shè);

　　負(fù)責(zé)相關(guān)數(shù)據(jù)挖掘項(xiàng)目的需求收集、項(xiàng)目建立、項(xiàng)目設(shè)計(jì)開發(fā)和結(jié)果輸出質(zhì)量把控，通過數(shù)據(jù)挖掘結(jié)果驅(qū)動(dòng)業(yè)務(wù)執(zhí)行;

　　配合技術(shù)進(jìn)行數(shù)據(jù)挖掘模型開發(fā)和模型封裝，例如決策規(guī)則模型、預(yù)警模型、流失模型、效果標(biāo)桿模型、客戶生命周期管理模型等;

　　任職要求：

　　大學(xué)本科及以上學(xué)歷，統(tǒng)計(jì)學(xué)、計(jì)算機(jī)、信息技術(shù)、數(shù)學(xué)相關(guān)專業(yè);

　　兩年以上數(shù)據(jù)建模經(jīng)驗(yàn);

　　數(shù)據(jù)主流數(shù)據(jù)庫(kù)，mysql、oracle、DB2等傳統(tǒng)結(jié)構(gòu)化數(shù)據(jù)倉(cāng)庫(kù)，熟悉HBase、MongoDB等非結(jié)構(gòu)化數(shù)據(jù)庫(kù);

　　熟悉常用的聚類、分類、回歸、關(guān)聯(lián)、時(shí)間序列等監(jiān)督式和非監(jiān)督式學(xué)習(xí)算法;

　　熟悉R、Python、MLlib等數(shù)據(jù)挖掘工具中至少一種。

　　熟悉spark、storm等大數(shù)據(jù)計(jì)算框架者優(yōu)先。

數(shù)據(jù)采集工程師崗位職責(zé) 篇21

　　1.負(fù)責(zé)直播業(yè)務(wù)相關(guān)數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)模型設(shè)計(jì);

　　3.參與數(shù)據(jù)倉(cāng)庫(kù)ETL流程設(shè)計(jì)、開發(fā)和優(yōu)化，解決ETL過程相關(guān)技術(shù)問題;

　　3.參與項(xiàng)目規(guī)劃，數(shù)據(jù)采集設(shè)計(jì)，數(shù)據(jù)倉(cāng)庫(kù)開發(fā)，模型開發(fā)，報(bào)表開發(fā)等;

　　4. 總結(jié)數(shù)據(jù)倉(cāng)庫(kù)建模的方法，負(fù)責(zé)數(shù)據(jù)產(chǎn)品平臺(tái)化和系統(tǒng)化;

數(shù)據(jù)采集工程師崗位職責(zé) 篇22

　　職責(zé)描述：

　　1、負(fù)責(zé)文本數(shù)據(jù)處理，如格式轉(zhuǎn)換、分詞處理、實(shí)體抽取、專業(yè)詞典整理等；

　　2、自然語(yǔ)言處理相關(guān)工具開發(fā)；

　　3、協(xié)助訓(xùn)練nlp模型。

　　任職要求：

　　1、計(jì)算機(jī)相關(guān)專業(yè)（本科2年以上）；

　　2、精通c/c++或java，熟悉python、bash？shell等腳本語(yǔ)言；

　　3、熟悉正則表達(dá)式，了解常用分類、聚類算法及相應(yīng)工具；

　　4、熟悉使用基本分類、聚類算法及相應(yīng)工具；

　　5、具備nlp相關(guān)工作（特別是數(shù)據(jù)處理與分析）經(jīng)驗(yàn)，了解nlp基本知識(shí)；

　　6、其他：耐心、細(xì)致；較強(qiáng)的邏輯思維能力；性格踏實(shí)穩(wěn)定，抗壓能力強(qiáng)。

數(shù)據(jù)采集工程師崗位職責(zé) 篇23

　　1、對(duì)海量業(yè)務(wù)數(shù)據(jù)進(jìn)行分析，并利用算法挖掘用戶行為特征，發(fā)現(xiàn)潛在規(guī)律，建立機(jī)器學(xué)習(xí)算法并優(yōu)化;

　　2、利用數(shù)據(jù)挖掘技術(shù)分析、預(yù)測(cè)用戶的消費(fèi)行為;

　　3、建立各種業(yè)務(wù)邏輯模型和數(shù)學(xué)模型，幫助公司改善運(yùn)營(yíng)管理，節(jié)省成本。

　　任職要求：

　　1、大學(xué)本科及以上學(xué)歷;

　　2、統(tǒng)計(jì)學(xué)、會(huì)計(jì)學(xué)、數(shù)學(xué)、物理等相關(guān)專業(yè);

　　3、本科5年以上同崗位工作經(jīng)驗(yàn)，研究生3年以上同崗位工作經(jīng)驗(yàn);

　　4、對(duì)統(tǒng)計(jì)學(xué)和數(shù)據(jù)挖掘算法原理有較為深刻的理解，了解數(shù)據(jù)倉(cāng)庫(kù)思想，熟悉SPSS、SAS、R、MAHOUT等數(shù)據(jù)挖掘軟件之一;

　　5、熟悉決策樹、聚類、邏輯回歸，關(guān)聯(lián)分析、SVM，貝葉斯等數(shù)據(jù)挖掘算法，有海量數(shù)據(jù)挖掘的項(xiàng)目經(jīng)驗(yàn);

　　6、有用戶行為分析、用戶建模、業(yè)務(wù)建模、數(shù)學(xué)建模經(jīng)驗(yàn)優(yōu)先;

　　7、良好的邏輯分析能力、分析問題和解決問題的`能力，對(duì)數(shù)據(jù)敏感，良好的溝通能力。

數(shù)據(jù)采集工程師崗位職責(zé) 篇24

　　1、負(fù)責(zé)大數(shù)據(jù)平臺(tái)搭建及數(shù)據(jù)倉(cāng)庫(kù)建模；

　　2、負(fù)責(zé)數(shù)據(jù)庫(kù)管理及數(shù)據(jù)優(yōu)化；

　　3、利用大數(shù)據(jù)相關(guān)技術(shù)實(shí)現(xiàn)對(duì)數(shù)據(jù)的分析、挖掘、處理、及數(shù)據(jù)可視化等相關(guān)工作；

　　4、維護(hù)大數(shù)據(jù)平臺(tái)并能解決相關(guān)問題，保障平臺(tái)正常運(yùn)行；

　　5、學(xué)習(xí)和研究新技術(shù)以滿足系統(tǒng)需求。

數(shù)據(jù)采集工程師崗位職責(zé) 篇25

　　1、參與數(shù)據(jù)倉(cāng)庫(kù)建設(shè)，負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì)；

　　2、開發(fā)高質(zhì)量可擴(kuò)展的底層數(shù)據(jù)倉(cāng)庫(kù)體系；

　　3、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)與業(yè)務(wù)系統(tǒng)的接口設(shè)計(jì)和確認(rèn)工作；

　　4、負(fù)責(zé)數(shù)據(jù)平臺(tái)相關(guān)的管理工作，如數(shù)據(jù)研發(fā)規(guī)范、數(shù)據(jù)質(zhì)量及穩(wěn)定性保證等建設(shè)；

　　5、參與公司各個(gè)業(yè)務(wù)線BI、數(shù)據(jù)產(chǎn)品與應(yīng)用的數(shù)據(jù)研發(fā)，發(fā)覺數(shù)據(jù)潛在價(jià)值。

數(shù)據(jù)采集工程師崗位職責(zé) 篇26

　　1、維護(hù)數(shù)據(jù)庫(kù)穩(wěn)定運(yùn)行，持續(xù)發(fā)現(xiàn)和解決潛在的問題；

　　2、負(fù)責(zé)數(shù)據(jù)庫(kù)的性能優(yōu)化，使用新技術(shù)和新架構(gòu)滿足日益增長(zhǎng)的業(yè)務(wù)需求；

　　3、負(fù)責(zé)數(shù)據(jù)庫(kù)的監(jiān)控系統(tǒng)設(shè)計(jì)，為開發(fā)團(tuán)隊(duì)提供平臺(tái)支持；

　　4、負(fù)責(zé)數(shù)據(jù)庫(kù)的運(yùn)維方面的相關(guān)工作，包括數(shù)據(jù)庫(kù)的安裝部署、壓力測(cè)試、備份恢復(fù)、知識(shí)庫(kù)管理等

　　5、負(fù)責(zé)數(shù)據(jù)庫(kù)進(jìn)行容量規(guī)劃、架構(gòu)設(shè)計(jì)，提高業(yè)務(wù)高可用性和容災(zāi)能力；

　　6、負(fù)責(zé)數(shù)據(jù)庫(kù)相關(guān)工作的整體規(guī)劃，提供決策建議。

數(shù)據(jù)采集工程師崗位職責(zé) 篇27

　　1、負(fù)責(zé)產(chǎn)品數(shù)據(jù)庫(kù)研發(fā)，參與系統(tǒng)整體架構(gòu)設(shè)計(jì)；

　　2、根據(jù)產(chǎn)品目標(biāo)負(fù)責(zé)相關(guān)業(yè)務(wù)的數(shù)據(jù)分析、建模、設(shè)計(jì)評(píng)審，跟進(jìn)產(chǎn)品過程中數(shù)據(jù)庫(kù)設(shè)計(jì)；

　　3、負(fù)責(zé)產(chǎn)品模塊的數(shù)據(jù)層分析、設(shè)計(jì)、編碼、測(cè)試；

　　4、能夠獨(dú)立完成產(chǎn)品數(shù)據(jù)層開發(fā)任務(wù)，負(fù)責(zé)各類數(shù)據(jù)接口開發(fā)；

　　5、負(fù)責(zé)各類型數(shù)據(jù)操作處理和兼容問題；數(shù)據(jù)庫(kù)復(fù)雜SQL開發(fā)和調(diào)優(yōu)。

數(shù)據(jù)采集工程師崗位職責(zé) 篇28

　　1、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)（HADOOP）ETL工作以及數(shù)據(jù)運(yùn)營(yíng)；

　　2、負(fù)責(zé)數(shù)據(jù)產(chǎn)品的業(yè)務(wù)需求梳理、數(shù)據(jù)開發(fā)以及維護(hù)；

　　3、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)的'維度建模以及設(shè)計(jì)相關(guān)的腳本調(diào)度；

　　4、負(fù)責(zé)維度模型的數(shù)據(jù)處理的腳本開發(fā)，程序開發(fā)以及接口對(duì)接。

數(shù)據(jù)采集工程師崗位職責(zé) 篇29

　　1、MySQL數(shù)據(jù)庫(kù)規(guī)劃、設(shè)計(jì)、監(jiān)控維護(hù)、升級(jí)、備份、鏡像、容災(zāi);

　　2、數(shù)據(jù)庫(kù)服務(wù)器的安裝部署、性能優(yōu)化、可靠性、容災(zāi)方案制定等;

　　3、對(duì)數(shù)據(jù)庫(kù)性能分析與調(diào)優(yōu)，排錯(cuò)，保證數(shù)據(jù)安全;

　　4、負(fù)責(zé)對(duì)開發(fā)工程師的SQL語(yǔ)句進(jìn)行優(yōu)化;

　　5、配合研發(fā)制定數(shù)據(jù)庫(kù)技術(shù)方案，分庫(kù)分表策略，現(xiàn)有表結(jié)構(gòu)優(yōu)化，數(shù)據(jù)遷移方案;

　　6、負(fù)責(zé)Mysql自動(dòng)化相關(guān)事宜;

數(shù)據(jù)采集工程師崗位職責(zé) 篇30

　　任職要求：

　　1、軟件、計(jì)算機(jī)、通訊等理工科相關(guān)專業(yè)本科及以上學(xué)歷；

　　2、具有3年配置管理或產(chǎn)品數(shù)據(jù)管理經(jīng)驗(yàn)；

　　3、熟悉計(jì)算機(jī)與網(wǎng)絡(luò)管理；

　　4、熟悉配置管理與產(chǎn)品數(shù)據(jù)管理知識(shí)，熟練掌握svn、plm等數(shù)據(jù)管理平臺(tái)的`操作與管理；

　　5、熟悉系統(tǒng)與信息安全知識(shí)；

　　6、具有較強(qiáng)的邏輯思維能力及良好的溝通能力，良好的主動(dòng)學(xué)習(xí)能力及執(zhí)行力。

數(shù)據(jù)采集工程師崗位職責(zé) 篇31

　　崗位職責(zé)：

　　1、負(fù)責(zé)構(gòu)建公司數(shù)據(jù)分析與數(shù)據(jù)挖掘業(yè)務(wù)分析體系,整體架構(gòu)設(shè)計(jì)、規(guī)劃,充分發(fā)揮數(shù)據(jù)的價(jià)值,提高數(shù)據(jù)質(zhì)量,促進(jìn)公司業(yè)務(wù)更好的發(fā)展;

　　2、通過建立業(yè)務(wù)的數(shù)據(jù)分析模型來指導(dǎo)業(yè)務(wù)的發(fā)展,對(duì)數(shù)據(jù)庫(kù)信息進(jìn)行深度挖掘和有效利用,充分實(shí)現(xiàn)數(shù)據(jù)的商業(yè)價(jià)值,構(gòu)建公司核心競(jìng)爭(zhēng)力;

　　3、跟蹤并分析用戶行為,為公司廣告業(yè)務(wù)的發(fā)展及產(chǎn)品的設(shè)計(jì)進(jìn)行海量數(shù)據(jù)支持;

　　4、負(fù)責(zé)數(shù)據(jù)管理中心團(tuán)隊(duì)的建設(shè)、發(fā)展、激勵(lì)、培訓(xùn)等管理工作,有效領(lǐng)導(dǎo)數(shù)據(jù)分析與挖掘團(tuán)隊(duì)支持和推動(dòng)業(yè)務(wù)發(fā)展。

　　任職要求：

　　1、熱愛數(shù)據(jù),對(duì)數(shù)據(jù)及邏輯關(guān)系敏感,并對(duì)數(shù)據(jù)體系有深入的認(rèn)識(shí);

　　2、本科以上學(xué)歷、計(jì)算機(jī)/統(tǒng)計(jì)學(xué)/經(jīng)濟(jì)學(xué)等相關(guān)專業(yè)，有一定工作經(jīng)驗(yàn)，;

　　3、具備數(shù)據(jù)建模(機(jī)器學(xué)習(xí),數(shù)據(jù)挖掘,信息檢索背景)和分析理論知識(shí)和經(jīng)驗(yàn);

　　4、熟悉Linux平臺(tái)的海量數(shù)據(jù)分布式存儲(chǔ)、分布式計(jì)算;

　　5、熟悉常用的數(shù)據(jù)分析工具，有基于Hadoop的云計(jì)算平臺(tái)，HBase及類似的NoSQL存儲(chǔ), MySQL,和BI系統(tǒng)等實(shí)踐經(jīng)驗(yàn);

　　6、熟悉互聯(lián)網(wǎng)并且對(duì)于互聯(lián)網(wǎng)常見的業(yè)務(wù)形態(tài)與商業(yè)模式有深入的理解,對(duì)業(yè)務(wù)變化有敏銳的洞察力;

　　7、有較強(qiáng)的對(duì)業(yè)務(wù)理解與分析能力，了解業(yè)務(wù)規(guī)劃與策劃能力以及相應(yīng)經(jīng)驗(yàn);

　　8、具備較強(qiáng)的問題定位、分解、解決能力及計(jì)劃和組織能力;

　　9、善于創(chuàng)新、思維敏捷、精力充沛，溝通能力強(qiáng)，能夠承受較大工作壓力;

　　10、有電子商務(wù)或互聯(lián)網(wǎng)數(shù)據(jù)倉(cāng)庫(kù)或商業(yè)智能架構(gòu)設(shè)計(jì)、開發(fā)實(shí)施經(jīng)驗(yàn)者優(yōu)先。

數(shù)據(jù)采集工程師崗位職責(zé) 篇32

　　崗位職責(zé):

　　1.從事數(shù)學(xué)建模及數(shù)據(jù)挖掘應(yīng)用方法研究;

　　2.與開發(fā)部門配合實(shí)現(xiàn)相應(yīng)的數(shù)據(jù)分析模塊的開發(fā);

　　3.制定公司數(shù)據(jù)可管理體系,建產(chǎn)研究用數(shù)據(jù)平臺(tái)。

　　任職要求:

　　1.應(yīng)用數(shù)學(xué)、統(tǒng)計(jì)學(xué)、計(jì)算機(jī)等專業(yè)碩士以上學(xué)歷;

　　2.具備常用機(jī)器學(xué)習(xí)、數(shù)據(jù)挖掘相關(guān)知識(shí),會(huì)spark;

　　3.具備一種或多種開發(fā)語(yǔ)言(如scalapython java等)的.程序和算法開發(fā)能力,掌握常用數(shù)據(jù)結(jié)構(gòu)和算法;

　　4.有視頻、地圖、文本、社交等大數(shù)據(jù)分析能力;

　　5.有工業(yè)數(shù)據(jù)分析工作經(jīng)驗(yàn)者優(yōu)先。

數(shù)據(jù)采集工程師崗位職責(zé) 篇33

　　1.高質(zhì)量地完成集團(tuán)內(nèi)外各類數(shù)據(jù)生產(chǎn)集成、數(shù)據(jù)分析應(yīng)用建設(shè)工作，涉及投研、市場(chǎng)、ERP、全球金融資訊等四個(gè)業(yè)務(wù)領(lǐng)域方向;

　　2.需求及源系統(tǒng)數(shù)據(jù)分析，完成數(shù)據(jù)倉(cāng)庫(kù)/EDM等系統(tǒng)數(shù)據(jù)模型及應(yīng)用模型設(shè)計(jì)、數(shù)據(jù)Mapping規(guī)則文檔撰寫、開發(fā)、自測(cè)及上線部署;

　　3. 數(shù)據(jù)質(zhì)量稽核、問題分析及處理,優(yōu)化數(shù)據(jù)處理程序;

　　4. 洞察數(shù)據(jù)、滿足業(yè)務(wù)場(chǎng)景需求。

數(shù)據(jù)采集工程師崗位職責(zé) 篇34

　　工作職責(zé)：

　　1、運(yùn)用數(shù)據(jù)挖掘和機(jī)器學(xué)習(xí)方法和技術(shù)，深入挖掘和分析海量商業(yè)數(shù)據(jù)

　　2、包括但不限于風(fēng)控模型、用戶畫像、商家畫像建模、文本分析和商業(yè)預(yù)測(cè)等

　　3、運(yùn)用數(shù)據(jù)挖掘/統(tǒng)計(jì)學(xué)習(xí)的理論和方法，深入挖掘和分析用戶行為，建設(shè)用戶畫像

　　4、從系統(tǒng)應(yīng)用的角度，利用數(shù)據(jù)挖掘/統(tǒng)計(jì)學(xué)習(xí)的理論和方法解決實(shí)際問題

　　任職要求

　　—計(jì)算機(jī)、數(shù)學(xué)，統(tǒng)計(jì)學(xué)或人工智能等相關(guān)專業(yè)碩士以上學(xué)歷，5—10年以上或相關(guān)工作經(jīng)歷

　　—精通1—2種編程語(yǔ)言（Python或Java），熟練掌握常用數(shù)據(jù)結(jié)構(gòu)和算法，具備比較強(qiáng)的'實(shí)戰(zhàn)開發(fā)能力，能帶領(lǐng)團(tuán)隊(duì)共同進(jìn)步。

　　—具有統(tǒng)計(jì)或數(shù)據(jù)挖掘背景，并對(duì)機(jī)器學(xué)習(xí)算法和理論有較深入的研究

　　—熟悉數(shù)據(jù)挖掘相關(guān)算法（決策樹、SVM、聚類、邏輯回歸、貝葉斯）

　　—具有良好的學(xué)習(xí)能力、時(shí)間和流程意識(shí)、溝通能力

　　—熟悉Spark或hadoop生態(tài)分布式計(jì)算框架

　　—優(yōu)秀的溝通能力，有創(chuàng)新精神，樂于接受挑戰(zhàn)，能承受工作壓力

　　—有互聯(lián)網(wǎng)，央企，政務(wù)，金融等領(lǐng)域大規(guī)模數(shù)據(jù)挖掘經(jīng)驗(yàn)者優(yōu)先