爬蟲工程師崗位職責(通用30篇)
爬蟲工程師崗位職責 篇1
職位描述:
1、參與爬蟲系統(tǒng)的架構(gòu)設(shè)計與開發(fā);
2、負責執(zhí)行和開發(fā)分布式網(wǎng)絡(luò)爬蟲系統(tǒng),進行多平臺信息的抓取和分析;
3、負責網(wǎng)頁信息和app數(shù)據(jù)抽取、清洗、消重等工作,提升平臺的抓取效率;
4、參與爬蟲核心算法和策略優(yōu)化,熟悉采集系統(tǒng)的`調(diào)度策略;
5、實時監(jiān)控爬蟲的進度和警報反饋。
任職要求:
1、本科以上學歷,3年以上爬蟲開發(fā)相關(guān)經(jīng)驗,熟練使用python或java進行開發(fā);
2、熟練使用正則表達式、css path、xpath等,能夠從結(jié)構(gòu)化的和非結(jié)構(gòu)化的數(shù)據(jù)中獲取信息;
3、熟練使用mysql數(shù)據(jù)庫,掌握redis、mongodb、hive等常用nosql技術(shù)并具有實戰(zhàn)經(jīng)驗;
4、熟悉各種抓取技術(shù),包括代理、phantomjs/selenium、驗證碼處理;
5、熟悉整個爬蟲的設(shè)計及實現(xiàn)流程,有從事網(wǎng)絡(luò)爬蟲、網(wǎng)頁信息抽取開發(fā)經(jīng)驗,熟悉反爬蟲技術(shù),有分布式爬蟲架構(gòu)經(jīng)驗;
6、具有數(shù)據(jù)挖掘、自然語言處理、信息檢索、機器學習背景者優(yōu)先;
7、快速學習能力,工作積極主動,有創(chuàng)業(yè)熱情和良好的團隊協(xié)助能力;
8、需要有大量數(shù)據(jù)爬取以及高難度反爬經(jīng)驗,沒有相關(guān)經(jīng)驗的勿擾。
爬蟲工程師崗位職責 篇2
職位描述:
負責設(shè)計和開發(fā)分布式網(wǎng)絡(luò)爬蟲系統(tǒng)
應(yīng)用多種技術(shù)對各平臺進行數(shù)據(jù)采集
設(shè)計數(shù)據(jù)采集策略,提升數(shù)據(jù)采集效率及質(zhì)量
與各行業(yè)分析師溝通,分析項目的可行性和討論抓取方案。
兩年以上爬蟲開發(fā)相關(guān)經(jīng)驗,本科及以上學歷,計算機相關(guān)專業(yè)為佳
熟練掌握c#或java開發(fā)語言為佳
了解tcp/ip,http及相關(guān)網(wǎng)絡(luò)協(xié)議
熟悉js / html / xpath / json /正則表達式等網(wǎng)頁相關(guān)技術(shù)
熟悉分布式、多線程、緩存、消息隊列等互聯(lián)網(wǎng)技術(shù)
熟悉手機應(yīng)用的數(shù)據(jù)抓取,手機app開發(fā)經(jīng)驗,加/脫殼經(jīng)驗為佳
良好的溝通技能,注重細節(jié),抗壓性強
良好的英語溝通技能為佳
爬蟲工程師崗位職責 篇3
職位要求
1、計算機相關(guān)專業(yè),本科及以上學歷,3年以上爬蟲相關(guān)工作經(jīng)驗;
2、對爬蟲編程有強烈愛好,熟練精通掌握至少1種語言java、python,在需要的情況下能快速上手新語言切換;
3、深入理解tpc/ip、http、以及web登錄認證的機制,有成功破解復雜驗證碼的經(jīng)驗;
4、有通用分布式爬蟲系統(tǒng)架構(gòu)和開發(fā)經(jīng)驗,能快速部署新的爬蟲應(yīng)用;
5、已有2年以上網(wǎng)絡(luò)爬蟲或搜索引擎工作經(jīng)驗,參與過大規(guī)模數(shù)據(jù)爬蟲優(yōu)先考慮;
6、有app安全、逆向等領(lǐng)域的經(jīng)驗;
7、具有良好的溝通、團隊協(xié)作、計劃能力,有過1—2人的團隊管理經(jīng)驗。
崗位職責
1、建設(shè)完善分布式爬蟲系統(tǒng);
2、建立通用的爬蟲框架,能夠快速適應(yīng)新的爬蟲需求;
3、快速完成對目標資源的數(shù)據(jù)抓取、處理。
爬蟲工程師崗位職責 篇4
職位描述:
1、負責設(shè)計和開發(fā)分布式網(wǎng)絡(luò)爬蟲系統(tǒng),進行多平臺信息的抓取和分析工作;
2、負責網(wǎng)頁信息和app數(shù)據(jù)抽取、清洗、消重等工作,提升平臺的抓取效率;
3、參與爬蟲核心算法和策略優(yōu)化,熟悉采集系統(tǒng)的調(diào)度策略;
4、實時監(jiān)控爬蟲的進度和警報反饋。
任職要求:
1、有扎實的算法和數(shù)據(jù)結(jié)構(gòu)能力;
2、熟悉爬蟲原理,熟悉常見的反爬蟲技術(shù),有爬蟲相關(guān)項目開發(fā)經(jīng)驗者優(yōu)先;
3、掌握http協(xié)議,熟悉html、dom、xpath等常見的數(shù)據(jù)抽取技術(shù);
4、有大規(guī)模數(shù)據(jù)處理、數(shù)據(jù)挖掘、信息提取等經(jīng)驗者優(yōu)先。
爬蟲工程師崗位職責 篇5
崗位職責:
1、參與app爬蟲項目的架構(gòu)設(shè)計、研發(fā)工作,改進和提升爬蟲效率;
2、攻破各種反爬策略;
3、解決各類技術(shù)疑難問題,包括網(wǎng)絡(luò)問題、app分析、反編譯等;
4、與大數(shù)據(jù)工程師對接,完成實時數(shù)據(jù)與離線數(shù)據(jù)的爬取與對接;
任職資格:
1、計算機及相關(guān)專業(yè)本科及以上學歷,兩年以上相關(guān)工作經(jīng)驗;
2、精通至少一種開發(fā)語言,如python、java;
3、熟練掌握一種開源爬蟲框架,如scrapy、webmagic,有研發(fā)爬蟲框架經(jīng)驗者優(yōu)先;
4、熟悉appium、selenium等技術(shù);
5、善于獨立分析并解決核心問題,如javascript反爬、爬蟲策略、防屏蔽規(guī)則、app爬取、驗證碼識別技術(shù)等;
6、熟悉mysql,?mongodb,?redis,?elasticsearch等數(shù)據(jù)庫;
7、對爬蟲有濃厚的興趣,責任感強,有較好的交流溝通能力和團隊合作能力;
8、有app安全、逆向等領(lǐng)域經(jīng)驗的優(yōu)先;
爬蟲工程師崗位職責 篇6
職責描述:
1、負責網(wǎng)絡(luò)爬蟲系統(tǒng)的設(shè)計與開發(fā)
2、對爬取的網(wǎng)頁信息進行數(shù)據(jù)抽取,清洗和去重等工作
任職要求:
1、2年及以上網(wǎng)絡(luò)爬蟲開發(fā)經(jīng)驗,本科及大專學歷,計算機相關(guān)專業(yè),
2、積極、溝通順暢,工作認真負責
3、扎實的編程能力,熟悉常用算法和數(shù)據(jù)結(jié)構(gòu)等基礎(chǔ)知識
4、熟練掌握開發(fā)語言java或c/c++,熟悉腳本語言和正則表達式
爬蟲工程師崗位職責 篇7
職位描述:
1、開發(fā)網(wǎng)頁自動化腳本。
2、負責商品信息結(jié)構(gòu)化,編寫自動化腳本解析網(wǎng)頁信息。
3、商品索引系統(tǒng):億級sku的庫存價格實時跟蹤同步,并對商品進行智能分類、本地化、圖片處理和去重。
4、設(shè)計、開發(fā)、測試、部署以及維護并改進各子系統(tǒng);
5、管理項目優(yōu)先級并按時交付。
職位要求:
1、全日制統(tǒng)招本科、碩士畢業(yè),1年以上軟件開發(fā)工作經(jīng)驗;
2、熟悉至少一門通用靜態(tài)編譯編程語言,c/c++/java/c#/go;
3、熟悉web端基礎(chǔ)標準,包括html、css、javascript、json等;
4、熟悉python或其他腳本語言,有興趣和能力根據(jù)需求學習其他編程語言;
5、熟悉unix/linux環(huán)境,memcache/redis/mongodb等存儲系統(tǒng),能獨立設(shè)計開發(fā)包括前后端交互的業(yè)務(wù)子系統(tǒng);
6、熟悉常見的設(shè)計模式、單元測試、持續(xù)開發(fā)集成、code review,并能在日常工作踐行;
7、了解搜索引擎、電子商務(wù)、社交類應(yīng)用的系統(tǒng)基本架構(gòu),能對已有的子系統(tǒng)進行優(yōu)化調(diào)整的優(yōu)先;
8、活躍的開源項目貢獻者優(yōu)先。
爬蟲工程師崗位職責 篇8
職位描述:
1、負責廣告素材線索和垂直類產(chǎn)品爬蟲系統(tǒng)的設(shè)計、開發(fā)
2、抓取數(shù)據(jù)的清洗、落地、分析
3、抓取策略算法的更新維護,以及確保數(shù)據(jù)抽取準確、高效
任職要求:
1、具備強悍的編碼能力、扎實的數(shù)據(jù)結(jié)構(gòu)和算法功底
2、熟悉tcp,http協(xié)議原理;熟悉ajax工作原理;精通python編程,熟悉一種開源爬蟲框架和源碼;
3、有爬蟲、信息抽取、文本分類、大數(shù)據(jù)處理相關(guān)經(jīng)驗優(yōu)先
4、有自然語言處理、機器學習經(jīng)驗優(yōu)先
爬蟲工程師崗位職責 篇9
崗位職責:
1、負責網(wǎng)絡(luò)爬蟲的架構(gòu)設(shè)計、開發(fā)與優(yōu)化;
2、負責抓取數(shù)據(jù)的清洗、落地、分析;
3、抓取策略算法的更新維護,以及確保數(shù)據(jù)抽取準確、高效。
任職要求:
1、兩年及以上互聯(lián)網(wǎng)或軟件行業(yè)工作經(jīng)驗;
2、理解http協(xié)議,熟悉html、dom、xpath;
3、熟悉linux開發(fā)環(huán)境,至少熟悉python/go/java/node、js中的一種編程語言;
4、有爬蟲、信息抽取、文本分類、大數(shù)據(jù)處理相關(guān)經(jīng)驗優(yōu)先;
5、有自然語言處理、機器學習經(jīng)驗優(yōu)先;
6、熟悉瀏覽器內(nèi)核、渲染機制優(yōu)先;
7、工作認真,細心,有條理,積極性高;良好的溝通能力及團隊合作精神。
爬蟲工程師崗位職責 篇10
職責描述:
1、負責公司產(chǎn)品的爬蟲架構(gòu)設(shè)計與開發(fā),以及爬蟲策略優(yōu)化等工作;
2、根據(jù)數(shù)據(jù)產(chǎn)品需求,負責對網(wǎng)頁等大規(guī)模文本數(shù)據(jù)抓取、清洗、存儲等設(shè)計開發(fā)工作;
任職要求:
1、計算機、數(shù)學或統(tǒng)計等相關(guān)專業(yè)本科及以上學歷,1年以上爬蟲相關(guān)工作經(jīng)驗;
2、熟悉linux平臺,熟練掌握python或java爬蟲開發(fā)工作;
3、熟悉靜態(tài)、動態(tài)網(wǎng)頁等大規(guī)模文本數(shù)據(jù)的高效信息抽取、清洗、存儲等技術(shù);
4、有反爬相關(guān)問題處理經(jīng)驗,精通常用的爬蟲技術(shù)及架構(gòu)設(shè)計,并能快速開發(fā)實現(xiàn);
5、具備良好的編程習慣和算法基礎(chǔ);
6、善于學習,熱愛技術(shù)開發(fā),善于團隊協(xié)作,能積極主動地參與公司產(chǎn)品研發(fā)等相關(guān)工作。職責描述:
1、負責公司產(chǎn)品的爬蟲架構(gòu)設(shè)計與開發(fā),以及爬蟲策略優(yōu)化等工作;
2、根據(jù)數(shù)據(jù)產(chǎn)品需求,負責對網(wǎng)頁等大規(guī)模文本數(shù)據(jù)抓取、清洗、存儲等設(shè)計開發(fā)工作;
爬蟲工程師崗位職責 篇11
工作內(nèi)容:
1、基礎(chǔ)系統(tǒng)架構(gòu)、模塊、庫和組件的研發(fā);
2、分布式海量數(shù)據(jù)存儲和分析系統(tǒng)的研發(fā)和調(diào)優(yōu);
3、統(tǒng)計分析、報表、saas業(yè)務(wù)等系統(tǒng)研發(fā);
4、crm、財務(wù)結(jié)算、工作流等內(nèi)部管理系統(tǒng)的研發(fā)。
能力要求:
1、至少使用php/java/python等一門以上語言,開發(fā)過不算太小的項目;
2、熟悉數(shù)據(jù)結(jié)構(gòu)、db、os、web開發(fā)等相關(guān)知識,對linux相關(guān)的各類技術(shù)情有獨鐘;
3、有大規(guī)模、高性能互聯(lián)網(wǎng)網(wǎng)站系統(tǒng)相關(guān)的設(shè)計和開發(fā)經(jīng)驗者優(yōu)先;
4、具備良好的學習能力和成長潛力,渴望和團隊一起快速成長。
爬蟲工程師崗位職責 篇12
崗位職責
1、熟悉線程池、并發(fā)機制、鎖機制、線程安全原理;
2、java體系知識:網(wǎng)絡(luò)io、設(shè)計模式、linux、jvm、java類加載機制、java內(nèi)存模型;
3、爬蟲經(jīng)驗:webmagic、adsl撥號、正則表達式、脫殼技術(shù)、加密、圖片破解、二維碼識別、滑塊驗證碼破解、httpclient、分詞、分布式爬蟲調(diào)度、數(shù)據(jù)質(zhì)量監(jiān)控、代理ip調(diào)度算法、配置化爬蟲、授權(quán)爬蟲、輿情、應(yīng)用市場、反爬;
4、熟悉http/http、tcp/ip、socket等通訊協(xié)議;
5、6年以上軟件開發(fā)經(jīng)驗,至少2年爬蟲開發(fā)經(jīng)驗。
任職要求
1、采集、清洗、監(jiān)控、配置化、調(diào)度、反爬、數(shù)據(jù)爬取、分詞、檢索等數(shù)據(jù)采集研發(fā);
2、較強的邏輯思維和發(fā)散思維;
3、計算機或相關(guān)專業(yè)本科及以上學歷。
爬蟲工程師崗位職責 篇13
養(yǎng)護工程師(園林)、雅居樂建設(shè)集團有限公司、雅居樂建設(shè)集團有限公司,雅居樂、
【崗位職責】
1、種植協(xié)助與監(jiān)督,協(xié)助綠化工程師進行苗木種植前準備,監(jiān)督苗木種植質(zhì)量;
2、苗木養(yǎng)護,參與編制綠化種植工程、后期維護實施難點解決方案,執(zhí)行養(yǎng)護方案,開展園林養(yǎng)護工作及病蟲害防治工作,進行苗木養(yǎng)護巡檢,對養(yǎng)護期出現(xiàn)的問題做出及時有效的處理;
3、養(yǎng)護成本控制,協(xié)助編制并落實養(yǎng)護成本計劃,保證成本目標的實現(xiàn);
4、養(yǎng)護班組管理,聯(lián)系、確定養(yǎng)護班組,管理、指導養(yǎng)護班組的日常工作,協(xié)調(diào)處理養(yǎng)護工作相關(guān)外部關(guān)系。
【任職要求】
1、園林或相關(guān)專業(yè)本科及以上學歷;
2、2年以上相關(guān)崗位工作經(jīng)驗,條件稍遜者可應(yīng)聘施工員崗位;
3、熟悉各類苗木養(yǎng)護標準、要點及注意事項,有一定的現(xiàn)場組織及溝通協(xié)調(diào)能力;
4、具備相關(guān)專業(yè)中級職稱、技工證者優(yōu)先考慮;
5、具備優(yōu)秀的工作責任心及良好的溝通協(xié)調(diào)能力。
爬蟲工程師崗位職責 篇14
1、在礦總工程師的領(lǐng)導下,全面負責本工區(qū)的技術(shù)管理工作。
2、負責編制各掘進工作面的施工作業(yè)規(guī)程和安全技術(shù)措施,并向全體職工認真?zhèn)鬟_貫徹,經(jīng)常深入作業(yè)現(xiàn)場檢查規(guī)程的執(zhí)行情況,當規(guī)程措施與現(xiàn)場不符時,及時編寫補充措施,并對原規(guī)程措施進行修訂。
3、負責本工區(qū)職工安全技術(shù)知識的學習和“三大規(guī)程”的落實,經(jīng)常組織職工進行崗位練兵和技術(shù)比武活動,教育職工上標準崗、干標準活,不斷提高職工的技術(shù)素質(zhì)和業(yè)務(wù)水平。
4、協(xié)助區(qū)長認真搞好質(zhì)量標準化和安全評估工作,抓好材料消耗和勞動管理工作,采取積極有效的技術(shù)措施,杜絕“三違”現(xiàn)象,避免安全事故、提高工程質(zhì)量、降低材料消耗、提高勞動生產(chǎn)率。
5、認真抓好各掘進工作面的正規(guī)循環(huán)作業(yè),搞好各迎頭的接續(xù)準備工作,分析研究各掘進隊的安全生產(chǎn)動態(tài),嚴格執(zhí)行事故的追查、分析和處理制度,不斷總結(jié)經(jīng)驗教訓,確保安全生產(chǎn)。
6、深入職工、深入現(xiàn)場,搞好調(diào)查研究,及時總結(jié)本工區(qū)安全生產(chǎn)和技術(shù)方面的方法和經(jīng)驗,不斷學習新知識,推廣新技術(shù)和新經(jīng)驗。
7、負責搜集本工區(qū)各種技術(shù)經(jīng)濟指標的資料,及時分析完成情況,采取有效的技術(shù)措施,完成各項技術(shù)經(jīng)濟指標。
爬蟲工程師崗位職責 篇15
崗位職責:
1.負責制定基于rtds實時數(shù)字仿真建模和仿真方案;
2.負責開展控制裝置及系統(tǒng)rtds建模仿真的組織和實施;
3.負責組織研發(fā)rtds仿真分析工具及輔助工具;
4.負責rtds測試標準制定。
任職要求:
學歷:碩士及以上學歷
專業(yè):電氣工程、電力系統(tǒng)及其自動化專業(yè)
工作經(jīng)驗:3年及以上相關(guān)工作經(jīng)驗,掌握電力系統(tǒng)仿真工具;熟悉相關(guān)國家標準及技術(shù)要求。
職稱或職業(yè)資格:中級及以上職稱
爬蟲工程師崗位職責 篇16
職責:
1.負責對海量文本內(nèi)容進行要素提取,精分類別、關(guān)聯(lián)挖掘等技術(shù)的研發(fā)工作;
2.負責實現(xiàn)文本挖掘技術(shù)的產(chǎn)品化,并且結(jié)合招標領(lǐng)域開展應(yīng)用與優(yōu)化;
3.能指導較低職位的工程師完成工作;
4.能與高?蒲袡C構(gòu)進行協(xié)同創(chuàng)新。
任職資格:
1. 模式識別/人工智能/計算機相關(guān)專業(yè),本科或以上學歷;3年以上工作經(jīng)驗;
2. 正直、誠信、敬業(yè)、有激情、有良好團隊交流能力;
3. 精通Java、Python語言,熟悉linux基本開發(fā)環(huán)境;
4. 精通NLP相關(guān)領(lǐng)域知識,擁有較為豐富的文本處理經(jīng)驗:精準分詞、實體抽取、屬性抽取、關(guān)系抽取、分類聚類、主題挖掘、POI挖掘等;
5. 具有NLP實戰(zhàn)經(jīng)驗,參與過相關(guān)項目,有知識圖譜/深度學習研發(fā)經(jīng)驗者優(yōu)先;熟悉Hadoop、 Spark、Storm等分布式處理框架者更佳;
6.熟悉Git,SVN等通用工具;
7. 對自然語言處理、知識圖譜構(gòu)建、人工智能等具有濃厚的興趣。
爬蟲工程師崗位職責 篇17
崗位職責:
1、負責項目的施工、開通、驗收、維護,并保證施工工藝質(zhì)量;
2、制定合理工程實施計劃,并監(jiān)督實施,監(jiān)督工程隊領(lǐng)退料,并提供最終料單;
3、負責項目的溝通協(xié)調(diào),負責解決各類投訴以及客戶服務(wù)質(zhì)量的監(jiān)督和反饋;
4、深入了解主要運營商的`業(yè)務(wù)、系統(tǒng)情況,與客戶進行交流,負責運營商相關(guān)需求的應(yīng)答。
爬蟲工程師崗位職責 篇18
崗位職責:
1、嚴格貫徹執(zhí)行有關(guān)工程造價政策及規(guī)定,掌握工程預(yù)算定額、取費標準及材料價格。
2、參與建設(shè)工程施工合同及相關(guān)經(jīng)濟合同的洽談、簽約及履行。
3、參加圖紙會審及交底、編制審查工程預(yù)(結(jié))算書、完成結(jié)算會審工作,匯總項目總結(jié)算書;熟悉cad制圖。
4、掌握現(xiàn)場工程進度,參與土石方工程、基礎(chǔ)工程、隱蔽工程收方計量工作,負責收集結(jié)算資料,及時核對項目增減量,核對收方簽證單等,編制審核工程結(jié)算書。
5、審核施工單位月完成工作量表,審核材料、半成品的供應(yīng)計劃。
6、編制招標文件,參與工程招投標,進行評標。參與施工合同的簽訂,明確承發(fā)包范圍,并準確掌握合同規(guī)定條款。并負責主要材料、半成品詢價、核價和采購招標工作。
7、負責合同資料的歸檔管理,建立保管好合同臺帳。
任職要求:
1、年齡要求:23---45歲,工民建、工程管理、工程造價相關(guān)專業(yè)畢業(yè);
2、具有注冊造價工程師資格或預(yù)算員資格證書;
3、熟悉廣聯(lián)達,易達等建筑軟件,
爬蟲工程師崗位職責 篇19
硬件pcb工程師成都皓圖智能科技有限責任公司成都皓圖智能科技有限責任公司,成都皓圖智能,皓圖智能,皓圖崗位職責:
1、根據(jù)項目需要,設(shè)計、開發(fā)符合功能、性能要求和質(zhì)量標準的硬件產(chǎn)品;
2、根據(jù)項目要求,設(shè)計詳細的原理圖和pcb圖;
3、負責元器件的選型與評估;
4、制定硬件測試方案,負責硬件調(diào)試和系統(tǒng)聯(lián)調(diào);
5、完成領(lǐng)導交辦的其他工作。
任職要求:
1、本科及以上學歷,3年以上相關(guān)工作經(jīng)驗,有it行業(yè)經(jīng)驗優(yōu)先;
2、具有硬件設(shè)計和調(diào)試經(jīng)驗,有硬件系統(tǒng)架構(gòu)設(shè)計經(jīng)驗優(yōu)先,有獨立工作能力,有較強的分析和解決問題能力;
3、具有良好的模擬和數(shù)字電路基礎(chǔ),熟悉常用的模擬電路、數(shù)模轉(zhuǎn)換和各類接口電路設(shè)計經(jīng)驗;
4、有獨立分析問題、解決問題的.能力,良好的團隊合作精神、溝通協(xié)作能力。
爬蟲工程師崗位職責 篇20
1、主導新開發(fā)產(chǎn)品及外購產(chǎn)品的評估;
2、負責組織和監(jiān)督團隊對品質(zhì)人員的產(chǎn)品培訓;
3、負責制定、檢查、落實負責項目工作計劃,適時進行工作總結(jié);
4、負責自身管理和學習,提高自身綜合素質(zhì)和崗位技能,為業(yè)務(wù)提升做積累;
5、積極參與公司、部門、組織文化建設(shè)和組織活動、提升團隊凝聚力;
爬蟲工程師崗位職責 篇21
工作職責:
1、與團隊伙伴一起發(fā)揮創(chuàng)造力,提升panel樣本數(shù)據(jù)質(zhì)量和價值;
2、負責panel樣本系統(tǒng)需求研發(fā),維護;
任職資格:
1、良好的系統(tǒng)設(shè)計和編碼能力,重視代碼質(zhì)量,思路清晰,問題導向,行動快速;
2、較好的'溝通能力,能快速理解業(yè)務(wù),對數(shù)據(jù)敏感;
3、要求熟悉linux開發(fā)環(huán)境,熟悉python、java、shell語言的一種或多種,編碼基本功扎實;
4、大數(shù)據(jù)處理相關(guān)技術(shù),有hadoop開發(fā)經(jīng)驗,掌握mapreduce等開源框架經(jīng)驗優(yōu)先;
5、同時有統(tǒng)計背景或者相關(guān)工作經(jīng)驗背景更佳。
爬蟲工程師崗位職責 篇22
職責:
1、編寫服務(wù)器端總體設(shè)計文檔,實現(xiàn)關(guān)鍵框架代碼
2、負責服務(wù)器端架構(gòu)設(shè)計與通訊協(xié)議擬定、模塊劃分、團隊合作和人員分工
3、服務(wù)器端核心模塊與邏輯代碼實現(xiàn)
4、服務(wù)器端負載優(yōu)化,網(wǎng)絡(luò)安全方案設(shè)計
5、分析策劃案的技術(shù)可行性,根據(jù)策劃文檔,獨立設(shè)計開發(fā)相應(yīng)的游戲模塊
6、對游戲設(shè)定功能進行服務(wù)器端系統(tǒng)設(shè)計、編碼、測試以及開發(fā)文檔編寫
7、使用c++開發(fā)維護服務(wù)器底層, 開發(fā)游戲邏輯, 開發(fā)周邊支持工具等
8、審核其他程序員的代碼,幫助程序員提高編碼能力,具有在需求明確情況下合理估算開發(fā)時間并嚴格按照文檔要求完成開發(fā)功能的能力
崗位要求
1、5年以上網(wǎng)絡(luò)游戲服務(wù)器開發(fā)經(jīng)驗
2、精通C++/C任一種以上程序設(shè)計,能編寫高質(zhì)量代碼,具備良好的開發(fā)文檔書寫習慣
3、熟悉Linux系統(tǒng)機制、操作和開發(fā),如:多線程、多進程、同步、IPC、網(wǎng)絡(luò)編程(Socket)等
4、熟悉大容量數(shù)據(jù)庫程序開發(fā),熟悉mysql/mongodb/oracle/redis任一種以上的數(shù)據(jù)庫
5、熱愛游戲開發(fā)
爬蟲工程師崗位職責 篇23
崗位職責:
庫存物品安放與數(shù)據(jù)管理;機柜機箱配線;物料采購;設(shè)備測試。
任職要求:
1、電力系統(tǒng)自動化、電子相關(guān)專業(yè)畢業(yè);
2、會使用AUTOCAD、OFFICE、管理軟件;
7、會使用常用電子元器件、電氣儀表,會讀電氣配線圖和進行電氣安裝與配線;
8、有組織管理經(jīng)驗,善于團結(jié)同事,有良好的溝通能力;
9、有較強的決斷、決策、計劃與執(zhí)行能力。
10、具有一定的文檔編寫能力,能獨立完成相關(guān)設(shè)計文檔的編寫工作;
11、身體健康。
爬蟲工程師崗位職責 篇24
1、 負責礦區(qū)總體開拓工程的擺布和設(shè)計。
2、 負責日常采場技術(shù)管理工作。
3、 負責采場單體設(shè)計工作。
4、 負責各采場出礦管理,損失,貧化管理工作。
5、 依據(jù)地質(zhì)部門提供的地質(zhì)資料,合理選擇采礦方法。
6、 建立健全采場驗收制度。
7、 做好礦區(qū)通風防塵工作。
爬蟲工程師崗位職責 篇25
1、985院校大學本科及以上學歷,年齡三十歲以下;
2、具備良好的溝通表達能力和團隊合作精神;
3、熟悉單片機或arm軟件開發(fā)流程,具有嵌入式軟件設(shè)計經(jīng)驗;
4、熟練應(yīng)用c語言,熟悉匯編語言;
5、有一定的硬件電路基礎(chǔ),能設(shè)計簡單電路;
6、參與或負責過相關(guān)設(shè)計研發(fā)工作;
7、有較強的邏輯思維能力、創(chuàng)新能力、拓展能力、抽象思維能力;
爬蟲工程師崗位職責 篇26
pc端研發(fā)工程師 修齊治平 北京修齊治平科技有限公司,云校,修齊治平,好分數(shù),修齊治平 工作職責:
1. 負責公司pc客戶端的'開發(fā)和維護;
2.參與windows客戶端架構(gòu)設(shè)計;
3.能夠快速分析,定位和處理windows以及相關(guān)系統(tǒng)或軟件的問題,并查找和提出解決方法;
崗位要求:
1.本科或以上學歷,計算機軟件或相關(guān)專業(yè),具有2年以上windows客戶端開發(fā)經(jīng)驗;
2.精通c++,理解面向?qū)ο笏枷?熟練使用windows平臺基礎(chǔ)技術(shù):進程,線程,內(nèi)存管理,消息機制等 ,了解網(wǎng)絡(luò)編程以及http協(xié)議;
3. 具備良好的邏輯分析思維能力;
4.具有良好的團隊合作精神和溝通能力;
有以下特點者優(yōu)先:
1.精通c語言網(wǎng)絡(luò)通信機制以及大數(shù)據(jù)異步處理技術(shù)者優(yōu)先;
2. 有直播/即時消息windows平臺開發(fā)經(jīng)驗者優(yōu)先;
3. 熟悉qt相關(guān)開發(fā)技術(shù)者優(yōu)先。
爬蟲工程師崗位職責 篇27
崗位描述
1、軟件模塊的需求分析設(shè)計,功能模塊方案設(shè)計,功能模塊代碼編寫;
2、深入理解開發(fā)任務(wù)后制定開發(fā)計劃,兼顧開發(fā)進度及階段成果;
3、負責應(yīng)用軟件開發(fā)工作,計劃時間內(nèi)確保功能實現(xiàn)與穩(wěn)定運行;
4、開發(fā)過程的程序版本控制;
5、進行質(zhì)量測試驗證,保證設(shè)計的穩(wěn)定性、可靠性,符合量產(chǎn)、現(xiàn)場使用要求等;
6、設(shè)計必要的測試工具,提出開發(fā)需求;
7、相關(guān)開發(fā)文檔(含生產(chǎn)工藝文件)的編寫,保證質(zhì)量、完整性,進行資料備份。
任職條件
1、本科及以上學歷/電子類相關(guān)專業(yè);
2、 3年以上電子企業(yè)研發(fā)經(jīng)驗;
3、熟悉項目管理相關(guān)技術(shù);
4、精通c語言、嵌入式操作系統(tǒng),設(shè)計和實現(xiàn)過較大規(guī)模的嵌入式軟件系統(tǒng);
5、熟悉電力終端產(chǎn)品行業(yè)標準、技術(shù)規(guī)范知識;
6、熟悉電力行業(yè)業(yè)務(wù)流程基本知識和電力終端產(chǎn)品功能與應(yīng)用基本知識。
爬蟲工程師崗位職責 篇28
1.負責局方的開通、運行維護、設(shè)備初驗、終驗等;
2.負責設(shè)備問題的跟蹤、反饋及疑難問題的處理、技術(shù)信息的收集、整理;
3.負責員工及用戶的技術(shù)培訓,配合客戶經(jīng)理做好用戶協(xié)調(diào)工作;
4.提供必要的技術(shù)支持,包含技術(shù)評審、工程勘察、工程設(shè)計等;
5.負責項目的招投標工作,包括整體解決方案的擬訂、標書應(yīng)答、講解與答辯;
6.根據(jù)用戶需求進行系統(tǒng)概要設(shè)計并編寫解決方案。
爬蟲工程師崗位職責 篇29
工作職責:
1、熟悉圖紙、熟悉現(xiàn)場,對工程合同和協(xié)議有一定程度的理解;
2、編制預(yù)算前必須獲取技術(shù)部門的施工方案等資料,便于正確編制預(yù)算;
3、掌握資料作出單價分析,供項目經(jīng)理參考;
4、及時掌握有關(guān)的經(jīng)濟政策、法規(guī)的變化,如人工費、材料費等費用的調(diào)整,及時分析提供調(diào)整后的數(shù)據(jù);
5、正確及時編制好施工圖(施工)預(yù)算,正確計算工程量及套用定額,做好工料分析,并及時做好預(yù)算主要實物量對比工作。
任職資格:
1、負責編制工程的施工圖預(yù)、結(jié)算及工料分析,編審工程分包、勞務(wù)層的結(jié)算;
2、編制每月工程進度預(yù)算及材料調(diào)差(根據(jù)材料員提供市場價格或財務(wù)提供實際價格)并及時上報有關(guān)部門審批;
3、審核分包、勞務(wù)層的工程進度預(yù)算(技術(shù)員認可工程量);
4、協(xié)助財務(wù)進行成本核算;
5、根據(jù)現(xiàn)場設(shè)計變更和簽證及時調(diào)整預(yù)算;
6、在工程投標階段,及時、準確做出預(yù)算,提供報價依據(jù);
7、掌握準確的市場價格和預(yù)算價格,及時調(diào)整預(yù)、結(jié)算;
9、對各勞務(wù)層的工作內(nèi)容及時提供價格,作為決策的依據(jù);
10、參與投標文件、標書編制和合同評審,收集各工程項目的造價資料,為投標提供依據(jù);
11、建好單位工程預(yù)、結(jié)算及進度報表臺帳,填報有關(guān)報表。
爬蟲工程師崗位職責 篇30
1、負責環(huán)保管理體系在本職權(quán)范圍內(nèi)的有效運行。
2、嚴格執(zhí)行國家環(huán)境保護法律、法規(guī)和當?shù)卣、發(fā)包方及施工技術(shù)細則規(guī)定的強制性條款。
3、遵照執(zhí)行項目經(jīng)理部下發(fā)的有關(guān)環(huán)境保護的各項規(guī)章和指令,同上級和相關(guān)業(yè)務(wù)部門保持聯(lián)系,對下做好環(huán)保指導和服務(wù)工作。
4、經(jīng)常深入施工現(xiàn)場進行監(jiān)督檢查,發(fā)現(xiàn)問題及時糾正,對重大問題要及時上報,并應(yīng)做好檢查記錄。
5、宣傳教育環(huán)境保護知識,對項目部員工和施工現(xiàn)場作業(yè)人員進行環(huán)保知識教育培訓,以增加大家環(huán)保知識,提高大家環(huán)保意識,并符合環(huán)境管理體系的要求。
6、施工過程中發(fā)現(xiàn)文物、古跡、爆炸物、電纜等,應(yīng)當停止施工,保護好現(xiàn)場,及時向有關(guān)部門報告,按照有關(guān)規(guī)定處理后方可繼續(xù)施工。
7、完成領(lǐng)導交辦的其他工作。