<form id="ffzlr"><nobr id="ffzlr"><nobr id="ffzlr"></nobr></nobr></form>

          <form id="ffzlr"><form id="ffzlr"><th id="ffzlr"></th></form></form>

              <form id="ffzlr"></form>

              • EN
               

              職場百科   職場文庫   招聘信息   企業服務

              您所在的位置:最新招聘信息 >全國職位信息 >爬蟲開發工程師招聘信息

              職位推薦:幼兒培訓老師外貿實習多元數據分析燒烤廚師餐飲餐廳服務員餐飲保潔員電氣弱電工程師平面設計剪輯師市場調研seo優化環境管理程序員iOS食品研發

              職位分類:不限

              更多
              更多:

              已選條件:
              爬蟲開發工程師
              清除條件
              全選
              申請職位

              數據挖掘工程師“前程無憂”51job.com(上海)上海-浦東新區08-14

              學歷要求:碩士|工作經驗:1年|公司性質:外資(非歐美)|公司規模:1000-5000人

                崗位職責:   1. 參與大數據平臺架構的整體規劃和設計;   2. 參與平臺的整體數據架構設計,完成從業務模型到數據模型的設計工作;   3. 參與基于大數據平臺的網站用戶行為、用戶畫像等分析     任職要求:  1、碩士及以上學歷,計算機\數學\統計等相關專業  2、熟悉JAVA、python、SQL、scala中至少2種以上編程技術,熟悉大數據處理技術,了解數據挖掘的基本原理  3、具備數據敏感性和探知欲、分析、解決問題的能力  4、工作主動、認真、負責、仔細,有良好的團隊合作精神、分析能力、溝通技巧  5、在用戶行為數據的分析挖掘和用戶畫像的構建領域有深入研究經驗者優先。  

              立即申請
              收藏

              爬蟲開發工程師長沙天地寬網絡科技有限公司長沙1-1.5萬/月08-14

              學歷要求:大專|工作經驗:3-4年|公司性質:民營公司|公司規模:150-500人

              崗位職責:1.負責分布式爬蟲系統的架構設計與開發;2.設計爬蟲策略和防屏蔽規則,解決封賬號、封IP、驗證碼等難點攻克;3.負責網頁信息抽取、清洗、消重和結構化處理等工作,提升平臺的抓取效率;4.爬蟲核心算法和策略優化,熟悉采集系統的調度策略。要求:1.兩年以上爬蟲開發或前端JS開發經驗;1.精通Java、NodeJs或Python,熟悉常用的Web Server,有信息安全崗位工作經驗優先;2.深入了解Http協議 和 web登錄認證機制,熟悉Web前端,能編寫前端頁面,讀懂復雜的JS代碼;3.有激情,喜歡研究新技術,工作細心,有耐心,具備良好的團隊協作能力。

              立即申請
              收藏

              爬蟲開發工程師杭州商情智能有限公司杭州-濱江區1.5-3萬/月08-14

              學歷要求:本科|工作經驗:1年|公司性質:創業公司|公司規模:50-150人

              職位描述:    1、負責分布式爬蟲系統和數據采集系統的設計、開發    2、爬蟲策略和防屏蔽規則,提升網絡抓取的效率和質量職位要求:    1、2年以上Java/Python 爬蟲經驗    2、熟悉多線程、網絡編程、網頁抓取原理、正則表達式、HTTP協議等    3、熟悉任意開源爬蟲框架,如scrapy、splash、selenium等    4、熟練使用 Mysql、Redis、Kafka 等中間件    5、有海量主流電商平臺數據爬取經驗,能迅速響應電商平臺變動做規則調整    6、有開發爬蟲框架經驗優先,熟悉反爬蟲、驗證碼識別技術者優先    7、有淘系、拼多多、抖音、快手等平臺爬取、Android逆向相關經驗優先 

              立即申請
              收藏

              爬蟲開發工程師云目未來科技(湖南)有限公司長沙-開福區0.8-1.2萬/月08-14

              學歷要求:大專|工作經驗:5-7年|公司性質:民營公司|公司規模:少于50人

              爬蟲工程師崗位描述1、負責分布式網絡爬蟲系統開發與維護工作2、設計爬蟲策略和防屏蔽規則,提升網頁抓取的效率和質量3、實現數據提取、清洗、結構化、入庫、統計分析等需求職位要求1、有3年以上編程開發經驗,精通Java或者Python,熟悉常用的爬蟲框架和工具3、熟悉平臺的常見的反爬策略對應的數據采集方案4、有分布式爬蟲框架搭建、瀏覽器插件編寫與網絡數據采集項目經驗優先4、熟悉HTTP協議,熟悉正則表達式、XPath、CSS選擇器等5、能獨立解決實際開發過程碰到的各類問題。

              立即申請
              收藏

              python爬蟲工程師(實習)華世界控股集團深圳-龍崗區3-5千/月08-14

              學歷要求:大專|工作經驗:在校生/應屆生|公司性質:民營公司|公司規模:150-500人

              崗位職責:1、負責爬蟲的設計和開發;2、負責網頁和APP數據的解析和入庫;3、負責爬蟲的部署,調度,維護等工作。任職要求:1、計算機或相關專業;2、熟練使用Python;熟悉網頁抓取原理及技術的實現細節,對網頁抓取、信息抽取、去重、清洗、匹配有一定經驗;3、熟悉mysql數據庫基本操作;對常見的反爬蟲手段有一定的了解;4、有驗證碼訓練識別經驗的優先。

              立即申請
              收藏

              爬蟲開發工程師寧波聚塔在線信息科技有限公司深圳-南山區1.5-2萬/月08-14

              學歷要求:本科|工作經驗:3-4年|公司性質:民營公司|公司規模:50-150人

              崗位職責:1. 負責業務需求爬蟲的設計開發,爬取指定網站/app上的文本、圖片、視頻、廣告內容等信息;2. 負責爬蟲的持續更新及優化,如反爬、帶寬處理等;3. 對爬蟲獲取到的內容進行去噪、初步數據處理分析等。任職要求:1. 學歷要求:本科學歷,計算機、數學、統計學相關專業;2. 工作經驗:3年以上爬蟲開發經驗,精通爬蟲與反爬蟲技術,能獨立完成爬蟲、清洗、入庫、數據處理等工作。有大數據、分布式等項目經驗優先;3. 綜合素質:有良好的溝通互動能力,邏輯清晰,文字表達能力強,能承擔較大壓力,執行力強;4. 工具技能:精通python,熟悉掌握sql,熟悉html、javascript等技術,熟悉web和app端數據抓取。

              立即申請
              收藏

              爬蟲開發杭州愛上班網絡科技有限公司杭州-余杭區0.8-1.2萬/月08-14

              學歷要求:本科|工作經驗:3-4年|公司性質:合資|公司規模:少于50人

              1、負責公司平臺相關數據的爬取2、利用python編寫后臺相關模塊業務代碼3、參與其他業務

              立即申請
              收藏

              爬蟲開發工程師北京中加國道科技有限責任公司北京-海淀區0.8-1.1萬/月08-14

              學歷要求:大專|工作經驗:3-4年|公司性質:民營公司|公司規模:50-150人

              技能要求:數據處理崗位職責1、負責文本數據處理,如格式轉換、分詞處理、實體抽取、專業詞典整理等;2、自然語言處理相關工具開發;3、協助訓練NLP模型;4、協助從傳統網頁和數據發布網站爬取目標信息。任職要求1、計算機相關專業(本科,2年以上工作經驗);有大學英文四級證書;2、精通C或Java,熟悉Python、Bash Shell等腳本語言;3、熟悉正則表達式,了解常用分類、聚類算法及相應工具;4、熟悉使用基本分類、聚類算法及相應工具;5、具備NLP相關工作(特別是數據處理與分析)經驗,了解NLP基本知識;6、若有爬蟲工作經驗屬于加分項;7、耐心、細致;較強的邏輯思維能力;性格踏實穩定,抗壓能力強。

              立即申請
              收藏

              python爬蟲開發工程師上海橘淶金融信息服務有限公司上海-浦東新區0.8-1萬/月08-14

              學歷要求:本科|工作經驗:2年|公司性質:民營公司|公司規模:少于50人

              職位信息:    1.負責公司數據源抓取需求,滿足公司對多源數據采集要求;    2.負責開發分布式爬蟲框架,管理分布式爬蟲服務器,開發任務調度引擎;    3.負責爬蟲核心算法的策略優化研究,提升爬蟲抓取效率和質量,提升網頁抓取的效率和質量;    4.設計爬蟲策略和防屏蔽規則,解決封賬號、封IP、驗證碼等難點攻克;    5.參與公司底層數據有關的平臺、工具建設。    任職要求:    1.本科及以上學歷,計算機、數學、統計等相關專業, 1年及以上工作經驗;    2. 精通Python語言, 至少1年Python相關的開發經驗;    3.有Python分布式抓取系統的開發、架構經驗;    4.有海量數據爬取、解析、清洗、存儲相關項目經驗    5.熟悉網頁抓取原理及技術,能夠總結分析不同網站,網頁的結構特點及規律;    6. 熟悉反爬策略的應對,能夠解決封賬號、封IP采集等問題;    7.能獨立完成主流門戶網站的爬蟲項目;    8.熟悉數據庫操作原理以及數據庫的速度優化.        薪酬待遇:本公司為初創公司,主要服務國內大型金融投資機構,創始人均為金融、計算機、財經媒體資深人士,所從事工作具有開創性和較高上升空間,公司對新入職員工提供一對一的專項業務培訓,并提供完善的薪酬福利安排和職位提升空間,具體薪酬面議,特別優秀者工作一定階段后可納入公司優秀員工股權期權計劃。    工作地點:上海市浦東新區棲霞路16號陸家嘴富匯大廈8樓。        公司介紹:上海橘淶金融信息服務有限公司成立于2017年2月13日,公司致力于金融投資機構投資風險與聲譽風險管理研究與服務領域,提供基于互聯網數據挖掘和風險管理量化模型為基礎的金融機構聲譽風險和投資風險預警服務,主要業務對象和合作伙伴為公募基金、商業銀行、上市公司、監管機構。

              立即申請
              收藏

              爬蟲開發工程師武漢云外恒信息技術有限公司武漢-洪山區1.5-2萬/月08-14

              學歷要求:本科|工作經驗:2年|公司性質:民營公司|公司規模:少于50人

              1、負責設計和開發分布式的網絡爬蟲應用,包括調度、抓取、入庫等內容,進行互聯網相關信息的抓取和分析;2、網絡爬蟲架構設計、功能開發及優化;3、網頁信息抽取等核心算法的研究和優化。負責公司運營平臺開發工作;4、負責解決項目相關的開發需求以及Bug修正,相關的問題的溝通協調工作。任職要求:1、統招研究生或本科,計算機或相關專業;2、兩年年以上爬蟲開發經驗;3、熟悉爬蟲原理,掌握常見的反爬蟲技術,精通Scrapy框架,熟練使用Splash;4、精通WebDriver,掌握http協議,熟悉html、dom、xpath等常見的數據抽取技術;5、熟練使用MySQL、MongoDB,熟悉Hadoop、HBase、Elastic Search等技術;6、扎實的算法和數據結構能力,有大規模代理服務器管理經驗和模板失效應對的經驗優先。

              立即申請
              收藏

              爬蟲開發工程師(Python)深圳市途銘科技有限公司深圳-龍華新區1-1.5萬/月08-14

              學歷要求:大專|工作經驗:2年|公司性質:民營公司|公司規模:少于50人

              崗位職責:1、負責設計、開發、維護、重構分布式的網絡爬蟲,包括調度、抓取、維護、驗證等爬蟲工作;2、負責網頁信息抓取結果的抽取、數據清洗、分類、聚類等研發工作;3、主要爬取1688、facebook、shopify產品,圖片,視頻等信息。任職需求:1、2年以上python使用經驗,熟悉常用python庫的使用,熟悉面向對象編程;2、熟悉常見反爬技術,能處理各種反爬問題者優先;3、掌握正則表達式、xpath、beautifulsoup4、css選擇器等信息抽取技術;4、熟悉Selenium , 能使用Selenium編寫各種腳本(必須);5、熟練使用多線程 , 多進程技術;6、有圖像識別經驗的優先考慮。員工福利:1、入職即購買五險一金;2、帶薪年假及年終獎金;3、員工生日福利;4、每年一次年度旅游;5、節假日福利津貼;6、月度全勤獎勵;7、個人績效獎+團隊獎;8、崗位相關技能培訓。

              立即申請
              收藏

              爬蟲工程師深圳市紫金支點技術股份有限公司深圳-南山區0.9-1.5萬/月08-14

              學歷要求:本科|工作經驗:1年|公司性質:民營公司|公司規模:1000-5000人

              崗位職責: 1、負責網絡爬蟲系統設計、開發。 2、完成數據采集爬取、解析提取、清洗入庫等數據生產工作。 3、研究網頁特點和規律,對網頁信息進行分類、抽取、數據清洗、存儲結構等研發和優化工作。4、負責領域知識的定向爬取、深度提取和挖掘。 5、對數據進行清洗、整理、去重及合并等工作。 任職資格: 1、本科及以上學歷,理工科專業,具有良好的英文閱讀能力;2、1年及以上爬蟲開發工作經驗;3、精通網頁抓取原理及技術、正則表達式、動態數據抓取、防屏蔽等關鍵技術;4、精通正則表達式,掌握http協議,熟悉html、dom、xpath等常見的數據抽取技術;5、精通Python,熟悉Scrapy等爬蟲框架,具備應對反爬措施的能力;6、熟練使用至少一種常用數據庫技術,如MySQL、MongoDB等。7、熟悉java語言,Sprint boot等技術優先

              立即申請
              收藏

              爬蟲開發工程師&數據采集工程師上海晟鈞建筑工程有限責任公司上海-黃浦區1.5-2萬/月08-14

              學歷要求:本科|工作經驗:3-4年|公司性質:民營公司|公司規模:50-150人

              爬蟲開發工程師/數據采集工程師崗位職責:1、負責數據抓取平臺規劃和建設,完成數據采集與爬取、解析處理和入庫;2、研究各種網頁探尋特點和規律,負責網頁信息抽取、數據清洗工作;3、負責領域知識的定向爬取、深度提取和挖掘;4、配合數據清洗、整理、去重和合并工作;5、負責爬蟲相關技術的創新和優化。任職要求:1、計算機相關專業,本科以上學歷,3年以上爬蟲領域工作經驗,1年以上爬蟲團隊合作經驗。2、熟悉Python開發,熟悉wxpython,熟悉抓取框架,有完整的界面化爬蟲平臺開發經驗;3、熟悉Web抓取原理及技術實現細節,對HTTP協議和HTML有深入了解;4、熟悉數據抓取和整合技術,從結構化和非結構化數據中提取信息;5、熟悉反爬機制,能夠通過逆向js腳本,獲取參數,熟悉使用正則表達式/驗證碼加密處理/代理池,熟悉行為驗證碼識別、模擬登陸。以下經驗之一者優先考慮:1、有房地產項目類數據爬取經驗者優先

              立即申請
              收藏

              爬蟲工程師河姆渡電子商務有限公司上海-浦東新區1.2-2萬/月08-14

              學歷要求:本科|工作經驗:3-4年|公司性質:民營公司|公司規模:500-1000人

              崗位職責:1、負責數據抓取平臺規劃和建設,完成數據采集與爬取、解析處理和入庫。2、研究各種網頁探尋特點和規律,負責網頁信息抽取、數據清洗工作。3、負責行業領域知識的定向爬取、深度提取和挖掘。4、配合數據清洗、整理、去重和合并工作。5、負責爬蟲相關技術的創新和優化。任職資格:1、本科以上學歷,計算機相關專業,2年以上爬蟲領域工作經驗。2、熟悉Python開發,熟悉wxpython,熟悉抓取框架,有完整的界面化爬蟲平臺開發經驗,熟悉JAVA語言***。3、熟悉Web抓取原理及技術實現細節,對HTTP協議和HTML有深入了解。4、熟悉數據抓取和整合技術,從結構化和非結構化數據中提取信息。5、工作認真責任心強,良好的溝通理解能力,具有團隊協作能力和創新精神。

              立即申請
              收藏

              高級爬蟲工程師得物App上海-楊浦區2-4萬/月08-14

              學歷要求:本科|工作經驗:5-7年|公司性質:民營公司|公司規模:1000-5000人

              職位描述:主要職責 :1、參與分布式爬蟲和數據采集系統的架構設計和開發;2、負責反爬蟲策略研究,代理IP、驗證碼識別等采集支撐服務建設; 3、負責大規模文本、圖像數據的抓取、抽取,去重、分類,垃圾過濾,質量識別等工作; 4、負責公司爬蟲的技術調研以及策略優化; 5、負責制定相關的反爬蟲安全策略。 職位必備項 1. 三年以上大規模爬蟲反爬經驗 2. 熟悉HTTP協議瀏覽器原理前端JSAPP抓取 3. 有解決復雜的反爬限制實踐經驗, 能解決如圖片驗證碼滑塊賬號限制ip限制等問題 職位優先項 具有數據挖掘、自然語言處理、信息檢索、機器學習背景者優先

              立即申請
              收藏

              爬蟲開發工程師源恒稅務師事務所有限公司廣州-天河區1-1.5萬/月08-14

              學歷要求:大專|工作經驗:2年|公司性質:民營公司|公司規模:少于50人

              公司介紹:源恒軟件工作職責:            1. 負責分布式網絡爬蟲系統的設計與開發;            2. 根據業務要求,抓取互聯網各種形式數據;            3. 熟悉各種反爬策略及應對措施,充分利用資源,提升網頁抓取的效率和質量;            4. 參與數據清洗、解析等功能研發;                 崗位要求:                1.計算機及相關專業,大專及以上學歷,2年以上爬蟲開發相關經驗,有大規模網絡爬蟲開發經驗優先;         2.精通Python;            3.熟悉多線程、進程、網絡編程,精通網頁抓取原理及技術,精通正則表達式,能從結構化的和非結構化的數據中獲取信息;            4.精通一種開源爬蟲框架,有開發爬蟲框架經驗優先;            5.熟悉反爬蟲、驗證碼識別、圖像識別等技術優先;

              立即申請
              收藏

              高級爬蟲工程師深圳格隆匯信息科技有限公司深圳-南山區1.5-2萬/月08-14

              學歷要求:本科|工作經驗:1年|公司性質:創業公司|公司規模:150-500人

              職位描述:1、負責億級別分布式爬蟲系統的架構升級和性能調優,提升抓取效率、穩定性和自動化程度;2、負責多租戶后臺的功能完善和交互升級,提升用戶體驗,降低使用門檻;3、負責全網頁面的破解和數據抓取,包括Ajax抓包、Js破解、頁面清洗、抓取攻防等;4、負責各垂類App的破解和數據抓取,包括App反編譯、脫殼、簽名破解、抓取攻防等;5、負責海量抓取數據的挖掘分析和內容開放平臺的建設;6、具備獨立爬取天貓、淘寶、京東、攜程等網站數據的能力。任職要求:1、本科以上學歷,專業不限;2、熟練掌握前端JS逆向、有APP端逆向的經歷;3、良好的抗壓能力以及團隊工作合作精神。

              立即申請
              收藏

              python爬蟲工程師深圳市英馳貿易科技有限公司深圳-龍華新區1.5-2萬/月08-14

              學歷要求:本科|工作經驗:3-4年|公司性質:民營公司|公司規模:1000-5000人

              1、全日制統招本科及以上學歷,3年以上爬蟲工作經驗并有高并發大量采集項目經驗;2、有較強的責任心、溝通協調能力,工作主動積極;3、熟練Python編程語言,掌握反爬技術,圖片識別碼,滑動塊識驗碼等技術;4、熟悉Scrapy、Django、Flask等框架;5、熟悉關系型數據庫(MySQL/PostgreSQL/Oracle),緩存數據庫(Redis/Memcached);6、精通一種開源爬蟲框架,如scrapy、webmagic、nutch、heritrix等,有開發爬蟲框架、構建過分布式爬蟲系統者優先;7、有電商行業工作經驗優先。

              立即申請
              收藏

              爬蟲軟件開發工程師上海阿米特數據系統有限公司武漢1-1.5萬/月08-14

              學歷要求:大專|工作經驗:3-4年|公司性質:合資|公司規模:少于50人

              爬蟲軟件開發工程師職位描述: 崗位職責:1、負責多平臺信息爬取和頁面內容的提取分析;2、優化抓取策略,充分利用帶寬資源,避免限制;3、分析爬蟲程序的技術缺陷,對策略架構做出合理地調整和改進;4、監控爬取速度,及時發現爬取過程中出現的問題,并盡快找出解決方案。5、帶領團隊負責多平臺信息抓取軟件開發和維護.任職要求:1、大學本科(含)以上,計算機及相關專業畢業;2、實際爬蟲開發、內容提取工作經驗;3、精通Python或更高版本;4、精通網頁抓取原理及技術;5、熟練Linux命令、腳本編寫,熟悉sql語言者優先;6、有過海量數據爬取經驗者優先;7、能獨立解決實際開發過程碰到的各類問題。

              立即申請
              收藏

              WEB安全防爬工程師(新項目)(J200611026)滴滴北京-海淀區2-2.5萬/月08-14

              學歷要求:本科|工作經驗:3-4年|公司性質:民營公司|公司規模:10000人以上

              崗位職責:1. 業務流量分析:熟悉業務場景,利用技術手段建立有效的異常識別方法,并持續優化;2. 黑灰產行業研究:熟練掌握黑灰產使用的技術手段和發展趨勢,定期輸出分析報告;3. 業務治理:通過分析案例進行策略優化,報警優化,業務加固,不斷完善運營體系 任職資格:1. 熟悉常見的爬蟲與反爬的機制;2. 擅長web安全,了解常見的web安全漏洞及原理,可以獨自分析并挖掘漏洞;3. 熟練掌握Spark、Hive、Sql等大數據工具的使用;掌握常見的統計方法,對常見的分類,聚類算法有過實踐;能夠準確的提取攻擊特征;4. 熟練掌握Python、go、java中一種語言;5. 有過實戰攻防對抗經驗、黑灰產對抗經驗優先

              立即申請
              收藏

              全選
              申請職位
              共9頁,到第確定

              精英競拍匯-中高端人才求職平臺

              互聯網專場
              招聘職位: 后端開發,前端開發,移動端開發,測試,產品/設計/運營
              金融專場
              招聘職位: 財務審計,合規與風險控制,后臺運營,投行,銷售
              房地產專場
              招聘職位: 房地產開發,建筑工程,規劃設計,商業,市場營銷
              汽車專場
              招聘職位: 汽車新能源,軟件與汽車電子,生產制造,質量管理,供應鏈管理
              金博棋牌下载