<form id="ffzlr"><nobr id="ffzlr"><nobr id="ffzlr"></nobr></nobr></form>

          <form id="ffzlr"><form id="ffzlr"><th id="ffzlr"></th></form></form>

              <form id="ffzlr"></form>

              • EN
               

              職場百科   職場文庫   招聘信息   企業服務

              您所在的位置:最新招聘信息 >全國職位信息 >爬蟲開發工程師招聘信息

              職位推薦:裝飾美容學徒信貸審核藝人助理攝影師房地產策劃景觀規劃設計項目投資汽車保養手機游戲開發護士UG編程燈光社區志愿者咨詢醫生德語口譯

              職位分類:不限

              更多
              更多:

              已選條件:
              爬蟲開發工程師
              清除條件
              全選
              申請職位

              爬蟲開發工程師北京大數元科技發展有限公司北京-海淀區0.7-1.3萬/月01-12

              學歷要求:本科|工作經驗:1年|公司性質:民營公司|公司規模:150-500人

              【工作職責】1.參與互聯網數據爬取的開發工作【職位要求】1.計算機或相關專業,統招本科及以上學歷2.熟悉python語言,有過爬蟲相關開發經歷的優先3.熟悉網頁結構和解析相關知識,熟悉瀏覽器調試工具4.熟悉正則表達式、xpath、css選擇器等,能從結構化與非結構化的數據中解析獲取有效信息5.熟悉常見關系型數據庫,如mysql等,精通sql語句者優先。6.掌握Linux操作系統和命令7.良好的溝通與表達能力、思路清晰,較強的動手能力與邏輯分析能力8.良好的團隊合作和積極主動的溝通意識

              立即申請
              收藏

              爬蟲開發工程師廣東南方財經全媒體集團股份有限公司上海-徐匯區1.5-3萬/月01-12

              學歷要求:本科|工作經驗:2年|公司性質:國企|公司規模:500-1000人

              基于云計算的分布式爬蟲平臺,會接觸到大數據數據處理和傳輸,分布式處理,大數據存儲等最新的技術。任職要求:有深入的網絡應用經驗,精通http協議,熟悉web開發者優先。

              立即申請
              收藏

              爬蟲開發工程師上海恒生聚源數據服務有限公司杭州-江干區1.8-3萬/月01-12

              學歷要求:本科|工作經驗:3-4年|公司性質:民營公司|公司規模:150-500人

              崗位職責: 1.負責公司數據源抓取需求,滿足公司對多源數據采集要求; 2.負責開發分布式爬蟲框架,管理分布式爬蟲服務器,開發任務調度引擎; 3.負責爬蟲核心算法的策略優化研究,提升爬蟲抓取效率和質量,提升網頁抓取的效率和質量; 4.設計爬蟲策略和防屏蔽規則,解決封賬號、封IP、驗證碼、JS加密等難點攻克; 5.利用主流的大數據相關技術,對抓取后的網頁數據進行清洗、存儲等;并持續優化平臺,以便滿足各種爬取業務需求。 任職要求: 1.本科及以上學歷,計算機相關專業,3年及以上工作經驗; 2.熟悉Python/C#/Java語言中的一種,至少3年相關的開發經驗3.有Python分布式抓取系統的開發、架構經驗,至少熟悉并使用過一種主流爬蟲架構,如Scrapy、Gocolly、Webmagic等優先;4.熟悉前端頁面技術,如html、js、ajax等; 5.有海量數據爬取、解析、清洗、存儲相關項目經驗; 6.熟悉網頁抓取原理及技術,能夠總結分析不同網站,網頁的結構特點及規律; 7.熟悉反爬策略的應對,能夠解決封賬號、封IP、驗證碼、JS加密等問題;8.熟悉Linux系統環境;9.熟悉Mysql、Redis、MongoDB等數據庫,有過數據庫調優和海量數據存儲經驗者優先。

              立即申請
              收藏

              爬蟲開發工程師深圳市富龍小額貸款有限公司深圳-龍華區1-1.8萬/月01-12

              學歷要求:本科|工作經驗:3-4年|公司性質:外資(非歐美)|公司規模:10000人以上

              1、參與系統的需求調研和分析,撰寫相關技術文檔;2、負責系統框架和核心代碼的實現,搭建系統開發環境;3、負責項目概要設計、詳細設計、開發計劃等的編制并實施,系統開發測試、部署和集成;4、負責爬蟲系統的架構設計與開發、維護,爬取指定網頁或app,并對數據進行清洗、分類、入庫;5、負責解決開發過程中的技術問題,并參與代碼維護與備份。任職要求:1、本科以上學歷,計算機相關專業,有1到5年python相關工作經驗;2、對面向對象有深刻的理解、熟悉常用設計模式;3、熟悉Tomcat服務器、Spring、iBatis等框架和微服務springcloud 組件的使用;4、熟悉MySQL、MongoDB、Redis,NoSQL數據庫的使用,有性能優化的實際經驗;5、有分布式系統開發經驗者優先考慮;對機器學習或深度學習感興趣者,有nlp相關經驗者優先;6、精通常見爬蟲庫和框架如urlib、requests、Scrapy,熟悉numpy、pandas等數據處理相關的python庫;7、熟悉基于正則表達式、Xpath,CSS選擇器等網頁信息抽取技術8、具有很強的責任心和扛壓能力,善于溝通,進行多方協作;薪資福利:1、年終雙薪,五險一金,公司可以提供住宿;2、團建活動:各部門定期組織員工聚會等;3、員工生日會、下午茶、各種禮金(如結婚禮金、端午節/中秋節禮金等);4、健康保障:公司每年為員工提供一次免費健康體檢。

              立即申請
              收藏

              爬蟲開發工程師上海歐恒進出口有限公司濟南-歷下區6-8千/月01-12

              學歷要求:大專|工作經驗:1年|公司性質:合資|公司規模:150-500人

              1.完成對網站數據的抓取和交互模擬;2.善于運用各種手段解決爬蟲相關問題;3.對抓取的數據進行清洗.轉換,并存入數據庫;要求:1.?埔陨蠈W歷,2年以上網站抓取經驗,有電商網站抓取經驗優先;2.扎實的Java基礎,熟悉多線程,熟悉相應的爬蟲工具3.了解反爬蟲規則及策略,并有相關攻破經驗;4. 熟悉MySQL、SQLSERVER數據庫;

              立即申請
              收藏

              爬蟲工程師華夏經緯(廣州)數據科技股份有限公司廣州-番禺區0.6-1.2萬/月01-12

              學歷要求:本科|工作經驗:3-4年|公司性質:民營公司|公司規模:50-150人

              崗位職責:1、設計和開發分布式網絡爬蟲程序;2、負責規劃并實現數據采集系統的技術實現方案;3、負責爬蟲核心算法的策略優化研究,充分利用資源,提升網頁抓取的效率和質量。任職要求:1、全日制計算機相關專業,有實際工作經驗2年或以上;2、熟練使用Python,有良好的編碼習慣;3、至少熟悉一種常用數據庫:Mysql / MongDB / Redis;4、喜歡技術鉆研,具有較強的學習能力,能獨立開發爬蟲項目,具有自主解決問題能力。

              立即申請
              收藏

              爬蟲工程師哈爾濱邁遠電子商務有限公司哈爾濱-松北區0.6-1.2萬/月01-12

              學歷要求:大專|工作經驗:3-4年|公司性質:民營公司|公司規模:150-500人

              崗位職責:1、設計與開發爬蟲系統,進行網頁數據爬取2、參與數據平臺的搭建、優化數據處理流程           任職要求:1、負責數據采集,研究網站反爬蟲機制,做到有效應對2、設計爬蟲策略和防屏蔽規則,提升網頁抓取的效率和質量3、熟悉linux平臺,兩年以上python爬蟲編程經驗4、熟悉Scrapy、Xpath、正則表達式原理等5、理解Web等數據抓取工作原理及流程,有實際數據抓取經驗6、有電商工作經驗或大數據工作經驗優先

              立即申請
              收藏

              python爬蟲開發工程師佛山市德朗司科技有限公司佛山-南海區0.5-1萬/月01-12

              學歷要求:大專|工作經驗:在校生/應屆生|公司性質:民營公司|公司規模:50-150人

              【崗位職責】1. 參與已有爬蟲系統中作業的檢驗,設計和優化爬蟲策略,充分利用已有服務器和寬帶資源進行優化;2. 設計爬蟲策略和防屏蔽規則,解決封賬號、封IP、驗證碼等難點攻克,提升網頁抓取的效率和質量3. 負責爬蟲系統的架構設計與開發,編寫大規模分布式網絡爬蟲(多線程、分布式調度、協議處理);4. 負責指定網站進行網頁內容抓取、深度網頁內容抓取的關鍵技術以及數據清理提;5. 負責數據的抓取、解析、清洗、入庫、優化;構建和開發在海量數據下多維分析的數據分析平臺!救温氁蟆1. 本科以上專業,精通網絡爬蟲、互聯網搜索、大數據新聞、網絡多媒體、網絡視頻、即時通訊等技術,有著豐富的網絡數據工程項目經驗,具有網絡爬蟲、網頁信息抽取等相關經驗,做過電商平臺商品采集項目者優先;2. Python基礎扎實,熟練運用各種爬蟲庫,精通Scrapy框架,了解Django框架(做網站的),3. 熟悉Mysql、Redis、MongoDB一種或者多鐘數據庫開發技術,熟悉linux操作4. 熟練使用pandas,numpy,openpyxl處理數據5. 精通網頁抓取原理及技術、深度抓取、動態網頁技術抓取、瀏覽器模擬抓取技術,從結構化的和非結構化的數據中獲取信息;6. 精通爬蟲和反爬技術,精通http底層協議,了解TCPHTTP協議、HtmlJsCss、Ajax等技術;精通深度抓取、動態網頁技術抓取、瀏覽器模擬抓取技術等;7. 熟悉分布式系統、多線程;8. 具有網絡爬蟲、網頁信息抽取、web挖掘等搜索引擎等相關經驗優先,做過電商平臺商品信息采集項目者優先。9. 能夠快速學習和掌握新技術,優秀的分析、解決問題能力,具備團隊合作精神我們的福利:1、公司位置:廣佛線【礌崗/千燈湖地鐵站】出口步行10分鐘到達2、社會保障:購買社會保險(養老、生育、工傷、失業、醫療保險)3、餐飲便利:公司每天都會安排有資質的送餐公司供應免費營養午餐!公司周邊就是吃的,叫外賣也可以!4、住宿便利:公司附近有知名房地產公寓樓盤、出租房,房租價格實惠!5、購物、娛樂便利:公司附近就有萬達廣場、萬科廣場、中海寰宇城等大型商場,公園,健身房,生活配套設施齊備,逛街、下午茶很方便,工作、生活兩不誤!6、員工活動:公司注重員工的身體健康,每季會組織一次集體活動,如:登山、郊外游等活動。優秀團隊和個人會獎勵出國旅游機會。7、獎罰制度:公司每月都會對出色的員工進行表彰并發放獎金8、晉升機制:完善的晉升考核獎勵機制,管理崗位晉升及專業技能縱深雙向發展通道9、優秀人才提供創業機會,加入合伙人團隊,目前我司擁有成熟的合伙人機制和豐富的合伙人創業孵化成功經驗10、培訓體系:新同事入職后公司會提供入職培訓及專業培訓,入職引導人一對一幫帶,對于不同級別及不同崗位均有相應專業及管理培訓。公司不僅會出資讓同事學習最前沿的電商營銷技巧,也會大力投入,培養大家的管理能力,讓大家不斷提高自身綜合能力,在各自的部門內都能獨當一面,F階段,公司求賢若渴,近兩年內致力培育一批中層管理骨干,鼓勵公司各個崗位上有想法,有能力的小伙伴積極為公司拓展新領域,開辟新戰場,公司正在傾斜主要資源和資金去配合這些新創項目,同時提供充分的運營技術和管理技能培訓,確保這些勇敢上進的小伙伴們都能成為新的項目主管,同時給予每個項目主管一定比例的分紅。11、假期福利:帶薪年假,帶薪病假、婚假、產假、生育津貼、喪假等。12、日常福利:公司幾乎每月舉辦生日會,水果下午茶福利,生日禮物,節日禮物等,如端午節送粽子,中秋節送月餅等13、年度調薪:每年至少有1次調薪機會14、一年一次說走就走的公司旅游15、試用期:1-3個月,我們給予新人莫大的認可與鼓勵,以能力和結果為導向,幫助你提前達成目標,提前轉正。16、其它福利正在逐步完善中。桂城分公司地址:佛山市南海區桂城街道桂瀾北路4號中盛國際1904(雷崗地鐵站B出口)平洲分公司地址:佛山市南海區桂城街道平洲大德社區怡居三街B座7號聯系我時,請說是在前程無憂招聘網上看到的,謝謝!

              立即申請
              收藏

              后端開發工程師助理華云數通科技(北京)有限公司北京-海淀區6-8千/月01-12

              學歷要求:大專|工作經驗:無需經驗|公司性質:民營公司|公司規模:150-500人

              一、任職要求:1、協助項目負責人完成后端的開發及維護工作。2、完成數據中心設備的管理、監控、簡單排障工作。3、負責生產系統的部署、維護和運行分析,保證系統高效穩定可靠運行;4、負責網絡調度系統的策略維護,提出優化建議。5、有計算機語言基礎者優先,如:C語言、C++、C#、JAVA、.Net、PHP等工作要求:1、大專及以上學歷,20--30歲,邏輯思維能力強;2、對IT行業有著濃厚的興趣,有志于長期在IT方向發展;【能力要求】1、具有一定的數據敏感度,具備較強的數據分析能力、邏輯思維能力、歸納提煉及文字表達能力;  2、具有良好的學習能力、自我驅動能力、良好的組織協調和溝通能力,團隊合作意識強,具有敬業精神和鉆研精神;【基本條件】1、遵守國家法律法規,具有良好的思想品質和道德素質;2、認同公司核心價值觀; 3、本人檔案中無不良記錄;一、任職要求:1. 學歷不得低于大專,男女不限,年齡20周歲-30周歲之間;2. 可接受入門基礎人員,只要你有很強的學習能力;3. 跟隨項目經理輔助完成項目相關工作;4. 有良好學習與團隊協作能力,肯吃苦耐勞;5. 踏實穩定,有意愿從事技術崗位工作;6. 想獲得一份有長遠發展、穩定、有晉升空間的工作。二、福利待遇:1、薪資結構:底薪+績效獎金+項目提成+項目獎金+社會福利+其他補貼等,試用期1-3個月,轉正后享有平均月薪范圍7000-8000元;2、上班時間:9:00-18:00,中午休息1個小時,周末雙休,不加班,享受國家法定節假日,上下班交通便利;3、定期組織員工參加戶外活動、體育比賽等業余活動,豐富員工的工作生活;4、良好的晉升機制,廣闊的晉升空間。

              立即申請
              收藏

              爬蟲開發工程師上海蜜度信息技術有限公司上海1-1.5萬/月01-12

              學歷要求:大專|工作經驗:3-4年|公司性質:民營公司|公司規模:500-1000人

              職位信息: 1、負責業務所涉及數據的爬取,清洗,結構化,入庫。 2、負責持續運營和更新爬蟲以及數據。 3、負責爬蟲的性能優化,如:處理性能,爬取策略,占用帶寬,反爬蟲機制等方面。 4、能夠在一定程度上統計和分析爬蟲數據。 任職要求: 1、?埔陨蠈W歷,計算機、數學、統計學相關專業; 2、2年以上相關工作經驗,熟練掌握python,掌握numpy、pandas、sklearn、selenium、scrapy、sqlalchemy等包的用法; 3、熟悉了解html、css、javascript,懂得分析常見web界面結構,掌握基本jquery、css、xpath等語法; 4、熟悉掌握sql語言,熟悉mysql

              立即申請
              收藏

              Python/爬蟲工程師湖南省金盾信息安全等級保護評估中心有限公司長沙-岳麓區0.8-1.2萬/月01-12

              學歷要求:大專|工作經驗:3-4年|公司性質:民營公司|公司規模:50-150人

              職位描述 1、負責公司產品的抓取及格式化信息提; 2、負責產品開發及維護工作 3、能夠與產品、后端開發以及UCD(用戶體驗中心)進行良好溝通; 4、具備對代碼進行調試,快速定位解決問題,并且不斷優化的能力;  專業知識及能力要求 1、熟悉python,了解分布式,熟悉tornado、flask、django,能快速開發 2、熟練使用 Python 進行抓取及格式化信息提取、大數據分析等。 3、熟練掌握消息隊列,定時,異步任務,具有高并發大數據量系統的開發和維護經驗。 4、具備優秀的邏輯思維能力,對解決挑戰性問題充滿熱情,善于解決問題和分析問題。良好的團隊合作精神,較強的溝通能力。 5、熟練SQL語法,對mysql熟練

              立即申請
              收藏

              高級爬蟲開發工程師/高級爬蟲專家深圳市艾姆詩數碼科技有限公司深圳-龍華區2-2.5萬/月01-12

              學歷要求:大專|工作經驗:3-4年|公司性質:民營公司|公司規模:1000-5000人

              1、全日制統招本科及以上學歷,3年以上爬蟲工作經驗并有高并發大量采集項目經驗;(硬性要求)2、有較強的責任心、溝通協調能力,工作主動積極;3、熟練Python編程語言,掌握反爬技術,圖片識別碼,滑動塊識驗碼等技術;4、熟悉Scrapy、Django、Flask等框架;5、熟悉關系型數據庫(MySQL/PostgreSQL/Oracle),緩存數據庫(Redis/Memcached);6、精通一種開源爬蟲框架,如scrapy、webmagic、nutch、heritrix等,有開發爬蟲框架、構建過分布式爬蟲系統者優先;7、有電商行業工作經驗優先。

              立即申請
              收藏

              Python開發工程師智高點知識產權集團有限公司深圳-南山區0.8-1萬/月01-12

              學歷要求:本科|工作經驗:1年|公司性質:民營公司|公司規模:少于50人

              崗位職責:1、搭建數據采集平臺;2、出具數據分析報告;3、開發數據查詢接口;任職要求:1、精通Python,熟練運用協程、分布式網絡爬蟲等相關編程技能;2、掌握pandas等相關數據分析工具;3、熟悉mongodb、redis、elasticsearch等數據庫;4、熟悉flask、fastapi、sanic等常見網絡框架;

              立即申請
              收藏

              爬蟲工程師北京公瑾科技有限公司廣州分公司(慧算賬)廣州-天河區1.5-3萬/月01-12

              學歷要求:本科|工作經驗:5-7年|公司性質:民營公司|公司規模:1000-5000人

              崗位職責:1、負責現有數據采集系統的維護和性能優化;2、優化爬蟲策略,提高獲取數據的質量;3、研究防屏蔽原理,提升系統的穩定性;4、理解業務需求,滿足業務功能開發。崗位要求:1、正規院校本科及以上學歷,軟件、計算機、通信、信息安全、網絡工程、財稅等相關專業,2年及以上Python開發經驗;2、熟悉爬蟲及反爬原理,熟悉至少一項爬蟲框架或工具(如Scrapy、Pyspider、nutch);3、熟練掌握Python、Java、HTML5、Java Script等開發語言;4、熟悉HTTP協議,熟悉正則表達式、XPath、CSS選擇器等,了解常用驗證碼識別技術;5、熟悉Redis、Mysql,掌握MQ;6、擅長Web安全,了解常見的Web安全漏洞及原理;7、能獨立開發,具有良好的分析問題和解決問題的能力,在關注的領域有深入的研究,并不斷創新,對新技術有強烈的求知欲望,樂于鉆研,善于分享。

              立即申請
              收藏

              爬蟲 python(上海)上海悅高軟件股份有限公司上海-黃浦區6-8千/月01-12

              學歷要求:本科|工作經驗:2年|公司性質:上市公司|公司規模:150-500人

                 1、負責設計和開發分布式的網絡爬蟲應用,包括調度、抓取、入庫等內容,進行互聯網相關信息的抓取和分析;2、網絡爬蟲架構設計、功能開發及優化; 3、網頁信息抽取等核心算法的研究和優化。負責公司運營平臺開發工作。  4、負責解決項目相關的開發需求以及Bug修正,相關的問題的溝通協調工作。    任職要求:1、統招研究生或本科,計算機或相關專業;  2、兩年以上爬蟲開發經驗; 3、熟悉爬蟲原理,掌握常見的反爬蟲技術,精通Scrapy框架,熟練使用Splash; 4、精通WebDriver,掌握http協議,熟悉html、dom、xpath等常見的數據抽取技術;   5、熟練使用MySQL、MongoDB,SQL Server,熟悉Hadoop、HBase、Elastic Search等技術;6、扎實的算法和數據結構能力,有大規模代理服務器管理經驗和模板失效應對的經驗優先。    

              立即申請
              收藏

              python開發工程師(爬蟲和web方向)上海魅客信息科技有限公司上海-楊浦區6-8千/月01-12

              學歷要求:大專|工作經驗:1年|公司性質:民營公司|公司規模:少于50人

              職位描述:維護公司爬蟲程序和數據相關網站、數據清洗程序和自動化機器人程序、自動化預警程序,根據需求開發新爬蟲和機器人程序我們希望你:1、大專及以上學歷,計算機相關專業畢業1年以上。2、1年以上的python開發經驗,熟練掌握Python3語言的各種基礎技能,有扎實的編程功底,熱愛編程。熟悉常用的Python庫如Requests、Pymysql、pillow等3、熟悉python的web框架,Flask、Django,有基本的Web開發經驗,對http協議有基本了解,能夠閱讀基本的javascript代碼4、對常見爬蟲框架scrapy等能夠使用,對基本的反爬蟲手段有一定的經驗如Token、字體反爬等有一定突破手段,有過實際的爬蟲經驗包括App和Web。能夠使用無頭瀏覽器進行一些爬蟲工作。有小紅書類App爬蟲經驗者尤佳5、必須掌握Linux的基本操作,能夠使用容器技術(Docker && K8s)6、熟練掌握mysql、redis數據庫。了解ElasticSearch的基本使用7、對數據分析、NLP方向有實際經驗者優先考慮8、了解Android基本知識并能用于App爬蟲優先考慮崗位職責:1、 和開發團隊一起持續優化升級公司現有的產品,并進行規劃以及負責后端系統需求分析、模塊開發;2、 負責公司各類項目的爬蟲工作;3、 各種Python自動化腳本的維護和開發,數據的清洗工作;4、 負責相關技術文檔的編寫;

              立即申請
              收藏

              RPA工程師(可實習)上海頓飛信息科技有限公司上海-普陀區0.7-1.5萬/月01-12

              學歷要求:大專|工作經驗:在校生/應屆生|公司性質:民營公司|公司規模:50-150人

              1.負責公司相關產品的部署和流程研發工作;2.針對流程進行需求梳理及分析;3.針對客戶實際業務流程,進行定制化腳本開發;任職資格:1.計算機相關專業,?埔陨蠈W歷;2.熟練掌握一種編程語言,如Python、java、c#代碼規范簡潔;3.熟練掌握一門腳本語言,如shell,VB,Python,Powershell,Batch;4.了解如何部署和使用主流的數據庫如MySQL、Oracle、Redis等;5.熟練使用windows、Linux操作系統,熟練使用Docker;使用GIT管理代碼;6.具備全面、扎實的軟件基礎知識,掌握操作系統、軟件工程、設計模式、數據結構、數據庫系統、網絡安全等專業知識;7.做事積極主動,具備良好的溝通能力、協調能力,有較強的學習能力和抗壓能力;

              立即申請
              收藏

              python爬蟲工程師格科微電子(上海)有限公司上海1.2-2萬/月01-12

              學歷要求:本科|工作經驗:3-4年|公司性質:外資(非歐美)|公司規模:500-1000人

              崗位職責: 1、負責多平臺信息爬取和頁面內容的提取分析,負責破解各類反爬機制; 2、負責APP的數據抓取和爬取鏈路優化(包括APP反編譯、逆向分析、脫殼、加密參數破解、抓取攻防等),提升抓取能力; 3、研究爬蟲策略和防屏蔽規則,解決封賬號、封IP、驗證碼、頁面跳轉等難點,提升網頁抓取的效率和質量; 崗位要求: 1.3年以上python爬蟲經驗,本科及以上學歷,計算機相關專業,有電商類數據經驗優先; 2.熟悉掌握至少一種開源爬蟲框架(scrapy、appium、selenium等); 3.精通動態網頁抓取、瀏覽器模擬抓取、APP抓取等技術,熟悉使用fiddler或其他抓包工具。; 4.具有js逆向,app逆向相關經驗。熟悉js hook原理,熟悉各種反爬風控常見手段; 5.具有團隊合作精神,有責任感,對工作認真負責,有較強的協調和溝通能力;

              立即申請
              收藏

              爬蟲工程師北京道略管理咨詢有限公司成都-武侯區0.8-1萬/月01-12

              學歷要求:本科|工作經驗:3-4年|公司性質:民營公司|公司規模:50-150人

              崗位職責:1.負責設計和開發分布式網絡爬蟲系統,進行多平臺信息的抓取和分析;2.根據業務需求,實現大規模文本、圖片、視頻數據抓取、清洗、存儲等工作;3.負責抓取數據的深度提取和挖掘,優化數據應用架構,小程序數據抓取、微信數據抓;4.參與爬蟲核心算法的策略優化研究,提升網頁抓取的效率和質量;5.對數據質量負責,提供數據分析報告,支持產品研發。崗位要求:1.計算機或相關專業,本科或以上學歷,3年以上爬蟲開發經驗;2.精通python爬蟲、Java等語言,分布式系統;3.精通爬蟲和反爬技術,精通http底層協議;精通深度抓取、動態網頁技術抓取、瀏覽器模擬抓取、APP抓取等技術;4.數據方面有足夠的敏感性,獨立思考能力和邏輯分析能力強。5.有很強的學習能力和技術鉆研能力,積極主動,思維靈活開放,有良好的溝通能力,善于跨團隊合作。

              立即申請
              收藏

              Python爬蟲開發工程師珠海鈞譽資產管理有限公司廣州-天河區0.8-1.2萬/月01-12

              學歷要求:大專|工作經驗:1年|公司性質:民營公司|公司規模:少于50人

              崗位職責:1. 負責數據的抓取、解析、清洗、入庫、優化;2. 構建和開發在海量數據下多維分析的數據分析平臺3. 設計爬蟲策略和防屏蔽規則,解決封賬號、封IP、驗證碼等難點;4. 完成公司需求的api;5. 完成上級交辦的其他工作任務;任職要求:1.計算機、軟件工程、自動化等相關專業畢業;2.熟悉Python語言,Python開發經驗1年以上,至少熟悉一種框架,如Flask、Django等;熟悉使用selenium,熟練使用 requests、urllib模塊;3.熟悉前端的基本調試工具,并熟練掌握HTML5、CSS3、jQuery、 Nodejs、Ajax等Web前端技術;4.熟悉前端開發的開源工具包Bootstrap,有響應式頁面開發經驗者優先;5.熟悉MariaDB(MySQL)、Oracle或其他任何一種關系型數據庫管理系統(RDBMS);6.精通網頁抓取原理及技術、深度抓取、動態網頁技術抓取、瀏覽器模擬抓取技術,從結構化的和非結構化的數據中獲取信息;7.具有良好的代碼習慣,結構清晰,命名規范,邏輯性強。

              立即申請
              收藏

              全選
              申請職位
              共12頁,到第確定

              精英競拍匯-中高端人才求職平臺

              互聯網專場
              招聘職位: 后端開發,前端開發,移動端開發,測試,產品/設計/運營
              金融專場
              招聘職位: 財務審計,合規與風險控制,后臺運營,投行,銷售
              房地產專場
              招聘職位: 房地產開發,建筑工程,規劃設計,商業,市場營銷
              汽車專場
              招聘職位: 汽車新能源,軟件與汽車電子,生產制造,質量管理,供應鏈管理
              金博棋牌下载