您當前的位置: 首頁 > 職位列表 > 職位詳情

爬蟲工程師

2-4萬元/月
投遞簡歷
浙江-杭州-濱江區(qū)
3-5年
2025-12-01 17:05:27 更新 被瀏覽:185 次
問徑(杭州)數(shù)字科技有限公司
最近在線時間:2025-12-01 17:05:27
電話:150********
地址:浙江省杭州市濱江區(qū)長河街道聚才路239號1幢1506室
職位描述

崗位前置語:
1、科技型創(chuàng)業(yè)公司,小天花板級技術(shù)團隊,事密則成。
2、接受線上、線下Part-time,結(jié)果導(dǎo)向,不拘泥于形式。
3、未來定位為一家以技術(shù)驅(qū)動業(yè)務(wù)的科技獨角獸。

職位描述:

1、遵循robots協(xié)議,參與爬蟲系統(tǒng)的建設(shè)與優(yōu)化,滿足各類業(yè)務(wù)數(shù)據(jù)需求;
2、負責分布式爬蟲系統(tǒng)的建設(shè),優(yōu)化數(shù)據(jù)調(diào)度、抓取、解析、存儲全棧流程;
3、幫助團隊攻克網(wǎng)頁信息抽取技術(shù)算法的難關(guān),提升海量數(shù)據(jù)系統(tǒng)的抓取效果與性能。
4、關(guān)注最新數(shù)據(jù)挖掘、抓取技術(shù),不斷維護和優(yōu)化現(xiàn)有爬蟲框架,確保抓取的高效和穩(wěn)定性。

職位要求:
1、本科或研究生以上學(xué)歷,3-5年爬蟲抓取采集相關(guān)工作經(jīng)歷;
2、熟悉主流爬取技術(shù)及爬蟲框架工具,如Selenium/Puppeteer/Scrapy/PhantomJS等;
3、熟悉Python/Java/Go/C++其中一種語言,具備扎實的編碼能力;
4、熟悉常見反爬封禁策略,并具備相關(guān)的實戰(zhàn)經(jīng)驗。

加分項:
有產(chǎn)業(yè)鏈數(shù)據(jù)相關(guān)經(jīng)驗者優(yōu)先考慮。
有大模型應(yīng)用開發(fā)相關(guān)經(jīng)驗者優(yōu)先考慮。
熟悉分布式爬蟲框架(如StormCrawler、Heritrix等)
有大數(shù)據(jù)相關(guān)技術(shù)(如Hadoop、Spark、Kafka)的使用經(jīng)驗

求職提醒:求職過程請勿繳納費用,謹防詐騙!若信息不實請舉報。
該公司的其他職位
杭州濱江區(qū)急招直播運營
5000-7000元/月
浙江-杭州
2025-12-08 16:00:35
投遞簡歷
供應(yīng)鏈專員
5000-10000元/月
浙江-杭州
2025-12-03 10:53:33
投遞簡歷
跨境電商運營
4000-7000元/月
浙江-杭州
2025-12-03 10:42:17
投遞簡歷
跨境獨立站運營
5000-10000元/月
浙江-杭州
2025-12-03 10:38:17
投遞簡歷
杭州濱江區(qū)招人事專員助理
4000-7000元/月
浙江-杭州
2025-12-03 09:58:44
投遞簡歷
平面設(shè)計師
4000-7000元/月
浙江-杭州
2025-12-03 09:41:07
投遞簡歷
Ceo助理崗
4000-7000元/月
浙江-杭州
2025-12-01 17:40:24
投遞簡歷
大模型研發(fā)
2-3萬元/月
浙江-杭州
2025-12-01 17:00:29
投遞簡歷
問徑(杭州)數(shù)字科技有限公司
公司主頁 >
微信求職找工作
手機掃一掃
手機掃一掃
隨時隨地找工作

海量高薪崗位在線免費直招 招聘者/求職者電話直聊

微信小程序
手機也能找工作