高级爬虫工程师
2024/06/01 11:02:07
| 公司地址 | 柬埔寨金边市 |
| 招聘人数 | 1人 |
| 公司名称 | foya |
| 职位名称 | 高级爬虫工程师 |
| 联系人 | 陈莲 |
| 学历需求 | 大专 |
| 类型 | 客服及技术支持 |
| 工作经验 | 2年以上 |
| 公司介绍 | 简历投递✈️ @xiaopingguo08 |
| 联系电话 | |
| Email/微信号 | [email protected] |
| 有效期 | 一周 |
| 区域 | 国外/其他区域 |
| 薪资 | 0泰铢/月 |
| 职位描述 | 爬虫的技术需要带服务接口破解, 网站会员限制, 账号可用资源数目限制等 岗位职责: 1.参与数码回收项目分布式网络爬虫系统的架构设计与开发； 2.主导爬虫核心算法的策略优化研究，提升爬虫抓取效率和质量； 3.负责HTTP、AJAX等各类网络请求分析，探索和研究高效的数据抓取解决方案； 4.借助浏览器渲染、管理cookie、通过提交表单从受验证码保护的复杂网站中抽取数据； 5.利用python数据分析准备工作、利用numpy解决随机漫步案例、利用pandas完成数据汇总和描述。 任职要求: 1.有互联网数码回收行业数据处理相关岗位经验者优先考虑； 2.计算机相关专业专科及以上学历，2年及以上大数据相关工作经验； 3.熟悉Linux开发环境，熟悉Python/Java/Scala等至少1门编程语言； 4.熟悉Hadoop、Hive、Spark、Kafka、HBase等大数据相关技术及实操应用； 5.有数据可视化、Web、MySQL、Redis、 MongoDB、JS等相关经验者优先； 6.熟悉linux开发环境，熟悉C++和python，有多线程、分布式网络数据处理经验优先； 7.有扎实的数据结构和算法功底，精通网络爬虫，有着丰富的网络数据爬取工程项目经验 |
| 工作类型 | 全职 |
| 待遇 | 签证社保 包住 包吃 年底双薪 话补 房补 其他 |
| 性别 | 男 |
| 工作时间 | 做六休一 |