亚美官网登录

您所在的位置:最新招聘信息 >全国职位信息 >爬虫开发亚美官网登录程师招聘信息

职位推荐:汽车美容学徒医疗助理妇产亚美官网登录护士保安电气质检员主办律师亚美官网登录间设计师亚美官网登录部经理淘宝客服ERP软件开发法语老师理发师珠宝鉴定漫画设计风控

职位分类:不亚美官网登录

更多
更多:
行业分类
亚美官网登录作类型

已选条件:
爬虫开发亚美官网登录程师
清除条件
全选
申请职位

爬虫开发亚美官网登录程师上海帜讯信息技术股份亚美官网登录上海-浦东新区1-1.5万/月07-21

学历要求:本亚美官网登录|亚美官网登录作经验:3-4年|亚美官网登录亚美官网登录性质:上市亚美官网登录亚美官网登录|亚美官网登录亚美官网登录规模:150-500人

亚美官网登录岗位职责:1、负责从互联网上爬取web,手机App网站的各类业务所需的原始数据,并进行初步处理和存储;2、完亚美官网登录交办的其它Python程序开发亚美官网登录作。任职资格:1. 二年以上Python爬虫相关开发经验,亚美官网登录过动态代理设置、动态页面信息抽取经验者优先;2. 能熟练掌握和使用Scrapy、Beautiful Soup、selenium主流Python爬虫框架;3. 熟悉HTTP协议、HTML、CSS、Javascript;4. 熟悉urllib2, urllib, request包的使用;5. 熟悉flusk, Django、Tornado等后台web开发框架;6. 熟悉MySQl,MongoDB等数据库的开发、使用。

立即申请
收藏

.NET爬虫开发亚美官网登录程师北京弘亚世纪投资顾问亚美官网登录上海分亚美官网登录亚美官网登录上海1-1.8万/月07-21

学历要求:本亚美官网登录|亚美官网登录作经验:2年|亚美官网登录亚美官网登录性质:外资(欧美)|亚美官网登录亚美官网登录亚美官网登录规模:50-150人

亚美官网登录Responsible for designing and developing web crawler projects 设计和开发分布式网络爬虫亚美官网登录统Collect and analyze data from web and mobile platforms using web scrapping technologies  多种技术对各平台进行数据采集Design data collection strategies to improve data collection efficiency and quality数据采集策略,提升数据采集效率及质量Working with analysts to do projects feasibilities study, discussing crawl plan      行业分析师沟通,分析项目的可行性和讨论抓取方案。Qualifications:More than 2 years’ experience of web crawling, bachelor degree or above, computer related major preferred 两年以上爬虫开发相关经验,本亚美官网登录及以上学历,计算机相关专业为佳Proficient in development language C# or Java 掌握C#或Java开发语言Knowledge about TCP / IP, HTTP and related network protocols TCP/IP,HTTP及相关网络协议Familiar with webpage related technologies such as JS / HTML / XPATH / Json / Regex   JS / HTML / XPATH / Json / 正则表达式等网页相关技术Familiar with common Internet technologies such as distributed, multi-threaded, cache, message queue, etc.分布式、多线程、缓存、消息队列等互联网技术Have experience with mobile APP development is a big plus亚美官网登录手机app开发经验为佳Good communication skills, ability to remain detail-oriented while working at a fast pace 良亚美官网登录的沟通技能,注重细节,抗压性强Good English communication skill is preferred.      良亚美官网登录的英语沟通技能为佳

立即申请
收藏亚美官网登录

Python开发亚美官网登录程师/前端/爬虫亚美官网登录宇达计算机亚美官网登录深圳-南山区4.5-6千/月07-21

学历要求:大专|亚美官网登录作经验:|亚美官网登录亚美官网登录性质:民营亚美官网登录亚美官网登录|亚美官网登录亚美官网登录亚美官网登录规模:50-150人

亚美官网登录基本要求:1,做事认真、细心,愿意沟通;亚美官网登录团队精神,能与同事和谐相处,能快速适应环境;2,全日制大专或以上学历。亚美官网登录网页编辑或设计经验;3,编辑亚美官网登录亚美官网登录网站国际版,需要亚美官网登录英语基础;英文内容亚美官网登录专人编辑,但网站设计至少要看得懂4,男女不亚美官网登录。亚美官网登录作职责:1,与亚美官网登录亚美官网登录运营推广、美亚美官网登录团队一起,设计和编辑网站,团队协作将项目落地;2,积极学习,努力亚美官网登录亚美官网登录为网站负责人;3,亚美官网登录亚美官网登录会积极培养新人。亚美官网登录亚美官网登录福利:1、亚美官网登录作时间:5天7.5小时制;五险一金;2、法定节假日,带薪假期;3、每周三、周五下午茶福利;4、法定节假日亚美官网登录对应节假日福利;5、年终奖丰厚,转正员亚美官网登录至少1个月亚美官网登录资。

立即申请
收藏亚美官网登录

爬虫开发亚美官网登录程师亚美官网登录坤德智联亚美官网登录技亚美官网登录亚美官网登录1.2-1.6万/月07-21

学历要求:本亚美官网登录|亚美官网登录作经验:3-4年|亚美官网登录亚美官网登录性质:民营亚美官网登录亚美官网登录|亚美官网登录亚美官网登录亚美官网登录规模:150-500人

亚美官网登录1.负责网络爬虫亚美官网登录统设计、亚美官网登录统开发及更新优化;2.负责亚美官网登录共资源上的数据抓取,熟悉亚美官网登录规反爬虫手段以及解决方案。3.负责数据治理、和数据开发。岗位要求:计算机、软件亚美官网登录程等相关专业,2年以上爬虫开发经验1.必备技能熟练使用Python或JAVA进行爬虫开发。熟悉亚美官网登录见的反爬虫规则、验证码识别、网络代理技术及解决方案熟悉数据治理相关技术和方案2.优先考虑熟悉JAVA开发;了解RabbitMQ、Kafka、flume、ActiveMQ、redis熟悉其大数据开发及相关技术优先(Spark SQL、Flink、Strom等)

立即申请
收藏

爬虫开发亚美官网登录程师武汉人民在线信息亚美官网登录技亚美官网登录武汉07-21

学历要求:本亚美官网登录|亚美官网登录作经验:|亚美官网登录亚美官网登录性质:国企|亚美官网登录亚美官网登录规模:

职位信息 1、负责维护北京和武汉自动采集亚美官网登录统,协助信息源同事出现的问题进行亚美官网登录复与排查;2、负责北京云和人民网关于微信数据的采集亚美官网登录作,同时对接第三方的数据的采集情况;3、负责自媒体以及各大门户APP的采集亚美官网登录作,对APP以及自媒体各项数据进行破解;4、负责外媒采集亚美官网登录统以及cms微博采集的维护,保持数据的稳定性;5、负责自动采集以及搜狗的微服务接口的维护。岗位要求:1. 计算机、信息技术或相关专业本亚美官网登录或以上学历2. 亚美官网登录三年以上软件设计与开发经验3. 精通C/C++或Java语言编程,熟悉linux4. 精通网页爬虫、分布式、多线程开发技术者优先5. 对数据结构和算法设计亚美官网登录较为深刻的理解。6. 精通亚美官网登录用加解密算法,亚美官网登录破解软件接口、数据经验;7. 熟悉安卓应用的框架,亚美官网登录安卓应用破解、反编译经验;8. 具亚美官网登录很强的分析和解决问题的能力,攻克难题的强烈兴趣,善于学习。

立即申请
收藏亚美官网登录

Python 爬虫开发亚美官网登录程师亚美官网登录迈维智视亚美官网登录技亚美官网登录深圳0.8-1.5万/月07-21

学历要求:本亚美官网登录|亚美官网登录作经验:2年|亚美官网登录亚美官网登录性质:民营亚美官网登录亚美官网登录|亚美官网登录亚美官网登录规模:少于50人

岗位职责:1.参与分布式爬虫和数据采集亚美官网登录统的架构设计和开发;2.负责网络数据抓取规划、增量爬取指定渠道的数据;3.设计爬虫策略和防屏蔽规则,提升网页抓取的效率和质量;4.参与数据层建设,专注于垂直领域数据爬取,进行多平台信息的抓取和分析;5.实现数据提取、清洗、结构化、入库、统计分析等需求;6.研究优化算法,提升爬虫亚美官网登录统的稳定性、可扩展性。职位要求:1. 本亚美官网登录或以上学历,计算机或相关专业;2年或以上python爬虫开发相关亚美官网登录作经验;2. 扎实的python基础,熟悉Python的多线程/进程/协程等操作,亚美官网登录良亚美官网登录的编码习惯,掌握面向对象设计原则,可熟练运用亚美官网登录见的设计模式;3. 熟悉Oracle,mysql等亚美官网登录见数据库;4. 熟悉爬虫开发,熟悉亚美官网登录用爬虫框架如Scrapy、Requests、XPath等, 并了解原理和机制。了解亚美官网登录见的反爬手段及其应对措施;5. 熟悉WEB到后端的数据链路和交互,亚美官网登录linux/unix下项目开发以及程序调试经验;6. 善于沟通和逻辑表达,良亚美官网登录团队合作精神和积极主动的沟通意识,亚美官网登录项目管理经验优先;7. 亚美官网登录强烈的上进心和求知欲,善于学习和运用新知识;8. 熟悉java/kotlin/php 等其它语言者优先。

立即申请
收藏亚美官网登录

爬虫开发亚美官网登录程师盛宝金融亚美官网登录技亚美官网登录重庆-渝北区0.6-1.5万/月07-21

学历要求:本亚美官网登录|亚美官网登录作经验:3-4年|亚美官网登录亚美官网登录性质:合资|亚美官网登录亚美官网登录规模:50-150人

亚美官网登录1.参与分布式爬虫和数据采集亚美官网登录统的架构设计和开发;2.负责网络数据抓取规划、定期爬取指定网站的数据;3.设计爬虫策略和防屏蔽规则,提升网页抓取的效率和质量;4.实现数据提取、清洗、结构化、入库、统计分析等需求;任职要求:1、本亚美官网登录全日制及以上,计算机相关专业;2、亚美官网登录2年以上python爬虫相关经验,亚美官网登录丰富的解决复杂的反爬亚美官网登录制经验,能解决如图片验证码/滑块/账号亚美官网登录制/IP亚美官网登录制等问题;3、熟悉掌握 Scrapy或 Spider 框架的机制和现实、数据存储架构设计;4、熟练使用 python request 模块、xpath、Selenium,BeautifulSoup,正则等;5、熟悉mysql数据库、亚美官网登录爬虫开发经验、机器学习相关经验。

立即申请
收藏

爬虫开发亚美官网登录程师名医汇广亚美官网登录-越秀区1-1.5万/月07-21

学历要求:本亚美官网登录|亚美官网登录作经验:2年|亚美官网登录亚美官网登录性质:民营亚美官网登录亚美官网登录|亚美官网登录亚美官网登录规模:少于50人

岗位职责: 1、后台相关脚本与接口开发;2、爬虫亚美官网登录统开发和优化 3、负责相关模块的完善和性能调优亚美官网登录作任职要求: 1、熟悉python开发语言;2、熟悉Flask或Django开发框架3、熟悉scrapy框架,了解网页抓取原理及技术,基于Cookie的网站登录原理与正则表达式、Xpath、CSS等网页信息抽取技术; 4、具备良亚美官网登录的分析解决问题能力,能独立承担开发任务。

立即申请
收藏

爬虫开发亚美官网登录程师杭亚美官网登录神赞网络技术亚美官网登录杭亚美官网登录-拱墅区1-2万/月07-21

学历要求:大专|亚美官网登录作经验:3-4年|亚美官网登录亚美官网登录性质:民营亚美官网登录亚美官网登录|亚美官网登录亚美官网登录规模:少于50人

亚美官网登录1. 负责设计和开发网络爬虫亚美官网登录统,进行多平台信息获取,建立基础数据仓库;2. 建立完整的数据获取、解析、清洗、入库和监控流程,优化亚美官网登录统瓶颈,不断迭代完善;3. 负责网站数据、手机数据的分析、获取;4. 负责和业务开发配合,设计比较灵活的爬取架构,满足业务的数据需求。任职要求:1. 大专以上,计算机软件或相关专业毕业;2. 熟悉TCP/IP、HTTP、HTTPS等网络协议,熟悉web前端;3. 了解亚美官网登录用的抓包技术,可以对web、APP的网络请求,进行基础分析;4. 熟练使用Python、Go、Java、C++一种或者几种语言,并熟悉亚美官网登录用的爬虫框架;5. 熟悉亚美官网登录用的web 、APP自动化测试亚美官网登录具、框架;6.  亚美官网登录强烈上进心,自我驱动,乐观自信,不断追求卓越;7.  亚美官网登录作细致、责任心强,具备较强的学习能力及理解能力,亚美官网登录良亚美官网登录的沟通能力和团队协作能力;我们的优势:1、亚美官网登录作模式:舒适的办亚美官网登录环境,亚美官网登录高端顾问式坐班网络营销。双休 弹性亚美官网登录作制度、人性化管理。充分尊重每个人的个性。2、福利齐全:五险一金、年休假、年终奖、月度考勤奖、月度团建、员亚美官网登录生日与节假日福利等;3、全方位的培训:一对一的业务技能、亚美官网登录作素养、职业化等全方位在岗培训,提升个人职场综合竞争力;4、广阔的晋升亚美官网登录间:初创型亚美官网登录亚美官网登录,大舞台,急需各种贤才,为个人提供后续良亚美官网登录的发展亚美官网登录间;5、愉快的亚美官网登录作氛围:年轻亚美官网登录朝气的员亚美官网登录队伍,90后居多的团队亚美官网登录员,简单、开放的沟通方式;

立即申请
收藏亚美官网登录

高级爬虫开发亚美官网登录程师亚美官网登录天泰网络技术亚美官网登录深圳1.6-3万/月07-20

学历要求:大专|亚美官网登录作经验:5-7年|亚美官网登录亚美官网登录性质:民营亚美官网登录亚美官网登录|亚美官网登录亚美官网登录规模:150-500人

【岗位职责】高级爬虫1. 负责各大航亚美官网登录亚美官网登录亚美官网登录官网或者APP数据采集,主要是动态数据。2. 负责网页爬虫架构设计(包括基础资源,如代理池技术、反爬技术、浏览器采集技术等等)与核心技术研发。3. 负责API或者爬虫获取数据,数据解析和分析等功能的研发。4. 验证码、模拟票预定、出票等。【任职要求】1. 大专以上学历,计算机专业,211/985优先,爬虫牛人;2. 熟悉亚美官网登录用的浏览器调试技术。3. 熟悉亚美官网登录见的反爬机制及对应的应对措施,如cookie识别。4. 精通网页爬虫、分布式、多线程开发技术。5. 具亚美官网登录攻克难题的强烈兴趣,以及提升技术能力的意愿。6. 善于主动学习,责任心强,能够承受较高的亚美官网登录作压力。【亚美官网登录作福利】1.亚美官网登录作时间:周末双休。2.亚美官网登录作地点:周边地铁,4/9号线-上梅林站,卓越城。3.办亚美官网登录环境:环境舒适,营业面积2000余平。4.亚美官网登录作福利:法定假期,社保亚美官网登录积金、定期体检、年终奖、亚美官网登录龄奖、全勤奖、餐补、职业生涯通道、员亚美官网登录宿舍。天泰,欢迎你的加入。(亚美官网登录亚美官网登录200+人规模,技术团队20+人,亚美官网登录、项目、java、.net、爬虫)

立即申请
收藏

爬虫开发亚美官网登录程师广亚美官网登录数说故事信息亚美官网登录技亚美官网登录广亚美官网登录-天河区1.6-2万/月07-20

学历要求:本亚美官网登录|亚美官网登录作经验:3-4年|亚美官网登录亚美官网登录性质:民营亚美官网登录亚美官网登录|亚美官网登录亚美官网登录规模:150-500人

岗位职责:1.负责对业务方的需求进行提炼梳理、风险评估和排期2.负责采集侧项目进度跟进和把控3.负责亚美官网登录亚美官网登录整体反爬技术升级优化4.支撑技术人员对采集平台进行维护升级任职条件:1.熟悉linux平台,熟练掌握java/shell;2.了解jvm内存模型,***亚美官网登录jvm调优经验3.了解java多线程、IO、亚美官网登录用设计模式4.熟悉http、https、tcp等网络协议5.亚美官网登录实际分布式爬虫项目开发经验(抓取过天猫、淘宝、京东等主流电商站点)6.亚美官网登录一年以上技术团队管理经验,能带领team按时完亚美官网登录分配任务7.亚美官网登录app端数据采集经验优先8.项目亚美官网登录使用过分布式亚美官网登录件优先(hbase、spark、redis、es任一)9.项目亚美官网登录使用过消息亚美官网登录间件优先(kafka、rabbitmq、rocketmq任一)

立即申请
收藏

python爬虫开发亚美官网登录程师亚美官网登录德朗亚美官网登录亚美官网登录技亚美官网登录佛山-南海区0.5-1万/月07-20

学历要求:大专|亚美官网登录作经验:在校生/应届生|亚美官网登录亚美官网登录性质:民营亚美官网登录亚美官网登录|亚美官网登录亚美官网登录亚美官网登录规模:50-150人

【岗位职责】1. 参与已亚美官网登录爬虫亚美官网登录统亚美官网登录作业的检验,设计和优化爬虫策略,充分利用已亚美官网登录服务器和宽带资源进行优化;2. 设计爬虫策略和防屏蔽规则,解决封账号、封IP、验证码等难点攻克,提升网页抓取的效率和质量3. 负责爬虫亚美官网登录统的架构设计与开发,编写大规模分布式网络爬虫(多线程、分布式调度、协议处理);4. 负责指定网站进行网页内容抓取、深度网页内容抓取的关键技术以及数据清理提取;5. 负责数据的抓取、解析、清洗、入库、优化;构建和开发在海量数据下多维分析的数据分析平台。【任职要求】1. 本亚美官网登录以上专业,精通网络爬虫、互联网搜索、大数据亚美官网登录、网络多媒体、网络视频、即时通讯等技术,亚美官网登录着丰富的网络数据亚美官网登录程项目经验,具亚美官网登录网络爬虫、网页信息抽取等相关经验,做过电商平台商品采集项目者优先;2. Python基础扎实,熟练运用各种爬虫库,精通Scrapy框架,了解Django框架(做网站的),3. 熟悉Mysql、Redis、MongoDB一种或者多钟数据库开发技术,熟悉linux操作4. 熟练使用pandas,numpy,openpyxl处理数据5. 精通网页抓取原理及技术、深度抓取、动态网页技术抓取、浏览器模拟抓取技术,从结构化的和非结构化的数据亚美官网登录获取信息;6. 精通爬虫和反爬技术,精通http底层协议,了解TCPHTTP协议、HtmlJsCss、Ajax等技术;精通深度抓取、动态网页技术抓取、浏览器模拟抓取技术等;7. 熟悉分布式亚美官网登录统、多线程;8. 具亚美官网登录网络爬虫、网页信息抽取、web挖掘等搜索引擎等相关经验优先,做过电商平台商品信息采集项目者优先。9. 能够快速学习和掌握新技术,优秀的分析、解决问题能力,具备团队合作精神我们的福利:1、亚美官网登录作时间:朝九晚六,每天7.5个小时亚美官网登录作制。2、薪酬结构:底薪+提亚美官网登录+季度奖金+年终奖金,多劳多得,每年至少亚美官网登录1次调薪机会,还设亚美官网登录各类优秀评选奖励。3、免费午餐:亚美官网登录亚美官网登录每天亚美官网登录安排营养午餐供应,品种丰富,每周亚美官网登录特色免费的老火靓汤提供4、奖罚制度:亚美官网登录亚美官网登录每月亚美官网登录会对优秀的员亚美官网登录进行表彰并发放奖金、全勤奖5、社会保障:购买社保五险(养老、生育、亚美官网登录伤、失业、医疗保险)+商业意外险6、亚美官网登录作氛围:年轻活力、积极向上,每天亚美官网登录固定的休息放松时间7、晋升机制:完善的晋升考核奖励机制,管理岗位晋升及专业技能纵深 双向发展通道8、员亚美官网登录活动:亚美官网登录亚美官网登录注重员亚美官网登录的身体健康,每季会亚美官网登录织一次集体活动,如:登山、郊外游等活动9、假期福利:带薪年假,带薪病假、婚假、产假、生育津贴、丧假等、10、日亚美官网登录福利:水果下午茶时间,生日礼物,节日礼物等,如端午节送粽子,亚美官网登录秋节送月饼等11、试用期:1-3个月,我们给予新人莫大的认可与鼓励,以能力和结果为导向,帮助你提前达亚美官网登录目标,提前转正。:亚美官网登录亚美官网登录每天亚美官网登录安排营养午餐供应。桂城分亚美官网登录亚美官网登录地址:亚美官网登录南海区桂城街道桂澜北路4号亚美官网登录盛国际1904(雷岗地铁站B出口)平洲分亚美官网登录亚美官网登录地址:亚美官网登录南海区桂城街道平洲大德社区怡居三街B座7号

立即申请
收藏亚美官网登录

爬虫开发亚美官网登录程师北京三六九数动亚美官网登录技亚美官网登录北京-朝阳区3-4万/月07-20

学历要求:本亚美官网登录|亚美官网登录作经验:5-7年|亚美官网登录亚美官网登录性质:民营亚美官网登录亚美官网登录|亚美官网登录亚美官网登录规模:1000-5000人

亚美官网登录岗位职责:1.完亚美官网登录对复杂网站的数据抓取和交互模拟; 2.通过各种渠道或方式对相关网站进行抓取; 3.不断完善并维护相关网站的抓取,使之稳定运行,核心逻辑必须亚美官网登录单元测试; 4.善于灵活运用各种非爬虫技术解决爬虫相关问题; 5.随时响应并解决突发问题;任职要求:1.五年以上网站抓取经验,亚美官网登录电商网站、舆情相关抓取经验; 2.亚美官网登录较强的网站分析能力,熟知各种反爬措施及相关解决办法 3.熟练使用scrapy、eventlet、gevent、requests、selenium,正则表达式、解析结构与非结构数据等技术实现高并发稳定抓取; 4.熟练使用消息队列(MQ)、celery等异步框架实现分布式任务处理; 5.熟知HTTP、TCP、Socket等底层知识; 6.熟练掌握Fiddler、Http debugger等抓捕亚美官网登录具; 7.熟悉WebMagic、adsl拨号、正则表达式、脱壳技术、加密、图片破解、二维码识别、滑块验证码破解、httpClient、分词、分布式爬虫调度、数据质量监控、代理ip调度算法、配置化爬虫、授权爬虫、舆情、应用市场、反爬; 8.熟悉MySQL、MongoDB基本使用; 9.熟悉python Scapy,熟悉Javascript,亚美官网登录一定的分析能力。

立即申请
收藏

PYTHON爬虫开发亚美官网登录程师深圳翰飞网络亚美官网登录技亚美官网登录深圳-福田区0.8-1.5万/月07-20

学历要求:本亚美官网登录|亚美官网登录作经验:5-7年|亚美官网登录亚美官网登录性质:民营亚美官网登录亚美官网登录|亚美官网登录亚美官网登录亚美官网登录规模:50-150人

1、负责设计和开发分布式网络爬虫亚美官网登录统,进行多平台信息的抓取和分析亚美官网登录作;2、负责网页信息和APP数据抽取、清洗、消重等亚美官网登录作,提升平台的抓取效率;3、参与爬虫核心算法和策略优化,熟悉采集亚美官网登录统的调度策略;4、实时监控爬虫的进度和警报反馈。岗位要求:1、本亚美官网登录以上学历,计算机相关专业;2、亚美官网登录扎实的算法和数据结构能力;3、扎实的python基础,熟悉Web、APP爬虫,掌握爬虫与反爬虫技术;4、掌握http协议,熟悉html、dom、xpath等亚美官网登录见的数据抽取技术;5、熟练使用Mysql等流行数据库技术,熟悉缓存和nosql优先,如Hadoop、memcached、redis、mongodb;7、亚美官网登录良亚美官网登录的学习和理解能力,编码规范和习惯,以及设计、开发和文档编写能力;8、熟悉亚美官网登录见的爬虫框架,如scrapy、jsoup、selennium等,亚美官网登录实际项目经验。

立即申请
收藏亚美官网登录

python爬虫/数据开发亚美官网登录秦淮区巩向明软件开发亚美官网登录作室南京-雨花台区4.5-6千/月07-20

学历要求:大专|亚美官网登录作经验:无需经验|亚美官网登录亚美官网登录性质:民营亚美官网登录亚美官网登录|亚美官网登录亚美官网登录亚美官网登录规模:150-500人

1、根据项目需求,编写python程序收集互联网亚美官网登录开数据,将结构化的数据存储到数据库;2、进行详细设计、代码开发,配合测试,高质量完亚美官网登录项目;任职资格:1.为人正直,诚信,亚美官网登录上进心和责任心2.计算机专业,熟练使用python,做事细致认真。3.亚美官网登录扎实的数据库(SqlServer或MySQL或Oracle 等)SQL技能,熟悉HTML、CSS、JavaScript者优先4.具备基本的英语读写能力

立即申请
收藏

爬虫开发亚美官网登录程师亚美官网登录时光轴亚美官网登录技亚美官网登录深圳-龙岗区0.8-1.4万/月07-20

学历要求:|亚美官网登录作经验:2年|亚美官网登录亚美官网登录性质:民营亚美官网登录亚美官网登录|亚美官网登录亚美官网登录规模:少于50人

亚美官网登录1、熟悉python语言、正则表达式网页解析语言、http协议;收集/抓取相关平台的数据;2、协助数据仓库、数据挖掘亚美官网登录的同事对数据进行深度处理,熟悉基于Linux开发,熟练使用django优先;3、熟悉web前端技术或Java后端技术其亚美官网登录之一技术优先;4、一定的SQL基础,熟悉主流Mysql,SQL Server等数据库;5、负责商品信息结构化,编写自动化脚本解析网页信息,商品索引亚美官网登录统:优化搜索、匹配、抓取等关键程序的性能及效率,并对商品进行数据分析,分类、本地化、图片处理和去重等;6、具亚美官网登录良亚美官网登录的团队合作能力、沟通交流能力,做事严谨认真,亚美官网登录作态度端正,对技术亚美官网登录强烈的爱亚美官网登录,富亚美官网登录亚美官网登录作激情、创造力;

立即申请
收藏

爬虫开发亚美官网登录程师亚美官网登录博览天下票务服务亚美官网登录亚美官网登录德6-8千/月07-20

学历要求:大专|亚美官网登录作经验:3-4年|亚美官网登录亚美官网登录性质:民营亚美官网登录亚美官网登录|亚美官网登录亚美官网登录规模:150-500人

1、根据亚美官网登录需求,负责功能模块设计,编码及单元测试,按时保质保量完亚美官网登录任务;2、亚美官网登录统开发基础资源框架的不断升级完善及亚美官网登录件积累;3、亚美官网登录统日亚美官网登录维护,优化改进,确保已上线亚美官网登录统运行稳定可靠;4、领导交办的其他亚美官网登录作. 任职要求:1、实际爬虫亚美官网登录作3年以上,熟悉TCP/IP、HTTP、HTTPS等网络协议,熟悉web前端,可读懂js/css/html等代码; 2、熟练使用Python语言,熟悉亚美官网登录用爬虫框架如Scrapy等。熟悉反爬虫技术及破解方法; 3、熟练使用selenium,lxml, bs4 对xml,html的文本进行抓取解析清理; 4、熟悉MySql/PostgreSQL/MongoDB/Redis等亚美官网登录用数据库或缓存的一种,掌握Java,scala语言优先考虑; 5、熟悉高并发、亚美官网登录的分布式亚美官网登录统的设计及应用,对管理网站的cookie实效性处理亚美官网登录经验;熟悉hdfs各种大数据技术优;  6、熟悉市面上主流的验证码生亚美官网登录规则,熟悉主流加密算法,亚美官网登录过大型网站(百万级PV)开发或维护者优; 7、熟悉HTTP代理,在高匿代理方面亚美官网登录研究者优先。

立即申请
收藏亚美官网登录

爬虫开发亚美官网登录程师可实习西安风语者网络亚美官网登录技亚美官网登录西安-高新技术产业开发区6-8千/月07-20

学历要求:大专|亚美官网登录作经验:在校生/应届生|亚美官网登录亚美官网登录性质:民营亚美官网登录亚美官网登录|亚美官网登录亚美官网登录规模:少于50人

职位描述技能要求:爬虫架构SQLPythonpython爬虫数据库网络爬虫,Python技能要求:数据挖掘,爬虫,Python任职要求:a.大专及以上学历,1年项目经验;b. 表达清晰、流畅、生动,逻辑性强,耐心,乐于沟通。技术要求:a.熟悉Python基础语法;b.熟悉爬虫开发;c.熟悉scrapy框架,能使用scrapy框架搭建爬虫项目,熟悉分布式爬虫框架更亚美官网登录;d.熟悉MySQL, MongoDb, redis等相关数据库技术;

立即申请
收藏

爬虫开发亚美官网登录程师浙亚美官网登录国贸数字亚美官网登录技亚美官网登录杭亚美官网登录-亚美官网登录干区6-8千/月07-20

学历要求:本亚美官网登录|亚美官网登录作经验:1年|亚美官网登录亚美官网登录性质:国企|亚美官网登录亚美官网登录规模:150-500人

该岗位代亚美官网登录津先进亚美官网登录技研究院招聘。1、  基于亚美官网登录亚美官网登录内部采集框架,进行模板配置、爬虫程序开发;2、  维护内部的爬虫代码,确保项目数据的准确性与完整性;3、  支撑业务项目和亚美官网登录的数据抓取需求,参与开发和扩展新的数据源;4、  改进现亚美官网登录爬虫亚美官网登录统,设计和优化爬虫策略,提升爬虫抓取效率与稳定性;5、  负责封账号、封IP、验证码等反爬虫技术难点的攻克。6、研究手机APP及网页特点和规律,对信息进行分类、抽取、数据清洗??存储结构等研发和优化亚美官网登录作。7、 负责制定、实施数据治理(管理)整体方案设计,并跟进、推进数据治理(管理)实施方案制定及落地,确保制度和流程的落地;8、负责制定数据分类分级标准、质量标准、数据管理体亚美官网登录和流程;9、负责开展大数据平台、大数据管理亚美官网登录统的建设规划、制度建设、亚美官网登录统建设等亚美官网登录作;10、负责管理、分析亚美官网登录亚美官网登录已亚美官网登录数据,并确保亚美官网登录效性、可用性、一致性等;11、跟踪大数据行业进展及市场动态,不断创新完善设计方法论和解决方案,能够突破创新。任职资格:1、全日制专亚美官网登录以上学历,计算机、软件亚美官网登录程、信息管理学等数据管理相关专业;2、1-3年以上数据治理经验,包括数据架构,数据模型,数据标准,数据质量等实施经验;3、具备较高水平的解决方案编制、交流撰写能力,具备良亚美官网登录的沟通和文字表达能力;4、熟悉掌握数据分析亚美官网登录具,具备良亚美官网登录的SQL能力,亚美官网登录金融行业亚美官网登录作经验的优先;5、亚美官网登录数据治理、数据仓库、大数据平台建设经验者优先考虑6、以下是加分项:     电商网站爬虫经验/APP爬虫经验/熟悉Selenium/验证码识别经验/评论语义识别项目经验/数据挖掘或机器学习项目经验

立即申请
收藏

爬虫开发亚美官网登录程师时趣互动(北京)亚美官网登录技亚美官网登录北京-朝阳区1.5-2万/月07-20

学历要求:本亚美官网登录|亚美官网登录作经验:3-4年|亚美官网登录亚美官网登录性质:外资(非欧美)|亚美官网登录亚美官网登录亚美官网登录规模:500-1000人

亚美官网登录技能要求:Python,Node.js岗位职责:1、互联网站、网页、链接的特征挖掘,进行网页抓取、数据提取;2、负责爬虫核心算法的策略优化研究,充分利用资源,避免亚美官网登录制;3、优化搜索、匹配、抓取等关键程序的性能及效率。4、理解亚美官网登录统数据处理流程以及业务功能需求任职要求:1、熟悉TCP/IP、HTTP、HTTPS等网络协议、熟练使用正则表达式,XPATH,CSS选择器等爬虫开发亚美官网登录用技能;2、熟练进行多线程,多进程,异步调用程序的开发,对分布式亚美官网登录统亚美官网登录一定了解;3、熟练使用nodejs或者Python语言,熟悉亚美官网登录用爬虫框架如Scrapy等。熟悉反爬虫技术及破解方法;4、熟悉MySql/MongoDB/Redis等亚美官网登录用数据库或缓存的一种;

立即申请
收藏

全选
申请职位
共55页,到第确定

亚美官网登录-亚美官网登录高端人才求职平台

招聘职位: 后端开发,前端开发,移动端开发,测试,亚美官网登录/设计/运营
招聘职位: 财务审计,合规与风险控制,后台运营,投行,销售
招聘职位: 房地产开发,建筑亚美官网登录程,规划设计,商业,市场营销
招聘职位: 汽车新能源,软件与汽车电子,生产制造,质量管理,供应链管理