最近做了一个日本IT公司招聘信息的采集,想要对日本IT环境及使用技术做一个简单的分析; 项目用的是Scrapy框架,第一次用,还是遇到不少问题;对数据进行分析是第一次; 采集、处理和分析过程中也有一些不严谨的地方; 项目地址:点击查看,抓取的数据传到百度云了:点击查看 ,密码:s7b0,spiders/job.db; 数据采集 数据来源是这两个招聘网站:http://next.rikunabi.c…
沧洲违宿诺,明日犹可待
最近做了一个日本IT公司招聘信息的采集,想要对日本IT环境及使用技术做一个简单的分析; 项目用的是Scrapy框架,第一次用,还是遇到不少问题;对数据进行分析是第一次; 采集、处理和分析过程中也有一些不严谨的地方; 项目地址:点击查看,抓取的数据传到百度云了:点击查看 ,密码:s7b0,spiders/job.db; 数据采集 数据来源是这两个招聘网站:http://next.rikunabi.c…