日本招聘网站数据采集和分析

最近做了一个日本IT公司招聘信息的采集,想要对日本IT环境及使用技术做一个简单的分析; 项目用的是Scrapy框架,第一次用,还是遇到不少问题;对数据进行分析是第一次; 采集、处理和分析过程中也有一些不严谨的地方; 项目地址:点击查看,抓取的数据传到百度云了:点击查看 ,密码:s7b0,spiders/job.db; 数据采集 数据来源是这两个招聘网站:http://next.rikunabi.c…

Read More

用程序生成彩票号码

之前买过几次双色球,还分析历史数据用C#写了一个生成号码的程序,后来找不到了; 最近刚用学习了一下 scrapy,顺便把彩票历史数据爬取下来,接着之前的思路,重新写一个生成号码的程序; 本文里的逻辑和观点不一定对,水平有限,只是用记忆中仅剩的一些高中概率知识分析一下; 背景 按照我之前一个同事的说法,彩票开奖不一定公平,号码有可能是开奖前设定好的;研究了一下开奖流程,隐约感觉里面可能有一些蹊跷,但…

Read More