分享一下自己关于招聘信息的爬虫
说实话,自己一直不习惯 Pythonic 的代码。自己也有找工作的需求,有两个网站比较好爬,于是就爬了下来。
重大缺点: 1、不支持多线程 (个人自用,没必要爬那么快) 2、没有爬虫管理功能 (我每一天才运行一次……) 3、web 展示页面和 SQL 处理都非常简陋
不过够用就好……写这个爬虫的过程也让我对 ruby 代码的组织形式有了更多的认识。
链接:https://gitee.com/crella/job_walker/tree/master
欢迎各位大佬拍砖。