4 Commits

Author	SHA1	Message	Date
lzjqsdd	d7a3e28f59	增加UserAgent池防止爬虫被禁，增加进程锁防止同时开启多个爬虫写入同一个文件出现错误数据	2016-04-23 12:34:35 +08:00
lzjqsdd	cfed93f3ef	修改时间为时间戳格式，同时运行三个spider写入一个文件会出现脏数据	2016-04-22 17:16:06 +08:00
lzjqsdd	2a312aa769	修复网易新闻抓取时间提取错误，增加提取的新闻数据（仅时间标题）	2016-04-21 22:44:36 +08:00
lzjqsdd	47865e367d	主要增加网易新闻抓取，其他：修改头条新闻内容换行表达，增加浏览器标识解决网易无法抓取问题	2016-04-19 18:18:45 +08:00