Python 写的简易采集爬虫

1^# 大中小 tomore 发表于 2008-9-26 23:01 只看该作者

简易采集爬虫
# 1.我只做了一个收集url的功能，如果需要将数据入库，可在 parseData 函数里面写处理代码
# 2.需要sqlite3或者pysqlite支持
# 3.可以在DreamHost.com空间上面运行
# 4.可以修改User-Agent冒充搜索引擎蜘蛛
# 5.可以设置暂停的时间，控制采集速度

附件: 您所在的用户组无法下载或查看附件,如果还没登录，请先登录

更多“Python 写的简易采集爬虫”相关内容....

TOP

‹‹ 上一主题 | 下一主题 ››

搜索本站资源

更多“Python 写的简易采集爬虫”相关内容....