python小说爬虫工具,小说搜索下载软件附源码
,,
看小说的朋友们一定要试试哦,很方便,直接下载小说,连小说网站都不用打开,同时也把python的源码也放上了,懂的可以自己添加源网站,5.15更新,加了一个换源,功能是实现了但是代码冗余,抽取基类做继承的话就增加耦合,后续有时间再更新代码吧(市面上那些追更小说一下子几十上百的换源是怎么实现的?????),给小说爬取加了超时抛出异常,毕竟不是每个源都是那么稳定,搜索换成线程,因为发现搜索结果较大的时候界面又卡住了….,细节修改,增加代码健壮性,5.13更新:
更新了一下软件,把遗留问题解决一下,并看看后续还有啥能更新的解决的问题,解决开始下载之后会出现无响应,弹窗太烦去掉了,改成一个console看进度,目前尝试过程中发现不用太担心反爬,重试机制最终还是会下载完所有章节,尝试过1800+章节小说下载不到1分钟,后续修改目标,尝试增加换源功能,目前由于下载保存的都是utf8导致整合文件过大,后续尝试使用gbk,5.12版本:
1. 使用python的asyncio,爬取的速度挺快
2. 整理了一下页面的格式,放到手机上看还是不错的
3. 由于爬取速度过快,可能会爬取失败,内部加了重试逻辑,只要最后能生成txt应该就是全部章节
4. 自助搜索功能
1. 本站所有资源来源于用户上传和网络,如有侵权请联系站长!
2. 分享目的仅供大家学习和交流,您必须在下载后24小时内删除!
3. 不得使用于非法商业用途,不得违反国家法律。否则后果自负!
4. 本站提供的源码、模板、插件等等其他资源,都不包含技术服务请大家谅解!
5. 如有链接无法下载、失效或广告,请联系管理员处理!
6. 本站资源售价只是赞助,收取费用仅维持本站的日常运营所需!
7. 如遇到加密压缩包,请使用WINRAR解压,如遇到无法解压的请联系管理员!
8. 精力有限,不少源码未能详细测试(解密),不能分辨部分源码是病毒还是误报,所以没有进行任何修改,大家使用前请进行甄别!
教热门 » python小说爬虫工具,小说搜索下载软件附源码