引自:分享一个自己写的FC2资源爬虫小工具
作用:
用于搜索最近已有的fc2磁链资源并形成网页列表的傻瓜式小工具,方便自行选择下载
思路:
fc2和nyaa站这两个宝地,资源多,品种丰富,但是nyaa站的资源大多都没放预览图而且很多资源有重复传种,想要找个心仪的资源还得逐个翻番号去官网看,不太方便。于是写了这么个小工具。自动爬取nyaa站fc2搜索词下的前n页资源,然后用资源的番号去官网对应页面下载预览图,最后本地生成个网页,方便自行检索。写完后给几个兄弟试用了下,感觉还行,今天bus站又刚好能发帖了,于是顺手分享一下。
PS:这个工具,不需要编程基础,不需要自建网站后台,生成和获取的数据都是到手可用的。但是得自备梯子。
使用方法(仅适合windows 10环境,win7需要自行安装环境包):
1.下载FC2freelistver1.3.zip.001和FC2freelist ver1.3.zip.002并解压缩到任意位置
得到上面这一堆东西,主要的就是标红框的文件,几个py结尾的是源代码,如果不需要可以删除
2.在config.ini选择是否代理及是否下载预览原图(选填,不更改将使用默认配置运行)
双击用记事本打开config.ini文件,把文件中的红框1,2改成自己爬墙软件的代理端口,如果不知道,可以试下把红框3的内容改成no,爬墙软件的代理模式改为全局
3.双击FC2freelist.exe→输入3,回车→等待爬虫程序爬完所需资源(速度快慢由您的网络环境决定)
4.打开home.html→选择文件(./data/FC2_ALL.xlsx)→enjoy
感悟:喀秋莎的技术能力只有GHS时才有突飞猛进。
我在上班,别发骚图了。