精品为您呈现,快乐和您分享!

移动端

收藏本站

OK下载站

当前位置: 首页 > 软件下载 > 网络工具

InfoSpider(爬虫工具箱)v1.0免费版

InfoSpider(爬虫工具箱)v1.0免费版

类型:网络工具 语言:简体

大小:19.6M 更新时间:2020-09-18

推荐指数:

应用简介


InfoSpider爬虫工具箱旨在帮助用户安全、快速地取回自己的数据。工具代码开源,流程透明,提供数据分析功能。它根据用户数据生成图表文件,让用户更直观、更深入地了解自己的信息。通过各种库安装软件。









InfoSpider(爬虫工具箱)旨在帮助用户安全、快速地取回自己的数据。工具代码开源,流程透明,提供数据分析功能。它根据用户数据生成图表文件,让用户更直观、更深入地了解自己的信息。需要通过各种库来安装软件!



InfoSpider(爬虫工具箱)



软件介绍



INFO-SPIDER是一个集成了多种数据源的爬虫工具箱。它旨在帮助用户安全、快速地取回数据。工具代码开源,流程透明。它还提供数据分析功能,根据用户数据生成图表文件,让用户更直观、更深入地了解自己的信息。目前支持的数据源包括GitHub、QQ邮箱、网易邮箱、阿里巴巴邮箱、新浪邮箱、Hotmail邮箱、Outlook邮箱、京东、淘宝、支付宝、中国移动、中国联通、中国电信、知乎、哔哩哔哩、网易云音乐、 QQ好友、QQ群、生成朋友圈相册、浏览器浏览历史、12306、博客园、CSDN博客、开源中文博客、简易书。



特征



安全可靠:本项目为开源项目,代码简洁,所有源代码可见,本地运行,安全可靠。



使用方便:提供GUI界面,只需点击想要获取的数据源,根据提示进行操作即可。



结构清晰:本项目所有数据源相互独立,可移植性强。所有爬虫脚本都在项目的Spiders文件下。



丰富的数据源:该项目目前支持多达24+数据源,并且持续更新。



统一数据格式:所有爬取的数据都会以json格式存储,方便后期数据分析。



丰富的个人数据:本项目将为您爬取尽可能多的个人数据,后期数据处理可根据需要进行删除。



数据分析:该项目提供个人数据的可视化分析,目前仅部分支持。



文档丰富:该项目包含完整全面的使用说明和视频教程



使用说明



取决于安装



安装python3和Chrome浏览器



安装与Chrome浏览器相同版本的驱动程序



安装依赖库pip install -rrequirements.txt



工具运行



进入工具目录



运行python3 main.py



在打开的窗口中点击数据源按钮,根据提示选择数据保存路径。



输入用户密码后,弹出的浏览器会自动开始爬取数据。抓取完成后,浏览器会自动关闭。



您可以在相应目录中查看下载的数据(xxx.json)和数据分析图表(xxx.html)。