InfoSpider(爬虫工具箱)

InfoSpider(爬虫工具箱)，致力于安全性便捷的协助用户拿回自身的数据，专用工具编码开源系统，步骤全透明，并出示数据分析作用，根据用户数据形成数据图表文档，促使用户更形象化、深入了解自身的信息内容，必须根据各种各样库来开展手机软件的安裝！

软件简介

　　INFO-SPIDER 是一个集诸多数据源于一身的爬虫工具箱，致力于安全性便捷的协助用户拿回自身的数据，专用工具编码开源系统，步骤全透明。并出示数据分析作用，根据用户数据形成数据图表文档，促使用户更形象化、深入了解自身的信息内容。 现阶段适用数据源包含GitHub、QQ邮箱、163邮箱、阿里邮箱、新浪邮箱、Hotmail电子邮箱、Outlook电子邮箱、京东商城、淘宝网、支付宝钱包、中国移动通信、联通、中国电信网、知乎问答、bilbil、网易音乐、QQ好友、QQ群、形成朋友圈相册、电脑浏览器浏览历史、12306、博客园、CSDNblog、开源中国blog、百度百家。

软件功能

　　可以信赖：本新项目为开放源代码项目，编码简约，全部源代码由此可见，当地运作，可以信赖。

　　应用简易：出示 GUI 页面，只需点一下所需获得的数据源并依据提醒实际操作就可以。

　　构造清楚：本新项目的全部数据源独立同分布，可扩展性高，全部网络爬虫脚本制作在新项目的 Spiders 文档下。

　　数据源丰富多彩：本新项目现阶段适用高达24 个数据源，不断升级。

　　数据文件格式统一：爬取的全部数据都将储存为json文件格式，便捷中后期数据分析。

　　本人数据丰富多彩：本新项目将尽量多地给你爬取本人数据，中后期数据解决可依据必须删剪。

　　数据分析：本新项目出示本人数据的大数据可视化，现阶段仅一部分适用。

　　文本文档丰富多彩：本新项目包括详细全方位的【使用说明书】文本文档和教程视频

使用方法

　　依靠安裝

　　安裝python3和Chrome浏览器

　　安裝与Chrome浏览器同样版本号的驱动器

　　安裝依靠库 pip install -r requirements.txt

　　专用工具运作

　　进到 tools 文件目录

　　运作 python3 main.py

　　在开启的对话框点一下数据源按键, 依据提醒挑选数据储存途径

　　弹出来的电脑浏览器键入用户登陆密码后会全自动刚开始爬取数据, 爬取进行电脑浏览器会全自动关掉.

　　在相匹配的文件目录下能够查询免费下载出来的数据(xxx.json), 数据分析数据图表(xxx.html)