InfoSpider(個人數據爬蟲工具) v1.0 免費版

　　InfoSpider是一款強大的數據爬蟲工具，這款工具可以幫助您在GitHub、郵箱、知乎以及博客園等平臺中爬取自己的個人數據；這款工具簡單易部署，它擁有強大的數據分析功能，它可以幫助用戶分析個人數據，并將分析的數據以圖表的形式直觀的展示給用戶；InfoSpider支持的社交平臺很多，用戶除了可以主流的平臺中爬取數據外，還可以自定義配置該工具不包含的數據源；這款工具是一個開源項目，因此您可以免費使用它快速拿回自己在各大社交平臺的使用數據；需要的朋友歡迎下載使用。

軟件功能

　　源碼可見：本項目為開源項目，代碼簡潔，所有源碼可見，本地運行，安全可靠。

　　使用簡單：提供簡潔的GUI界面，只需點擊所需獲取的數據源并根據提示操作即可。

　　結構清晰：本項目的所有數據源相互獨立，可移植性高，所有爬蟲腳本在項目的 Spiders 文件下。

　　數據源豐富：本項目目前支持多達24+個數據源，持續更新。

　　數據格式統一：爬取的所有數據都將存儲為json格式，方便后期數據分析。

　　個人數據豐富：本項目將盡可能多地為你爬取個人數據，后期數據處理可根據需要刪減。

　　數據分析：本項目提供個人數據的可視化分析，目前僅部分支持。

　　文檔豐富：本項目包含完整全面的使用說明文檔和視頻教程。

軟件特色

　　1、可以通過web界面操作，該工具能夠適應多平臺，輕松跨平臺運行。

　　2、這款工具可以對爬取的個人數據進行統計和分析。

　　3、軟件通過融合機器學習、自然語言處理等技術，可以對數據進行深度分析。

　　4、它還可以將分析數據得到的結果生成一個直觀的圖表展示出來。

　　5、您可以自行添加更多數據源，軟件本身已經包含了很多常用的數據源。

　　6、這款工具可以幫助數據的分散問題，輕松整合數據以放大個人數據的價值。

　　7、由于這款工具是采用爬蟲技術，因此用戶需要持續的維護數據源。

　　8、這款工具擁有清晰的結構，所有的數據源相互獨立，擁有很高的可移植性。

使用方法

　　1、首先安裝下載工具：

　　python3和Chrome瀏覽器

　　安裝與Chrome瀏覽器相同版本的驅動

　　安裝依賴庫pip install-r requirements.txt

　　2、安裝完必要的工具之后解壓安裝包，然后在安裝包中找到tools文件夾打開。

　　3、接著運行python3 main.py或者main.py文件。

　　4、在打開的窗口點擊數據源按鈕, 根據提示選擇數據保存路徑。

　　5、彈出的瀏覽器輸入用戶密碼后會自動開始爬取數據, 爬取完成瀏覽器會自動關閉。

　　6、在對應的目錄下可以查看下載下來的數據(xxx.json), 數據分析圖表(xxx.html)。

　　要爬取GitHub的數據，首先點擊GitHub數據源按鈕。

　　然后再該窗口中輸入GitHub用戶名。

　　接著選擇數據保存路徑即可。

　　每個數據源的爬取可能會生成多個文件, 所以建議為每個數據源新建一個文件夾來保存數據

　　查看爬取的數據 (json格式)