Wild Spider

Wild Spider插件简介

Wild Spider插件描述

WATCH OUT: me tabs you use, me computer resources (CPU, memy) will be used,  each page costs a bit disk to save the content (in IndexedDb, accessible from extensions > Inspect views: background page).

The "spider" wks in this way:
1) The current url is used as the starting point,  its loaded again in a new tab.
2) After this page is loaded, fetch all the links on the page.
3) Get all the links on the page, including relative urls.
4) Open the extracted link parallelly in all the tabs used (by default 3, set in eventPage).
5) repeat 24

All source code at: https://github.com/nobodxbodon/ChromeCrawlerWildSpider
                                

Wild Spider插件离线安装方法

1.首先用户点击谷歌浏览器右上角的自定义及控制按钮，在下拉框中选择设置。

2.在打开的谷歌浏览器的扩展管理器最左侧选择扩展程序或直接输入：chrome://extensions/

3.找到自己已经下载好的Chrome离线安装文件xxx.crx，然后将其从资源管理器中拖动到Chrome的扩展管理界面中，这时候用户会发现在扩展管理器的中央部分中会多出一个”拖动以安装“的插件按钮。

4.下载 Wild SpiderChrome插件v0.0.3版本到本地。

5.勾选开发者模式，点击加载已解压的扩展程序，将文件夹选择即可安装插件。

注意：最新版本的chrome浏览器直接拖放安装时会出现“程序包无效CRX-HEADER-INVALID”的报错信息，参照这篇文章即可解决