Xray和360爬虫联动形成自动化挖洞

VSole2021-09-28 08:09:20

0X00前言

好兄弟一直让我写一篇关于自动化扫描漏洞的文章，由于在公司实习没时间写一些文章，这段时间离职闲下来后，准备写一下教程。PS：已经有很多大佬写过了，我这里只是更简单的写一下，以及记录一下我曾经踩过的坑。

0X01自动化原理

原理已经有很多大佬解释过了这里不再赘述，直接上图：

0X02开始搭建

由于我的阿里云服务器是买了一台win2008，因此以下教程都是基于windows的：

Xray：

xray 为单文件二进制文件，无依赖，也无需安装，下载后直接使用。

下载地址为：

Github: https://github.com/chaitin/xray/releases （国外速度快）

网盘: https://yunpan.360.cn/surl_y3Gu6cugi8u （国内速度快）

Xray的简单使用教程请参考：https://www.cnblogs.com/L0ading/p/12388898.html

360crawlergo

crawlergo是一个使用chrome headless模式进行URL入口收集的动态爬虫。使用Golang语言开发，基于chromedp 进行一些定制化开发后操纵CDP协议，对整个页面关键点进行HOOK，灵活表单填充提交，完整的事件触发，尽可能的收集网站暴露出的入口。同时，依靠智能URL去重模块，在过滤掉了大多数伪静态URL之后，仍然确保不遗漏关键入口链接，大幅减少重复任务。

下载地址为：

https://github.com/0Kee-Team/crawlergo

crawlergo 只依赖chrome运行即可：

新版本chromium下载地址：https://www.chromium.org/getting-involved/download-chromium

Linux下载地址：https://storage.googleapis.com/chromium-browser-snapshots/Linux_x64/706915/chrome-linux.zip

如果觉得分开配置比较麻烦，网上也有大佬直接放在一起的项目

下载链接：https://github.com/timwhitez/crawlergo_x_XRAY

下载好后是这样一个界面;