分布式子域名扫描轮子(demo)

Github:domain_scan_demo

前言

这是之前的一个很简陋的分布式子域名扫描的轮子,为了尝试分布式以及docker的使用(后来再了解到了celery这样的任务调度神器,也用celery写了一个),这里程序是以mysql作为broker和backend,然后调用 oneforall进行子域名扫描,并且做成了docker方便自己在其他vps上开箱即用。

说明

1
2
3
4
5
6
docker-compose up -d . # 启动镜像(不含mysql)


- mysql起一个就够了,可以自行用docker起(SRC_Scan.sql为数据库结构)
- 记得修改Mysql数据库配置信息 __config__.py
- 记得修改oneforall用到的api信息 lib\oneforall\api.py

domains表中的domain为待进行扫描的域名(其他字段可以留空)

subdomains表为子域名结果

1
2
3
SELECT * FROM subdomains WHERE `status` IS NOT NULL AND title IS NOT NULL LIMIT 500

过滤掉了状态码和title为空的结果

结果

数量

运行的流程图