Bing-ip2hosts:针对Bing.com的基于IP地址的网络爬虫工具

Bing-ip2hosts

Bing-ip2hosts是一款针对Bing.com站点的网络爬虫工具,该工具基于IP地址实现,能够通过目标IP地址来寻找主机名。

众所周知,Bing是微软公司旗下的旗舰搜索引擎,Bing.com此前还曾被取名为MSN搜索或Live搜索。

该搜索工具提供了搜索引擎独有的一个功能,即允许根据IP地址来进行数据搜索,而Bing-ip2hosts正是基于该功能来实现的。

该工具可以用来发现子域名以及相关域名,而且它还可以帮助研究人员识别托管在共享环境中的站点。这项技术非常适用于渗透测试和漏洞挖掘的初期阶段,也就是网络侦察阶段,以收集到更多的信息,并扩展目标的攻击面。

跟其他网络爬取工具相比,Bing-ip2hosts的不同之处就在于,该工具提供了智能爬取特性,可以最大限度地发现目标主机名。

功能介绍

1、 智能抓取行为,最大限度地发现主机名。

2、 在用户控制台界面显示爬取进度。

3、 根据IP地址查找子域名和目标主机名。

4、 可以根据主机名或IP地址进行搜索。

5、 带或不带URL前缀输出数据。

6、 以列表或CSV格式输出到文件。

7、 不需要Bing API密钥。

8、 选择搜索语言和范围。

9、 从命令行或文件中指定目标。

10、 轻量级Bash shell脚本,不需要大量依赖项。

工具运行演示

Bing提供了搜索引擎的一种特有功能,即允许通过IP地址来进行数据搜索。首先,我们访问Bing.com,然后搜索IP:40.113.200.201,此时搜索引擎应显示microsoft.com相关的结果,如果显示的是空结果,那么我们可以添加一个“.”。

帮助信息

广大研究人员可以使用下列命令查看工具帮助信息:

bing-ip2hostsisaBing.comwebscraperthatdiscoverswebsitesbyIPaddress.  UseforOSINTanddiscoveringattack-surfaceofpenetrationtesttargets.  Usage:./bing-ip2hosts[OPTIONS]IP|hostname  OPTIONSare:  -oFILE OutputhostnamestoFILE.  -iFILE InputlistofIPaddressesorhostnamesfromFILE.  -nNUM StopafterNUMscrapedpagesreturnnonewresults(Default:5).  -l Selectthelanguageforuseinthesetlangparameter(Default:en-us).  -m Selectthemarketforuseinthesetmktparameter(Defaultisunset).  -u Onlydisplayhostnames.DefaultistoincludeURLprefixes.  -c CSVoutput.OutputstheIPandhostnameoneachline,separatedbyacomma.  -q Quiet.Disableoutputexceptforfinalresults.  -tDIR Usethisdirectoryinsteadof/tmp.  -V Displaytheversionnumberofbing-ip2hostsandexit.

工具安装

依赖组件

Bing-ip2hosts需要wget才可以正常运行,但该工具在Ubuntu Linux和Kali Linux平台上已经默认安装了。在macOS平台上,我们可以使用homebrew来安装wget:

homebrew install wget

当然了,我们也可以使用apt在Debian和Ubuntu上安装wget:

sudo apt install wget

安装命令

首先,使用下列命令将项目源码克隆至本地:

git clone https://github.com/urbanadventurer/bing-ip2hosts.git

然后将Bing-ip2hosts的路径地址写到$PATH环境变量中:

sudo cp ./bing-ip2hosts /usr/local/bin/

工具兼容性

Bing-ip2hosts使用了Bash脚本语言,并且支持在下列操作系统中运行:

Ubuntu Linux

GNUbash,version4.4.20(1)-release(x86_64-pc-linux-gnu)  Copyright(C)2016FreeSoftwareFoundation,Inc.  LicenseGPLv3+:GNUGPLversion3orlater<http://gnu.org/licenses/gpl.html>  Thisisfreesoftware;youarefreetochangeandredistributeit.  ThereisNOWARRANTY,totheextentpermittedbylaw.

macOS Catalina

GNUbash,version3.2.57(1)-release(x86_64-apple-darwin19)  Copyright(C)2007FreeSoftwareFoundation,Inc.

项目地址

Bing-ip2hosts:【GitHub传送门

参考来源

urbanadventurer 

© 版权声明
THE END
喜欢就支持一下吧
点赞0
分享
评论 抢沙发

请登录后发表评论