Bing-ip2hosts：针对Bing.com的基于IP地址的网络爬虫工具

Bing-ip2hosts

Bing-ip2hosts是一款针对Bing.com站点的网络爬虫工具，该工具基于IP地址实现，能够通过目标IP地址来寻找主机名。

众所周知，Bing是微软公司旗下的旗舰搜索引擎，Bing.com此前还曾被取名为MSN搜索或Live搜索。

该搜索工具提供了搜索引擎独有的一个功能，即允许根据IP地址来进行数据搜索，而Bing-ip2hosts正是基于该功能来实现的。

该工具可以用来发现子域名以及相关域名，而且它还可以帮助研究人员识别托管在共享环境中的站点。这项技术非常适用于渗透测试和漏洞挖掘的初期阶段，也就是网络侦察阶段，以收集到更多的信息，并扩展目标的攻击面。

跟其他网络爬取工具相比，Bing-ip2hosts的不同之处就在于，该工具提供了智能爬取特性，可以最大限度地发现目标主机名。

功能介绍

1、 智能抓取行为，最大限度地发现主机名。

2、 在用户控制台界面显示爬取进度。

3、 根据IP地址查找子域名和目标主机名。

4、 可以根据主机名或IP地址进行搜索。

5、 带或不带URL前缀输出数据。

6、 以列表或CSV格式输出到文件。

7、 不需要Bing API密钥。

8、 选择搜索语言和范围。

9、 从命令行或文件中指定目标。

10、 轻量级Bash shell脚本，不需要大量依赖项。

工具运行演示

Bing提供了搜索引擎的一种特有功能，即允许通过IP地址来进行数据搜索。首先，我们访问Bing.com，然后搜索IP:40.113.200.201，此时搜索引擎应显示microsoft.com相关的结果，如果显示的是空结果，那么我们可以添加一个“.”。

帮助信息

广大研究人员可以使用下列命令查看工具帮助信息：

bing-ip2hostsisaBing.comwebscraperthatdiscoverswebsitesbyIPaddress.  UseforOSINTanddiscoveringattack-surfaceofpenetrationtesttargets.  Usage:./bing-ip2hosts[OPTIONS]IP|hostname  OPTIONSare:  -oFILE OutputhostnamestoFILE.  -iFILE InputlistofIPaddressesorhostnamesfromFILE.  -nNUM StopafterNUMscrapedpagesreturnnonewresults(Default:5).  -l Selectthelanguageforuseinthesetlangparameter(Default:en-us).  -m Selectthemarketforuseinthesetmktparameter(Defaultisunset).  -u Onlydisplayhostnames.DefaultistoincludeURLprefixes.  -c CSVoutput.OutputstheIPandhostnameoneachline,separatedbyacomma.  -q Quiet.Disableoutputexceptforfinalresults.  -tDIR Usethisdirectoryinsteadof/tmp.  -V Displaytheversionnumberofbing-ip2hostsandexit. 

工具安装

依赖组件

Bing-ip2hosts需要wget才可以正常运行，但该工具在Ubuntu Linux和Kali Linux平台上已经默认安装了。在macOS平台上，我们可以使用homebrew来安装wget：

homebrew install wget

当然了，我们也可以使用apt在Debian和Ubuntu上安装wget：

sudo apt install wget

安装命令

首先，使用下列命令将项目源码克隆至本地：

git clone https://github.com/urbanadventurer/bing-ip2hosts.git

然后将Bing-ip2hosts的路径地址写到$PATH环境变量中：

sudo cp ./bing-ip2hosts /usr/local/bin/

工具兼容性

Bing-ip2hosts使用了Bash脚本语言，并且支持在下列操作系统中运行：

Ubuntu Linux

GNUbash,version4.4.20(1)-release(x86_64-pc-linux-gnu)  Copyright(C)2016FreeSoftwareFoundation,Inc.  LicenseGPLv3+:GNUGPLversion3orlater<http://gnu.org/licenses/gpl.html>  Thisisfreesoftware;youarefreetochangeandredistributeit.  ThereisNOWARRANTY,totheextentpermittedbylaw.

macOS Catalina

GNUbash,version3.2.57(1)-release(x86_64-apple-darwin19)  Copyright(C)2007FreeSoftwareFoundation,Inc. 

项目地址

Bing-ip2hosts：【GitHub传送门】

参考来源

urbanadventurer