用python實現(xiàn)域名資產(chǎn)監(jiān)控的步驟是什么

本篇文章給大家分享的是有關(guān)用python實現(xiàn)域名資產(chǎn)監(jiān)控的步驟是什么，小編覺得挺實用的，因此分享給大家學(xué)習(xí)，希望大家閱讀完這篇文章后可以有所收獲，話不多說，跟著小編一起來看看吧。

應(yīng)用場景

域名資產(chǎn)監(jiān)控，通過輸入一個主域名，找到該域名對應(yīng)的ip地址所在的服務(wù)器的端口開閉情況。通過定期做這樣的監(jiān)控，有助于讓自己知道自己的資產(chǎn)的整體暴露面情況。

所需要具備的前綴技能

python的簡單使用

linux操作系統(tǒng)的簡單使用

DNS的原理

工具

pycharm 專業(yè)版

xshell 用于部署腳本

步驟

通過域名得到對應(yīng)的ip地址

首先，我們知道對于一個域名來說，可以設(shè)置很多類型的記錄值，比如A記錄、AAAA記錄、SOA記錄、TXT記錄等等。安全領(lǐng)域常見的記錄值和其含義對應(yīng)關(guān)系如下：

而我們要用到的就是A記錄（目前IPv6用得不廣泛）。

通過A記錄，獲取到一個域名對應(yīng)的IP地址，用python實現(xiàn)的方法如下：

def dns_a(domain: str):
    dns_servers = '114.114.114.114,114.114.115.115,223.5.5.5,223.6.6.6,180.76.76.76,119.29.29.29,119.29.29.29,1.2.4.8,210.2.4.8,117.50.11.11,52.80.66.66,101.226.4.6,218.30.118.6,123.125.81.6,140.207.198.6,8.8.8.8,8.8.4.4,9.9.9.9,208.67.222.222,208.67.220.220'.split(
        ',')
    loop = asyncio.new_event_loop()
    resolver = aiodns.DNSResolver(loop=loop)
    resolver.nameservers = dns_servers
    try:
        record_a = loop.run_until_complete(resolver.query(domain, 'A'))
        return record_a
    except:
        pass
    return []

在代碼中，為每一次查詢隨機(jī)指定了一個dns_server，也就是dns查詢服務(wù)器，由于收斂的關(guān)系，不同的查詢服務(wù)器結(jié)果可能不相同。所以可以考慮做得完善一些，這里只查詢了一次，也可以換多個dns服務(wù)器查詢多次，取并集（并集是不放過所有可能情況，交集是精確但可能漏）。最終該方法就可以實現(xiàn)獲取域名對應(yīng)的ip地址。

這個方法中使用到了asyncio和aiodns兩個包，安裝方法如下：

pip install -i https://pypi.tuna.tsinghua.edu.cn/simple/ --trusted-host pypi.tuna.tsinghua.edu.cn asyncio,aiodns

下面我們以www.mengwa.store為例，看看結(jié)果如何：

可以發(fā)現(xiàn)ip地址有了，不過，還需要從結(jié)果中進(jìn)行提取。方法如下：

record_a = dns_a(domain)
ips = []
if type(record_a) == list:
ips = sorted([answer.host for answer in record_a])

這個ips中存儲的就是排序后的解析記錄ip列表。

對ip地址進(jìn)行端口掃描

通過上面的步驟找到了ip地址，下一步就是對ip地址進(jìn)行端口掃描?？稍趻呙柚?，我們還有一個步驟需要做，需要判斷當(dāng)前ip所在的機(jī)器是否存活。

可能你立馬就想到了ping方法，可是在安全領(lǐng)域，有很多公司都要求服務(wù)器將ICMP協(xié)議給阻止掉，也就是說，ping方法可能返回超時，但是機(jī)器并不一定沒有開啟，只是主動給你把請求攔截掉了。

這里我們使用nmap的-sPn參數(shù)進(jìn)行掃描，以www.mengwa.store對應(yīng)的ip地址47.119.137.0為例：

然后我們通過代碼來實現(xiàn)這一邏輯，我們使用python-nmap包，安裝步驟如下：

pip install -i https://pypi.tuna.tsinghua.edu.cn/simple/ --trusted-host pypi.tuna.tsinghua.edu.cn python-nmap

代碼如下：

def check_ip_reachable(ip: str):
    nm = nmap.PortScanner()
    xx = nm.scan(hosts=ip, arguments='-sP') # -sPn也可以
    if 'scan' in xx:
        i = xx.__getitem__('scan')
        if ip in i:
            j = i.__getitem__(ip)
            if 'status' in j:
                status = j['status']
                if 'state' in status:
                    state = status['state']
                    print(ip, state)
                    return state
    print(ip, 'down')
    return 'down'

做這一步的前提是，你本機(jī)安裝了nmap。

通過這里做判斷，如果ip所在機(jī)器是開啟狀態(tài)，那么我們就可以對其進(jìn)行端口掃描了。

代碼如下：

# 實現(xiàn)對端口進(jìn)行掃描，并且返回結(jié)果。使用nmap實現(xiàn)
def port_scan(ip: str):
    second = check_ip_reachable(ip)
    if second is not None and second == 'up':
        nm = nmap.PortScanner()
        xx = nm.scan(ip)
        print(nm.command_line())
        ans = []
        if 'scan' in xx:
            i = xx.__getitem__('scan')
            if ip in i:
                j = i.__getitem__(ip)
                if 'tcp' in j:
                    tcp = j['tcp']
                    for port in tcp:
                        ans.append(port)
        ans = sorted(ans)
        return ans
    else:
        write_to_file('output/' + time_now + '/ips.txt', ip + ' 不可達(dá)\n')
    return []

nm.command_line()方法可以打印出當(dāng)前執(zhí)行的命令行。（本質(zhì)上這個包就是一個命令行調(diào)用包，然后做解析）

以47.119.137.0為例，結(jié)果如下：

這里的方法，使用的是nmap默認(rèn)掃描的常見端口，如果有需要，也可以通過給Scan方法，加入Ports參數(shù)，自定義要掃描的端口，甚至于全端口。

串聯(lián)起來，實現(xiàn)通過域名到端口監(jiān)控

def handle_ip(ip: str):
    if not task_ip_set.__contains__(ip):
        try:
            print('ip:' + ip, '開始端口掃描')
            port_result = port_scan(ip)
            val = ''
            print('ip:', ip, '發(fā)現(xiàn)端口', port_result)
            for i in port_result:
                val = val + '\n' + ip + "----" + i.__str__()
            write_to_file('output/' + time_now + '/ip_ports.txt', val)
            task_ip_set.add(ip)
        except Exception as e:
            print(e)
            
def handle_domain(domain: str):
    if not task_domain_set.__contains__(domain):
        print('domain:' + domain)
        record_a = dns_a(domain)
        ips = []
        if type(record_a) == list:
            ips = sorted([answer.host for answer in record_a])
        val = ''
        for i in ips:
            val = val + '\n' + domain + "----" + i.__str__()
        write_to_file('output/' + time_now + '/domain_ips.txt', val)
        print(ips)
        for i in ips:
            handle_ip(i)

這里使用了task_domain_set和task_ip_set用于對作用目標(biāo)進(jìn)行去重。

那么，到這里我們的任務(wù)完成了嗎？

沒有

子域名發(fā)現(xiàn)

如果我的主域名資產(chǎn)有很多二級域名，而我自己又對自己有哪些子域名不清楚，那么這個時候就需要做子域名發(fā)現(xiàn)。然后對每一個子域名調(diào)用前面的方法，找到其對應(yīng)的ip開放的端口。

子域名發(fā)現(xiàn)一般來說有三種方法：

第一種通過對主域名所在網(wǎng)站進(jìn)行爬取，從內(nèi)容中解析出子域名；

第二種通過外部的查詢網(wǎng)站獲取結(jié)果，比如crt、virustotal、fofa等；

第三種通過字典爆破獲取結(jié)果，通過不斷的輪詢dns服務(wù)器，查詢其是否有A記錄的值，如果有，則表明該子域名存在，如果沒有則暫時認(rèn)為該子域名不存在。

第一種方法，需要實現(xiàn)一個爬蟲，拿到網(wǎng)站的內(nèi)容后利用正則表達(dá)式提取里面的子域名，提取的方法如下：

def get_subdomains(value: str, domain: str):
    x = f'(?P<subdomain>[a-zA-Z0-9.]+{domain})'
    pattern = re.compile(x)
    y = pattern.findall(value)
    ans = set()
    for i in y:
        ans.add(i)
    print(ans)
    return ans

第二種方法，利用接口調(diào)用，參見相關(guān)的API接口即可。

第三種方法，子域名爆破。核心代碼如下

answers = await self.resolvers[j].query(cur_domain, 'A') # 查找A記錄
# 如果A記錄有值且沒有報錯，則說明該子域名存在

當(dāng)你完成上面的步驟，并且去重之后，就可以將這些子域名作為前面步驟的輸入。這樣，對于用戶需要監(jiān)控的某個主域名而言，監(jiān)控到的范圍就提升了很多。

請勿用于非已有域名的監(jiān)控，造成的損失與本人無關(guān)。以上測試數(shù)據(jù)均為本人已有域名和ip。

以上就是用python實現(xiàn)域名資產(chǎn)監(jiān)控的步驟是什么，小編相信有部分知識點可能是我們?nèi)粘９ぷ鲿姷交蛴玫降?。希望你能通過這篇文章學(xué)到更多知識。更多詳情敬請關(guān)注億速云行業(yè)資訊頻道。