我的编程空间,编程开发者的网络收藏夹
学习永远不晚

用python实现域名资产监控的步骤是什么

短信预约 -IT技能 免费直播动态提醒
省份

北京

  • 北京
  • 上海
  • 天津
  • 重庆
  • 河北
  • 山东
  • 辽宁
  • 黑龙江
  • 吉林
  • 甘肃
  • 青海
  • 河南
  • 江苏
  • 湖北
  • 湖南
  • 江西
  • 浙江
  • 广东
  • 云南
  • 福建
  • 海南
  • 山西
  • 四川
  • 陕西
  • 贵州
  • 安徽
  • 广西
  • 内蒙
  • 西藏
  • 新疆
  • 宁夏
  • 兵团
手机号立即预约

请填写图片验证码后获取短信验证码

看不清楚,换张图片

免费获取短信验证码

用python实现域名资产监控的步骤是什么

本篇文章给大家分享的是有关用python实现域名资产监控的步骤是什么,小编觉得挺实用的,因此分享给大家学习,希望大家阅读完这篇文章后可以有所收获,话不多说,跟着小编一起来看看吧。

应用场景

域名资产监控,通过输入一个主域名,找到该域名对应的ip地址所在的服务器的端口开闭情况。通过定期做这样的监控,有助于让自己知道自己的资产的整体暴露面情况。

所需要具备的前缀技能

python的简单使用

linux操作系统的简单使用

DNS的原理

工具

pycharm 专业版

xshell 用于部署脚本

步骤

通过域名得到对应的ip地址

首先,我们知道对于一个域名来说,可以设置很多类型的记录值,比如A记录、AAAA记录、SOA记录、TXT记录等等。安全领域常见的记录值和其含义对应关系如下:


代码描述
AIPv4地址记录
AAAAIPv6地址记录
CNAME规范名称记录,一个主机名字的别名:
域名系统将会继续尝试查找新的名字
MX电邮交互记录
NS名称服务器记录
PTR最常用来运行反向DNS查找
SOA权威记录的起始
TXT文本记录

而我们要用到的就是A记录(目前IPv6用得不广泛)。

通过A记录,获取到一个域名对应的IP地址,用python实现的方法如下:

def dns_a(domain: str):    dns_servers = '114.114.114.114,114.114.115.115,223.5.5.5,223.6.6.6,180.76.76.76,119.29.29.29,119.29.29.29,1.2.4.8,210.2.4.8,117.50.11.11,52.80.66.66,101.226.4.6,218.30.118.6,123.125.81.6,140.207.198.6,8.8.8.8,8.8.4.4,9.9.9.9,208.67.222.222,208.67.220.220'.split(        ',')    loop = asyncio.new_event_loop()    resolver = aiodns.DNSResolver(loop=loop)    resolver.nameservers = dns_servers    try:        record_a = loop.run_until_complete(resolver.query(domain, 'A'))        return record_a    except:        pass    return []

在代码中,为每一次查询随机指定了一个dns_server,也就是dns查询服务器,由于收敛的关系,不同的查询服务器结果可能不相同。所以可以考虑做得完善一些,这里只查询了一次,也可以换多个dns服务器查询多次,取并集(并集是不放过所有可能情况,交集是精确但可能漏)。最终该方法就可以实现获取域名对应的ip地址。

这个方法中使用到了asyncio和aiodns两个包,安装方法如下:

pip install -i https://pypi.tuna.tsinghua.edu.cn/simple/ --trusted-host pypi.tuna.tsinghua.edu.cn asyncio,aiodns

下面我们以www.mengwa.store为例,看看结果如何:

用python实现域名资产监控的步骤是什么

可以发现ip地址有了,不过,还需要从结果中进行提取。方法如下:

record_a = dns_a(domain)ips = []if type(record_a) == list:ips = sorted([answer.host for answer in record_a])

这个ips中存储的就是排序后的解析记录ip列表。

对ip地址进行端口扫描

通过上面的步骤找到了ip地址,下一步就是对ip地址进行端口扫描。可在扫描之前,我们还有一个步骤需要做,需要判断当前ip所在的机器是否存活。

可能你立马就想到了ping方法,可是在安全领域,有很多公司都要求服务器将ICMP协议给阻止掉,也就是说,ping方法可能返回超时,但是机器并不一定没有开启,只是主动给你把请求拦截掉了。

这里我们使用nmap的-sPn参数进行扫描,以www.mengwa.store对应的ip地址47.119.137.0为例:

用python实现域名资产监控的步骤是什么

然后我们通过代码来实现这一逻辑,我们使用python-nmap包,安装步骤如下:

pip install -i https://pypi.tuna.tsinghua.edu.cn/simple/ --trusted-host pypi.tuna.tsinghua.edu.cn python-nmap

代码如下:

def check_ip_reachable(ip: str):    nm = nmap.PortScanner()    xx = nm.scan(hosts=ip, arguments='-sP') # -sPn也可以    if 'scan' in xx:        i = xx.__getitem__('scan')        if ip in i:            j = i.__getitem__(ip)            if 'status' in j:                status = j['status']                if 'state' in status:                    state = status['state']                    print(ip, state)                    return state    print(ip, 'down')    return 'down'

做这一步的前提是,你本机安装了nmap。

通过这里做判断,如果ip所在机器是开启状态,那么我们就可以对其进行端口扫描了。

代码如下:

# 实现对端口进行扫描,并且返回结果。使用nmap实现def port_scan(ip: str):    second = check_ip_reachable(ip)    if second is not None and second == 'up':        nm = nmap.PortScanner()        xx = nm.scan(ip)        print(nm.command_line())        ans = []        if 'scan' in xx:            i = xx.__getitem__('scan')            if ip in i:                j = i.__getitem__(ip)                if 'tcp' in j:                    tcp = j['tcp']                    for port in tcp:                        ans.append(port)        ans = sorted(ans)        return ans    else:        write_to_file('output/' + time_now + '/ips.txt', ip + ' 不可达\n')    return []

nm.command_line()方法可以打印出当前执行的命令行。(本质上这个包就是一个命令行调用包,然后做解析)

以47.119.137.0为例,结果如下:

用python实现域名资产监控的步骤是什么

这里的方法,使用的是nmap默认扫描的常见端口,如果有需要,也可以通过给Scan方法,加入Ports参数,自定义要扫描的端口,甚至于全端口。

串联起来,实现通过域名到端口监控

def handle_ip(ip: str):    if not task_ip_set.__contains__(ip):        try:            print('ip:' + ip, '开始端口扫描')            port_result = port_scan(ip)            val = ''            print('ip:', ip, '发现端口', port_result)            for i in port_result:                val = val + '\n' + ip + "----" + i.__str__()            write_to_file('output/' + time_now + '/ip_ports.txt', val)            task_ip_set.add(ip)        except Exception as e:            print(e)            def handle_domain(domain: str):    if not task_domain_set.__contains__(domain):        print('domain:' + domain)        record_a = dns_a(domain)        ips = []        if type(record_a) == list:            ips = sorted([answer.host for answer in record_a])        val = ''        for i in ips:            val = val + '\n' + domain + "----" + i.__str__()        write_to_file('output/' + time_now + '/domain_ips.txt', val)        print(ips)        for i in ips:            handle_ip(i)

这里使用了task_domain_set和task_ip_set用于对作用目标进行去重。

那么,到这里我们的任务完成了吗?

没有

子域名发现

如果我的主域名资产有很多二级域名,而我自己又对自己有哪些子域名不清楚,那么这个时候就需要做子域名发现。然后对每一个子域名调用前面的方法,找到其对应的ip开放的端口。

子域名发现一般来说有三种方法:

第一种通过对主域名所在网站进行爬取,从内容中解析出子域名;

第二种通过外部的查询网站获取结果,比如crt、virustotal、fofa等;

第三种通过字典爆破获取结果,通过不断的轮询dns服务器,查询其是否有A记录的值,如果有,则表明该子域名存在,如果没有则暂时认为该子域名不存在。

第一种方法,需要实现一个爬虫,拿到网站的内容后利用正则表达式提取里面的子域名,提取的方法如下:

def get_subdomains(value: str, domain: str):    x = f'(?P<subdomain>[a-zA-Z0-9.]+{domain})'    pattern = re.compile(x)    y = pattern.findall(value)    ans = set()    for i in y:        ans.add(i)    print(ans)    return ans

第二种方法,利用接口调用,参见相关的API接口即可。

第三种方法,子域名爆破。核心代码如下

answers = await self.resolvers[j].query(cur_domain, 'A') # 查找A记录# 如果A记录有值且没有报错,则说明该子域名存在

当你完成上面的步骤,并且去重之后,就可以将这些子域名作为前面步骤的输入。这样,对于用户需要监控的某个主域名而言,监控到的范围就提升了很多。

请勿用于非已有域名的监控,造成的损失与本人无关。以上测试数据均为本人已有域名和ip。

以上就是用python实现域名资产监控的步骤是什么,小编相信有部分知识点可能是我们日常工作会见到或用到的。希望你能通过这篇文章学到更多知识。更多详情敬请关注编程网行业资讯频道。

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

用python实现域名资产监控的步骤是什么

下载Word文档到电脑,方便收藏和打印~

下载Word文档

猜你喜欢

用python实现域名资产监控的步骤是什么

本篇文章给大家分享的是有关用python实现域名资产监控的步骤是什么,小编觉得挺实用的,因此分享给大家学习,希望大家阅读完这篇文章后可以有所收获,话不多说,跟着小编一起来看看吧。应用场景域名资产监控,通过输入一个主域名,找到该域名对应的ip
2023-06-25

用Python监控NASA TV直播画面的实现步骤

目录演示地址:关于程序开发环境资源和依赖包NASA TV feed 流Python第三方库完整代码演示地址:https://replit.com/@PaoloAmoroso/spacestills这是一个具有GUI的简单系统,它访问feed
2022-06-02

使用Nagios监控Linux服务器性能的步骤是什么

安装Nagios监控系统:首先要在服务器上安装Nagios监控系统,可以通过源码包或者包管理器来安装。配置Nagios监控对象:在Nagios配置文件中定义要监控的主机和服务,包括IP地址、监控策略等。配置Nagios插件:Nagios监控
使用Nagios监控Linux服务器性能的步骤是什么
2024-04-09

Python数据实现可视化的步骤是什么

这篇文章主要介绍“Python数据实现可视化的步骤是什么”,在日常操作中,相信很多人在Python数据实现可视化的步骤是什么问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”Python数据实现可视化的步骤是什么
2023-06-16

Python连接在实际应用中的相关操作步骤是什么

这篇文章给大家介绍Python连接在实际应用中的相关操作步骤是什么,内容非常详细,感兴趣的小伙伴们可以参考借鉴,希望对大家能有所帮助。在计算机语言中Python连接经常被使用的语言,说以需要大家努力的学习相关的知识与技能更好的了解Pytho
2023-06-17

Python安装笔记的实际应用的九种步骤分别是什么

本篇文章给大家分享的是有关Python安装笔记的实际应用的九种步骤分别是什么,小编觉得挺实用的,因此分享给大家学习,希望大家阅读完这篇文章后可以有所收获,话不多说,跟着小编一起来看看吧。以下步骤是自己配置过程一些记录。另外请注意测试代码的缩
2023-06-17

MFC程序中使用QT开发界面的实现步骤是什么

MFC程序中使用QT开发界面的实现步骤是什么,相信很多没有经验的人对此束手无策,为此本文总结了问题出现的原因和解决方法,通过这篇文章希望你能解决这个问题。如果你有一个现成的MFC项目在做维护,但是你厌倦了使用MFC繁琐的操作来做界面美化,或
2023-06-25

使用docker部署java项目运行环境的实现步骤是什么

今天就跟大家聊聊有关使用docker部署java项目运行环境的实现步骤是什么,可能很多人都不太了解,为了让大家更加了解,小编给大家总结了以下内容,希望大家根据这篇文章可以有所收获。一、环境准备1. CentOS-7-x86_64-DVD-2
2023-06-29

使用Python怎么实现异步爬虫的原理是什么

这篇文章给大家介绍使用Python怎么实现异步爬虫的原理是什么,内容非常详细,感兴趣的小伙伴们可以参考借鉴,希望对大家能有所帮助。一、背景默认情况下,用get请求时,会出现阻塞,需要很多时间来等待,对于有很多请求url时,速度就很慢。因为需
2023-06-15

使用Zabbix实现动态执行监控采集脚本的原理是什么

使用Zabbix实现动态执行监控采集脚本的原理是什么?很多新手对此不是很清楚,为了帮助大家解决这个难题,下面小编将为大家详细讲解,有这方面需求的人可以来学习下,希望你能有所收获。实现原理:使用文件服务器统一存放和管理监控脚本,在zabbix
2023-06-06

PHP开发点餐系统的外卖配送费用计算功能实现步骤是什么?

随着互联网技术的不断发展,餐饮外卖业务也越来越流行。为了提高用户的体验,餐厅需要开发一套完整的点餐系统,其中包括外卖配送费用的计算功能。本文主要介绍在PHP开发中实现外卖配送费用计算的步骤。一、需求分析在开发外卖配送费用计算功能前,需先完成
PHP开发点餐系统的外卖配送费用计算功能实现步骤是什么?
2023-11-01

编程热搜

  • Python 学习之路 - Python
    一、安装Python34Windows在Python官网(https://www.python.org/downloads/)下载安装包并安装。Python的默认安装路径是:C:\Python34配置环境变量:【右键计算机】--》【属性】-
    Python 学习之路 - Python
  • chatgpt的中文全称是什么
    chatgpt的中文全称是生成型预训练变换模型。ChatGPT是什么ChatGPT是美国人工智能研究实验室OpenAI开发的一种全新聊天机器人模型,它能够通过学习和理解人类的语言来进行对话,还能根据聊天的上下文进行互动,并协助人类完成一系列
    chatgpt的中文全称是什么
  • C/C++中extern函数使用详解
  • C/C++可变参数的使用
    可变参数的使用方法远远不止以下几种,不过在C,C++中使用可变参数时要小心,在使用printf()等函数时传入的参数个数一定不能比前面的格式化字符串中的’%’符号个数少,否则会产生访问越界,运气不好的话还会导致程序崩溃
    C/C++可变参数的使用
  • css样式文件该放在哪里
  • php中数组下标必须是连续的吗
  • Python 3 教程
    Python 3 教程 Python 的 3.0 版本,常被称为 Python 3000,或简称 Py3k。相对于 Python 的早期版本,这是一个较大的升级。为了不带入过多的累赘,Python 3.0 在设计的时候没有考虑向下兼容。 Python
    Python 3 教程
  • Python pip包管理
    一、前言    在Python中, 安装第三方模块是通过 setuptools 这个工具完成的。 Python有两个封装了 setuptools的包管理工具: easy_install  和  pip , 目前官方推荐使用 pip。    
    Python pip包管理
  • ubuntu如何重新编译内核
  • 改善Java代码之慎用java动态编译

目录