电子发烧友网 > 通信网络 > 正文

未备案网站如何去发现

2020年01月13日 09:38 次阅读

实施网站备案管理是行业主管部门加强互联网管理的重要举措。在加强行政管理的同时,使用适当的技术手段不仅可以节省人力资源,而且能大幅提升管理效率。本文通过对网站的接入机制的分析,提出了用技术手段发现未备案网站的方法。

未备案网站的接入形态

按照“先备案后接入”的原则,互联网网站在接入前必须履行备案手续。绝大多数网站都依法依规履行了备案手续,但仍然存在少数未备案接入的网站,并且不易发现,主要有以下几种情况:

1)虚拟主机网站。通过服务器空间分配及域名与空间对应的技术,实现一个IP对应多个域名的访问,即通常的所说的虚拟主机。

2)专线私自接入网站。通过专线私自接入,网站主办者如果没有主动报备,运营商很难发现。

3)IP网站。网站没有域名,通过一个IP+端口号的形式提供访问,多为企业自建内部使用的系统。

4)跳转网站。通过跳转服务器实现网站异地接入,当用户访问一个域名时,第一次获取的IP地市为跳转服务器地址,第二次获取的IP地址才是真正的服务器地址,该类网站是问题高发户。

解决方案分析

针对上述网站接入的几种形态,可采用如下技术方案:

DNS分析

通过镜像方式,实现对DNS响应流量的采集,实时分析DNS响应流量,效率高,准确度高,发现网站范围可覆盖全省,包括虚拟主机、专线私自接入网站。

如图1为DNS分析网站发现方案,在DNS上联交换机镜像DNS的响应流量到一个千兆网口,并连接DNS分析服务器。

DNS分析服务器配置2块千兆网卡,1个连接镜像口,一个用于访问INTERNET。DNS分析服务器实时接收并分析DNS的响应流量,发现监控IP范围内的网站信息。

未备案网站如何去发现

图1 DNS分析网络连接示意图

HTTP分析

通过HTTP分析技术,可有效发现IDC内虚拟主机网站,该技术对流入80端口的流量进行分析,处理数据量很小,效率高。与DNS技术相比,其优势在于不受访问用户所使用的DNS限制,只要IDC内网站被访问即可发现。

如图2,通过在IDC核心交换机上,镜像流入IDC内的HTTP请求(80端口)并实时分析该流量,发现IDC内网站。

未备案网站如何去发现

图2 HTTP分析网络连接示意图

爬虫遍历

相对于DNS分析及HTTP分析等被动发现网站的技术,爬虫发现网站技术属于主动发现网站的技术,该技术是通过爬虫主动遍历网站间的链接并分析这些链接达到发现网站的目的。

从效率上讲该技术不如DNS分析及HTTP分析效率高,但是该技术也是一种重要的未备案网站发现技术。作为DNS分析和HTTP分析技术手段的补充,爬虫技术可发现上述两种技术不能发现的未备案网站。

如图3,爬虫通过种子站点,作为抓取的入口,遍历网站页面的链接,通过URL分析网站的域名信息。

未备案网站如何去发现

图3 爬虫遍历网络连接示意图

IP网站扫描等技术

上述3种技术方案能有效地发现未备案的网站。对于IP+端口号作为访问入口的网站,以及以跳转服务器作为网站访问入口的跳转网站,在上述3种解决方案做适当地变化也有较好地处理效果。

结语 用技术方式实现未备案网站的发展功能,能有效地增强相关管理部门对互联网的管理能力。网络技术的发展日新月异,技术手段作为一种辅助管理手段,也要与时俱进,不断改进和完善。

责任编辑:Ct

下载发烧友APP

打造属于您的人脉电子圈

关注电子发烧友微信

有趣有料的资讯及技术干货

关注发烧友课堂

锁定最新课程活动及技术直播

电子发烧友观察

一线报道 · 深度观察 · 最新资讯
收藏 人收藏
分享:

评论

相关推荐

《计算机体系结构—网络篇3》之IP分类与组成、网络标识、子网掩码、私网组建

点击右方"佳嵌"图标,可以看所有课程。我们将《嵌入式工程师-系列课程》分成两大阶段:第一阶段:《计算机体系结构》课程&n
发烧友学院发表于 2018-12-08 00:00 3317次阅读
《计算机体系结构—网络篇3》之IP分类与组成、网络标识、子网掩码、私网组建

同步传输和异步传输到底有什么区别

通常,异步传输是以字符为传输单位,每个字符都要附加 1 位起始位和 1 位停止位,以标记一个字符的开....
发表于 2020-01-12 10:40 136次阅读
同步传输和异步传输到底有什么区别

云计算的三层模式是什么详细资料介绍

“云”其实是互联网的一个隐喻,“云计算”其实就是使用互联网来接入存储或者运行在远程服务器端的应用,数....
发表于 2020-01-12 09:20 155次阅读
云计算的三层模式是什么详细资料介绍

车载移动监控的组成、功能及特点分析

从运营商的角度上,视频监控已经发展成为中国电信重要的增值业务,为中国电信向综合信息提供商转型奠定了坚....
发表于 2020-01-10 16:36 78次阅读
车载移动监控的组成、功能及特点分析

云计算是如何来的

云计算阶段,对资源的管理是把基础设施资源,如计算资源、存储资源、网络资源等放在一个大的池子里,通过云....
发表于 2020-01-10 14:40 52次阅读
云计算是如何来的

为什么SRv6和FlexE是第三代IP核心技术

每一代网络技术发展本质原因是业务驱动。IP/MPLS引入的根本原因是,IP只能提供尽力而为的服务,无....
发表于 2020-01-10 11:51 48次阅读
为什么SRv6和FlexE是第三代IP核心技术

服务器机房里都有哪些比较重要的系统

大家会常常听到数据中心、服务器机房这些词汇,都知道服务器机房是专门容纳计算设备的房间。
发表于 2020-01-09 14:07 301次阅读
服务器机房里都有哪些比较重要的系统

企业如何选择合适的云平台

在云计算技术蓬勃发展的同时,众多可供选择的技术可能使IT经理在寻找能够满足其特定组织需求的云平台时成....
发表于 2020-01-09 14:03 90次阅读
企业如何选择合适的云平台

工业控制服务器的特点及作用是什么

目前我国工控服务器还只是刚起步阶段,国内的用户数量还不是很多,目前用的比较广泛的领域是是数据中心和国....
发表于 2020-01-08 14:57 66次阅读
工业控制服务器的特点及作用是什么

移动执法站系统解决方案的原理、构成及功能分析

随着公安信息化工作的逐渐推进以及移动警务系统建设的整体推进,通过充分利用公安信息资源以及对公安信息移....
发表于 2020-01-07 16:33 523次阅读
移动执法站系统解决方案的原理、构成及功能分析

rfid技术在汽车的总线上有什么作用

基于RFID 技术的汽车总装制造执行系统使得企业能够及时、准确的掌握生产线状态,提高生产效率,确实有....
发表于 2020-01-07 16:32 63次阅读
rfid技术在汽车的总线上有什么作用

云计算的总体拥有成本怎样算出来

要了解组织的云计算财务模型,第一步是分配一个公共资源单元以标准化总体拥有成本(TCO)比较中的数据。
发表于 2020-01-07 14:42 122次阅读
云计算的总体拥有成本怎样算出来

关于dedecms的安全,安全加固设置要做好

使用windows服务器几乎都难逃dede被挂马的命运,尤其是老旧的2003和2008版本,如果还在....
发表于 2020-01-06 15:01 63次阅读
关于dedecms的安全,安全加固设置要做好

在云服务器中设置安全问题的方法

云服务器怎么设置安全问题?如今在互联网上,服务器很容易遭受黑客攻击,因此我们在使用云服务器时,需要进....
发表于 2020-01-05 11:33 202次阅读
在云服务器中设置安全问题的方法

如何查看云服务器是否遭受过网络攻击

云服务器怎么查看被攻击?有时候云服务器出现异常,有可能是人为操作不当引起的,也有可能是系统被黑客入侵....
发表于 2020-01-05 11:26 125次阅读
如何查看云服务器是否遭受过网络攻击

云服务器遭受网络攻击时该怎么办

云服务器被攻击怎么弄?不管云服务器是个人的还是企业的,在互联网中都有遭受攻击的可能性,尤其是游戏、医....
发表于 2020-01-05 11:23 119次阅读
云服务器遭受网络攻击时该怎么办

数字资产钱包如何选择合适的种类

中心化钱包是指所有的数据均从自己的中心化服务器获得,数据依赖钱包服务商自己的账本,它的交易效率很高,....
发表于 2020-01-03 09:38 68次阅读
数字资产钱包如何选择合适的种类

基于物联网技术的数字动感单车会有什么特别的

物联网作为新一代的网络服务技术,也具有其独有的特征,即感知化、互联化和智能化。
发表于 2020-01-02 17:27 155次阅读
基于物联网技术的数字动感单车会有什么特别的

中国电科与华诚金锐签约 获得相关领域采购意向

12月30日上午,中国电科在上海举行申威服务器首批量产下线仪式暨华诚金锐合作伙伴签约活动。
发表于 2020-01-02 16:35 1247次阅读
中国电科与华诚金锐签约 获得相关领域采购意向

基于RDMA网络的MMU水线设置步骤与应用实例

RDMA(Remote Direct Memory Access),通俗的说就是远程的DMA技术,是....
发表于 2020-01-02 16:15 576次阅读
基于RDMA网络的MMU水线设置步骤与应用实例

虚拟化技术搭建基础架构云会有怎样的优劣势

PC服务器性能不断提高,CPU逐渐采用多核,单个应用很难充分利用硬件资源。
发表于 2020-01-02 14:14 119次阅读
虚拟化技术搭建基础架构云会有怎样的优劣势

CPU虚拟化助力将会给云计算带来什么

虚拟化技术是一套解决方案,完整的情况需要CPU、主板芯片组、BIOS和软件的支持,例如虚拟机监视器软....
发表于 2020-01-02 14:10 148次阅读
CPU虚拟化助力将会给云计算带来什么

混合云会有哪一些影响

混合云是公共云服务中的计算或存储产品与私有云基础设施的组合,私有云基础设施结构通常是在本地运行云软件....
发表于 2020-01-02 10:49 63次阅读
混合云会有哪一些影响

Linux服务器操作系统有六大功能 应对越来越多...

 Linux系统正在发展壮大,并且无疑是具有健壮和稳定网络功能的纯网络操作系统。 综合起来,它具有以....
发表于 2020-01-01 16:52 91次阅读
Linux服务器操作系统有六大功能 应对越来越多...

计算航天器找到其他恒星系统需要多久的时间

一对研究人员,一个是马克斯·普朗克天文学研究所的研究人员,另一个是在CIT的喷气推进实验室的研究人员....
发表于 2019-12-31 17:32 653次阅读
计算航天器找到其他恒星系统需要多久的时间

你觉得LoRa究竟是个什么

终端设备和网关之间的通信分布在不同的频率和数据速率上。传输距离和数据速率之间需要权衡(也就是说,传输....
发表于 2019-12-31 16:24 240次阅读
你觉得LoRa究竟是个什么

AMD服务器CPU的市场情况怎么样

最大的问题将围绕设计的实施,如果它使用小芯片,存储器是如何工作的,以及它们能达到的频率。
发表于 2019-12-31 16:05 310次阅读
AMD服务器CPU的市场情况怎么样

2019年X86服务器市场进入调整期,中国市场规...

IDC《2019年第三季度中国X86服务器市场跟踪报告》显示,2019年第三季度,中国X86服务器市....
发表于 2019-12-30 16:28 765次阅读
2019年X86服务器市场进入调整期,中国市场规...

物联网供应商Wyze已确认其服务器发生信息泄露

据外媒ZDNet报道,Wyze是一家销售安全设备(如安全摄像头、智能插头,智能灯泡和智能门锁)的公司....
发表于 2019-12-30 15:30 903次阅读
物联网供应商Wyze已确认其服务器发生信息泄露

龙芯发布了新一代通用CPU产品3A4000/3B...

据介绍,龙芯3A4000/3B4000使用与上一代产品3A3000/3B3000相同的28nm工艺,....
发表于 2019-12-30 09:56 774次阅读
龙芯发布了新一代通用CPU产品3A4000/3B...

学习编程应该是学习mac系统还是windows系...

mac系统,也是一种类linux系统,所以首先它有强大的终端。这里终端和我们windows使用git....
发表于 2019-12-29 11:19 965次阅读
学习编程应该是学习mac系统还是windows系...

2019年无服务器发展情况调查

传统的IT体系结构已经不适合当今快速发展的数字经济环境。技术顾问 Declan Morris表示:“....
发表于 2019-12-28 09:45 1029次阅读
2019年无服务器发展情况调查

嵌入式计算机是依据什么来分类的

嵌入式计算机是为特定的软件控制任务而设计的专用计算平台。
发表于 2019-12-27 16:34 326次阅读
嵌入式计算机是依据什么来分类的

龙芯中科启用异地联运模式,提供高效便捷的适配解决...

龙芯中科今天宣布,在全国多个地区建立适配中心,给合作厂商提供高效便捷的解决方案适配环境,并且启用异地....
发表于 2019-12-27 16:24 747次阅读
龙芯中科启用异地联运模式,提供高效便捷的适配解决...

中科曙光推出新一代龙腾G30整机产品,业内首次实...

12月24日,中科龙芯在北京发布了新一代龙芯3A/B4000系列处理器,基于上一代产品3A3000/....
发表于 2019-12-27 16:03 1381次阅读
中科曙光推出新一代龙腾G30整机产品,业内首次实...

一种基于机智云平台服务器实现数据远传

该监测系统通过对变压器的输出电流进行检测,将检测数据发送到手机上,工作人员通过手机APP可随时查看到....
发表于 2019-12-27 11:03 2337次阅读
一种基于机智云平台服务器实现数据远传

区块链产业遇到的障碍有哪一些

每个区块链中的区块在某一个瞬间都包含一个完整的事实。随着这个事实包含越来越大的数据集,网络开始变慢了....
发表于 2019-12-27 10:20 93次阅读
区块链产业遇到的障碍有哪一些

随着AI的兴起 服务器市场也将迎来挑战

回顾2019年服务器市场,最重要的特点AI的兴起、边缘计算到来以及AI芯植入了边缘,给整个服务器行业....
发表于 2019-12-27 10:02 92次阅读
随着AI的兴起 服务器市场也将迎来挑战

天津麒麟公开全球首个基于ARM64的云平台软件的...

根据天津麒麟的官方消息,国际权威的标准性能评测组织SPEC于2019年12月23日正式在其官网上发布....
发表于 2019-12-26 14:04 776次阅读
天津麒麟公开全球首个基于ARM64的云平台软件的...

为什么SRv6和FlexE是第三代IP核心技术

传统以太网MAC速率和PHY的速率始终保持一致,速率从FE、GE、10GE、40GE、到100GE,....
发表于 2019-12-26 11:31 123次阅读
为什么SRv6和FlexE是第三代IP核心技术

国产处理器龙芯3A4000的性能怎么样

在服务器性能上,3B4000能通过CPU直连行成四路服务器,综合性能是上一代产品3B3000双路服务....
发表于 2019-12-26 11:08 403次阅读
国产处理器龙芯3A4000的性能怎么样

区块链世界有哪一些原则

区块链作为一种价值网络,链上的数据都将因为需求的存在,而被定义为资产,即需求即价值。
发表于 2019-12-26 10:06 106次阅读
区块链世界有哪一些原则

【Leez SBC P710试用体验】二、Leez P710 配置x11vnc远程桌面

一、 简介 x11vnc是一个VNC服务器,它允许用户远程查看并用任何VNC查看器与真实的X显示器(即与物理监视器,...
发表于 2019-11-16 14:23 262次阅读
【Leez SBC P710试用体验】二、Leez P710 配置x11vnc远程桌面

如何在UCOSII(FreeRtos)下使用LWIP时一同开启服务器模式和客户端模式?

如题,UCOSII或者FreeRtos下使用LWIP如何同时开启服务器模式和客户端模式,我这几天弄了下,单独跑其中一...
发表于 2019-11-07 04:35 96次阅读
如何在UCOSII(FreeRtos)下使用LWIP时一同开启服务器模式和客户端模式?

ITF服务器网络通信故障排除指南

This document serves as a guide/reference to do preliminary analysis and troubleshooting when network/communi...
发表于 2019-11-06 09:26 138次阅读
ITF服务器网络通信故障排除指南

为什么WIN7 64位系统下openocd连接telnet后打不开?

这几天一直纠结于这个问题,用openocd打不开telnet。WIN7下默认禁用telnet,但是我已经将客户端安装好了,在C盘中...
发表于 2019-11-06 05:46 177次阅读
为什么WIN7 64位系统下openocd连接telnet后打不开?

请问这个设计适用于vertex-II-pro系列的所有开发系统吗?

亲爱的大家, 我正在寻找针对XUPV2P FPGA的Web服务器设计文件,可以在Xilnx MicroBlaze软核处理器上实现...
发表于 2019-11-05 09:50 137次阅读
请问这个设计适用于vertex-II-pro系列的所有开发系统吗?

为什么STM32 lwip的服务器模式无法重复连接?

问题是这样的,我使用LWIP建立了一个服务器,然后我设置这个服务器只能让一个客户端连接进来,设置如下 tcp_list...
发表于 2019-11-05 03:42 85次阅读
为什么STM32 lwip的服务器模式无法重复连接?

为什么在LWIP运行中修改静态ip会卡死?

f4板子做网络实验的时候出现一个很奇怪的问题,搞了好久没明白。初始化的时候使用默认的静态ip,然后服务器发送需要更...
发表于 2019-11-04 00:42 99次阅读
为什么在LWIP运行中修改静态ip会卡死?

请问lwip dhcp开启后还能使用静态IP吗?

我看原子哥的以太网(enc28j60)例程中动态ip分配失败后就用静态ip,但是我移植后动态ip分配失败,用静态ip,连不上服务...
发表于 2019-11-03 21:29 104次阅读
请问lwip dhcp开启后还能使用静态IP吗?

为什么STM32 LWIP服务器模式无法重复连接?

问题是这样的,我使用LWIP建立了一个服务器,然后我设置这个服务器只能让一个客户端连接进来,设置如下 tcp_list...
发表于 2019-11-03 19:26 250次阅读
为什么STM32 LWIP服务器模式无法重复连接?

PSoC Creator 4中的安装出错该怎么办?

嗨,我正在尝试安装新的PSoC创建者,但一旦我击中了PDL安装程序,我得到这个错误: 错误代码:- 5006:0x800 7...
发表于 2019-11-01 08:43 63次阅读
PSoC Creator 4中的安装出错该怎么办?