CN116016196B - 一种实时构建系统架构拓扑的方法及系统 - Google Patents

Abstract

本发明公开一种实时构建系统架构拓扑的方法及系统，构建配置管理数据库，在各虚拟机上执行监听脚本命令得到网络连接和进程集合，分别对各虚拟机的网络连接和进程集合进行组装得到网络连接集合R1；从配置管理数据库中查询每个IP所属系统的名称，并更新至网络连接集合R1中的网络连接得到网络连接集合R2；分别查找本地端口类型是客户端端口和服务端端口的连接，构建网络拓扑的资源节点集合V和资源访问关系的边集合E；在页面展示资源节点的拓扑关系。本方案将系统与外部系统或者技术组件存在的网络连接实时扫描出来，并构建系统与系统、系统与技术组件之间的拓扑关系；便于及时准确的知道系统在和哪些外部系统或者技术组件交互，掌握系统架构是否发生了腐化。

Description

一种实时构建系统架构拓扑的方法及系统

技术领域

本发明涉及网络技术领域，具体涉及一种实时构建系统架构拓扑的方法及系统。

背景技术

一个业务系统通常以集群的形式部署在多个服务器上，在系统运行期间，会与其他外部业务系统和技术组件产出交互。随着业务系统不断演进，我们很难准确的知道系统在和哪些外部系统或者技术组件交互，架构是否发生了腐化。

发明内容

本发明所要解决的技术问题是：随着业务系统不断演进，我们很难准确的知道系统在和哪些外部系统或者技术组件交互，架构是否发生了腐化，本发明目的在于提供一种实时构建系统架构拓扑的方法及系统，基于Linux命令将一个系统与外部系统或者技术组件存在的网络连接实时扫描出来，并构建系统与系统、系统与技术组件之间的拓扑关系。

本发明通过下述技术方案实现：

本方案提供一种实时构建系统架构拓扑的方法，包括：

构建配置管理数据库，用于存储IT架构中所有设备的配置信息，所述配置信息包括系统占用虚拟机及其IP等信息；

在各虚拟机上执行扫描脚本得到网络连接和进程集合，分别对各虚拟机的网络连接和进程集合进行组装得到网络连接集合R1；

从配置管理数据库中查询每个IP所属系统的名称，并更新至网络连接集合R1中的网络连接，得到网络连接集合R2；

更新网络连接集合R2中的各网络连接，并在网络连接数据库中记录更新后的网络连接集合R2；分别查找本地端口类型是客户端端口和服务端端口的连接，构建网络拓扑的资源节点集合V和资源访问关系的边集合E；

在页面展示资源节点的拓扑关系。

本方案工作原理：随着业务系统不断演进，我们很难准确的知道系统在和哪些外部系统或者技术组件交互，架构是否发生了腐化，本发明目的在于提供一种实时构建系统架构拓扑的方法及系统，基于Linux命令将一个系统与外部系统或者技术组件存在的网络连接实时扫描出来，并构建系统与系统、系统与技术组件之间的拓扑关系，便于及时准确的知道系统在和哪些外部系统或者技术组件交互，掌握系统架构是否发生了腐化。

进一步优化方案为，所述网络连接和进程集合包括：执行扫描进程脚本得到的进程集合L，执行网络连接扫描脚本得到的网络连接五元组集合M，和执行网络监听端口脚本得到的监听端口集合N。

进一步优化方案为，所述进程集合L包括属性：ip、cmd、pid和processType；

所述网络连接五元组集合M包括属性：localIp、localPort、foreignIp、foreignPort和pid；

所述监听端口集合N包括属性pid和port。

进一步优化方案为，网络连接集合R1的获取方法包括：

S1：根据网络连接的pid，在进程集合L中找到pid相同的进程Li，得到其进程类型T；

S2：根据网络连接的pid和localPort，在监听端口集合N中查找是否存在相同pid和localPort的记录，如果存在，则当前localPort是网络连接的服务端端口，否则当前localPort是网络连接的客户端端口；

S3：根据S1和S2得到的进程类型和监听端口类型，更新网络连接五元组集合M。

进一步优化方案为，更新网络连接集合R2中各网络连接的方法包括：

在网络连接集合R2中，针对每个网络连接，使用其localIp和localPort，更新其他foreignIp等于localIp且foreignPort等于localPort的网络连接的foreignProcessType为localProcessType。

进一步优化方案为，网络拓扑的资源节点集合V和资源访问关系的边集合E的构建方法包括：

T1：在网络连接集合R2中分别查找本地端口类型是客户端端口和服务端端口的网络连接，并以应用名称、进程类型构建资源节点，以资源节点之间的端口类型访问关系确定资源节点访问关系；

T2：合并相同的资源节点和边，得到具有唯一的资源节点集合V和资源节点访问关系集合E。

本方案还提供一种实时构建系统架构拓扑的系统，用于实现上述方案所述的实时构建系统架构拓扑的方法，包括：

构建模块，用于构建配置管理数据库，所述配置管理数据库用于存储IT架构中所有设备的配置信息，所述配置信息包括系统占用虚拟机及其IP等信息；

执行模块，用于在各虚拟机上执行扫描脚本得到网络连接和进程集合，分别对各虚拟机的网络连接和进程集合进行组装得到网络连接集合R1；

第一操作模块，用于从配置管理数据库中查询每个IP所属系统的名称，并更新至网络连接集合R1中的网络连接，得到网络连接集合R2；

第二操作模块，用于更新网络连接集合R2中的各网络连接，并在网络连接数据库中记录更新后的网络连接集合R2；分别查找本地端口类型是客户端端口和服务端端口的连接，构建网络拓扑的资源节点集合V和资源访问关系的边集合E；

展示模块，用于在页面展示资源节点的拓扑关系。

进一步优化方案为，所述第一操作模块为架构拓扑构建服务端，所述架构拓扑构建服务端从配置管理数据库中查询每个IP所属系统的名称，并更新至网络连接集合R1中的网络连接，得到网络连接集合R2，并将网络连接集合R2写入配置管理数据库。

进一步优化方案为，所述网络连接和进程集合包括：执行进程扫描脚本得到的进程集合L，执行网络连接扫描脚本得到的网络连接五元组集合M，和执行网络监听端口脚本得到的监听端口集合N。

进一步优化方案为，所述进程集合L包括属性：ip、cmd、pid和processType；

所述网络连接五元组集合M包括属性：localIp、localPort、foreignIp、foreignPort和pid；所述监听端口集合N包括属性pid和port。

本发明与现有技术相比，具有如下的优点和有益效果：

本发明提供的一种实时构建系统架构拓扑的方法及系统，本方案基于Linux命令将一个系统与外部系统或者技术组件存在的网络连接实时扫描出来，并构建系统与系统、系统与技术组件之间的拓扑关系。

附图说明

为了更清楚地说明本发明示例性实施方式的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。在附图中：

图1为实时构建系统架构拓扑的方法流程示意图；

图2为原网络连接示意图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚明白，下面结合实施例和附图，对本发明作进一步的详细说明，本发明的示意性实施方式及其说明仅用于解释本发明，并不作为对本发明的限定。

实施例1

本实施例提供一种实时构建系统架构拓扑的方法，如图1所示，包括：

构建配置管理数据库，用于存储IT架构中所有设备的配置信息，所述配置信息包括系统占用虚拟机及其IP等信息；如一个订单服务为：order-service,部署业务进程占用了1个虚拟机主机，IP分别是：10.4.40.1；占用了1个数据库虚拟机主机，IP：10.4.40.3；占用了1个nginx虚拟机主机，IP：10.4.40.5。

在各虚拟机上执行扫描脚本得到网络连接和进程集合，分别对各虚拟机的网络连接和进程集合进行组装得到网络连接集合R1；所述网络连接和进程集合包括：执行扫描进程脚本命令得到的进程集合L，执行网络连接扫描脚本命令得到的网络连接五元组集合M，和执行网络监听端口脚本命令得到的监听端口集合N。

所述进程集合L包括属性：IP、cmd、pid和processType；

所述网络连接五元组集合M包括属性：localIp、localPort、foreignIp、foreignPort和pid；

所述监听端口集合N包括属性pid和port。

网络连接集合R1的获取方法包括：

S1：根据网络连接的pid，在进程集合L中找到pid相同的进程Li，得到其进程类型T；

S2：根据网络连接的pid和localPort，在监听端口集合N中查找是否存在相同pid和localPort的记录，如果存在，则当前localPort是网络连接的服务端端口，否则当前localPort是网络连接的客户端端口；比如：10.4.40.1的网络连接L，在N中找到pid为10001的监听端口为8080，即8080是服务端端口，其余localPort是客户端端口。

S3：根据S1和S2得到的进程类型和监听端口类型，更新网络连接五元组集合M。

例如10.4.40.1的网络连接更新为：

同理,10.4.40.3的网络连接更新为：

同理,10.4.40.5的网络连接更新为：

本实施例对上述虚拟主机别执行扫描进程脚本命令；

10.4.40.1得到一个进程集合L：

网络连接五元组集合M：

localIp	localPort	foreiginIp	foreignPort	pid
					10.4.40.1	12345	10.4.40.3	3306	10001
10.4.40.1	8080	10.4.40.5	12346	10001

监听端口集合N：

port	pid
		8080	10001

10.4.40.3得到一个进程集合L：

网络连接五元组集合M：

localIp	localPort	foreiginIp	foreignPort	pid
					10.4.40.3	3306	10.4.40.3	12345	10003

监听端口集合N：

port	pid
		3306	10003

10.4.40.5得到一个进程集合L：

ip	cmd	pid	processType
				10.4.40.5	/opt/jdk/bin/java–jar order-server.jar	10001	java

网络连接五元组集合M：

localIp	localPort	foreiginIp	foreignPort	pid
					10.4.40.5	12346	10.4.40.1	8080	10001

监听端口集合N：

port	pid
		80	10005

从配置管理数据库中查询每个IP所属系统的名称，并更新至网络连接集合R1中的网络连接，得到网络连接集合R2；

例如：

更新网络连接集合R2中的各网络连接，在网络连接集合R2中，使用各网络连接的localIp更新foreiginIp；使用各网络连接的localPort更新foreignPort；使用各网络连接的localProcessType更新foreiginPorcessType。

并在配置管理数据库中记录更新后的网络连接集合R2；分别查找本地端口类型是客户端端口和服务端端口的连接，构建网络拓扑的资源节点集合V和资源访问关系的边集合E；

在页面展示资源节点的拓扑关系。

更新网络连接集合R2中各网络连接的方法包括：

网络拓扑的资源节点集合V和资源访问关系的边集合E的构建方法包括：

在网络连接集合R2中查找本地端口类型是客户端类型的网络连接，并以应用名称、进程类型构建资源节点，以资源节点之间的端口类型访问关系确定资源节点访问关系。

例如：

第一个连接：

资源节点及访问关系：V1:<order-service,java>->V2:<order-service,mysql>

第二个连接：

资源节点及访问关系:V3:<order-service,nginx>->V4:<order-service,java>

在R2中查找本地端口类型是服务端类型的网络连接，

例如：

第一个连接：

资源节点及访问关系：V5:<order-service,java><-V6:<order-service,mysql>

第二个连接：

资源节点及访问关系:V7:<order-service,mysql><-V8:<order-service,java>

步骤6.3：合并相同的资源节点和边，得到具有唯一的资源节点集合V和资源节点访问关系集合E：

例如：V＝{<order-service,java>，<order-service,mysql>，<order-service,nginx>

}

E＝{<order-service,java>-><order-service,mysql>，<order-service,nginx>-><order-service,java>}

合并相同的资源节点和边，得到具有唯一的资源节点集合V和资源节点访问关系集合E：

例如：V＝{<order-service,java>，<order-service,mysql>，<order-service,nginx>

}

E＝{<order-service,java>-><order-service,mysql>，<order-service,nginx>-><order-service,java>}。

实施例2

本实施例提供一种实时构建系统架构拓扑的系统，用于实现上一实施例所述的实时构建系统架构拓扑的方法，包括：

构建模块，用于构建配置管理数据库，所述配置管理数据库用于存储IT架构中所有设备的配置信息，所述配置信息包括系统占用虚拟机及其IP等信息；

执行模块，用于在各虚拟机上执行扫描脚本得到进程与网络连接集合，分别对各虚拟机的网络连接和进程集合进行组装得到网络连接集合R1；

第一操作模块，用于从配置管理数据库中查询每个IP所属系统的名称，并更新至网络连接集合R1中的网络连接，得到网络连接集合R2；

第二操作模块，用于更新网络连接集合R2中的各网络连接，并在配置管理数据库中记录更新后的网络连接集合R2；分别查找本地端口类型是客户端端口和服务端端口的连接，构建网络拓扑的资源节点集合V和资源访问关系的边集合E；

展示模块，用于在页面展示资源节点的拓扑关系。

所述第一操作模块为架构拓扑构建服务端，所述架构拓扑构建服务端从配置管理数据库中查询每个IP所属系统的名称，并更新至网络连接集合R1中的网络连接，得到网络连接集合R2，并将网络连接集合R2写入配置管理数据库。

所述网络连接和进程集合包括：执行扫描进程脚本命令得到的进程集合L，执行网络连接扫描脚本命令得到的网络连接五元组集合M，和执行网络监听端口脚本命令得到的监听端口集合N。

所述进程集合L包括属性：ip、cmd、pid和processType；

所述网络连接五元组集合M包括属性：localIp、localPort、foreignIp、foreignPort和pid；

所述监听端口集合N包括属性pid和port。

以上所述的具体实施方式，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施方式而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (6)

1.一种实时构建系统架构拓扑的方法，其特征在于，包括：

构建配置管理数据库，用于存储IT架构中所有设备的配置信息，所述配置信息包括系统占用的虚拟机资源及其IP等信息；

在各虚拟机上执行扫描脚本得到网络连接和进程集合，分别对各虚拟机的网络连接和进程集合进行组装得到网络连接集合R1；

所述网络连接和进程集合包括：执行进程扫描脚本得到的进程集合L，执行网络连接扫描脚本得到的网络连接五元组集合M，和执行网络监听端口扫描脚本得到的监听端口集合N；

所述进程集合L包括属性：ip、cmd、pid和processType ；

所述网络连接五元组集合M包括属性：localIp、localPort、foreignIp、foreignPort和pid；

所述监听端口集合N包括属性pid和port；

网络连接集合R1的获取方法包括：

S1：根据网络连接的pid，在进程集合L中找到pid相同的进程Li，得到其进程类型T；

S2：根据网络连接的pid和localPort，在监听端口集合N中查找是否存在相同pid和localPort的记录，如果存在，则当前localPort是网络连接的服务端端口，否则当前localPort是网络连接的客户端端口；

S3：根据S1和S2得到的进程类型和监听端口类型，更新网络连接五元组集合M；

从配置管理数据库中查询每个IP所属系统的名称，并更新至网络连接集合R1中的网络连接，得到网络连接集合R2；

更新网络连接集合R2中的各网络连接，并在网络连接数据库中记录更新后的网络连接集合R2；在网络连接数据库中分别查找本地端口类型是客户端端口和服务端端口的连接，构建网络拓扑的资源节点集合V和资源访问关系的边集合E；

网络拓扑的资源节点集合V和资源访问关系的边集合E的构建方法包括：

T1：在网络连接集合R2中分别查找本地端口类型是客户端端口和服务端端口的网络连接，并以应用名称、进程类型构建资源节点，以资源节点之间的端口类型访问关系确定资源节点访问关系；

T2：合并相同的资源节点和边，得到具有唯一的资源节点集合V和资源节点访问关系集合E；

在页面展示资源节点的拓扑关系。

2.根据权利要求1所述的一种实时构建系统架构拓扑的方法，其特征在于，更新网络连接集合R2中各网络连接的方法包括：

针对每个网络连接，使用其localIp和localPort，更新其他foreignIp等于localIp且foreignPort等于localPort的网络连接的foreignProcessType为localProcessType。

3.一种实时构建系统架构拓扑的系统，其特征在于，用于实现权利要求1或2所述的实时构建系统架构拓扑的方法，包括：

构建模块，用于构建配置管理数据库，所述配置管理数据库用于存储IT架构中所有设备的配置信息，所述配置信息包括系统占用虚拟机及其IP等信息；

执行模块，用于在各虚拟机上执行扫描脚本得到网络连接和进程集合，分别对各虚拟机的网络连接和进程集合进行组装得到网络连接集合R1；

第一操作模块，用于从配置管理数据库中查询每个IP所属系统的名称，并更新至网络连接集合R1中的网络连接，得到网络连接集合R2；

第二操作模块，用于更新网络连接集合R2中的各网络连接，并在网络连接数据库中记录更新后的网络连接集合R2；在网络连接数据库中分别查找本地端口类型是客户端端口和服务端端口的连接，构建网络拓扑的资源节点集合V和资源访问关系的边集合E；

展示模块，用于在页面展示资源节点的拓扑关系。

4.根据权利要求3所述的一种实时构建系统架构拓扑的系统，其特征在于，所述第一操作模块为架构拓扑构建服务端，所述架构拓扑构建服务端从配置管理数据库中查询每个IP所属系统的名称，并更新至网络连接集合R1中的网络连接，得到网络连接集合R2，并将网络连接集合R2写入网络连接数据库。

5.根据权利要求3所述的一种实时构建系统架构拓扑的系统，其特征在于，所述网络连接和进程集合包括：执行扫描进程脚本得到的进程集合L，执行网络连接扫描脚本得到的网络连接五元组集合M，和执行网络监听端口脚本得到的监听端口集合N。

6.根据权利要求5所述的一种实时构建系统架构拓扑的系统，其特征在于，所述进程集合L包括属性：ip、cmd、pid和processType；

所述网络连接五元组集合M包括属性：localIp、localPort、foreignIp、foreignPort和pid；

所述监听端口集合N包括属性pid和port。