[go: up one dir, main page]

CN108462652B - 一种报文处理方法、装置和网络设备 - Google Patents

一种报文处理方法、装置和网络设备 Download PDF

Info

Publication number
CN108462652B
CN108462652B CN201710638401.3A CN201710638401A CN108462652B CN 108462652 B CN108462652 B CN 108462652B CN 201710638401 A CN201710638401 A CN 201710638401A CN 108462652 B CN108462652 B CN 108462652B
Authority
CN
China
Prior art keywords
block
message
memory space
blocks
read
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710638401.3A
Other languages
English (en)
Other versions
CN108462652A (zh
Inventor
�田�浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
New H3C Technologies Co Ltd
Original Assignee
New H3C Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by New H3C Technologies Co Ltd filed Critical New H3C Technologies Co Ltd
Priority to CN201710638401.3A priority Critical patent/CN108462652B/zh
Priority to JP2020505176A priority patent/JP7074839B2/ja
Priority to US16/635,529 priority patent/US11425057B2/en
Priority to PCT/CN2018/097254 priority patent/WO2019024763A1/zh
Priority to EP18840257.2A priority patent/EP3657744B1/en
Publication of CN108462652A publication Critical patent/CN108462652A/zh
Application granted granted Critical
Publication of CN108462652B publication Critical patent/CN108462652B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L49/00Packet switching elements
    • H04L49/25Routing or path finding in a switch fabric
    • H04L49/252Store and forward routing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061Improving I/O performance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638Organizing or formatting or addressing of data
    • G06F3/064Management of blocks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5011Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals
    • G06F9/5016Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals the resource being the memory
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L49/00Packet switching elements
    • H04L49/90Buffering arrangements
    • H04L49/901Buffering arrangements using storage descriptor, e.g. read or write pointers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L49/00Packet switching elements
    • H04L49/90Buffering arrangements
    • H04L49/9042Separate storage for different parts of the packet, e.g. header and payload
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/22Parsing or analysis of headers

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Computer Security & Cryptography (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本申请提供一种报文处理方法、装置和网络设备,内存被划分成多个第一区块,每个第一区块被划分成多个第二区块,每个第二区块均包括第一存储空间和第二存储空间,所述方法包括:获得待存储的报文,并根据报文的长度和第一存储空间的长度,确定报文需要占用的第二区块,并将所述报文存储到确定的第二区块的第一存储空间;针对确定的每个第二区块,生成该第二区块对应的PD,并将所述PD存储到确定的第二区块的第二存储空间;从第二区块的第一存储空间读取报文片段,从所述第二区块的第二存储空间读取PD,利用读取的PD将读取的报文片段组成报文,并发送组成的报文。通过本申请的技术方案,可以充分利用DDR资源,且读取效率很高。

Description

一种报文处理方法、装置和网络设备
技术领域
本申请涉及通信技术领域,尤其涉及一种报文处理方法、装置和网络设备。
背景技术
目前,网络设备在接收到报文时,根据报文所属的队列,将报文缓存到外部存储单元中。网络设备在需要发送报文时,根据报文所属的队列,从外部存储单元中读出报文并发送。在报文的存取过程中,会存在两个关键元素,分别为PKT(PACKET,报文实体)和PD(Packet Description,报文描述符)。
在传统方式中,网络设备会将PKT存储到DDR SDRAM(Dual Data RateSynchronous Dynamic Random Access Memory,双倍速率同步动态随机存取存储器,后续简称DDR),并将PD存储到QDR SRAM(Quad Data Rate Static Random Access Memory,四倍数据速率静态随机存取存储器,后续简称QDR)。但是,由于需要使用QDR存储PD,因此,提高了单板设计成本,增加布线压力。
此外,在需要发送报文时,网络设备先从QDR读取PD,然后利用PD从DDR读取PKT,由于需要分两次,分别读取PD和PKT,因此读取效率很低。
发明内容
本申请提供一种报文处理方法,内存被划分成多个第一区块,每个第一区块被划分成多个第二区块,每个第二区块均包括第一存储空间和第二存储空间,所述方法包括:获得待存储的报文,并根据所述报文的长度和第一存储空间的长度,确定所述报文需要占用的第二区块,并将所述报文存储到确定的第二区块的第一存储空间;针对确定的每个第二区块,生成该第二区块对应的报文描述符PD,并将所述PD存储到确定的第二区块的第二存储空间;
从第二区块的第一存储空间读取报文片段,从所述第二区块的第二存储空间读取PD,利用读取的PD将读取的报文片段组成报文,并发送组成的报文。
本申请提供一种报文处理装置,内存被划分成多个第一区块,每个第一区块被划分成多个第二区块,每个第二区块均包括第一存储空间和第二存储空间,所述装置包括:写入模块,用于获得待存储的报文,并根据所述报文的长度和第一存储空间的长度,确定所述报文需要占用的第二区块,并将所述报文存储到确定的第二区块的第一存储空间;针对确定的每个第二区块,生成该第二区块对应的报文描述符PD,并将所述PD存储到确定的第二区块的第二存储空间;
读取模块,用于从第二区块的第一存储空间读取报文片段,并从所述第二区块的第二存储空间读取PD,并利用读取的PD将读取的报文片段组成报文,并发送组成的报文。
本申请提供一种网络设备,所述网络设备包括转发芯片和外部存储单元,所述外部存储单元的内存被划分成多个第一区块,每个第一区块被划分成多个第二区块,每个第二区块均包括第一存储空间和第二存储空间;其中:
所述转发芯片,用于获得待存储的报文,根据所述报文的长度和第一存储空间的长度,确定所述报文需要占用的第二区块,并将所述报文存储到所述外部存储单元中的确定的第二区块的第一存储空间;针对确定的每个第二区块,生成该第二区块对应的报文描述符PD,将所述PD存储到所述外部存储单元中的确定的第二区块的第二存储空间;从所述外部存储单元中的第二区块的第一存储空间读取报文片段,从所述外部存储单元中的所述第二区块的第二存储空间读取PD,并利用读取的PD将读取的报文片段组成报文,并发送组成的报文。
基于上述技术方案,本申请实施例中,内存(如DDR内存)被划分成多个第一区块,每个第一区块被划分成多个第二区块,每个第二区块均包括第一存储空间和第二存储空间,因此,可以将报文存储到第一存储空间,并将PD存储到第二存储空间,这样,可以将报文和PD存储到同一个内存,而不是将报文存储到DDR内存,并将PD存储到QDR内存。因此,不需要使用QDR存储PD,充分利用DDR资源,降低了单板设计成本,减少了布线压力。而且,由于将报文和PD存储到同一个内存,因此在需要发送报文时,可以从同一个内存中读取到报文和PD,而不用分两次分别读取PD和报文,这样读取效率很高。
附图说明
为了更加清楚地说明本申请实施例或者现有技术中的技术方案,下面将对本申请实施例或者现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请中记载的一些实施例,对于本领域普通技术人员来讲,还可以根据本申请实施例的这些附图获得其他的附图。
图1A-图1C是本申请一种实施方式中的应用场景示意图;
图2是本申请一种实施方式中的报文处理方法的流程图;
图3A-图3E是本申请另一种实施方式中的应用场景示意图;
图4是本申请一种实施方式中的报文处理装置的结构图;
图5A和图5B是本申请一种实施方式中的网络设备的硬件结构图。
具体实施方式
在本申请实施例使用的术语仅仅是出于描述特定实施例的目的,而非限制本申请。本申请和权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其它含义。还应当理解,本文中使用的术语“和/或”是指包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本申请实施例可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本申请范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,此外,所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
本申请实施例中提出一种报文处理方法,可以应用于网络设备,网络设备在处理报文时,会涉及报文存取(即存储和读取)过程,在报文的存取过程中,会存在两个关键元素,分别为报文和PD。报文也可以称为PKT,即报文实体,也就是待存储的报文本身,而PD用于记录报文的关键信息,如报文的长度、队列信息、存储地址等,且PD的长度远小于报文的长度,PD的信息量比较小。
本申请实施例中,将报文和PD存储到同一个内存(如DDR内存),而不是将报文存储到DDR内存,将PD存储到QDR内存,从而不需要使用QDR存储PD,充分利用DDR内存资源,降低了单板设计成本,减少布线压力。而且,由于将报文和PD存储到同一个内存,因此在需要发送报文时,可以从同一个内存中读取到报文和PD,而不用分两次分别读取PD和报文,这样读取效率很高。
本申请实施例中,内存(如DDR内存)被划分成多个第一区块(也可以称为大块内存),每个第一区块又被划分成多个第二区块(也可以称为小块内存,每个小块内存可以为一个burst)。每个第二区块又被划分成为大小不等的两段,较大的这段内存可以为第一存储空间,而较小的这段内存可以为第二存储空间,即第一存储空间可以大于第二存储空间。基于此,可以将报文存储到第一存储空间,将PD存储到第二存储空间,从而将报文和PD存储到同一个内存。
在一个例子中,参见图1A所示,DDR内存可以被划分成了多个第一区块,每个第一区块为一个2K字节的大块内存。此外,每个第一区块可以被划分成32个第二区块,每个第二区块为一个64字节的小块内存,即每个2K字节的第一区块被划分成32个64字节的小块内存,每一个小块内存可以为一个burst。
其中,上述2K字节、32个、64字节等,只是本申请的一个示例,对此数值不做限制,例如,上述第一区块为2K字节,第二区块为128字节时,则第一区块可以被划分成16个第二区块。又例如,上述第一区块为4K字节,第二区块为64字节时,则第一区块可以被划分成64个第二区块。以此类推,为了方便描述,后续以2K字节的第一区块被划分成32个64字节的第二区块为例。
其中,在将第一区块划分成32个64字节的第二区块之后,还可以将每个第二区块划分为大小不等的两段。较大的这段内存可以为56字节(以56字节为例),且这段内存为第一存储空间,第一存储空间用于存储报文。较小的这段内存可以为8字节(以8字节为例),且这段内存为第二存储空间,第二存储空间用于存储PD。参见图1B所示,第二区块可以同时存储报文和PD,例如,假设需要存储4个报文(如报文0、报文1、报文2、报文3),且4个报文的大小均是96字节,则报文0存储在第二区块0和第二区块1,报文0可以占用第二区块0的56字节,占用第二区块1的40字节,且在第二区块0的前8字节中,还存储有PD,在第二区块1的前8字节中,还存储有PD。以此类推。
参见图1C所示,为PD的一个示例,针对报文占用的不同第二区块,这些第二区块对应的PD可能相同,也可能不同。例如,当报文占用一个或多个第二区块时,若第二区块是报文需要占用的所有第二区块中的第一个第二区块,则确定该第二区块对应的PD可以包括报文长度(LEN)和第一标记(SOP),第一标记表示报文存储在第一个第二区块。若第二区块是报文需要占用的所有第二区块中的最后一个第二区块,则确定该第二区块对应的PD可以包括第二标记(EOP),所述第二标记表示报文存储在最后一个第二区块。若第二区块是报文需要占用的所有第二区块中的任一第二区块,则确定该第二区块对应的PD可以包括第三标记(BV),第三标记表示当前的第二区块是否有效;如第三标记为0时,表示当前第二区块有效,第三标记为1时,表示当前第二区块无效。
此外,当报文需要占用的所有第二区块共占用至少两个第一区块时,若第二区块是第一区块中的最后一个第二区块,则确定该第二区块对应的PD可以包括报文需要占用的所有第二区块占用的下一个第一区块的指针(NBA)、报文需要占用的所有第二区块在下一个第一区块中的第二区块数量(NBN)、第四标记(VAL)。其中,该第四标记可以表示NBA是否有效。例如,当该第四标记为0时,则表示NBA有效,当该第四标记为1时,则表示NBA无效。
在一个例子中,SOP(Start Of Phase,开始阶段)的取值为0时,表示当前第二区块是第一个第二区块;SOP的取值为1时,表示当前第二区块不是第一个第二区块。EOP(End OfPhase,结束阶段)的取值为0时,表示当前第二区块是最后一个第二区块;EOP的取值为1时,表示当前第二区块不是最后一个第二区块。BV(Block Valid,块有效)为0时,表示当前第二区块有效,BV为1时,表示当前第二区块无效。VAL(Valid,有效)为0时,表示NBA有效,VAL为1时,表示NBA无效。LEN(length,长度)表示报文长度。NBA(Next Block Address,下一块地址)的取值为下一个第一区块的指针地址。NBN(Next Block Number,下一块数量)的取值为在下一个第一区块中的第二区块数量。
例如,在图1C中,报文1对应第二区块2、第二区块3和第二区块4。针对报文1需要占用的所有第二区块中的第一个第二区块(如第二区块2),则该第二区块2对应的PD可以包括LEN(如120,表示报文1的总长度是120字节)和SOP(表示第一个第二区块)。针对报文1需要占用的所有第二区块中的任意一个第二区块(如第二区块2、第二区块3和第二区块4,图中以第二区块3为例),该第二区块3对应的PD可以包括BV(如BV为0,表示当前的第二区块有效)。针对报文1需要占用的所有第二区块中的最后一个第二区块(如第二区块4),该第二区块4对应的PD可以包括EOP(表示最后一个第二区块)。
在这个示例中,第二区块2的PD可以包括:LEN=120;SOP=0;BV=0;第二区块4的PD可以包括:EOP=0;BV=0。第二区块3的PD可以包括:BV=0。
又例如,报文2对应一个第一区块(后续将其称为第一区块0)中的第二区块5至第二区块31、另一个第一区块(后续将其称为第一区块1)中的第二区块0、第二区块1。针对报文2需要占用的所有第二区块中的第一个第二区块(如第一区块0的第二区块5),则该第二区块5对应的PD可以包括LEN和SOP。针对报文2需要占用的所有第二区块中的任意一个第二区块(如第一区块0的第二区块5至第二区块31、以及第一区块1的第二区块0和第二区块1),这些第二区块对应的PD均可以包括BV。针对第一区块0的第二区块31(即第一区块的最后一个第二区块),该第二区块31对应的PD还可以包括NBA(用于记录第一区块1的指针,如第一区块1的第二区块0的地址)、NBN(用于记录报文2在第一区块1中的第二区块数量,如取值为2)、VAL(用于表示NBA是否有效)。针对报文2需要占用的所有第二区块中的最后一个第二区块(如第一区块1的第二区块1),则该第二区块1对应的PD可以包括EOP。
在这个示例中,第二区块5的PD可以包括:LEN=1560;SOP=0;BV=0;第二区块31的PD可以包括:BV=0;NBA=0x8049324(其表示第二区块的指针地址);NBN=2;VAL=0;对于其它第二区块的PD,在此不再赘述。
在上述应用场景下,参见图2所示,为该报文处理方法的流程图。
步骤201,获得待存储的报文,并根据该报文的长度和第一存储空间的长度,确定该报文需要占用的第二区块,并将该报文存储到确定的第二区块的第一存储空间;针对确定的每个第二区块,生成该第二区块对应的PD,并将该PD存储到确定的第二区块的第二存储空间。其中,步骤201可以是报文存储过程。
在一个例子中,针对“确定该报文需要占用的第二区块”的过程,可以包括但不限于如下方式:确定该报文对应的队列。然后,若该队列对应有尾指针,则从该尾指针指向的第二区块开始,确定该报文需要占用的第二区块;此外,若该队列没有对应尾指针,则可以选取空闲的第一区块,并从选取的第一区块中的首个第二区块开始,确定该报文需要占用的第二区块。
其中,可以先根据该报文的长度和第一存储空间的长度,确定该报文需要占用的第二区块的数量,然后,从该尾指针指向的第二区块开始或者从选取的第一区块中的首个第二区块开始,确定该报文需要占用的该数量个第二区块。每个第二区块用于存储该报文的一个报文片段,例如,若报文需要占用3个第二区块,则可以将报文划分为3个报文片段,每个报文片段占用一个第二区块。
其中,网络设备可以采用队列存储报文,每个队列具有唯一的队列标识。当然,采用队列存储报文的方式只是一个示例,网络设备还可以采用其它方式存储报文,本实施例中以采用队列存储报文为例进行说明。通过队列存储报文,可以有效的区分不同类型的报文,并将不同类型的报文存储到不同的队列。例如,网络设备包括三个队列(如FIFO(First-In First-Out,先进先出)队列),这三个队列的队列标识分别为队列A、队列B和队列C,队列A用于存储具有特征A(如出接口为接口A)的报文,队列B用于存储具有特征B(如出接口为接口B)的报文,队列C用于存储具有特征C(如出接口为接口C)的报文。
网络设备在获得待存储的报文之后,可以先确定出报文的队列,对此过程不做限制。若该报文是该队列对应的首个报文,则该队列没有对应尾指针和头指针,若该报文不是该队列对应的首个报文,则该队列对应有尾指针和头指针。
其中,头指针可以是指:指向队列对应的第一个报文头部的指针(如第一个报文的开始地址或者开始位置)。尾指针可以是指:指向队列对应的最后一个报文尾部的指针(如最后一个报文的结束地址或者结束位置)。
例如,在队列为空的情况下,若获得待存储的报文1,则在队列中存储报文1,并更新该队列的尾指针和头指针,该头指针指向报文1的开始地址,该尾指针指向报文1的结束地址。然后,若获得针对该队列的报文2,则在队列中存储报文2,此时不再更新头指针,只需要更新该队列对应的尾指针,如尾指针指向报文2的结束地址。以此类推,每接收到该队列的报文,就可以更新尾指针。若需要读取队列中的报文,则从队列的头指针开始读取,在报文1读取完成后,则从队列中删除报文1,此时不需要更新尾指针,只需要更新队列对应的头指针,如头指针指向报文2的开始地址。以此类推,每从队列中读取并删除一个报文,就可以更新头指针。综上所述,存储报文的过程,是从队列的尾指针开始,依次存储报文,读取报文的过程,是从队列的头指针开始,依次读取报文。
其中,在队列对应有尾指针的情况下,针对“从该尾指针指向的第二区块开始,确定该报文需要占用的第二区块”的过程,可以包括:从该尾指针指向的第二区块的下一个第二区块开始,选取预设数量个第二区块,所述预设数量是根据报文的长度以及第一存储空间的长度确定的。例如,若尾指针指向第一区块1的第二区块10,且报文的长度是100字节,由于第一存储空间为56字节,因此,确定该报文占用两个第二区块,即该报文对应的第二区块为第一区块1的第二区块11和第二区块12。又例如,若尾指针指向第一区块1的第二区块30,且报文的长度是100字节,由于第一存储空间为56字节,因此,确定该报文占用两个第二区块,又由于第一区块1已经不存在两个空闲的第二区块,因此,还可以重新申请空闲的第一区块(如第一区块3),基于此,该报文对应的第二区块可以为第一区块1的第二区块31和第一区块3的第二区块0。
在“从该尾指针指向的第二区块开始,确定报文需要占用的第二区块”后,还可以根据该报文对应的第二区块,更新队列对应的尾指针,即该尾指针指向该报文对应的第二区块的结束地址,如指向第二区块12的结束地址。
其中,在该队列没有对应尾指针的情况下,针对“选取空闲的第一区块,并从选取的第一区块中的首个第二区块开始,确定该报文需要占用的第二区块”的过程,可以包括:从第一区块中的首个第二区块开始,选取预设数量个第二区块,所述预设数量是根据报文的长度以及第一存储空间的长度确定的。例如,若选取空闲的第一区块2,且报文的长度是100字节,由于第一存储空间为56字节,因此,确定该报文占用两个第二区块,即该报文对应的第二区块可以为第一区块2的第二区块0(即第一区块2的首个第二区块)、第二区块1。
在“从选取的第一区块中的首个第二区块开始,确定该报文需要占用的第二区块”后,还可以根据该报文对应的第二区块,更新队列对应的尾指针。
其中,针对“选取空闲的第一区块”的过程,网络设备可以维护空闲地址池,该空闲地址池用于存储所有空闲的第一区块。在申请空闲的第一区块时,可以从空闲地址池中选取空闲的第一区块,以第一区块为单位申请空闲的第一区块,即每次需要申请一个或者多个第一区块,而不是直接申请一个或者多个第二区块。在回收内存时,也是以第一区块为单位回收,即将一个或者多个第一区块回收到空闲地址池,而不是将一个或者多个第二区块回收到空闲地址池。
在一个例子中,针对“将报文存储到确定的第二区块的第一存储空间”的过程,若报文需要占用的第二区块为第二区块11和第二区块12,则可以将报文划分为两个报文片段,并可以将这两个报文片段分别存储到第二区块11的第一存储空间、第二区块12的第一存储空间。例如,以报文的长度是100字节为例,则可以将该报文的前56个字节划分到报文片段1,并将该报文片段1存储到该第二区块11的第一存储空间。此外,将该报文的后44个字节划分到报文片段2,并将该报文片段2存储到该第二区块12的第一存储空间。
在一个例子中,当报文占用一个或多个第二区块时,针对“生成该第二区块对应的PD”的过程,可以包括但不限于:若该第二区块是报文需要占用的所有第二区块中的第一个第二区块,则确定该第二区块对应的PD可以包括报文长度(LEN)和第一标记(SOP),第一标记表示报文存储在第一个第二区块。若该第二区块是报文需要占用的所有第二区块中的最后一个第二区块,则确定该第二区块对应的PD可以包括第二标记(EOP),第二标记表示报文存储在最后一个第二区块。若第二区块是报文需要占用的所有第二区块中的任一第二区块,则确定该第二区块对应的PD可以包括第三标记(BV)。此外,当报文需要占用的所有第二区块共占用至少两个第一区块时,若该第二区块是第一区块中的最后一个第二区块,则确定该第二区块对应的PD可以包括报文需要占用的所有第二区块占用的下一个第一区块的指针(NBA)、报文需要占用的所有第二区块在下一个第一区块中的第二区块数量(NBN)、第四标记(VAL)。
其中,上述PD的生成过程可以参见图1C所示,在此不再重新赘述。
在一个例子中,针对“将该PD存储到确定的第二区块的第二存储空间”的过程,假设报文需要占用第二区块11和第二区块12,则确定第二区块11对应的PD为报文长度(LEN)和第一标记(SOP),将报文长度(LEN)和第一标记(SOP)存储到第二区块11的第二存储空间。确定第二区块12对应的PD为第二标记(EOP),将第二标记(EOP)存储到第二区块12的第二存储空间。
基于上述技术方案,可以实现报文的存储过程,而且,是将DDR内存划分成多个第一区块,每个第一区块被划分成多个第二区块,每个第二区块均包括第一存储空间和第二存储空间,因此,可以将报文存储到第一存储空间,并将PD存储到第二存储空间,这样,可以将报文和PD存储到同一个内存,而不是将报文存储到DDR内存,并将PD存储到QDR内存。因此,不需要使用QDR存储PD,充分利用DDR资源,降低了单板设计成本,减少了布线压力。
步骤202,从第二区块的第一存储空间读取报文片段,并从该第二区块的第二存储空间读取PD,并利用读取的PD将读取的报文片段组成报文,并发送组成的报文。其中,步骤202可以是报文的读取过程,以及报文的发送过程。
具体的,从第一区块的每个第二区块的第二存储空间读取PD,并确定包括第一标记的PD,并将包括第一标记的PD对应的第二区块确定为起始第二区块。若读取的PD存在包括第二标记的PD,则可以将包括第二标记的PD对应的第二区块确定为终止第二区块;若读取的PD不存在包括第二标记的PD,则从所述第一区块的最后一个PD获取下一个第一区块的指针、下一个第一区块中的第二区块数量,并根据所述指针和第二区块数量,从下一个第一区块的第二区块的第二存储空间读取PD,并可以将包括第二标记的PD对应的第二区块确定为终止第二区块。从起始第二区块与终止第二区块之间的每个第二区块的第一存储空间中读取报文片段,并将读取的报文片段组成报文,并发送组成的报文。
其中,在需要发送某个队列中的报文时,查询出该队列对应的头指针,这个头指针是指向该队列对应的第一个报文头部的指针(如第一个报文的开始地址),且这个地址可以是第二区块的地址。然后,确定该第二区块所属的第一区块,并从该第一区块的每个第二区块的第二存储空间读取PD。
参见图1C所示,由于第二区块0的PD包括第一标记(SOP),第二区块1的PD包括第二标记(EOP),因此将第二区块0确定为起始第二区块,将第二区块1确定为终止第二区块,从第二区块0的第一存储空间中读取报文片段,从第二区块1的第一存储空间中读取报文片段,并将读取的报文片段组成一个报文,并发送该报文。由于第二区块2的PD包括第一标记(SOP),第二区块4的PD包括第二标记(EOP),因此将第二区块2确定为起始第二区块,将第二区块4确定为终止第二区块。从第二区块2、第二区块3、第二区块4的第一存储空间中读取报文片段,并将读取的报文片段组成一个报文1,并发送该报文。
又例如,由于第二区块5的PD包括第一标记(SOP),因此将第二区块5确定为起始第二区块。由于第二区块5后,第一区块的各第二区块(第二区块6-31)的PD均不包括第二标记,因此从第二区块31的PD中获取下一个第一区块的指针(NBA)、当前报文在下一个第一区块的第二区块数量(NBN),并根据NBA获取到下一个第一区块的地址,从下一个第一区块中读取前NBN个第二区块的PD。由于下一个第一区块的第二区块1的PD包括第二标记(EOP),因此将下一个第一区块的第二区块1确定为终止第二区块。然后,从当前第一区块的第二区块5-第二区块31、下一个第一区块的第二区块0、第二区块1的第一存储空间读取报文片段,将读取的报文片段组成一个报文,并发送该报文。
在一个例子中,在“从起始第二区块与终止第二区块之间的每个第二区块的第一存储空间中读取报文片段”之后,还可以释放读取的报文片段占用的第一存储空间;当第一区块中的每个第二区块的第一存储空间均被释放时,则可以将所述第一区块回收为空闲的第一区块,即将这个第一区块回收到空闲地址池,然后,网络设备可以使用这个第一区块存储新的报文片段。此外,网络设备还可以根据该第一区块指向的下一个第一区块的地址,更新队列的头指针。
在一个例子中,在将所述第一区块回收为空闲的第一区块后,还可以释放所述第一区块中的每个第二区块的第二存储空间。或者,在将所述第一区块回收为空闲的第一区块后,还可以不释放所述第一区块中的每个第二区块的第二存储空间,而是调整所述第一区块的反转标记。
进一步的,针对调整所述第一区块的反转标记的实现方式,网络设备在每次生成第二区块对应的PD时,还可以获取与该第二区块对应的第一区块的反转标记,并确定该第二区块对应的PD包括该反转标记。其中,第一区块连续两次被使用时的反转标记不同。例如,第一区块第一次被使用时的反转标记为0,在将该第一区块回收为空闲的第一区块后,可以将第一区块的反转标记修改为1(只要与0不同即可),第一区块第二次被使用时的反转标记为1,在将该第一区块回收为空闲的第一区块后,可以将第一区块的反转标记修改为0或2(只要与1不同即可),第一区块第三次被使用时的反转标记为0或2,以此类推。
例如,在第一次使用第一区块1存储报文时,在第一区块1的每个第二区块的第二存储空间写入PD,参见图3A所示,为第二存储空间写入PD的示例。在针对第一区块1的读操作完成后,如果不对这些PD进行处理,就会出现错误。例如,在第二次使用第一区块1存储报文时,只在第一区块1的第二区块0、第二区块1、第二区块2中写入报文片段和PD,而不在第一区块1的其它第二区块中写入报文片段和PD,这样,在针对第一区块1进行读操作时,可以从第二区块0至第二区块31读取到PD,但只能从第二区块0、第二区块1、第二区块2读取到报文片段,在使用这些PD对读取到的报文片段进行组包时会出现错误。
针对上述发现,在一个例子中,在针对第一区块1的读操作完成后,还可以删除第一区块1中的每个第二区块的第二存储空间的PD。但是,在该方式下,每次针对第一区块1的读操作完成后,均需要删除第一区块1的每个第二区块的第二存储空间的PD,导致第二区块的反复操作,并降低网络设备的处理性能。
在另一个例子中,在针对第一区块1的读操作完成后,并不是删除第一区块1中的每个第二区块的第二存储空间的PD,而是采用如下方式解决上述“在使用这些PD对读取到的报文片段进行组包时,就会出现错误”问题,从而可以避免第二区块的第二存储空间的反复操作,并可以提高网络设备的处理性能。
为每个第一区块设置反转标记,该反转标记可以为第一数值或者第二数值。基于此,每次针对第一区块的读操作完成之后,在将该第一区块回收为空闲的第一区块时,若该第一区块的反转标记为第一数值,则可以将第一数值修改为第二数值,若反转标记为第二数值,则可以将第二数值修改为第一数值标识。
在此基础上,每次通过第一区块中的第二区块的第二存储空间存储PD时,所述PD还可以包括反转标记。例如,若第一区块对应的反转标记为0,针对图3A,具有反转标记的PD可以如图3B或者图3C所示。SEL0表示当前的反转标记为0。SOP0、EOP0、NBN0、NBA0中的0,均表示当前的反转标记为0。
然后,在将第一区块回收为空闲的第一区块时,由于第一区块对应的反转标记为0,因此将该反转标记修改为1。再次使用该第一区块存储报文时,若只在第二区块0、第二区块1、第二区块2中写入报文和PD,则具有反转标记的PD可以如图3D或者图3E所示。在图3D或者图3E中,SEL1表示当前的反转标记为1,SOP1、EOP1中的1,均表示当前的反转标记为1。
通过对比图3D和图3B,在针对第一区块进行读操作时,可以从第二区块0至第二区块31读取到PD,但是只有第二区块0、第二区块1、第二区块2对应SEL1,即只有第二区块0、第二区块1、第二区块2是当前的反转标记1对应的第二区块,因此只使用第二区块0、第二区块1、第二区块2的PD对读取到的报文片段进行组包,不会发生错误。同理,通过对比图3C和图3E,也可以只使用第二区块0、第二区块1、第二区块2的PD对读取到的报文片段进行组包。
基于与上述方法同样的申请构思,本申请实施例中还提出一种报文处理装置,内存被划分成多个第一区块,每个第一区块被划分成多个第二区块,每个第二区块均包括第一存储空间和第二存储空间,如图4所示,所述装置包括:
写入模块401,用于获得待存储的报文,并根据所述报文的长度和第一存储空间的长度,确定所述报文需要占用的第二区块,并将所述报文存储到确定的第二区块的第一存储空间;针对确定的每个第二区块,生成该第二区块对应的报文描述符PD,并将所述PD存储到确定的第二区块的第二存储空间;
读取模块402,用于从第二区块的第一存储空间读取报文片段,并从所述第二区块的第二存储空间读取PD,并利用读取的PD将读取的报文片段组成报文,并发送组成的报文。
在一个例子中,所述写入模块401,具体用于在确定所述报文需要占用的第二区块的过程中,确定所述报文对应的队列;若所述队列对应有尾指针,则从所述尾指针指向的第二区块开始,确定所述报文需要占用的第二区块;若所述队列没有对应尾指针,则选取空闲的第一区块,并从选取的第一区块中的首个第二区块开始,确定所述报文需要占用的第二区块。
在一个例子中,所述写入模块401,具体用于生成该第二区块对应的PD的过程中,若该第二区块是所述报文需要占用的第一个第二区块,则确定该第二区块对应的PD为报文长度和第一标记,第一标记表示报文存储在第一个第二区块;若该第二区块是所述报文需要占用的最后一个第二区块,则确定该第二区块对应的PD为第二标记,所述第二标记表示报文存储在最后一个第二区块。
在一个例子中,当所述报文需要占用的所有第二区块占用至少两个第一区块时,所述写入模块401,具体用于生成该第二区块对应的PD的过程中,若该第二区块是第一区块的最后一个第二区块,则确定该第二区块对应的PD为所述报文需要占用的所有第二区块占用的下一个第一区块的指针、所述报文需要占用的所有第二区块在下一个第一区块中的第二区块数量。
在一个例子中,所述写入模块401,具体用于生成该第二区块对应的PD的过程中,获取与该第二区块对应的第一区块的反转标记,并确定该第二区块对应的PD包括所述反转标记;其中,第一区块连续两次被使用时的反转标记不同。
所述读取模块402,具体用于从第一区块的每个第二区块的第二存储空间读取PD,并确定包括第一标记的PD,并将包括第一标记的PD对应的第二区块确定为起始第二区块;若读取的PD存在包括第二标记的PD,将包括第二标记的PD对应的第二区块确定为终止第二区块;若读取的PD不存在包括第二标记的PD,从所述第一区块的最后一个PD获取下一个第一区块的指针、下一个第一区块中的第二区块数量,根据所述指针和第二区块数量,从下一个第一区块的第二区块的第二存储空间读取PD,将包括第二标记的PD对应的第二区块确定为终止第二区块;从起始第二区块与终止第二区块之间的每个第二区块的第一存储空间中读取报文片段,并将读取的报文片段组成报文,并发送组成的报文。
所述读取模块402,还用于在从起始第二区块与终止第二区块之间的每个第二区块的第一存储空间中读取报文片段之后,释放读取的报文片段占用的第一存储空间;当第一区块中的每个第二区块的第一存储空间均被释放时,将所述第一区块回收为空闲的第一区块;在将所述第一区块回收为空闲的第一区块后,释放所述第一区块中的每个第二区块的第二存储空间;或者,在将所述第一区块回收为空闲的第一区块后,调整所述第一区块的反转标记。
基于与上述方法同样的申请构思,本申请实施例中还提出一种网络设备,本申请实施例提供的网络设备,从硬件层面而言,硬件架构示意图具体参见图5A所示。所述网络设备包括转发芯片和外部存储单元,所述外部存储单元是与所述转发芯片分开部署的,如所述外部存储单元可以是DDR内存,当然所述外部存储单元也可以是其它类型的存储单元,对此不做限制。
其中,所述外部存储单元的内存被划分成多个第一区块,每个第一区块被划分成多个第二区块,每个第二区块均包括第一存储空间和第二存储空间。
所述转发芯片,用于获得待存储的报文,根据所述报文的长度和第一存储空间的长度,确定所述报文需要占用的第二区块,将所述报文存储到外部存储单元中的确定的第二区块的第一存储空间;针对确定的每个第二区块,生成该第二区块对应的报文描述符PD,并将所述PD存储到外部存储单元中的确定的第二区块的第二存储空间;以及,从外部存储单元中的第二区块的第一存储空间读取报文片段,从外部存储单元中的所述第二区块的第二存储空间读取PD,并利用读取的PD将读取的报文片段组成报文,并发送组成的报文。
其中,转发芯片可以实现上述报文处理方法,即用于执行上述报文处理方法的各个操作。而且,处理器可以将用于实现上述报文处理方法的流程写入到转发芯片,使转发芯片可以执行上述报文处理方法的各个操作,在此不再赘述。
其中,转发芯片可以包括但不限于:FPGA(Field-Programmable Gate Array,现场可编程门阵列)、CPLD(Complex Programmable Logic Device,复杂可编程逻辑器件)等,对此转发芯片的类型不做限制,只要能够实现上述功能即可。
在一个例子中,由于外部存储单元是转发芯片的片外存储器(DDR),因此,通过将报文和PD存储到同一个内存,使得转发芯片可以从外部存储单元的同一个内存中读取到报文和PD,而不用分两次分别读取PD和报文,即不用从外部存储单元读取两次,这样转发芯片的读取效率很高。
在另一个例子中,参见图5B所示,上述转发芯片还可以包括转发引擎和TM(Traffic Manage,流量管理)模块。转发引擎在接收到报文后,可以对报文进行流分类和流量监管(如CAR(Committed Access Rate,承诺访问速率)限速操作等),并将报文输出给TM(Traffic Manage,流量管理)模块。
TM模块在接收到报文后,可以对报文进行拥塞避免(如WRED(Weighted RandomEarly Detection,加权随机早期检测)、尾丢弃等)、拥塞管理(如PQ(Priority Queue,优先级队列)调度、WFQ(Weighted Fair Queuing,加权公平队列)调度等)、流量整形等操作。此外,TM模块在接收到报文时,可以根据报文所属的队列,将报文缓存到外部存储单元中。TM模块在需要发送报文时,根据报文所属的队列,从外部存储单元中读出报文并发送。
而TM模块将报文缓存到外部存储单元、TM模块从外部存储单元中读出报文并发送的过程,也就是上述报文处理方法,在此不再重复赘述。
上述实施例阐明的系统、装置、模块或单元,具体可以由计算机芯片或实体实现,或者由具有某种功能的产品来实现。一种典型的实现设备为计算机,计算机的具体形式可以是个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件收发设备、游戏控制台、平板计算机、可穿戴设备或者这些设备中的任意几种设备的组合。
为了描述的方便,描述以上装置时以功能分为各种单元分别描述。当然,在实施本申请时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可以由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其它可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其它可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
而且,这些计算机程序指令也可以存储在能引导计算机或其它可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或者多个流程和/或方框图一个方框或者多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其它可编程数据处理设备上,使得在计算机或者其它可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其它可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述仅为本申请的实施例而已,并不用于限制本申请。对于本领域技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本申请的权利要求范围之内。

Claims (13)

1.一种报文处理方法,其特征在于,内存被划分成多个第一区块,每个第一区块被划分成多个第二区块,每个第二区块均包括第一存储空间和第二存储空间,所述方法包括:
获得待存储的报文,并根据所述报文的长度和第一存储空间的长度,确定所述报文需要占用的第二区块,并将所述报文存储到确定的第二区块的第一存储空间;针对确定的每个第二区块,生成该第二区块对应的报文描述符PD,并将所述PD存储到确定的第二区块的第二存储空间;
从第二区块的第一存储空间读取报文片段,从所述第二区块的第二存储空间读取PD,利用读取的PD将读取的报文片段组成报文,并发送组成的报文;
其中,所述生成该第二区块对应的PD的过程,具体包括:
若该第二区块是所述报文需要占用的第一个第二区块,则确定该第二区块对应的PD为报文长度和第一标记,第一标记表示报文存储在第一个第二区块;
若该第二区块是所述报文需要占用的最后一个第二区块,则确定该第二区块对应的PD为第二标记,所述第二标记表示报文存储在最后一个第二区块。
2.根据权利要求1所述的方法,其特征在于,
所述确定所述报文需要占用的第二区块的过程,具体包括:
确定所述报文对应的队列;
若所述队列对应有尾指针,则从所述尾指针指向的第二区块开始,确定所述报文需要占用的第二区块;
若所述队列没有对应尾指针,则选取空闲的第一区块,并从选取的第一区块中的首个第二区块开始,确定所述报文需要占用的第二区块。
3.根据权利要求1所述的方法,其特征在于,当所述报文需要占用的所有第二区块占用至少两个第一区块时,所述生成该第二区块对应的PD,还包括:
若该第二区块是第一区块的最后一个第二区块,则确定该第二区块对应的PD为所述报文需要占用的所有第二区块占用的下一个第一区块的指针、所述报文需要占用的所有第二区块在下一个第一区块中的第二区块数量。
4.根据权利要求1或3所述的方法,其特征在于,
所述生成该第二区块对应的PD的过程,具体包括:
获取与该第二区块对应的第一区块的反转标记,并确定该第二区块对应的PD包括所述反转标记;其中,第一区块连续两次被使用时的反转标记不同。
5.根据权利要求1所述的方法,其特征在于,所述从第二区块的第一存储空间读取报文片段,从所述第二区块的第二存储空间读取PD,利用读取的PD将读取的报文片段组成报文,并发送组成的报文的过程,具体包括:
从第一区块的每个第二区块的第二存储空间读取PD,并确定包括第一标记的PD,并将包括第一标记的PD对应的第二区块确定为起始第二区块;
若读取的PD存在包括第二标记的PD,将包括第二标记的PD对应的第二区块确定为终止第二区块;若读取的PD不存在包括第二标记的PD,从所述第一区块的最后一个PD获取下一个第一区块的指针、下一个第一区块中的第二区块数量,根据所述指针和第二区块数量,从下一个第一区块的第二区块的第二存储空间读取PD,将包括第二标记的PD对应的第二区块确定为终止第二区块;
从起始第二区块与终止第二区块之间的每个第二区块的第一存储空间中读取报文片段,并将读取的报文片段组成报文,并发送组成的报文。
6.根据权利要求5所述的方法,其特征在于,所述从起始第二区块与终止第二区块之间的每个第二区块的第一存储空间中读取报文片段之后,还包括:
释放读取的报文片段占用的第一存储空间;当第一区块中的每个第二区块的第一存储空间均被释放时,将所述第一区块回收为空闲的第一区块;
在将所述第一区块回收为空闲的第一区块后,释放所述第一区块中的每个第二区块的第二存储空间;或者,在将所述第一区块回收为空闲的第一区块后,调整所述第一区块的反转标记。
7.一种报文处理装置,其特征在于,内存被划分成多个第一区块,每个第一区块被划分成多个第二区块,每个第二区块均包括第一存储空间和第二存储空间,所述装置包括:
写入模块,用于获得待存储的报文,并根据所述报文的长度和第一存储空间的长度,确定所述报文需要占用的第二区块,并将所述报文存储到确定的第二区块的第一存储空间;针对确定的每个第二区块,生成该第二区块对应的报文描述符PD,并将所述PD存储到确定的第二区块的第二存储空间;
读取模块,用于从第二区块的第一存储空间读取报文片段,并从所述第二区块的第二存储空间读取PD,并利用读取的PD将读取的报文片段组成报文,并发送组成的报文;
所述写入模块,具体用于生成该第二区块对应的PD的过程中,若该第二区块是所述报文需要占用的第一个第二区块,则确定该第二区块对应的PD为报文长度和第一标记,第一标记表示报文存储在第一个第二区块;
若该第二区块是所述报文需要占用的最后一个第二区块,则确定该第二区块对应的PD为第二标记,所述第二标记表示报文存储在最后一个第二区块。
8.根据权利要求7所述的装置,其特征在于,
所述写入模块,具体用于在确定所述报文需要占用的第二区块的过程中,确定所述报文对应的队列;若所述队列对应有尾指针,则从所述尾指针指向的第二区块开始,确定所述报文需要占用的第二区块;若所述队列没有对应尾指针,则选取空闲的第一区块,并从选取的第一区块中的首个第二区块开始,确定所述报文需要占用的第二区块。
9.根据权利要求7所述的装置,其特征在于,
当所述报文需要占用的所有第二区块占用至少两个第一区块时,
所述写入模块,具体用于生成该第二区块对应的PD的过程中,若该第二区块是第一区块的最后一个第二区块,则确定该第二区块对应的PD为所述报文需要占用的所有第二区块占用的下一个第一区块的指针、所述报文需要占用的所有第二区块在下一个第一区块中的第二区块数量。
10.根据权利要求7或9所述的装置,其特征在于,
所述写入模块,具体用于生成该第二区块对应的PD的过程中,获取与该第二区块对应的第一区块的反转标记,并确定该第二区块对应的PD包括所述反转标记;其中,第一区块连续两次被使用时的反转标记不同。
11.根据权利要求7所述的装置,其特征在于,所述读取模块,具体用于从第一区块的每个第二区块的第二存储空间读取PD,并确定包括第一标记的PD,并将包括第一标记的PD对应的第二区块确定为起始第二区块;
若读取的PD存在包括第二标记的PD,将包括第二标记的PD对应的第二区块确定为终止第二区块;若读取的PD不存在包括第二标记的PD,从所述第一区块的最后一个PD获取下一个第一区块的指针、下一个第一区块中的第二区块数量,根据所述指针和第二区块数量,从下一个第一区块的第二区块的第二存储空间读取PD,将包括第二标记的PD对应的第二区块确定为终止第二区块;
从起始第二区块与终止第二区块之间的每个第二区块的第一存储空间中读取报文片段,并将读取的报文片段组成报文,并发送组成的报文。
12.根据权利要求11所述的装置,其特征在于,所述读取模块,还用于在从起始第二区块与终止第二区块之间的每个第二区块的第一存储空间中读取报文片段之后,释放读取的报文片段占用的第一存储空间;当第一区块中的每个第二区块的第一存储空间均被释放时,将所述第一区块回收为空闲的第一区块;
在将所述第一区块回收为空闲的第一区块后,释放所述第一区块中的每个第二区块的第二存储空间;或者,在将所述第一区块回收为空闲的第一区块后,调整所述第一区块的反转标记。
13.一种网络设备,其特征在于,所述网络设备包括转发芯片和外部存储单元,所述外部存储单元的内存被划分成多个第一区块,每个第一区块被划分成多个第二区块,每个第二区块均包括第一存储空间和第二存储空间;其中:
所述转发芯片,用于获得待存储的报文,并根据所述报文的长度和第一存储空间的长度,确定所述报文需要占用的第二区块,并将所述报文存储到所述外部存储单元中的确定的第二区块的第一存储空间;针对确定的每个第二区块,生成该第二区块对应的报文描述符PD,并将所述PD存储到所述外部存储单元中的确定的第二区块的第二存储空间;所述生成该第二区块对应的PD的过程,包括:若该第二区块是所述报文需要占用的第一个第二区块,则确定该第二区块对应的PD为报文长度和第一标记,第一标记表示报文存储在第一个第二区块;若该第二区块是所述报文需要占用的最后一个第二区块,则确定该第二区块对应的PD为第二标记,所述第二标记表示报文存储在最后一个第二区块;
从所述外部存储单元中的第二区块的第一存储空间读取报文片段,从所述外部存储单元中的所述第二区块的第二存储空间读取PD,并利用读取的PD将读取的报文片段组成报文,并发送组成的报文。
CN201710638401.3A 2017-07-31 2017-07-31 一种报文处理方法、装置和网络设备 Active CN108462652B (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN201710638401.3A CN108462652B (zh) 2017-07-31 2017-07-31 一种报文处理方法、装置和网络设备
JP2020505176A JP7074839B2 (ja) 2017-07-31 2018-07-26 パケット処理
US16/635,529 US11425057B2 (en) 2017-07-31 2018-07-26 Packet processing
PCT/CN2018/097254 WO2019024763A1 (zh) 2017-07-31 2018-07-26 报文处理
EP18840257.2A EP3657744B1 (en) 2017-07-31 2018-07-26 Message processing

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710638401.3A CN108462652B (zh) 2017-07-31 2017-07-31 一种报文处理方法、装置和网络设备

Publications (2)

Publication Number Publication Date
CN108462652A CN108462652A (zh) 2018-08-28
CN108462652B true CN108462652B (zh) 2019-11-12

Family

ID=63220935

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710638401.3A Active CN108462652B (zh) 2017-07-31 2017-07-31 一种报文处理方法、装置和网络设备

Country Status (5)

Country Link
US (1) US11425057B2 (zh)
EP (1) EP3657744B1 (zh)
JP (1) JP7074839B2 (zh)
CN (1) CN108462652B (zh)
WO (1) WO2019024763A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109802897B (zh) * 2017-11-17 2020-12-01 华为技术有限公司 一种数据传输方法及通信设备
US11552907B2 (en) * 2019-08-16 2023-01-10 Fungible, Inc. Efficient packet queueing for computer networks
CN113991839B (zh) * 2021-10-15 2023-11-14 许继集团有限公司 一种提升遥控开出可靠性的装置及方法
CN114567413B (zh) * 2022-02-17 2023-06-30 中国银联股份有限公司 一种数据存储方法及装置
CN114726920A (zh) * 2022-06-07 2022-07-08 恒生电子股份有限公司 Tcp数据的处理方法及装置
CN116032861B (zh) * 2023-01-09 2025-03-07 苏州盛科通信股份有限公司 一种报文处理方法及装置

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH024067A (ja) * 1988-06-17 1990-01-09 Fujitsu Ltd パケット多重化回路
US6724767B1 (en) 1998-06-27 2004-04-20 Intel Corporation Two-dimensional queuing/de-queuing methods and systems for implementing the same
GB2382899B (en) 2000-12-29 2003-12-17 Zarlink Semiconductor Ltd A data queue system
DE10119754B4 (de) 2001-04-23 2007-11-29 Infineon Technologies Ag Verfahren und Vorrichtung zum Speichern von Datenpaketen
JP2003174475A (ja) 2001-12-06 2003-06-20 Nippon Telegr & Teleph Corp <Ntt> 信号処理装置間の通信方法及びパケット交換システム
AU2003203352A1 (en) 2003-01-20 2004-08-13 Fujitsu Limited Network switch apparatus and network switch method
US7773630B2 (en) 2005-11-12 2010-08-10 Liquid Computing Corportation High performance memory based communications interface
US8542693B2 (en) * 2007-08-01 2013-09-24 Texas Instruments Incorporated Managing free packet descriptors in packet-based communications
CN101621469B (zh) 2009-08-13 2012-01-04 杭州华三通信技术有限公司 数据报文存取控制装置和方法
JP5748287B2 (ja) 2011-12-27 2015-07-15 日本電信電話株式会社 パケットバッファ装置およびパケットバッファ制御方法
US8923204B2 (en) * 2012-05-29 2014-12-30 Alcatel Lucent Message handling extension using context artifacts
WO2016019554A1 (zh) * 2014-08-07 2016-02-11 华为技术有限公司 一种队列管理的方法和装置
US9990307B1 (en) * 2014-10-29 2018-06-05 Netronome Systems, Inc. Split packet transmission DMA engine
CN105656804B (zh) 2014-11-20 2019-12-24 中兴通讯股份有限公司 一种报文处理方法及装置
CN105099948B (zh) 2015-06-30 2018-06-15 新华三技术有限公司 一种报文信息处理方法及装置

Also Published As

Publication number Publication date
US11425057B2 (en) 2022-08-23
US20200259766A1 (en) 2020-08-13
EP3657744B1 (en) 2022-04-20
WO2019024763A1 (zh) 2019-02-07
CN108462652A (zh) 2018-08-28
JP7074839B2 (ja) 2022-05-24
JP2020529166A (ja) 2020-10-01
EP3657744A4 (en) 2020-07-22
EP3657744A1 (en) 2020-05-27

Similar Documents

Publication Publication Date Title
CN108462652B (zh) 一种报文处理方法、装置和网络设备
JP5863076B2 (ja) パケットを再構築し再順序付けするための方法、装置、およびシステム
JP2736092B2 (ja) バッファ装置
CN101777031B (zh) 直接存储器存取控制器以及数据传输方法
CN108121608A (zh) 一种队列调度方法以及节点设备
CN106537858B (zh) 一种队列管理的方法和装置
CN102957629B (zh) 队列管理的方法和装置
CN101635682B (zh) 一种存储管理的方法和系统
EP3206123B1 (en) Data caching method and device, and storage medium
WO2016202120A1 (zh) 一种队列存储空间管理方法及装置、计算机存储介质
CN112104403B (zh) 基于消息队列的多线程遥感卫星基带数据处理方法及装置
CN108737296A (zh) 一种数据传输方法、装置和网络设备
CN116501657B (zh) 缓存数据的处理方法、设备及系统
CN102104548A (zh) 一种数据包接收处理方法和装置
WO2016070668A1 (zh) 一种实现数据格式转换的方法、装置及计算机存储介质
CN106254270A (zh) 一种队列管理方法及装置
JP2019091333A (ja) データ転送装置、演算処理装置及びデータ転送方法
TWI252001B (en) Method and system for maintaining partial order of packets
US20060277126A1 (en) Ring credit management
CN106294477A (zh) 一种数据处理方法和装置
CN102469007A (zh) Onu计算上行队列的上报长度的方法
CN107911317B (zh) 一种报文调度方法及装置
CN101425962B (zh) 分组转送方法和装置
CN105099948A (zh) 一种报文信息处理方法及装置
CN113645148B (zh) 一种时间敏感网络的流量整形器令牌更新系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant