CN110575118B - 胶囊内窥镜控制系统及电子设备 - Google Patents
胶囊内窥镜控制系统及电子设备 Download PDFInfo
- Publication number
- CN110575118B CN110575118B CN201910856996.9A CN201910856996A CN110575118B CN 110575118 B CN110575118 B CN 110575118B CN 201910856996 A CN201910856996 A CN 201910856996A CN 110575118 B CN110575118 B CN 110575118B
- Authority
- CN
- China
- Prior art keywords
- capsule endoscope
- magnetic field
- permanent magnet
- acceleration
- target area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 239000002775 capsule Substances 0.000 title claims abstract description 286
- 230000001133 acceleration Effects 0.000 claims abstract description 83
- 230000005674 electromagnetic induction Effects 0.000 claims abstract description 56
- 238000012544 monitoring process Methods 0.000 claims abstract description 20
- 230000010354 integration Effects 0.000 claims description 12
- 230000007613 environmental effect Effects 0.000 claims description 8
- 230000005484 gravity Effects 0.000 claims description 8
- 239000007788 liquid Substances 0.000 claims description 8
- 238000004364 calculation method Methods 0.000 claims description 7
- 238000001727 in vivo Methods 0.000 claims description 7
- 238000004590 computer program Methods 0.000 claims description 5
- 238000000034 method Methods 0.000 abstract description 25
- 239000000725 suspension Substances 0.000 abstract description 11
- 230000001276 controlling effect Effects 0.000 description 13
- 210000001035 gastrointestinal tract Anatomy 0.000 description 8
- 238000005339 levitation Methods 0.000 description 4
- 230000033001 locomotion Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000007667 floating Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- RYGMFSIKBFXOCR-UHFFFAOYSA-N Copper Chemical compound [Cu] RYGMFSIKBFXOCR-UHFFFAOYSA-N 0.000 description 1
- QJVKUMXDEUEQLH-UHFFFAOYSA-N [B].[Fe].[Nd] Chemical compound [B].[Fe].[Nd] QJVKUMXDEUEQLH-UHFFFAOYSA-N 0.000 description 1
- 230000033228 biological regulation Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000020169 heat generation Effects 0.000 description 1
- 238000000338 in vitro Methods 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000005389 magnetism Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 229910001172 neodymium magnet Inorganic materials 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 210000001187 pylorus Anatomy 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 210000002784 stomach Anatomy 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/041—Capsule endoscopes for imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00006—Operational features of endoscopes characterised by electronic signal processing of control signals
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00131—Accessories for endoscopes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00147—Holding or positioning arrangements
- A61B1/00158—Holding or positioning arrangements using magnetic field
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/045—Control thereof
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/273—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for the upper alimentary canal, e.g. oesophagoscopes, gastroscopes
- A61B1/2736—Gastroscopes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/31—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for the rectum, e.g. proctoscopes, sigmoidoscopes, colonoscopes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/70—Manipulators specially adapted for use in surgery
- A61B34/73—Manipulators for magnetic surgery
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/07—Endoradiosondes
- A61B5/073—Intestinal transmitters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
- A61B2034/2046—Tracking techniques
- A61B2034/2048—Tracking techniques using an accelerometer or inertia sensor
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
- A61B2034/2046—Tracking techniques
- A61B2034/2051—Electromagnetic tracking systems
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/70—Manipulators specially adapted for use in surgery
- A61B34/73—Manipulators for magnetic surgery
- A61B2034/731—Arrangement of the coils or magnets
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/06—Measuring instruments not otherwise provided for
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Engineering & Computer Science (AREA)
- Animal Behavior & Ethology (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- General Health & Medical Sciences (AREA)
- Molecular Biology (AREA)
- Medical Informatics (AREA)
- Heart & Thoracic Surgery (AREA)
- Biomedical Technology (AREA)
- Physics & Mathematics (AREA)
- Pathology (AREA)
- Biophysics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Optics & Photonics (AREA)
- Signal Processing (AREA)
- Robotics (AREA)
- Gastroenterology & Hepatology (AREA)
- Endoscopes (AREA)
Abstract
本发明提供了一种胶囊内窥镜控制系统及电子设备,所述胶囊内窥镜控制方法包括:确保初始状态下胶囊内窥镜位于磁场发生装置竖直方向上,并在初始状态下通过磁场信息获取胶囊内窥镜与外部磁场发生装置之间的初始距离H;根据体内胶囊内窥镜受力平衡,预设一个目标区域,调节第二永磁体相对胶囊内窥镜之间的距离,使胶囊内窥镜位于目标区域内;监控胶囊内窥镜的加速度,并确定胶囊内窥镜加速度竖直分量大小;根据加速度竖直分量大小调整电磁感线圈的电流,以精细调整胶囊内窥镜在目标区域中的受力平衡。本发明在悬浮控制时,直接使用胶囊内置的加速度传感器测得的加速度值作为反馈信号,通过闭环控制,达到悬浮的目的。
Description
技术领域
本发明涉及医疗器械领域,尤其涉及一种胶囊内窥镜控制方法、系统,电子设备及可读存储介质。
背景技术
胶囊内窥镜是一种医疗设备,胶囊内窥镜将摄像头、无线传输天线等核心器件集成于一个可被人体吞咽的胶囊内,在进行检查过程中,将胶囊内窥镜吞入体内,内窥镜在体内采集消化道图像并同步传送到体外,以根据获得的图像数据进行医疗检查。
为提高胶囊内窥镜进行消化道检查时的控制灵活度,以提高定位的准确性,需要胶囊内窥镜具有主动控制的运动能力;主动控制的动力主要来自胶囊内部,如电机等推进装置,或通过外部磁场控制。为减小胶囊的体积和工作功率,目前最主流的主动控制方式是通过外部磁场进行控制;其原理为:胶囊内窥镜内置小型的永磁体,外部控制部分通过大型的永磁体对体内胶囊的方位进行控制。
然而,当前的体外主动控制方法主要是开环控制,缺少胶囊的实际物理空间位置或运动状态的精确反馈,因此,胶囊内窥镜的控制精度受限;例如:现有技术中,当胶囊内窥镜处于消化道内时,通常只能处于底部、顶部或液面三个位置;如果可以将胶囊内窥镜稳定悬浮在胃部腔体中,同时还可以自由移动和调整方向,则可大大提高控制的精度。
现有技术中,为了使胶囊内窥镜悬浮在目标区域中,通常采用下述方法进行控制,专利公告号CN 107773205 A、申请名称:一种胶囊式内窥镜磁控系统指出:外部磁场发生模块包括:产生基础磁场的永磁体,以及产生可变磁场的电磁线圈,胶囊内窥镜中设置霍尔传感器,以感测外部磁场强度,从而估计胶囊内窥镜在垂直方向的位置。该种方式虽然可以闭环反馈胶囊内窥镜的位置,但在实际应用中确存在下述问题。问题1:信噪比低,该实施方式中需要将霍尔传感器放置在胶囊内窥镜内部,由于霍尔传感器与胶囊内部的磁体相距较近,因此磁体在磁传感器处的磁场约为10 mT量级。同时,在磁悬浮稳定点附近,为克服胶囊内窥镜的自身重力,外部磁场发生模块的基础磁场通常也在1~10 mT量级。因此,霍尔传感器需要在10~10² mT量级的基准磁场强度水平上感知胶囊内窥镜位置微小抖动,在复杂的电磁环境下,周围设备产生的磁场强度较强,如0.01~0.1 mT量级,同时还存在随时间和位置的波动;因此,通过测量磁场反馈位置信息的方式,存在信噪比低的问题,影响控制精度。问题2:功耗高,霍尔传感器的功耗通常较高,以MLX90393为例,工作电压在1 V量级,标称工作电流在100 μA量级,因此,采用该方案设计的胶囊内窥镜不利于长期悬浮。
发明内容
为解决上述技术问题,本发明的目的在于提供一种胶囊内窥镜控制系统及电子设备。
为了实现上述发明目的之一,本发明一实施方式提供一种胶囊内窥镜控制方法,所述方法包括: S1、提供外部磁场发生装置和位于体内的胶囊内窥镜,确保初始状态下胶囊内窥镜位于磁场发生装置竖直方向上,并在初始状态下通过磁场信息获取胶囊内窥镜与外部磁场发生装置之间的初始距离H;其中,胶囊内窥镜包括:第一永磁体,磁传感器以及加速度传感器;外部磁场发生装置包括:被配置为形成较强基础磁场的第二永磁体以及被配置为施加可变电流形成强度可调的辅助磁场的电磁感线圈;
S2、根据体内胶囊内窥镜受力平衡,预设一个目标区域,第二永磁体与目标区域的距离为H1,调节第二永磁体相对胶囊内窥镜之间的距离,使胶囊内窥镜位于目标区域内;
S3、确定胶囊内窥镜处于目标区域内后通过加速度传感器监控胶囊内窥镜的加速度,并确定胶囊内窥镜加速度竖直分量大小;根据加速度竖直分量大小调整电磁感线圈的电流,以精细调整胶囊内窥镜在目标区域中的受力平衡。
作为本发明一实施方式的进一步改进,步骤S2具体包括:
S21、在所述预设目标区域内,胶囊受力情况如下:,其中,为胶囊内窥镜所受的重力,为第二永磁体对胶囊内窥镜的拉力,为胶囊内窥镜完全浸没在液体中所受到的浮力,、均为已知值,根据可求出第二永磁体距离预设目标区域的距离H1;
S22、沿竖直方向移动第二永磁体,移动距离为H-H1,使胶囊内窥镜位于目标区域内。
作为本发明一实施方式的进一步改进,步骤S3具体包括:监控胶囊内窥镜加速度竖直分量大小的绝对值是否小于一定的阈值,若是,控制电磁感线圈处于关闭状态;
作为本发明一实施方式的进一步改进,所述方法还包括:在确认胶囊内窥镜加速度竖直分量大小的绝对值小于一定的阈值时,调整第二永磁体在竖直方向上朝向胶囊内窥镜方向运动和/或远离胶囊内窥镜方向运动;并判断胶囊内窥镜与第二永磁体新形成的高度差是否在有效范围内变化,若是,继续监测;
若否,则调整第二永磁体与胶囊内窥镜距离差,并循环执行步骤S1。
为了解决上述发明目的之一,本发明一实施方式提供一种电子设备,包括存储器和处理器,所述存储器存储有可在所述处理器上运行的计算机程序,所述处理器执行所述程序时实现上述胶囊内窥镜控制方法的步骤。
为了解决上述发明目的之一,本发明一实施方式提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如上所述胶囊内窥镜控制方法的步骤。
为了解决上述发明目的另一,本发明一实施方式提供一种胶囊内窥镜图像的控制系统,所述系统包括:胶囊内窥镜,其包括:第一永磁体,磁传感器以及加速度传感器;
外部磁场发生装置,其在初始状态下位于胶囊内窥镜的竖直方向上;其包括:被配置为形成较强基础磁场的第二永磁体以及被配置为施加可变电流形成强度可调的辅助磁场的电磁感线圈;
粗调模块,用于根据体内胶囊内窥镜的受力平衡预设一个目标区域,所述第二永磁体与目标区域的距离为H1;
所述粗调模块还用于:在初始状态下通过磁场信息获取胶囊内窥镜与外部磁场发生装置之间的初始距离H,根据H与H1的大小关系调节第二永磁体相对胶囊内窥镜之间的距离,使胶囊内窥镜位于目标区域内;
精调模块,用于在确定胶囊内窥镜处于目标区域内后通过加速度传感器监控胶囊内窥镜的加速度,并确定胶囊内窥镜加速度竖直分量大小;根据竖直分量加速度大小调整电磁感线圈的电流,以精细调整胶囊内窥镜在目标区域中的受力平衡。
作为本发明一实施方式的进一步改进,粗调模块具体用于:在所述预设目标区域内,胶囊受力情况如下:,其中,为胶囊内窥镜所受的重力,为第二永磁体对胶囊内窥镜的拉力,为胶囊内窥镜完全浸没在液体中所受到的浮力,、均为已知值,根据可求出第二永磁体距离预设目标区域的距离H1;
沿竖直方向移动第二永磁体,移动距离为H-H1,使胶囊内窥镜位于目标区域内。
作为本发明一实施方式的进一步改进,精调模块具体用于:监控胶囊内窥镜加速度竖直分量大小的绝对值是否小于一定的阈值,若是,控制电磁感线圈处于关闭状态;
作为本发明一实施方式的进一步改进,所述系统还包括:反馈模块,用于在确认胶囊内窥镜加速度竖直分量大小的绝对值小于阈值时,调整第二永磁体在竖直方向上朝向胶囊内窥镜方向运动和/或远离胶囊内窥镜方向运动;并判断胶囊内窥镜与第二永磁体新形成的高度差是否在有效范围内变化,若是,继续监测;
若否,则调整第二永磁体与胶囊内窥镜距离差,并重新通过粗调模块和精调模块的配合使胶囊内窥镜加速度竖直分量大小的绝对值小于阈值。
与现有技术相比,本发明的有益效果是:本发明的胶囊内窥镜控制方法、系统,电子设备及可读存储介质,在悬浮控制时,直接使用胶囊内置的加速度传感器测得的加速度值作为反馈信号,通过闭环控制,达到悬浮的目的。
附图说明
图1是本发明一实施方式中胶囊内窥镜的结构示意图;
图2是本发明一实施方式中外部磁场发生装置的结构示意图;
图3是本发明一实施方式提供的胶囊内窥镜控制方法的流程示意图;
图4是本发明一较佳实施方式提供的胶囊内窥镜控制方法的流程示意图;
图5是本发明一实施方式的胶囊内窥镜控制系统的模块示意图;
图6是本发明一较佳实施方式的胶囊内窥镜控制系统的模块示意图。
具体实施方式
以下将结合附图所示的具体实施方式对本发明进行详细描述。但这些实施方式并不限制本发明,本领域的普通技术人员根据这些实施方式所做出的结构、方法、或功能上的变换均包含在本发明的保护范围内。
胶囊内窥镜100指可吞入体内的胶囊状设备,通常在检测过程中,处于人体的肠道内,用于拍摄肠道内的图像进行外部处理。
结合图1所示,本发明具体实施方式中,胶囊内窥镜100包括:生物相容性外壳11,设置于外壳11内部的图像采集单元12,第一永磁体体13,磁传感器14,加速度传感器15;另外还包括电控制电路、通讯电路等模块。
较佳的,图像采集单元12通常为摄像头,用于观察消化道内的环境以及拍摄图像输出;对应于图像采集单元12前端的外壳11为光学前壳,以提供更加良好的的摄像环境;磁传感器14距离第一永磁体体13距离较远,通常为其间距≥10 mm,用于粗略估计胶囊内窥镜100与外部磁场发生装置200的距离,协助胶囊内窥镜100的磁悬浮控制;加速度传感器15用于测量胶囊内窥镜100在体内的运动状态,特别的,在该系统中,加速度传感器15作为胶囊内窥镜100状态的反馈参数,用作磁悬浮的PID控制。以下内容中还会继续描述。
通常情况下,胶囊内窥镜100与体外的外部磁场发生装置200配合使用,相应的,外部磁场发生装置200包括:被配置为形成较强基础磁场的第二永磁体以及被配置为施加可变电流形成强度可调的辅助磁场的电磁感线圈;结合图2所示,本发明具体实施方式中,第二永磁体21为球形或圆柱型,例如:该第二永磁体21由直径约200nm的钕铁硼N55磁铁,在机械装置控制下,该第二永磁体21可沿着X、Y、Z轴做平移,同时也可以绕X、Z轴旋转,达到5DOF控制的目的。电磁感线圈23与第二永磁体21同轴设置,其可设置于第二永磁体21下方,或环绕第二永磁体21设置;例如为线径0.5mm的铜丝,500~5000匝,安装在第二永磁体21的下方,电磁感线圈23可跟随着第二永磁体21沿着X、Y、Z方向平移。
该具体实施方式中,第二永磁体21提供基础磁场,用于驱动胶囊内窥镜100的平移、翻转、调整视角等;电磁感线圈23施加可变电流形成强度可调的辅助磁场,以在基础磁场上提供精调,使胶囊内窥镜100在某位置做小幅度、迅速的方位调整,特别的,在该系统中,第二永磁体21和电磁感线圈23相互配合用于控制胶囊内窥镜100在目标区域的悬浮;悬浮控制时,第二永磁体21提供主要的拉力使胶囊系统在平衡点附近,而电磁感线圈23产生的磁场主要是用于维持悬浮的稳定,且在稳定悬浮时,只需要提供很小的电流,实现低功耗和且发热量低。
另外,本发明可实现方式中,还可以选择性提供工作站,用于记录、处理、控制外部磁场发生装置200和胶囊内窥镜100,所述工作站例如:服务器、个人电脑或显示设备。该工作站上安装有相应的操作软件,可用于显示胶囊内窥镜100拍摄的图像及各种传感器信息、执行复杂计算、调控胶囊内窥镜100以及外部磁场发生装置200的工作状态等。
如图3所示,本发明第一实施方式中提供一种胶囊内窥镜控制方法,所述方法包括:
S1、提供外部磁场发生装置和位于体内的胶囊内窥镜,为了保证胶囊内窥镜仅在竖直方向上受力,确保初始状态下胶囊内窥镜位于磁场发生装置竖直方向上,并在初始状态下通过磁场信息获取胶囊内窥镜与外部磁场发生装置之间的初始距离H;其中,胶囊内窥镜包括:第一永磁体,磁传感器以及加速度传感器;外部磁场发生装置包括:被配置为形成较强基础磁场的第二永磁体以及被配置为施加可变电流形成强度可调的辅助磁场的电磁感线圈;
S2、根据体内胶囊内窥镜受力平衡,预设一个目标区域,第二永磁体与目标区域的距离为H1,调节第二永磁体相对胶囊内窥镜之间的距离,使胶囊内窥镜位于目标区域内;
S3、确定胶囊内窥镜处于目标区域内后通过加速度传感器监控胶囊内窥镜的加速度,并确定胶囊内窥镜加速度竖直分量大小;根据加速度竖直分量大小调整电磁感线圈的电流,以精细调整胶囊内窥镜在目标区域中的受力平衡。
对于步骤S1,通过外部磁场发生装置的磁性驱动,使胶囊内窥镜在消化道内自由移动,以及控制胶囊内窥镜通过某一区域,该区域例如:幽门。相应的,步骤S1具体包括:S11、获取初始状态下磁传感器探测到的磁场强度,根据计算第二永磁体在胶囊内窥镜处产生的磁场;则,其中为第一永磁体在磁传感器的磁场强度,为环境本底磁场强度;S12、根据计算获得的计算胶囊内窥镜与第二永磁体的距离差H。
本发明具体示例中,由磁传感器14实时监测获得,由于第一永磁体体13和磁传感器14 的相对位置固定,如此,为一个常量,通常在10 mT量级;为环境本底磁场,其大小与使用环境相关,如地磁、空间中其他设备产生的磁场等,通常在0.01~0.1 mT量级;即上述公式中的和通常为固定值,如此,可通过上述公式获得,并进一步通过计算胶囊内窥镜与第二永磁体的距离差H;需要说明的是,该方式获得的距离差H的误差在毫米量级,如此以达到粗调节的目的,通过获得胶囊内窥镜与外部磁场发生装置之间的距离为现有技术,在此不做进一步的赘述。
根据体内胶囊内窥镜受力平衡,预设一个目标区域,该目标区域例如消化道,需要说明的是,该技术应用时,通常需要被测试者饮用较多清水以使消化道充盈,如此,胶囊内窥镜通常浸没在水中。相应的,对于胶囊内窥镜,有以下公式成立:,其中,为胶囊内窥镜所受的重力,通常为0.02~0.05 N,为第二永磁体对胶囊内窥镜的拉力,为电磁感线圈的磁场对胶囊内窥镜的磁力,为胶囊内窥镜完全浸没在液体中所受到的浮力,通常为0.02~0.03 N,目标区域内壁对胶囊内窥镜的支撑力。
具体的,外部磁场发生装置通常处于胶囊内窥镜的正上方,通过位置关系,及上述公式,可以明确上述公式中各参数的正负关系,在此不做进一步的赘述。
本发明具体示例中,初始状态下,电磁感线圈未启动,如此,,外部磁场发生装置距离胶囊内窥镜较远,胶囊内窥镜受到的重力大于其处于水中时受到的浮力,即该胶囊内窥镜处于消化道底部,为了使胶囊内窥镜处于悬浮状态,消化道内壁对胶囊内窥镜的支撑力,同时,需要对其产生拉力,以使得。
具体的,本发明一具体示例中,步骤S2具体包括:S21、在所述预设目标区域内,胶囊受力情况如下:,其中,为胶囊内窥镜所受的重力,为第二永磁体对胶囊内窥镜的拉力,为胶囊内窥镜完全浸没在液体中所受到的浮力,、均为已知值,根据可求出第二永磁体距离预设目标区域的距离H1;S22、沿竖直方向移动第二永磁体,移动距离为H-H1,使胶囊内窥镜位于目标区域内。相应的,通过获得第二永磁体距离预设目标区域的距离H1同样为现有技术,在此不做进一步的赘述。
本发明具体实施方式中,步骤S3具体包括:监控胶囊内窥镜加速度竖直分量大小的绝对值是否小于一定的阈值,若是,控制电磁感线圈处于关闭状态;若否,控制电磁感线圈开启,通过调整电磁感线圈输入电流的大小以调整辅助磁场的强度,进而调整胶囊内窥镜受到的推力或拉力大小,使得胶囊内窥镜加速度竖直分量大小的绝对值小于一定的阈值;其中,,,, t表示时间;为t时刻电磁感线圈两端的电压值,R为电磁感线圈的电阻,为比例系数,为积分时间常量,为微分时间常量;是t时刻胶囊内窥镜加速度竖直分量大小;表示积分运算,表示微分运算。
胶囊内窥镜处于目标区域时,为了保持胶囊内窥镜在竖直方向上始终处于悬浮状态,当其加速度竖直分量朝上时,说明胶囊内窥镜受到的合力向上,此时,通过调节电磁感线圈的电流,以减小胶囊内窥镜受到向上的拉力或增大其向下的压力;当胶囊内窥镜加速度竖直分量朝下时,说明胶囊内窥镜受到的合力向下,此时,通过调节电磁感线圈的电流,以增大胶囊内窥镜受到向上的拉力或减小其向下的压力。相应的,本发明在该具体实施方式中,通过加速度传感器探测胶囊内窥镜加速度竖直分量大小,进而判断胶囊内窥镜的受力方向,以通过调节电磁感线圈的电流间接使胶囊内窥镜处于悬浮的状态。
需要说明的,胶囊内窥镜加速度竖直分量的大小不可能完全为零,在本实施例中,加速度竖直分量大小的绝对值持续小于一定的阈值,可以代表胶囊内窥镜在此时达到平衡状态。另外,为了达到更好的调控效果,加速度传感器需要高速反馈,通常其采用频率设置为1~5 kHz,以迅速传递数据,调整胶囊内窥镜的实时运动状态。
本发明具体应用过程中,胶囊内窥镜有可能因为碰触消化道内壁而使得加速度传感器在竖直方向上的探测的加速度为0,在该种状态下,胶囊内窥镜并不是悬浮状态;本发明较佳实施方式中,为了克服该问题的存在,本发明较佳实施方式中,所述方法还包括:采用较低的监测频率进行监控调整,该监测频率例如1Hz或者更低。相应的,结合图4所示,所述方法还包括:S4、在确认胶囊内窥镜加速度竖直分量大小的绝对值小于一定的阈值时,调整第二永磁体在竖直方向上朝向胶囊内窥镜方向运动和/或远离胶囊内窥镜方向运动;并判断胶囊内窥镜与第二永磁体新形成的高度差H2是否在有效范围内变化,若是,继续监测;若否,则调整第二永磁体与胶囊内窥镜距离差,并循环执行步骤S1。
所述有效范围根据H1的大小进行确定,其数值等于H1±△H,即有效范围为在H1具体数值基础上增加偏差幅度,例如:有效范围区间为(H1-ΔH,H1+ΔH,ΔH例如2mm。
在该实施方式中,若发现形成的H2与H1差异较大,则表示胶囊内窥镜未跟随外部磁场发生装置而进行移动,此时,胶囊内窥镜没有悬浮,可能与消化道内壁有接触;为了解决该问题,当判断该种情况存在时,调整第二永磁体与胶囊内窥镜距离差,并循环执行步骤S1。本发明可实现实施方式中,当对外部磁场发生装置做向上提升运动时,若胶囊内窥镜与第二永磁体新形成的高度差不断增大,表示胶囊内窥镜落在消化道底部;当驱动外部磁场发生装置做向下运动时,若胶囊内窥镜与第二永磁体新形成的高度差不断减小,表示胶囊内窥镜与消化道顶壁有接触。
本发明一实施方式提供一种电子设备,所述电子设备包括存储器和处理器,所述存储器存储有可在所述处理器上运行的计算机程序,所述处理器执行所述程序时实现上述胶囊内窥镜控制方法的步骤。
本发明一实施方式提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述胶囊内窥镜控制方法的步骤。
结合图5所示,本发明一实施方式提供一种胶囊内窥镜图像的控制系统,上述的胶囊内窥镜100和外部磁场发生装置200;所述系统还包括:粗调模块300以及精调模块400。
粗调模块300用于根据体内胶囊内窥镜的受力平衡预设一个目标区域,所述第二永磁体与目标区域的距离为H1;且在初始状态下通过磁场信息获取胶囊内窥镜与外部磁场发生装置之间的初始距离H,根据H与H1的大小关系调节第二永磁体相对胶囊内窥镜之间的距离,使胶囊内窥镜位于目标区域内。精调模块400用于在确定胶囊内窥镜处于目标区域内后通过加速度传感器监控胶囊内窥镜的加速度,并确定胶囊内窥镜加速度竖直分量大小;根据加速度竖直分量大小调整电磁感线圈的电流,以精细调整胶囊内窥镜在目标区域中的受力平衡。
本发明一较佳实施方式中,粗调模块300具体用于:获取初始状态下磁传感器探测到的磁场强度,根据计算第二永磁体在胶囊内窥镜处产生的磁场;则,其中为第一永磁体在磁传感器的磁场强度,为环境本底磁场强度;根据计算获得的计算胶囊内窥镜与第二永磁体的距离差H。
进一步的,粗调模块400具体用于:在所述预设目标区域内,胶囊受力情况如下:,其中,为胶囊内窥镜所受的重力,为第二永磁体对胶囊内窥镜的拉力,为胶囊内窥镜完全浸没在液体中所受到的浮力,、均为已知值,根据可求出第二永磁体距离预设目标区域的距离H1;沿竖直方向移动第二永磁体,移动距离为H-H1,使胶囊内窥镜位于目标区域内。
精调模块400具体用于:监控胶囊内窥镜加速度竖直分量大小的绝对值是否小于一定的阈值,若是,控制电磁感线圈处于关闭状态;若否,控制电磁感线圈开启,通过调整电磁感线圈输入电流的大小以调整辅助磁场的强度,进而调整胶囊内窥镜受到的推力或拉力大小,使得胶囊内窥镜加速度竖直分量大小的绝对值小于一定的阈值;其中,,,,t表示时间;为t时刻电磁感线圈两端的电压值,R为电磁感线圈的电阻,为比例系数,为积分时间常量,为微分时间常量;是t时刻胶囊内窥镜加速度竖直分量大小;表示积分运算,表示微分运算。
结合图6所示,本发明一较佳实施方式中,提供一种胶囊内窥镜图像的控制系统,该实施方式在图6所示实施方式上加以改进,其区别在于,所述系统还包括反馈模块500,反馈模块500用于在确认胶囊内窥镜加速度竖直分量大小的绝对值小于一定的阈值时,调整第二永磁体在竖直方向上朝向胶囊内窥镜方向运动和/或远离胶囊内窥镜方向运动;并判断胶囊内窥镜与第二永磁体新形成的高度差是否在有效范围内变化,若是,继续监测;若否,则调整第二永磁体与胶囊内窥镜距离差,并重新通过粗调模块和精调模块的配合使胶囊内窥镜加速度竖直分量大小的绝对值小于一定的阈值。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统的具体工作过程,可以参考前述方法实施方式中的对应过程,在此不再赘述。
以上可知:本发明主要依靠加速度传感器的高速反馈对胶囊的悬浮状态进行保持,磁传感器只需要在粗调阶段及监控阶段偶尔开启,使用频率较低,因此可大大节省高功耗芯片的使用量。另外,加速度传感器测量加速度值不受磁场干扰,包括胶囊内窥镜的内部磁铁差异、环境磁场波动、电磁线圈电流波动等;同时,加速度传感器功耗低,采样速率高,能满足磁悬浮闭环控制的需求。
综上所述,本发明的胶囊内窥镜控制方法、系统,电子设备及可读存储介质,通过磁传感器的探测结果粗调胶囊内窥镜的位置以及进行位置监控,通过加速度传感器的反馈信号以及配合外部的电磁感线圈辅助对胶囊内窥镜的位置进行精细调节,以使胶囊内窥镜达到悬浮的状态。
为了描述的方便,描述以上装置时以功能分为各种模块分别描述。当然,在实施本发明时可以把各模块的功能在同一个或多个软件和/或硬件中实现。
以上所描述的装置实施方式仅仅是示意性的,其中所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理模块,即可以位于一个地方,或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施方式方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
应当理解,虽然本说明书按照实施方式加以描述,但并非每个实施方式仅包含一个独立的技术方案,说明书的这种叙述方式仅仅是为清楚起见,本领域技术人员应当将说明书作为一个整体,各实施方式中的技术方案也可以经适当组合,形成本领域技术人员可以理解的其他实施方式。
上文所列出的一系列的详细说明仅仅是针对本发明的可行性实施方式的具体说明,它们并非用以限制本发明的保护范围,凡未脱离本发明技艺精神所作的等效实施方式或变更均应包含在本发明的保护范围之内。
Claims (10)
1.一种电子设备,包括存储器和处理器,所述存储器存储有可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现以下步骤:
S1、提供外部磁场发生装置和胶囊内窥镜,确保初始状态下胶囊内窥镜位于磁场发生装置竖直方向上,并在初始状态下通过磁场信息获取胶囊内窥镜与外部磁场发生装置之间的初始距离H;其中,胶囊内窥镜包括:第一永磁体,磁传感器以及加速度传感器;外部磁场发生装置包括:被配置为形成较强基础磁场的第二永磁体以及被配置为施加可变电流形成强度可调的辅助磁场的电磁感线圈;
S2、根据体内胶囊内窥镜受力平衡,预设一个目标区域,第二永磁体与目标区域的距离为H1,调节第二永磁体相对胶囊内窥镜之间的距离,使胶囊内窥镜位于目标区域内;
S3、确定胶囊内窥镜处于目标区域内后通过加速度传感器监控胶囊内窥镜的加速度,并确定胶囊内窥镜加速度竖直分量大小;根据加速度竖直分量大小调整电磁感线圈的电流,以精细调整胶囊内窥镜在目标区域中的受力平衡;进一步的,所述根据加速度的竖直分量大小调整电磁感线圈的电流包括,监控胶囊内窥镜加速度竖直分量大小的绝对值是否小于一定的阈值,若是,控制电磁感线圈处于关闭状态;
5.根据权利要求1所述的电子设备,其特征在于,所述步骤还包括:在确认胶囊内窥镜加速度竖直分量大小的绝对值小于一定阈值时,调整第二永磁体在竖直方向上朝向胶囊内窥镜方向运动和/或远离胶囊内窥镜方向运动;并判断胶囊内窥镜与第二永磁体新形成的高度差是否在有效范围内变化,若是,继续监测;
若否,则调整第二永磁体与胶囊内窥镜距离差,并循环执行步骤S1。
6.一种胶囊内窥镜控制系统,其特征在于,所述系统包括:
胶囊内窥镜,其包括:第一永磁体,磁传感器以及加速度传感器;
外部磁场发生装置,其在初始状态下位于胶囊内窥镜的竖直方向上;其包括:被配置为形成较强基础磁场的第二永磁体以及被配置为施加可变电流形成强度可调的辅助磁场的电磁感线圈;
粗调模块,用于根据体内胶囊内窥镜的受力平衡预设一个目标区域,所述第二永磁体与目标区域的距离为H1;
所述粗调模块还用于:在初始状态下通过磁场信息获取胶囊内窥镜与外部磁场发生装置之间的初始距离H,根据H与H1的大小关系调节第二永磁体相对胶囊内窥镜之间的距离,使胶囊内窥镜位于目标区域内;
精调模块,用于在确定胶囊内窥镜处于目标区域内后通过加速度传感器监控胶囊内窥镜的加速度,并确定胶囊内窥镜加速度的竖直分量大小;根据加速度的竖直分量大小调整电磁感线圈的电流,以精细调整胶囊内窥镜在目标区域中的受力平衡;进一步的,所述根据加速度的竖直分量大小调整电磁感线圈的电流包括,监控胶囊内窥镜加速度竖直分量大小的绝对值是否小于一定的阈值,若是,控制电磁感线圈处于关闭状态;
10.根据权利要求6所述的胶囊内窥镜控制系统,其特征在于,所述系统还包括:反馈模块,用于在确认胶囊内窥镜加速度竖直分量大小的绝对值小于一定的阈值,调整第二永磁体在竖直方向上朝向胶囊内窥镜方向运动和/或远离胶囊内窥镜方向运动;并判断胶囊内窥镜与第二永磁体新形成的高度差是否在有效范围内变化,若是,继续监测;
若否,则调整第二永磁体与胶囊内窥镜距离差,并重新通过粗调模块和精调模块的配合使胶囊内窥镜加速度竖直分量大小的绝对值小于一定的阈值。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910856996.9A CN110575118B (zh) | 2019-09-11 | 2019-09-11 | 胶囊内窥镜控制系统及电子设备 |
US17/019,032 US11612308B2 (en) | 2019-09-11 | 2020-09-11 | Control method, control system, electronic device and readable storage medium for capsule endoscope |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910856996.9A CN110575118B (zh) | 2019-09-11 | 2019-09-11 | 胶囊内窥镜控制系统及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110575118A CN110575118A (zh) | 2019-12-17 |
CN110575118B true CN110575118B (zh) | 2022-01-11 |
Family
ID=68812840
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910856996.9A Active CN110575118B (zh) | 2019-09-11 | 2019-09-11 | 胶囊内窥镜控制系统及电子设备 |
Country Status (2)
Country | Link |
---|---|
US (1) | US11612308B2 (zh) |
CN (1) | CN110575118B (zh) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10314514B2 (en) * | 2016-05-29 | 2019-06-11 | Ankon Medical Technologies (Shanghai) Co., Ltd. | System and method for using a capsule device |
CN110996009B (zh) * | 2019-12-20 | 2021-07-23 | 安翰科技(武汉)股份有限公司 | 胶囊内窥镜系统及其自动帧率调整方法及计算机可读存储介质 |
CN111184497B (zh) * | 2020-04-08 | 2020-07-17 | 上海安翰医疗技术有限公司 | 胶囊内窥镜控制方法及系统 |
CN112741657B (zh) * | 2020-12-28 | 2021-10-08 | 华中科技大学 | 一种磁牵引吻合装置 |
CN116803330A (zh) * | 2022-03-18 | 2023-09-26 | 安翰科技(武汉)股份有限公司 | 磁控胶囊系统及其定量闭环控制方法 |
CN115349813A (zh) * | 2022-07-28 | 2022-11-18 | 上海交通大学 | 一种胶囊内窥镜的磁控装置及导航系统 |
CN117562486A (zh) * | 2022-08-08 | 2024-02-20 | 安翰科技(武汉)股份有限公司 | 磁控胶囊系统的控制方法和装置 |
CN116184616B (zh) * | 2022-12-06 | 2023-11-14 | 中国科学院空间应用工程与技术中心 | 一种重力仪棱镜位姿控制的方法以及系统 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4709594B2 (ja) * | 2004-08-03 | 2011-06-22 | オリンパス株式会社 | 磁気誘導医療システム |
EP2484272A3 (en) * | 2005-12-28 | 2012-08-22 | Olympus Medical Systems Corp. | Body-insertable device system and in-vivo observation method |
CN101351145B (zh) * | 2005-12-28 | 2010-08-18 | 奥林巴斯医疗株式会社 | 容纳装置 |
JP2009195271A (ja) * | 2008-02-19 | 2009-09-03 | Fujifilm Corp | カプセル内視鏡システム |
WO2011058800A1 (ja) * | 2009-11-10 | 2011-05-19 | オリンパスメディカルシステムズ株式会社 | カプセル型医療装置用誘導システムおよびカプセル型医療装置の誘導方法 |
CN102665530B (zh) * | 2010-03-26 | 2014-11-26 | 奥林巴斯医疗株式会社 | 胶囊型医疗装置用引导系统以及胶囊型医疗装置的引导方法 |
CN104302224B (zh) * | 2012-05-07 | 2016-08-24 | 奥林巴斯株式会社 | 引导装置 |
US20150297869A1 (en) * | 2014-02-24 | 2015-10-22 | Microaccess Inc. | Systems and methods for transesophageal procedures using wire guides |
EP3184021A4 (en) * | 2014-08-20 | 2018-03-28 | Olympus Corporation | Guidance device and capsule medical device guidance system |
EP3184018A4 (en) * | 2014-08-21 | 2018-07-11 | Olympus Corporation | Guidance device and capsule medical device guidance system |
CN105559739A (zh) * | 2015-12-22 | 2016-05-11 | 苏州向东智造医疗科技有限公司 | 一种基于磁场强度变化的胶囊内镜运动控制方法 |
CN106963324B (zh) * | 2017-03-28 | 2019-05-14 | 重庆金山医疗器械有限公司 | 一种胶囊内镜位置的推定方法及装置 |
CN107260110B (zh) * | 2017-05-26 | 2019-06-14 | 重庆金山医疗器械有限公司 | 一种胶囊内镜运动控制方法及系统 |
US11122965B2 (en) * | 2017-10-09 | 2021-09-21 | Vanderbilt University | Robotic capsule system with magnetic actuation and localization |
CN107773205A (zh) * | 2017-10-31 | 2018-03-09 | 嘉兴复尔机器人有限公司 | 一种胶囊式内窥镜磁控系统 |
CN109044250A (zh) * | 2018-08-28 | 2018-12-21 | 深圳市资福医疗技术有限公司 | 一种胶囊内窥镜运动控制方法、装置及终端设备 |
-
2019
- 2019-09-11 CN CN201910856996.9A patent/CN110575118B/zh active Active
-
2020
- 2020-09-11 US US17/019,032 patent/US11612308B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20210068638A1 (en) | 2021-03-11 |
US11612308B2 (en) | 2023-03-28 |
CN110575118A (zh) | 2019-12-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110575118B (zh) | 胶囊内窥镜控制系统及电子设备 | |
CN101351141B (zh) | 胶囊型医疗装置引导系统 | |
EP3515280B1 (en) | System and methoad for using a capsule device | |
US8217645B2 (en) | Position detecting system and position detecting method using an evaluation function | |
CN112089387B (zh) | 胶囊内窥镜的磁定位系统及磁定位方法 | |
CN101842043B (zh) | 用于引导胶囊内窥镜的方法和内窥镜系统 | |
JP5084200B2 (ja) | カプセル誘導システム | |
US20080249359A1 (en) | Endoscopy System | |
US20100156399A1 (en) | Position detecting device, medical device guidance system, position detecting method, and medical device guiding method | |
CN102186397B (zh) | 位置检测系统和位置检测方法 | |
WO2005065522A1 (ja) | 被検体内位置検出システム | |
US8641603B2 (en) | Coil system for the contact-free magnetic navigation of a magnetic body in a working space | |
CN107105981B (zh) | 胶囊型医疗装置引导系统 | |
WO2017017999A1 (ja) | 位置検出システム及び誘導システム | |
JP7645985B2 (ja) | カプセル内視鏡の制御システムおよび作動方法 | |
JP2007175188A (ja) | カプセル型医療装置誘導システム | |
CN111035349B (zh) | 胶囊内窥镜的姿态定位方法及胶囊内窥镜系统 | |
CN115067853A (zh) | 胶囊内窥镜的无线充电系统、方法及存储介质 | |
JP2012503510A (ja) | 作業空間において磁性体を非接触式に磁気ナビゲーションするためのコイルシステム | |
WO2022193411A1 (zh) | 胶囊内窥镜系统及其胶囊内窥镜磁定位方法 | |
JP6064109B1 (ja) | 位置検出システム及び誘導システム | |
CN213046779U (zh) | 一种胶囊式内窥镜磁控系统 | |
KR20190010799A (ko) | 전자기 코일시스템 제어 장치 및 방법 | |
Hoang et al. | Closed Loop Control of a Magnetic Capsule Endoscope Using Simultaneous Ac Magnetic Field and Dc Magnetic Field |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |