[go: up one dir, main page]

JP2022066942A - Measuring system and measuring method - Google Patents

Measuring system and measuring method Download PDF

Info

Publication number
JP2022066942A
JP2022066942A JP2020175564A JP2020175564A JP2022066942A JP 2022066942 A JP2022066942 A JP 2022066942A JP 2020175564 A JP2020175564 A JP 2020175564A JP 2020175564 A JP2020175564 A JP 2020175564A JP 2022066942 A JP2022066942 A JP 2022066942A
Authority
JP
Japan
Prior art keywords
measurement
target area
rotation axis
aerial vehicle
unmanned aerial
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2020175564A
Other languages
Japanese (ja)
Other versions
JP7200191B2 (en
Inventor
準 矢嶋
Jun Yajima
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yamaha Motor Co Ltd
Original Assignee
Yamaha Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yamaha Motor Co Ltd filed Critical Yamaha Motor Co Ltd
Priority to JP2020175564A priority Critical patent/JP7200191B2/en
Publication of JP2022066942A publication Critical patent/JP2022066942A/en
Application granted granted Critical
Publication of JP7200191B2 publication Critical patent/JP7200191B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Optical Radar Systems And Details Thereof (AREA)

Abstract

To measure a measuring object area such as a forest and the like by using an unmanned aircraft.SOLUTION: In a measuring system, measurement of a measuring object area is performed by flying an unmanned helicopter 1 in which a LiDAR sensor is provided. In a plan view viewed from a vertical direction 33, when an airframe travelling direction of the unmanned helicopter 1 is defined as a first direction 31, and a direction vertical to the first direction 31 is defined as a second direction 32, during the measurement of the measuring object area using the LiDAR sensor, the unmanned helicopter 1 flies in a state where a rotary shaft direction 21a of the LiDAR sensor faces the direction closer to the second direction 32 than the first direction 31.SELECTED DRAWING: Figure 5

Description

本発明は、無人航空機を利用して計測対象エリアの計測を行う技術等に関する。 The present invention relates to a technique for measuring a measurement target area using an unmanned aerial vehicle and the like.

森林資源の管理および利用を行うために森林計測が行われている。森林計測は、様々な方法により行うことができる。例えば特許文献1は、上空からカメラで森林を撮影し、得られた画像から画像処理によって樹冠円を抽出する方法を開示する。特許文献2は、上空から波長の異なるレーダ波をそれぞれ森林に照射して、樹木の最上部からの反射波および地面からの反射波から算出されるそれぞれの高さの差分から樹木の高さを求める方法を開示する。特許文献3は、航空機にレーザ測距装置を搭載し、レーザ測距装置を用いて、樹木等を含めた地上の三次元データを取得する方法を開示する。 Forest inventory is being carried out to manage and utilize forest resources. Forest measurement can be performed by various methods. For example, Patent Document 1 discloses a method of photographing a forest with a camera from the sky and extracting a canopy circle from the obtained image by image processing. Patent Document 2 irradiates a forest with radar waves having different wavelengths from the sky, and determines the height of the tree from the difference in height calculated from the reflected wave from the top of the tree and the reflected wave from the ground. Disclose the method of request. Patent Document 3 discloses a method in which a laser ranging device is mounted on an aircraft and the laser ranging device is used to acquire three-dimensional data on the ground including trees and the like.

特開2007-66050号公報JP-A-2007-66050 特開平9-184880号公報Japanese Unexamined Patent Publication No. 9-184880 特開2016-70708号公報Japanese Unexamined Patent Publication No. 2016-70708

上空からレーザ測距装置を用いて森林計測を行うと、森林上部表面(樹冠上面)のデータである点群データは得られる。しかしながら、樹木の葉等によってレーザ光が遮られるため、幹のデータを取得することは困難である。そのため計測結果から、最も太い幹である主幹の本数を推定する必要があった。 When forest measurement is performed from the sky using a laser ranging device, point cloud data, which is data on the upper surface of the forest (upper surface of the canopy), can be obtained. However, it is difficult to acquire trunk data because the laser beam is blocked by the leaves of trees and the like. Therefore, it was necessary to estimate the number of main trunks, which are the thickest trunks, from the measurement results.

特許文献3は、人間が森林内にレーザ測距装置等の装置を持ち込み、三次元の点群データをさらに取得し、上空からの計測によって得られた点群データと、地上での計測によって得られた点群データとを融合させることに言及する。しかしながら、2種類の点群データを取得することは非常に手間がかかる。 In Patent Document 3, a human brings a device such as a laser ranging device into a forest, further acquires three-dimensional point cloud data, and obtains point cloud data obtained by measurement from the sky and measurement on the ground. It is mentioned to fuse with the point cloud data. However, it is very troublesome to acquire two types of point cloud data.

無人航空機を用いて森林等の計測対象エリアを計測することが求められている。 It is required to measure the measurement target area such as forests using an unmanned aerial vehicle.

本発明のある実施形態に係る計測システムは、ライダー(LiDAR)センサが設けられた無人航空機を飛行させて計測対象エリアの計測を行う計測システムであって、無人航空機と、前記無人航空機に設けられたライダーセンサと、前記無人航空機の飛行を制御する制御装置とを備え、鉛直方向から見た平面視において、前記無人航空機の機体進行方向を第1方向とし、前記第1方向に垂直な方向を第2方向としたとき、前記ライダーセンサを用いた前記計測対象エリアの計測中、前記無人航空機は、前記ライダーセンサの回転軸が前記第1方向よりも前記第2方向に近い方向を向いた状態で飛行する。 The measurement system according to an embodiment of the present invention is a measurement system for flying an unmanned aerial vehicle provided with a lidar (LiDAR) sensor to measure an area to be measured, and is provided for the unmanned aerial vehicle and the unmanned aerial vehicle. It is equipped with a rider sensor and a control device that controls the flight of the unmanned aerial vehicle. When the second direction is set, during the measurement of the measurement target area using the rider sensor, the unmanned aerial vehicle is in a state where the rotation axis of the rider sensor faces a direction closer to the second direction than the first direction. Fly with.

ライダーセンサを用いた計測対象エリアの計測中、ライダーセンサの回転軸が第1方向よりも第2方向に近い方向を向いた状態で無人航空機は飛行する。ライダーセンサは回転していることから、無人航空機が進行する過程で、機体進行方向に沿ったエリアに、レーザパルスを密に照射することができる。これにより、例えば、ライダーセンサから複数のレーザパルスが同時に出射される形態においては、機体進行方向に沿ったエリア内の同一の物体に、様々な角度からレーザパルスを密に照射できる。その結果、機体進行方向に沿ったエリアの詳細な3次元点群データを取得できる。さらに、ライダーセンサを回転させることにより、例えば、森林を構成する樹木に対し、様々な角度からレーザパルスを照射することができる。 During the measurement of the measurement target area using the rider sensor, the unmanned aerial vehicle flies in a state where the rotation axis of the rider sensor faces a direction closer to the second direction than the first direction. Since the rider sensor is rotating, it is possible to densely irradiate the area along the traveling direction of the aircraft with a laser pulse while the unmanned aerial vehicle is traveling. Thereby, for example, in the form in which a plurality of laser pulses are simultaneously emitted from the lidar sensor, the same object in the area along the traveling direction of the aircraft can be densely irradiated with the laser pulses from various angles. As a result, detailed three-dimensional point cloud data of the area along the traveling direction of the aircraft can be acquired. Further, by rotating the rider sensor, for example, the trees constituting the forest can be irradiated with the laser pulse from various angles.

飛行経路に含まれる一つの経路セグメントの飛行において、機体進行方向に沿ったエリアに繰り返しレーザパルスを照射することができる。これにより、その一つの経路セグメントの飛行において高密度の3次元点群データを取得することができる。 In the flight of one path segment included in the flight path, the area along the traveling direction of the aircraft can be repeatedly irradiated with the laser pulse. This makes it possible to acquire high-density 3D point cloud data in the flight of that one path segment.

一つの経路セグメントの飛行においてライダーセンサでスキャンしたエリアを、別の経路セグメントの飛行において再度詳細にスキャンしなくても、そのエリアの高密度の3次元点群データを取得することができる。 It is possible to acquire high-density 3D point cloud data of the area scanned by the rider sensor in the flight of one route segment without having to scan the area in detail again in the flight of another route segment.

計測対象エリア内の同一の物体に対して、連続的にレーザパルスを照射することができる。これにより、例えば樹木の上空を飛行しながら計測するとき、樹木に接近しながら計測して得られる点群データと、その樹木から遠ざかりながら計測して得られる点群データとの間の、地理座標系上の位置ずれを小さくすることができる。 The same object in the measurement target area can be continuously irradiated with a laser pulse. As a result, for example, when measuring while flying over a tree, the geographic coordinates between the point cloud data obtained by measuring while approaching the tree and the point cloud data obtained by measuring while moving away from the tree. The misalignment on the system can be reduced.

ある実施形態において、前記ライダーセンサは、前記回転軸が前記無人航空機の機体の前後方向よりも左右方向に近い方向に向けられていてもよい。 In certain embodiments, the rider sensor may have its rotation axis oriented in a direction closer to the left-right direction than the front-rear direction of the airframe of the unmanned aerial vehicle.

機体の前後方向が機体進行方向を向くという無人航空機の通常の飛行姿勢において、ライダーセンサの回転軸を第1方向よりも第2方向に近い方向に向かせることができる。 In the normal flight posture of an unmanned aerial vehicle in which the front-rear direction of the aircraft faces the traveling direction of the aircraft, the rotation axis of the rider sensor can be oriented in a direction closer to the second direction than the first direction.

ある実施形態において、前記ライダーセンサを用いた前記計測対象エリアの計測中、前記制御装置は、前記ライダーセンサの前記回転軸が前記第1方向よりも前記第2方向に近い方向を向くように、前記無人航空機を飛行させてもよい。 In one embodiment, during the measurement of the measurement target area using the rider sensor, the control device so that the rotation axis of the rider sensor faces a direction closer to the second direction than the first direction. The unmanned aerial vehicle may be flown.

ライダーセンサの回転軸が無人航空機の機体の前後方向よりも左右方向に近い方向を向いていない場合においても、その回転軸を第2方向に近い方向に向けた状態で無人航空機を飛行させることができる。 Even if the rotation axis of the rider sensor is not oriented closer to the left-right direction than the front-back direction of the unmanned aerial vehicle, the unmanned aerial vehicle can be flown with the rotation axis oriented toward the second direction. can.

ある実施形態において、前記計測対象エリアの計測中、前記ライダーセンサの前記回転軸は、前記第2方向を向いていてもよい。 In certain embodiments, the axis of rotation of the rider sensor may be oriented in the second direction during measurement of the measurement target area.

無人航空機が進行する過程で、機体進行方向に沿ったエリアに対してレーザパルスをより密に照射できる。これにより、機体進行方向に沿ったエリアのより詳細な3次元点群データを取得することができる。さらに、ライダーセンサを回転させることにより、例えば、森林を構成する樹木に対し、様々な角度からレーザパルスを照射することができる。 As the unmanned aerial vehicle travels, the laser pulse can be applied more densely to the area along the traveling direction of the aircraft. As a result, more detailed three-dimensional point cloud data of the area along the traveling direction of the aircraft can be acquired. Further, by rotating the rider sensor, for example, the trees constituting the forest can be irradiated with the laser pulse from various angles.

ある実施形態において、前記計測対象エリアの計測中、前記平面視において、前記ライダーセンサの前記回転軸は、前記第2方向に対して傾いていてもよい。 In certain embodiments, the axis of rotation of the rider sensor may be tilted with respect to the second direction in the plan view during measurement of the measurement target area.

ライダーセンサが地上に形成するレーザパルスの照射位置を第2方向に拡げて分布させることができる。スキャンラインが1本のライダーセンサを用いる場合、回転軸が第2方向に一致していると、照射位置は第1方向に平行な直線上に位置する。レーザパルスの照射位置を第2方向に拡げることにより、照射漏れ領域を低減できる。 The irradiation position of the laser pulse formed on the ground by the lidar sensor can be expanded and distributed in the second direction. When the scan line uses one rider sensor, the irradiation position is located on a straight line parallel to the first direction when the rotation axes coincide with the second direction. By expanding the irradiation position of the laser pulse in the second direction, the irradiation leakage region can be reduced.

ある実施形態において、前記ライダーセンサは、前記回転軸に対して所定の角度を有する方向にレーザパルスを出射し、前記レーザパルスを出射する方向を前記回転軸の周りに回転させてもよい。 In certain embodiments, the lidar sensor may emit a laser pulse in a direction having a predetermined angle with respect to the axis of rotation, and may rotate the direction in which the laser pulse is emitted around the axis of rotation.

スキャンラインが1本のライダーセンサを用いる場合、地上に形成されるレーザパルスの照射位置が1本のライン上に並ぶが、第2方向に幅を有するエリアをスキャンすることができる。 When a rider sensor having one scan line is used, the irradiation positions of the laser pulses formed on the ground are lined up on one line, but it is possible to scan an area having a width in the second direction.

ある実施形態において、前記計測対象エリアは、地表面から複数の樹木が立ち上がる森林を含んでもよい。 In certain embodiments, the measurement target area may include a forest in which a plurality of trees rise from the ground surface.

森林に様々な角度からレーザパルスを照射することができ、レーザパルスは樹木の樹冠だけでなく、樹木の幹、下層植生および地表面等にも到達し、反射される。これにより、樹冠点群だけでなく幹点群、下層植生点群および地表面点群を含む3次元点群データを得ることができる。 The forest can be irradiated with laser pulses from various angles, and the laser pulses reach and are reflected not only on the canopy of the tree, but also on the trunk of the tree, understory vegetation and the ground surface. As a result, it is possible to obtain three-dimensional point cloud data including not only the canopy point cloud but also the trunk point cloud, the understory vegetation point cloud and the ground surface point cloud.

ある実施形態において、前記地表面は斜面を含み、前記計測対象エリアの計測中、前記制御装置は、前記無人航空機を前記斜面に沿って上昇または下降させてもよい。 In certain embodiments, the ground surface includes a slope, and during measurement of the measurement target area, the control device may raise or lower the unmanned aerial vehicle along the slope.

斜面に広がる森林に対して、斜め上方向からだけではなく、横方向からレーザパルスを照射したり、斜め下方向からレーザパルスを照射したりすることができる。レーザパルスは樹木の樹冠だけでなく、樹木の幹、下層植生および地表面等にも到達し、反射される。これにより、樹冠点群だけでなく幹点群、下層植生点群および地表面点群を含む3次元点群データを得ることができる。 It is possible to irradiate the forest spreading on the slope not only from the diagonally upward direction but also from the lateral direction, or to irradiate the laser pulse from the diagonally downward direction. The laser pulse reaches and is reflected not only on the canopy of the tree but also on the trunk of the tree, understory vegetation, and the ground surface. As a result, it is possible to obtain three-dimensional point cloud data including not only the canopy point cloud but also the trunk point cloud, the understory vegetation point cloud and the ground surface point cloud.

ある実施形態において、前記計測対象エリアの計測中、前記制御装置は、複数の等高線を横切る第1経路セグメントに沿って前記無人航空機を飛行させてもよい。 In certain embodiments, during the measurement of the area to be measured, the control device may fly the unmanned aerial vehicle along a first path segment that crosses a plurality of contour lines.

複数の等高線を横切るように斜面に沿って無人航空機を飛行させることより、斜面に広がる森林に対して、斜め上方向からだけではなく、横方向からレーザパルスを照射したり、斜め下方向からレーザパルスを照射したりすることができる。 By flying an unmanned aerial vehicle along the slope so as to cross multiple contour lines, the forest spreading on the slope can be irradiated with a laser pulse not only from diagonally above but also from the side, or from diagonally below. It is possible to irradiate a pulse.

ある実施形態において、前記計測対象エリアの計測中、前記制御装置は、前記ライダーセンサの前記回転軸が等高線に沿った方向を向いた状態で前記無人航空機を飛行させてもよい。 In certain embodiments, during the measurement of the measurement target area, the control device may fly the unmanned aerial vehicle with the rotation axis of the rider sensor oriented in a direction along a contour line.

ライダーセンサの回転軸が等高線に沿った方向を向いた状態で斜面に沿って無人航空機が飛行することより、斜面に広がる森林に対して、斜め上方向からだけではなく、横方向からレーザパルスを照射したり、斜め下方向からレーザパルスを照射したりすることができる。 When an unmanned aerial vehicle flies along a slope with the axis of rotation of the rider sensor pointing in the direction along the contour line, a laser pulse is emitted not only from diagonally upward but also from the side to the forest spreading on the slope. It can be irradiated or a laser pulse can be irradiated from diagonally downward.

ある実施形態において、前記計測対象エリアの計測を行うときに前記無人航空機を飛行させる飛行経路は、前記平面視において、前記第1経路セグメントと交差する第2経路セグメントを含んでもよい。 In certain embodiments, the flight path through which the unmanned aerial vehicle flies when measuring the measurement target area may include a second path segment that intersects the first path segment in the plan view.

互いに交差する複数の経路セグメントを飛行することにより、計測対象エリアに複数の方位からレーザパルスを照射することができ、計測対象エリアの詳細な3次元点群データを取得することができる。 By flying a plurality of path segments that intersect each other, it is possible to irradiate the measurement target area with laser pulses from a plurality of directions, and it is possible to acquire detailed three-dimensional point cloud data of the measurement target area.

ある実施形態において、前記計測対象エリアの計測を行うときに前記無人航空機を飛行させる飛行経路は、格子状の飛行経路を含んでもよい。 In certain embodiments, the flight path for flying the unmanned aerial vehicle when measuring the measurement target area may include a grid-like flight path.

格子状の飛行経路を飛行することにより、計測対象エリアに複数の方位からレーザパルスを照射することができ、計測対象エリアの詳細な3次元点群データを取得することができる。 By flying in a grid-like flight path, it is possible to irradiate the measurement target area with laser pulses from a plurality of directions, and it is possible to acquire detailed three-dimensional point cloud data of the measurement target area.

ある実施形態において、前記ライダーセンサに加えて第2ライダーセンサが前記無人航空機に設けられており、前記平面視において、前記第2ライダーセンサの回転軸は、前記ライダーセンサの前記回転軸とは異なる方向を向いていてもよい。 In one embodiment, a second rider sensor is provided in the unmanned aerial vehicle in addition to the rider sensor, and in the plan view, the rotation axis of the second rider sensor is different from the rotation axis of the rider sensor. It may be facing in the direction.

回転軸が互いに異なる方向を向いている二つのライダーセンサからレーザパルスを出射させることにより、より広い範囲に多くのレーザパルスを照射することができる。 By emitting laser pulses from two rider sensors whose rotation axes are oriented in different directions, it is possible to irradiate a larger range of laser pulses.

ある実施形態において、前記計測対象エリアの計測中、前記平面視において、前記第2ライダーセンサの前記回転軸は、前記第1方向よりも前記第2方向に近い方向を向いており、前記機体進行方向を前方向としたとき、前記ライダーセンサの前記回転軸は左斜め前方から右斜め後方に臨んでおり、前記第2ライダーセンサの前記回転軸は右斜め前方から左斜め後方に臨んでいてもよい。 In one embodiment, during the measurement of the measurement target area, the rotation axis of the second rider sensor is oriented in a direction closer to the second direction than the first direction in the plan view, and the aircraft advances. When the direction is the forward direction, the rotation axis of the rider sensor faces diagonally from the front left to the diagonally rear right, and the rotation axis of the second rider sensor faces diagonally from the front right to the diagonally rear left. good.

機体進行方向に沿ったエリアにより多くのレーザパルスを照射することができる。また、二つのライダーセンサが互いに異なる方向にレーザパルスを出射することにより、一方のライダーセンサから多くのレーザパルスを照射することが難しいエリアを、他方のライダーセンサで補完することができる。 It is possible to irradiate more laser pulses to the area along the traveling direction of the aircraft. Further, since the two rider sensors emit laser pulses in different directions, the area where it is difficult to irradiate many laser pulses from one rider sensor can be complemented by the other rider sensor.

ある実施形態において、前記計測対象エリアの計測中、前記平面視において、前記第2ライダーセンサの前記回転軸は、前記第2方向よりも前記第1方向に近い方向を向いていてもよい。 In a certain embodiment, during the measurement of the measurement target area, the rotation axis of the second rider sensor may be oriented in a direction closer to the first direction than the second direction in the plan view.

機体進行方向に対する横方向にも広い範囲にわたってレーザパルスを照射することができる。 It is possible to irradiate a laser pulse over a wide range in the lateral direction with respect to the traveling direction of the aircraft.

ある実施形態において、前記無人航空機は、内燃機関を動力源とする無人ヘリコプターまたは無人マルチコプターであってもよい。 In certain embodiments, the unmanned aerial vehicle may be an unmanned helicopter or an unmanned multicopter powered by an internal combustion engine.

バッテリから供給される電力で動作する電動モータを動力源とする場合は、航続距離が短いため、計測対象エリアが狭くなってしまう。一方、内燃機関を動力源とする場合は、航続距離が長いため、十分な計測対象エリアを確保することができる。 When an electric motor operated by electric power supplied from a battery is used as a power source, the cruising range is short and the measurement target area is narrowed. On the other hand, when an internal combustion engine is used as a power source, a sufficient measurement target area can be secured because the cruising range is long.

本発明のある実施形態に係る計測対象エリアの計測を行うは、ライダー(LiDAR)センサが設けられた無人航空機を飛行させて計測対象エリアの計測を行う方法であって、前記無人航空機の飛行経路を設定すること、設定された前記飛行経路に沿って前記無人航空機を飛行させること、鉛直方向から見た平面視において、前記無人航空機の機体進行方向を第1方向とし、前記第1方向に垂直な方向を第2方向としたとき、前記ライダーセンサの回転軸が前記第1方向よりも前記第2方向に近い方向を向いた状態で、前記計測対象エリアを前記ライダーセンサでスキャンさせることを実行する。 The measurement of the measurement target area according to the embodiment of the present invention is a method of flying an unmanned aerial vehicle provided with a lidar (LiDAR) sensor to measure the measurement target area, and is a method of measuring the measurement target area. To fly the unmanned aerial vehicle along the set flight path, and in a plan view seen from the vertical direction, the aircraft traveling direction of the unmanned aerial vehicle is set as the first direction, and it is perpendicular to the first direction. When the direction is the second direction, the rider sensor scans the measurement target area in a state where the rotation axis of the rider sensor faces a direction closer to the second direction than the first direction. do.

ライダーセンサを用いた計測対象エリアの計測中、ライダーセンサの回転軸が第1方向よりも第2方向に近い方向を向いた状態で無人航空機は飛行する。ライダーセンサは回転していることから、無人航空機が進行する過程で、機体進行方向に沿ったエリアに、レーザパルスを密に照射することができる。これにより、例えば、ライダーセンサから複数のレーザパルスが同時に出射される形態においては、機体進行方向に沿ったエリア内の同一の物体に、様々な角度からレーザパルスを密に照射できる。その結果、機体進行方向に沿ったエリアの詳細な3次元点群データを取得できる。さらに、ライダーセンサを回転させることにより、例えば、森林を構成する樹木に対し、様々な角度からレーザパルスを照射することができる。 During the measurement of the measurement target area using the rider sensor, the unmanned aerial vehicle flies in a state where the rotation axis of the rider sensor faces a direction closer to the second direction than the first direction. Since the rider sensor is rotating, it is possible to densely irradiate the area along the traveling direction of the aircraft with a laser pulse while the unmanned aerial vehicle is traveling. Thereby, for example, in the form in which a plurality of laser pulses are simultaneously emitted from the lidar sensor, the same object in the area along the traveling direction of the aircraft can be densely irradiated with the laser pulses from various angles. As a result, detailed three-dimensional point cloud data of the area along the traveling direction of the aircraft can be acquired. Further, by rotating the rider sensor, for example, the trees constituting the forest can be irradiated with the laser pulse from various angles.

飛行経路に含まれる一つの経路セグメントの飛行において、機体進行方向に沿ったエリアに繰り返しレーザパルスを照射することができる。これにより、その一つの経路セグメントの飛行において高密度の3次元点群データを取得することができる。 In the flight of one path segment included in the flight path, the area along the traveling direction of the aircraft can be repeatedly irradiated with the laser pulse. This makes it possible to acquire high-density 3D point cloud data in the flight of that one path segment.

一つの経路セグメントの飛行においてライダーセンサでスキャンしたエリアを、別の経路セグメントの飛行において再度詳細にスキャンしなくても、そのエリアの高密度の3次元点群データを取得することができる。 It is possible to acquire high-density 3D point cloud data of the area scanned by the rider sensor in the flight of one route segment without having to scan the area in detail again in the flight of another route segment.

計測対象エリア内の同一の物体に対して、連続的にレーザパルスを照射することができる。これにより、例えば樹木の上空を飛行しながら計測するとき、樹木に接近しながら計測して得られる点群データと、その樹木から遠ざかりながら計測して得られる点群データとの間の、地理座標系上の位置ずれを小さくすることができる。 The same object in the measurement target area can be continuously irradiated with a laser pulse. As a result, for example, when measuring while flying over a tree, the geographic coordinates between the point cloud data obtained by measuring while approaching the tree and the point cloud data obtained by measuring while moving away from the tree. The misalignment on the system can be reduced.

ある実施形態において、前記飛行経路は複数の経路セグメントを含み、前記方法は、前記複数の経路セグメントそれぞれを飛行中に前記ライダーセンサから出力されたセンサーデータを組み合わせて3次元点群データを生成すること、をさらに実行してもよい。 In one embodiment, the flight path comprises a plurality of path segments, and the method combines each of the plurality of path segments with sensor data output from the rider sensor to generate three-dimensional point cloud data. You may do that further.

一つの経路セグメントの飛行においてライダーセンサでスキャンしたエリアを、別の経路セグメントの飛行において再度詳細にスキャンしなくても、そのエリアの高密度の3次元点群データを取得することができる。このため、計測対象エリアの高密度の3次元点群データを取得することができる。 It is possible to acquire high-density 3D point cloud data of the area scanned by the rider sensor in the flight of one route segment without having to scan the area in detail again in the flight of another route segment. Therefore, it is possible to acquire high-density three-dimensional point cloud data of the measurement target area.

ある実施形態において、前記計測対象エリアは斜面の森林を含み、前記無人航空機の飛行経路を設定するステップは、前記対象エリア内の等高線データを参照し、複数の等高線を横切る経路セグメントを含む飛行経路を設定することを含んでもよい。 In one embodiment, the measurement target area includes a forest on a slope, and the step of setting the flight path of the unmanned aerial vehicle refers to the contour data in the target area and includes a flight path including a route segment that crosses a plurality of contour lines. May include setting.

複数の等高線を横切るように斜面に沿って無人航空機を飛行させることより、斜面に広がる森林に対して、斜め上方向からだけではなく、横方向からレーザパルスを照射したり、斜め下方向からレーザパルスを照射したりすることができる。レーザパルスは樹木の樹冠だけでなく、樹木の幹、下層植生および地表面等にも到達し、反射される。これにより、樹冠点群だけでなく幹点群、下層植生点群および地表面点群を含む3次元点群データを得ることができる。 By flying an unmanned aerial vehicle along the slope so as to cross multiple contour lines, the forest spreading on the slope can be irradiated with a laser pulse not only from diagonally above but also from the side, or from diagonally below. It is possible to irradiate a pulse. The laser pulse reaches and is reflected not only on the canopy of the tree but also on the trunk of the tree, understory vegetation, and the ground surface. As a result, it is possible to obtain three-dimensional point cloud data including not only the canopy point cloud but also the trunk point cloud, the understory vegetation point cloud and the ground surface point cloud.

鉛直方向から見た平面視において、無人航空機の機体進行方向を第1方向とし、第1方向に垂直な方向を第2方向としたとき、ライダーセンサを用いた計測対象エリアの計測中、ライダーセンサの回転軸が第1方向よりも第2方向に近い方向を向いた状態で無人航空機は飛行する。ライダーセンサは回転していることから、無人航空機が進行する過程で、機体進行方向に沿ったエリアに、レーザパルスを密に照射することができる。これにより、例えば、ライダーセンサから複数のレーザパルスが同時に出射される形態においては、機体進行方向に沿ったエリア内の同一の物体に、様々な角度からレーザパルスを密に照射できる。その結果、機体進行方向に沿ったエリアの詳細な3次元点群データを取得できる。さらに、ライダーセンサを回転させることにより、例えば、森林を構成する樹木に対し、様々な角度からレーザパルスを照射することができる。 In the plan view seen from the vertical direction, when the traveling direction of the unmanned aircraft is the first direction and the direction perpendicular to the first direction is the second direction, the rider sensor is measuring the measurement target area using the rider sensor. The unmanned aircraft flies with its axis of rotation oriented closer to the second direction than the first direction. Since the rider sensor is rotating, it is possible to densely irradiate the area along the traveling direction of the aircraft with a laser pulse while the unmanned aerial vehicle is traveling. Thereby, for example, in the form in which a plurality of laser pulses are simultaneously emitted from the lidar sensor, the same object in the area along the traveling direction of the aircraft can be densely irradiated with the laser pulses from various angles. As a result, detailed three-dimensional point cloud data of the area along the traveling direction of the aircraft can be acquired. Further, by rotating the rider sensor, for example, the trees constituting the forest can be irradiated with the laser pulse from various angles.

飛行経路に含まれる一つの経路セグメントの飛行において、機体進行方向に沿ったエリアに繰り返しレーザパルスを照射することができる。これにより、その一つの経路セグメントの飛行において高密度の3次元点群データを取得することができる。 In the flight of one path segment included in the flight path, the area along the traveling direction of the aircraft can be repeatedly irradiated with the laser pulse. This makes it possible to acquire high-density 3D point cloud data in the flight of that one path segment.

一つの経路セグメントの飛行においてライダーセンサでスキャンしたエリアを、別の経路セグメントの飛行において再度詳細にスキャンしなくても、そのエリアの高密度の3次元点群データを取得することができる。 It is possible to acquire high-density 3D point cloud data of the area scanned by the rider sensor in the flight of one route segment without having to scan the area in detail again in the flight of another route segment.

計測対象エリア内の同一の物体に対して、連続的にレーザパルスを照射することができる。これにより、例えば樹木の上空を飛行しながら計測するとき、樹木に接近しながら計測して得られる点群データと、その樹木から遠ざかりながら計測して得られる点群データとの間の、地理座標系上の位置ずれを小さくすることができる。 The same object in the measurement target area can be continuously irradiated with a laser pulse. As a result, for example, when measuring while flying over a tree, the geographic coordinates between the point cloud data obtained by measuring while approaching the tree and the point cloud data obtained by measuring while moving away from the tree. The misalignment on the system can be reduced.

本発明の実施形態に係る無人ヘリコプター1が森林計測を行っている図である。It is a figure that the unmanned helicopter 1 which concerns on embodiment of this invention performs forest measurement. 本発明の実施形態に係るLiDARセンサ20が設けられた無人ヘリコプター1の外観側面図である。It is an external side view of the unmanned helicopter 1 provided with the LiDAR sensor 20 which concerns on embodiment of this invention. 本発明の実施形態に係る無人ヘリコプター1の正面図である。It is a front view of the unmanned helicopter 1 which concerns on embodiment of this invention. 本発明の実施形態に係る飛行制御ボックス15のハードウェア構成例を示す図である。It is a figure which shows the hardware configuration example of the flight control box 15 which concerns on embodiment of this invention. 本発明の実施形態に係るLiDARセンサ20の回転軸21が臨む方向を説明する図である。It is a figure explaining the direction which the rotating shaft 21 of the LiDAR sensor 20 which concerns on embodiment of this invention faces. 本発明の実施形態に係るLiDARセンサ20から同時に出射されるN個のレーザパルス22を示す図である。It is a figure which shows N laser pulses 22 which are simultaneously emitted from the LiDAR sensor 20 which concerns on embodiment of this invention. 本発明の実施形態に係る進行する無人ヘリコプター1から出射されるレーザパルス22を示す図である。It is a figure which shows the laser pulse 22 emitted from the traveling unmanned helicopter 1 which concerns on embodiment of this invention. 本発明の実施形態に係るLiDARセンサ20の回転軸21が臨む方向を説明する図である。It is a figure explaining the direction which the rotating shaft 21 of the LiDAR sensor 20 which concerns on embodiment of this invention faces. 本発明の実施形態に係る進行する無人ヘリコプター1から出射されるレーザパルス22を示す図である。It is a figure which shows the laser pulse 22 emitted from the traveling unmanned helicopter 1 which concerns on embodiment of this invention. 本発明の実施形態に係る計測対象エリア50の計測を行う無人ヘリコプター1を、無人ヘリコプター1の左右方向から見たときの図である。It is a figure when the unmanned helicopter 1 which measures the measurement target area 50 which concerns on embodiment of this invention is seen from the left-right direction of an unmanned helicopter 1. LiDARセンサ20の回転軸21を機体進行方向に向けた状態で飛行し、森林計測する態様を説明する図である。It is a figure explaining the mode of flying in a state that the rotation shaft 21 of a LiDAR sensor 20 is directed in the traveling direction of an airframe, and measuring the forest. 本発明の実施形態に係る森林計測であって、斜面から立ち上がる樹木にレーザパルス22を照射することを説明する図である。It is a figure which explains the forest measurement which concerns on embodiment of this invention, and irradiates a tree rising from a slope with a laser pulse 22. 本発明の実施形態に係る無人ヘリコプター1とタブレットコンピュータ70とを含む計測システム100を示す図である。It is a figure which shows the measurement system 100 which includes the unmanned helicopter 1 and the tablet computer 70 which concerns on embodiment of this invention. 本発明の実施形態に係る無人ヘリコプター1と基地局操縦装置80とを含む計測システム100を示す図である。It is a figure which shows the measurement system 100 which includes the unmanned helicopter 1 and the base station control apparatus 80 which concerns on embodiment of this invention. 本発明の実施形態に係るタブレットコンピュータ70のハードウェア構成例を示す図である。It is a figure which shows the hardware configuration example of the tablet computer 70 which concerns on embodiment of this invention. 本発明の実施形態に係る飛行経路の設定処理の手順を示すフローチャートである。It is a flowchart which shows the procedure of the flight path setting processing which concerns on embodiment of this invention. 本発明の実施形態に係る飛行経路が設定された無人ヘリコプター1の飛行動作の手順を示すフローチャートである。It is a flowchart which shows the procedure of the flight operation of the unmanned helicopter 1 which set the flight path which concerns on embodiment of this invention. 本発明の実施形態に係る飛行経路60の一例を示す図である。It is a figure which shows an example of the flight path 60 which concerns on embodiment of this invention. 本発明の実施形態に係るスキャンラインが一本のLiDARセンサ20の回転軸21が臨む方向を説明する図である。It is a figure explaining the direction which the rotating shaft 21 of a single LiDAR sensor 20 faces the scan line which concerns on embodiment of this invention. (a)、(b)および(c)は、本発明の実施形態に係るスキャンラインが一本のLiDARセンサ20から出射されたレーザパルス22が平面上に形成するレーザスポット24を示す図である。(A), (b) and (c) are diagrams showing a laser spot 24 formed on a plane by a laser pulse 22 emitted from a single LiDAR sensor 20 with a scan line according to an embodiment of the present invention. .. 本発明の実施形態に係る進行する無人ヘリコプター1から出射されるレーザパルス22によって平面上に形成されるレーザスポット24を示す図である。It is a figure which shows the laser spot 24 formed on the plane by the laser pulse 22 emitted from the traveling unmanned helicopter 1 which concerns on embodiment of this invention. 本発明の実施形態に係る回転軸21が機体の前後方向を向いている無人ヘリコプター1を示す図である。It is a figure which shows the unmanned helicopter 1 which the rotating shaft 21 which concerns on embodiment of this invention faces the front-rear direction of an airframe. 本発明の実施形態に係る複数のLiDARセンサが設けられた無人ヘリコプター1の正面図である。It is a front view of the unmanned helicopter 1 provided with a plurality of LiDAR sensors which concerns on embodiment of this invention. 本発明の実施形態に係るLiDARセンサ20、40の回転軸21、41が臨む方向を説明する図である。It is a figure explaining the direction which the rotating shaft 21, 41 of the LiDAR sensor 20, 40 which concerns on embodiment of this invention faces. 本発明の実施形態に係るLiDARセンサ20、40から出射されるレーザパルス22、42を示す図である。It is a figure which shows the laser pulse 22, 42 emitted from the LiDAR sensor 20, 40 which concerns on embodiment of this invention. 本発明の実施形態に係る進行する無人ヘリコプター1から出射されるレーザパルス22、42を示す図である。It is a figure which shows the laser pulse 22, 42 emitted from the traveling unmanned helicopter 1 which concerns on embodiment of this invention. 本発明の実施形態に係るLiDARセンサ20、40の回転軸21、41が臨む方向を説明する図である。It is a figure explaining the direction which the rotating shaft 21, 41 of the LiDAR sensor 20, 40 which concerns on embodiment of this invention faces.

森林資源の管理および利用を行うためには、いわゆる「森林計測」を行うことが重要である。この「森林計測」には、森林の構造の調査、森林の材積の推定、一定期間における森林の変化量の把握等が含まれ得る。従来の森林計測のような、林木の一本一本を計測し、得られたデータから様々な集計・分析を行っていくことは非常に人手と時間がかかる。そこで、無人航空機にレーザ測距装置(LiDARセンサ)を搭載し、LiDARセンサを用いて空中から森林計測を行うことが進められている。 In order to manage and utilize forest resources, it is important to carry out so-called “forest measurement”. This "forest measurement" may include surveying the structure of the forest, estimating the volume of the forest, and grasping the amount of change in the forest over a certain period of time. It takes a lot of manpower and time to measure each forest tree and perform various aggregation and analysis from the obtained data as in the conventional forest measurement. Therefore, it is being promoted to mount a laser ranging device (LiDAR sensor) on an unmanned aerial vehicle and perform forest measurement from the air using the LiDAR sensor.

本開示の実施形態を説明する前に、本明細書において使用する用語の定義を説明する。 Prior to describing embodiments of the present disclosure, definitions of terms used herein will be described.

<用語>
本明細書では、LiDARセンサを用いて上空から森林をスキャンし、スキャンデータを取得すること自体を「森林計測」に含む。スキャンデータは、典型的には、スキャンごとに取得される点群(point cloud)を構成する各点の位置座標によって表現され得る。スキャンごとに取得される点の位置座標は、無人航空機とともに移動するローカル座標系によって規定される。このようなローカル座標系は、移動体座標系またはセンサ座標系と呼ばれ得る。一般的には、「森林計測」は、ローカル座標系で表現された各反射点の位置を地理座標系に変換することを含む。「森林計測」はさらに、地理座標系への変換後に、森林の構造を解析すること、森林および樹木の形を視覚的に表示すること、森林内の樹木の種類ごとの存在比率を求めること、森林の容積密度を求めること等を含み得る。
<Terminology>
In the present specification, "forest measurement" includes scanning a forest from the sky using a LiDAR sensor and acquiring scan data. The scan data can typically be represented by the position coordinates of each point that constitutes a point cloud acquired for each scan. The position coordinates of the points obtained for each scan are defined by the local coordinate system that travels with the unmanned aerial vehicle. Such a local coordinate system may be referred to as a mobile coordinate system or a sensor coordinate system. In general, "forest inventory" involves converting the position of each reflection point represented in the local coordinate system into a geographic coordinate system. "Forest measurement" further analyzes the structure of the forest after conversion to the geographic coordinate system, visually displays the shape of the forest and trees, and determines the abundance ratio of each type of tree in the forest. It may include finding the volume density of the forest.

「無人航空機」(UAV;Unmanned aerial vehicle)は、操縦者としての人が搭乗しない航空機であり、ドローンと呼ばれることもある。航空機は回転翼機および固定翼機を含み得る。回転翼を有する無人航空機の一例は、無人ヘリコプターまたは無人マルチコプターである。回転翼はエンジン(内燃機関)によって回転してもよいし、電動モータによって回転してもよい。無人航空機の飛行は、コンピュータプログラムによる自律飛行、一部を自動化する半自律飛行、無線を用いた人による遠隔操作による飛行のいずれであってもよい。無人航空機は、GNSS(Global Navigation Satellite System)を援用して、現在位置を三次元的に測定し、その位置を修正しながら飛行することが可能である。以下に説明する例示的な実施形態においては、「無人航空機」は「無人ヘリコプター」である。 An "unmanned aerial vehicle" (UAV) is an aircraft that a person as a pilot does not board, and is sometimes called a drone. Aircraft may include rotary and fixed wing aircraft. An example of an unmanned aerial vehicle with rotors is an unmanned helicopter or an unmanned multicopter. The rotor blades may be rotated by an engine (internal combustion engine) or by an electric motor. The flight of an unmanned aerial vehicle may be an autonomous flight by a computer program, a semi-autonomous flight that partially automates, or a remote-controlled flight by a person using radio. The unmanned aerial vehicle can fly while measuring the current position three-dimensionally and correcting the position by using GNSS (Global Navigation Satellite System). In the exemplary embodiment described below, the "unmanned aerial vehicle" is an "unmanned helicopter."

「無人」の用語は、航空機の操縦のために人が搭乗する必要がないことを意味しており、無人航空機が操縦者でない人を運搬することは除外しない。 The term "unmanned" means that no one needs to be on board to fly the aircraft, and does not exclude unmanned aerial vehicles carrying non-operators.

「等高線」とは、地図上で、土地の起伏を正確に表すために、標準海面から等しい高さの点を結んだ曲線を言う。日本では、東京湾の平均海面を標準海面(0m)として高さが測量されている。標準海面からの高さは「標高」と呼ばれる。例えば、日本の地図では、縮尺によって標高差10mごとに主曲線が引かれ、50mごとに計曲線が引かれている。しかしながら本明細書において「等高線」は、標準海面から等しい高さの点を結んだ曲線であればよく、地図に掲載されていない曲線も含む。例えば、標高563mの高さの点を結んだ曲線も等高線であり得る。 A "contour line" is a curve that connects points at equal heights above the standard sea level to accurately represent the undulations of the land on a map. In Japan, the height is measured with the average sea level of Tokyo Bay as the standard sea level (0 m). The height above the standard sea level is called "elevation". For example, on a map of Japan, a main curve is drawn every 10 m above sea level and a total curve is drawn every 50 m depending on the scale. However, in the present specification, the "contour line" may be a curve connecting points at the same height from the standard sea level, and includes a curve not shown on the map. For example, a curve connecting points at an altitude of 563 m can also be contour lines.

さらに本明細書では、「等高線」は、実際の地形上で、標準海面から等しい高さの位置を結んだ仮想的な曲線を含む。ここでいう「標準海面から等しい高さ」は厳密でなくてよい。例えば、「標準海面から等しい高さ」の±30メートルの範囲に入る高さの位置を結んだ仮想的な曲線も等高線であり得る。 Further herein, the "contour line" includes a hypothetical curve connecting positions equal to the standard sea level on the actual terrain. The "equal height from the standard sea level" here does not have to be exact. For example, a hypothetical curve connecting positions at heights within ± 30 meters of "equal heights from the standard sea level" can also be contour lines.

「絶対高度」とは、地表面または水面から航空機までの距離をいい、「AGL」(Above Ground Level)とも表現され得る。航空機が山岳地を飛行しているときは,山岳の地表面から航空機までの垂直距離が「絶対高度」になる。「絶対高度」は、一般には電波高度計を用いて測定された値であるが、本明細書ではLiDAR(ライダー)センサを用いて測定された値も絶対高度として採用することを含む。また本明細書では、「絶対高度」は例えば、数値表層モデルまたはDSM(Digital Surface Model)で表現される表層からの距離も含む。つまり、絶対高度Hメートル、というときは、地表面から計測した距離がHメートルであってもよいし、樹冠の表層から計測した距離がHメートであってもよい。 "Absolute altitude" refers to the distance from the ground surface or water surface to the aircraft, and may also be expressed as "AGL" (Above Ground Level). When an aircraft is flying in a mountainous area, the vertical distance from the surface of the mountain to the aircraft is "absolute altitude". The "absolute altitude" is generally a value measured using a radio altimeter, but the present specification includes adopting a value measured using a LiDAR (rider) sensor as an absolute altitude. Also, in the present specification, "absolute altitude" includes, for example, a distance from a surface layer represented by a digital surface model or a DSM (Digital Surface Model). That is, when the absolute altitude is H meters, the distance measured from the ground surface may be H meters, or the distance measured from the surface layer of the canopy may be H meters.

以下、添付の図面を参照しながら、本発明による計測対象エリアの計測の実施形態を説明する。 Hereinafter, embodiments of measurement of the measurement target area according to the present invention will be described with reference to the accompanying drawings.

図1は、計測対象エリア50の計測を行う無人ヘリコプター1を示している。図1に示す例では、山の斜面52に広がる森林54を計測対象エリア50とし、無人ヘリコプター1を用いて森林計測を行っている。森林54では地表面から複数の樹木が立ち上がっている。計測対象エリア50としての森林54は、斜面の森林(斜面林)に限定されず、平坦地の森林であってもよい。計測対象エリア50は森林に限定されず、例えば市街地等であってもよい。以下の例示的な実施形態の説明では、計測対象エリア50が森林54になっている。 FIG. 1 shows an unmanned helicopter 1 that measures the measurement target area 50. In the example shown in FIG. 1, the forest 54 spreading on the slope 52 of the mountain is set as the measurement target area 50, and the forest measurement is performed using the unmanned helicopter 1. In the forest 54, a plurality of trees are rising from the ground surface. The forest 54 as the measurement target area 50 is not limited to the slope forest (slope forest), and may be a flat land forest. The measurement target area 50 is not limited to the forest, and may be, for example, an urban area. In the following illustration of the exemplary embodiment, the measurement target area 50 is the forest 54.

図2は、LiDARセンサ(ライダーセンサ)20が設けられた無人ヘリコプター1の外観側面図である。図3は、無人ヘリコプター1の正面図である。 FIG. 2 is an external side view of an unmanned helicopter 1 provided with a LiDAR sensor (rider sensor) 20. FIG. 3 is a front view of the unmanned helicopter 1.

LiDARセンサ20はレーザビームのパルス(以下「レーザパルス」と略記する。)22を、出射方向を変えながら次々と出射し、出射時刻と各レーザパルスの反射パルスを取得した時刻との時間差から各反射点の位置までの距離を計測することができる。「反射点」は、森林54を構成する各樹木の樹冠および幹、斜面および平坦地等の地表面であり得る。 The LiDAR sensor 20 emits laser beam pulses (hereinafter abbreviated as "laser pulse") 22 one after another while changing the emission direction, and each is based on the time difference between the emission time and the time when the reflected pulse of each laser pulse is acquired. The distance to the position of the reflection point can be measured. The "reflection point" can be the canopy and trunk of each tree constituting the forest 54 and the ground surface such as slopes and flat lands.

LiDARセンサ20は、任意の方法により、飛行体から森林までの距離を計測し得る。LiDARセンサ20の計測方法としては、例えば機械回転方式、MEMS方式、フェーズドアレイ方式がある。これらの測定方法は、それぞれレーザパルスを出射する方法(スキャンの方法)が異なっている。例えば、機械回転方式のLiDARセンサは、レーザパルスの出射およびレーザパルスの反射光の検出を行う筒状のヘッドを回転させて、回転軸の周囲360度全方位の計測対象物をスキャンする。MEMS方式のLiDARセンサは、MEMSミラーを用いてレーザパルスの出射方向を揺動させ、揺動軸を中心とした所定の角度範囲内の計測対象物をスキャンする。フェーズドアレイ方式のLiDARセンサは、光の位相を制御して光の出射方向を揺動させ、揺動軸を中心とした所定の角度範囲内の計測対象物をスキャンする。 The LiDAR sensor 20 can measure the distance from the flying object to the forest by any method. Examples of the measurement method of the LiDAR sensor 20 include a mechanical rotation method, a MEMS method, and a phased array method. These measurement methods differ in the method of emitting a laser pulse (scanning method). For example, a mechanical rotation type LiDAR sensor rotates a tubular head that emits a laser pulse and detects reflected light of the laser pulse, and scans a measurement object 360 degrees around the rotation axis in all directions. The MEMS type LiDAR sensor swings the emission direction of the laser pulse by using a MEMS mirror, and scans a measurement object within a predetermined angle range about the swing axis. The phased array type LiDAR sensor controls the phase of light to swing the emission direction of light, and scans a measurement object within a predetermined angle range about a swing axis.

無人ヘリコプター1は、メインボディ2およびテールボディ3を有する機体4を備えている。機体4の前方側の下部には、ブラケット25を介してLiDARセンサ20が取り付けられている。メインボディ2の上部にはメインロータ5が設けられ、テールボディ3の後部にテールロータ6が設けられている。メインボディ2の前部にはラジエータ7が設けられている。メインボディ2の後部には飛行制御ボックス15が設けられている。メインボディ2内には、内燃機関であるエンジン8および発電装置9が設けられている。また、メインボディ2内には、いずれも図示しない吸気系、メインロータ軸、燃料タンクが収容されている。エンジン8が発生させた回転はメインロータ5およびテールロータ6に伝達され、メインロータ5およびテールロータ6が回転することにより無人ヘリコプター1は飛行する。 The unmanned helicopter 1 includes an airframe 4 having a main body 2 and a tail body 3. A LiDAR sensor 20 is attached to the lower part on the front side of the machine body 4 via a bracket 25. A main rotor 5 is provided on the upper portion of the main body 2, and a tail rotor 6 is provided on the rear portion of the tail body 3. A radiator 7 is provided at the front portion of the main body 2. A flight control box 15 is provided at the rear of the main body 2. An engine 8 which is an internal combustion engine and a power generation device 9 are provided in the main body 2. Further, the intake system, the main rotor shaft, and the fuel tank (not shown) are housed in the main body 2. The rotation generated by the engine 8 is transmitted to the main rotor 5 and the tail rotor 6, and the rotation of the main rotor 5 and the tail rotor 6 causes the unmanned helicopter 1 to fly.

メインボディ2の後部上側にはコントロールパネル10が設けられ、後部下側に表示灯11が設けられる。コントロールパネル10は、飛行前のチェックポイントやセルフチェック結果等を表示する。コントロールパネル10の表示は地上局でも確認できる。表示灯11は、GNSS制御の状態や機体の異常警告等の表示を行う。メインボディ2の中央部下側には、着陸時に機体4を支える脚であるスキッド12が設けられている。 A control panel 10 is provided on the upper rear side of the main body 2, and an indicator light 11 is provided on the lower rear side. The control panel 10 displays a checkpoint before flight, a self-check result, and the like. The display of the control panel 10 can also be confirmed by the ground station. The indicator light 11 displays the state of GNSS control, an abnormality warning of the aircraft, and the like. A skid 12, which is a leg that supports the aircraft 4 at the time of landing, is provided on the lower side of the center of the main body 2.

図4は、飛行制御ボックス(制御装置)15のハードウェア構成例を示している。飛行制御ボックス15は、GPSモジュール15a、加速度センサ15b、気圧センサ15c、地磁気センサ15d、超音波センサ15e、通信回路15f、信号処理回路15g、記憶装置15jを収容する。記憶装置15jは、ROM15h、RAM15i等を含む。各構成要素は、例えば配線または内部バス15kを介して相互にデータを送受信し得る。なお、GPSモジュール15aを初めとする各種のセンサを設ける位置は、常に飛行制御ボックス15内である必要はない。例えばGPS衛星からの信号を取得しやすくするため、GPSモジュール15aをテールボディ3上部に設けてもよい。 FIG. 4 shows a hardware configuration example of the flight control box (control device) 15. The flight control box 15 houses a GPS module 15a, an acceleration sensor 15b, a pressure sensor 15c, a geomagnetic sensor 15d, an ultrasonic sensor 15e, a communication circuit 15f, a signal processing circuit 15g, and a storage device 15j. The storage device 15j includes a ROM 15h, a RAM 15i, and the like. Each component may send and receive data to and from each other, for example via wiring or internal bus 15k. The position where various sensors such as the GPS module 15a are provided does not always have to be in the flight control box 15. For example, in order to facilitate the acquisition of signals from GPS satellites, the GPS module 15a may be provided on the upper part of the tail body 3.

飛行制御ボックス15は、GNSSモジュールの一例としてGPSモジュール15aを備える。GPSモジュール15aは、GPS(Global Positioning System)を用いて現在位置および飛行速度等の飛行データを取得する。GPSモジュール15aの数は1個であってもよいし、複数(例えば2個)であってもよい。加速度センサ15bは、X軸、Y軸およびZ軸の各方向の加速度を検出する三軸加速度センサである。加速度センサ15bが六軸加速度センサであれば、さらに無人ヘリコプター1のロール加速度、ピッチ角速度およびヨー加速度を検出可能である。なお、加速度センサ15bは、一軸加速度センサまたは二軸加速度センサを複数有し、これら一軸加速度センサまたは二軸加速度センサにより座標系XYZの各方向を検出する構成であってもよい。気圧センサ15cは気圧を検出する。検出された気圧から現在の標高を知ることができる。なお気圧と標高との関係式は公知であるから、本明細書では説明は省略する。地磁気センサ15dは無人ヘリコプター1の現在の方位を検出する。超音波センサ15eは、低空飛行時の絶対高度の検出に用いられる。加速度センサ15bおよび地磁気センサ15dの各々から出力されるデータ(機体データ)を利用することにより、無人ヘリコプター1の現在の姿勢を判断することができる。飛行データおよび機体データは、信号処理回路15gに提供される。 The flight control box 15 includes a GPS module 15a as an example of the GNSS module. The GPS module 15a acquires flight data such as the current position and flight speed using GPS (Global Positioning System). The number of GPS modules 15a may be one or a plurality (for example, two). The acceleration sensor 15b is a three-axis acceleration sensor that detects acceleration in each of the X-axis, Y-axis, and Z-axis directions. If the acceleration sensor 15b is a six-axis acceleration sensor, it can further detect the roll acceleration, pitch angular velocity, and yaw acceleration of the unmanned helicopter 1. The acceleration sensor 15b may have a plurality of uniaxial acceleration sensors or biaxial acceleration sensors, and may be configured to detect each direction of the coordinate system XYZ by these uniaxial acceleration sensors or biaxial acceleration sensors. The barometric pressure sensor 15c detects barometric pressure. The current altitude can be known from the detected atmospheric pressure. Since the relational expression between the atmospheric pressure and the altitude is known, the description thereof is omitted in the present specification. The geomagnetic sensor 15d detects the current orientation of the unmanned helicopter 1. The ultrasonic sensor 15e is used to detect an absolute altitude during low-altitude flight. By using the data (airframe data) output from each of the acceleration sensor 15b and the geomagnetic sensor 15d, the current attitude of the unmanned helicopter 1 can be determined. Flight data and airframe data are provided to the signal processing circuit 15g.

通信回路15fは、Bluetooth(登録商標)および/またはWi-Fi(登録商標)規格に準拠した無線通信を行う通信回路を有する。通信回路15fはさらに、携帯電話回線または人工衛星を経由する回線を利用した無線通信を行ってもよい。通信回路15fは、飛行前においては飛行経路のデータを受信し、飛行時には無線によって地上と必要な通信を行う。なお本実施形態では、飛行経路のデータは、無人ヘリコプター1が飛行すべき経路の座標および絶対高度の各データを含む。 The communication circuit 15f includes a communication circuit that performs wireless communication conforming to the Bluetooth® and / or Wi-Fi® standards. The communication circuit 15f may further perform wireless communication using a mobile phone line or a line via an artificial satellite. The communication circuit 15f receives flight path data before flight, and wirelessly performs necessary communication with the ground during flight. In the present embodiment, the flight route data includes the coordinates of the route to be flown by the unmanned helicopter 1 and the absolute altitude data.

記憶装置15jは、信号処理回路15gの動作を制御するコンピュータプログラムを記憶している。記憶装置15jは、無人ヘリコプター1の飛行の制御および後述する森林計測の制御を信号処理回路15gに実行させるためのコンピュータプログラムを記憶し得る。そのようなコンピュータプログラムは、それが記録された記録媒体(半導体メモリ、光ディスク等)から無人ヘリコプター1にインストールしてもよいし、インターネット等の電気通信回線を介してダウンロードしてもよい。また、無線通信を介してそのようなコンピュータプログラムを無人ヘリコプター1にインストールしてもよい。このようなコンピュータプログラムは、パッケージソフトウェアとして販売され得る。 The storage device 15j stores a computer program that controls the operation of the signal processing circuit 15g. The storage device 15j may store a computer program for causing the signal processing circuit 15g to control the flight of the unmanned helicopter 1 and the forest measurement described later. Such a computer program may be installed in the unmanned helicopter 1 from a recording medium (semiconductor memory, optical disk, etc.) on which it is recorded, or may be downloaded via a telecommunications line such as the Internet. Also, such a computer program may be installed on the unmanned helicopter 1 via wireless communication. Such computer programs may be sold as packaged software.

信号処理回路15gは、記憶装置15jに記憶された制御プログラムを実行して無人ヘリコプター1を飛行させる。より具体的には信号処理回路15gは、上述した飛行データ、機体データ、エンジン回転数やスロットル開度などの運転状態データ等を監視しながら、予め用意された飛行経路に沿って無人ヘリコプター1を飛行させる。 The signal processing circuit 15g executes a control program stored in the storage device 15j to fly the unmanned helicopter 1. More specifically, the signal processing circuit 15g monitors the above-mentioned flight data, aircraft data, operating state data such as engine rotation speed and throttle opening, and makes the unmanned helicopter 1 along a flight path prepared in advance. Let it fly.

図4に示す例では、飛行制御ボックス15は、LiDARセンサ20と接続されている。LiDARセンサ20は、スキャン結果(時刻データ、方角データおよび距離データ等の組)を飛行制御ボックス15に出力する。GPSモジュール15aから出力される無人ヘリコプター1の飛行位置を示す位置データと、LiDARセンサ20から出力されるスキャン結果とを用いて、例えば地理座標系で表現された計測対象物の位置を算出することができる。 In the example shown in FIG. 4, the flight control box 15 is connected to the LiDAR sensor 20. The LiDAR sensor 20 outputs a scan result (a set of time data, direction data, distance data, etc.) to the flight control box 15. Using the position data indicating the flight position of the unmanned helicopter 1 output from the GPS module 15a and the scan result output from the LiDAR sensor 20, for example, the position of the measurement object represented by the geographic coordinate system is calculated. Can be done.

なお、LiDARセンサ20は、飛行制御ボックス15と接続されていなくてもよい。例えば、GPSモジュール15aが飛行制御ボックス15とは独立して無人ヘリコプター1に設けられ、そのGPSモジュール15aから飛行制御ボックス15およびLiDARセンサ20のそれぞれに位置データが出力されてもよい。この場合、LiDARセンサ20のスキャン結果は、LiDARセンサ20内の記憶装置(図示せず)に記憶してもよい。また、GPSモジュール15aが出力した位置データと、LiDARセンサ20のスキャン結果とを用いた計測対象物の位置の算出を、LiDARセンサ20内の信号処理回路(図示せず)が行う場合は、その算出結果をLiDARセンサ20内の記憶装置に記憶してもよい。飛行制御ボックス15とLiDARセンサ20とで電源が共有されてもよい。 The LiDAR sensor 20 may not be connected to the flight control box 15. For example, the GPS module 15a may be provided in the unmanned helicopter 1 independently of the flight control box 15, and position data may be output from the GPS module 15a to the flight control box 15 and the LiDAR sensor 20 respectively. In this case, the scan result of the LiDAR sensor 20 may be stored in a storage device (not shown) in the LiDAR sensor 20. If the signal processing circuit (not shown) in the LiDAR sensor 20 calculates the position of the object to be measured using the position data output by the GPS module 15a and the scan result of the LiDAR sensor 20, the position data is calculated. The calculation result may be stored in the storage device in the LiDAR sensor 20. The power supply may be shared between the flight control box 15 and the LiDAR sensor 20.

なお、無人ヘリコプター1の飛行および運用を管理するオペレータは、飛行状態を目視しながら、予め用意した飛行経路に沿って無人ヘリコプター1を飛行させることもできる。テールボディ3(図2)の後端部には、リモコン操縦機からの指令信号を受信するリモコン受信アンテナ13が設けられている。 The operator who manages the flight and operation of the unmanned helicopter 1 can also fly the unmanned helicopter 1 along a flight path prepared in advance while visually observing the flight state. At the rear end of the tail body 3 (FIG. 2), a remote control receiving antenna 13 for receiving a command signal from the remote control controller is provided.

図2および図3を参照して、LiDARセンサ20は、例えば近赤外線のレーザパルス22を出射(放射)し、当該レーザパルス22の反射光を検出することにより、反射点までの距離を測定する光学機器である。 With reference to FIGS. 2 and 3, the LiDAR sensor 20 measures the distance to the reflection point by, for example, emitting (radiating) a near-infrared laser pulse 22 and detecting the reflected light of the laser pulse 22. It is an optical device.

例示的な実施形態ではLiDARセンサ20は機械回転方式であり、レーザパルス22の出射およびレーザパルス22の反射光の検出を行うヘッド23は、回転軸21を中心として回転する。ヘッド23が回転することで、360度全方位をスキャンすることができる。本実施形態では、LiDARセンサ20のスキャン可能範囲のうち無人ヘリコプター1の機体4等に遮られる範囲は計測結果に反映しない。記載の便宜上、図2では360度全方位に放射されるレーザパルス22のうちの一部のみを示している。本明細書では、LiDARセンサ20のヘッド23の回転を“LiDARセンサ20の回転”と表現する場合がある。 In an exemplary embodiment, the LiDAR sensor 20 is of a mechanical rotation method, and the head 23 that emits the laser pulse 22 and detects the reflected light of the laser pulse 22 rotates about the rotation shaft 21. By rotating the head 23, it is possible to scan 360 degrees in all directions. In the present embodiment, the range of the scannable range of the LiDAR sensor 20 that is obstructed by the aircraft 4 or the like of the unmanned helicopter 1 is not reflected in the measurement result. For convenience of description, FIG. 2 shows only a part of the laser pulse 22 radiated in all directions of 360 degrees. In the present specification, the rotation of the head 23 of the LiDAR sensor 20 may be referred to as “rotation of the LiDAR sensor 20”.

LiDARセンサ20のヘッド23は、回転することにより出射口の方向を変化させ、所定角度ピッチα(rad)ごとに同時に複数個のレーザパルス22を出射する。図3では、一例として、LiDARセンサ20の回転軸21が通るある平面に沿って同時に出射されるN個のレーザパルス22を示している。記載の便宜上、パルス状ではなくビーム状でレーザパルス22を記載している。なお、「同時」は厳密に同じ時刻である必要はなく、概ね同じ時刻であることも含む。Nの値は任意であり、例えば、12、16、32または64であるが、Nはこれらの値に限定されない。LiDARセンサ20のヘッド23には、例えばN個のレーザ光源が並べられており、N個のレーザパルス22の出射口からレーザパルス22が出射される。レーザ光源は例えばレーザダイオードであるがこれに限定されない。 The head 23 of the LiDAR sensor 20 changes the direction of the emission port by rotating, and simultaneously emits a plurality of laser pulses 22 at a predetermined angle pitch α (rad). FIG. 3 shows, as an example, N laser pulses 22 simultaneously emitted along a certain plane through which the rotation axis 21 of the LiDAR sensor 20 passes. For convenience of description, the laser pulse 22 is described in the form of a beam instead of the shape of a pulse. It should be noted that "simultaneous" does not have to be exactly the same time, and includes the fact that they are approximately the same time. The value of N is arbitrary and is, for example, 12, 16, 32 or 64, but N is not limited to these values. For example, N laser light sources are arranged in the head 23 of the LiDAR sensor 20, and the laser pulse 22 is emitted from the emission port of the N laser pulses 22. The laser light source is, for example, a laser diode, but is not limited to this.

図2を参照しながら、ある1つの出射口から出射されるレーザパルス22を説明する。LiDARセンサ20のヘッド23は、回転することにより出射口の方向を変化させ、所定角度ピッチα(rad)ごとにレーザパルス22を出射し、森林で反射した各レーザパルス22の反射光を検出する。これにより、当該所定角度ピッチαごとの方向における反射点までの距離のデータを得ることができる。1つの出射口についてLiDARセンサ20の単位時間当たりのパルスの出射回数をM、単位時間当たりの回転数をRとするとき、所定角度ピッチαはα(rad)=2・π・R/Mによって求められる。 The laser pulse 22 emitted from one exit port will be described with reference to FIG. 2. The head 23 of the LiDAR sensor 20 changes the direction of the exit port by rotating, emits a laser pulse 22 at a predetermined angle pitch α (rad), and detects the reflected light of each laser pulse 22 reflected in the forest. .. As a result, it is possible to obtain data on the distance to the reflection point in the direction for each predetermined angle pitch α. When the number of pulses emitted per unit time of the LiDAR sensor 20 is M and the rotation speed per unit time is R for one emission port, the predetermined angle pitch α is α (rad) = 2.π · R / M. Desired.

N個の出射口からN個のレーザパルス22を同時に出射する場合、LiDARセンサ20は、所定角度ピッチαごとにN個のレーザパルス22を同時に出射する。 When N laser pulses 22 are simultaneously emitted from N emission ports, the LiDAR sensor 20 simultaneously emits N laser pulses 22 at predetermined angular pitch α.

所定角度ピッチαは固定値であってもよいし、可変値であってもよい。単位時間当たりの出射回数M、および単位時間当たりの回転数Rもまた、固定値であってもよいし、可変値であってもよい。 The predetermined angle pitch α may be a fixed value or a variable value. The number of emission times M per unit time and the number of rotations R per unit time may also be fixed values or variable values.

同じ角度方向に同時に出射されるレーザパルスの個数をNとする(図3)。例示的な実施形態では、M・N=60万(個/秒)、R=10(回転/秒)、N=16のとき、所定角度ピッチαは約0.0017(rad)、約0.096度である。ただし計算の簡単化のため、スキャン範囲は360度であるとした。 Let N be the number of laser pulses emitted simultaneously in the same angular direction (FIG. 3). In an exemplary embodiment, when MN = 600,000 (pieces / sec), R = 10 (rotation / sec), and N = 16, the predetermined angle pitch α is about 0.0017 (rad), about 0. It is 096 degrees. However, for the sake of simplification of calculation, the scan range is set to 360 degrees.

LiDARセンサ20としては、上述したようなレーザパルスの出射方向を揺動させ、揺動軸を中心とした所定の角度範囲内の計測対象物をスキャンするLiDARセンサが用いられてもよい。本明細書では、LiDARセンサ20の“回転”および“回転軸”は、このような“揺動”および“揺動軸”も含むとする。レーザパルスの出射方向を揺動させる場合の回転角度範囲は例えば180度以下であるが、それに限定されない。 As the LiDAR sensor 20, a LiDAR sensor that swings the emission direction of the laser pulse as described above and scans a measurement object within a predetermined angle range about the swing axis may be used. As used herein, the "rotation" and "rotation axis" of the LiDAR sensor 20 also include such "swing" and "swing axis". The rotation angle range when swinging the emission direction of the laser pulse is, for example, 180 degrees or less, but is not limited thereto.

次に、例示的な実施形態におけるLiDARセンサ20の回転軸21が臨む方向を説明する。 Next, the direction in which the rotation axis 21 of the LiDAR sensor 20 faces in the exemplary embodiment will be described.

図5は、LiDARセンサ20の回転軸21が臨む方向を説明する図である。図5は、鉛直方向33から見た平面視における無人ヘリコプター1を示している。鉛直方向33から見た平面視において、無人ヘリコプター1の機体進行方向を第1方向31とし、第1方向31に垂直な方向を第2方向32とする。例示的な実施形態において、LiDARセンサ20を用いた計測対象エリア50の計測中、無人ヘリコプター1は、LiDARセンサ20の回転軸21が第1方向31よりも第2方向32に近い方向を向いた状態で飛行する。回転軸21が臨む方向である回転軸方向21aと第2方向32とがなす角度θは、例えば0度から30度であるが、これに限定されない。一例として、角度θは5度から30度である。また別の例として、角度θは20度から30度である。 FIG. 5 is a diagram illustrating a direction in which the rotation axis 21 of the LiDAR sensor 20 faces. FIG. 5 shows an unmanned helicopter 1 in a plan view seen from the vertical direction 33. In a plan view seen from the vertical direction 33, the aircraft traveling direction of the unmanned helicopter 1 is the first direction 31, and the direction perpendicular to the first direction 31 is the second direction 32. In an exemplary embodiment, during measurement of the measurement target area 50 using the LiDAR sensor 20, in the unmanned helicopter 1, the rotation axis 21 of the LiDAR sensor 20 faces a direction closer to the second direction 32 than the first direction 31. Fly in the state. The angle θ formed by the rotation axis direction 21a and the second direction 32, which is the direction in which the rotation axis 21 faces, is, for example, 0 to 30 degrees, but is not limited thereto. As an example, the angle θ is 5 to 30 degrees. As another example, the angle θ is 20 to 30 degrees.

図5に示すように、LiDARセンサ20は、回転軸21が無人ヘリコプター1の機体4の前後方向よりも左右方向に近い方向に向けられていてもよい。機体4の前後方向が機体進行方向(第1方向31)を向くという無人ヘリコプター1の通常の飛行姿勢において、LiDARセンサ20の回転軸21を第1方向31よりも第2方向32に近い方向に向かせることができる。 As shown in FIG. 5, in the LiDAR sensor 20, the rotation axis 21 may be oriented in a direction closer to the left-right direction than the front-rear direction of the body 4 of the unmanned helicopter 1. In the normal flight posture of the unmanned helicopter 1 in which the front-rear direction of the aircraft 4 faces the aircraft traveling direction (first direction 31), the rotation axis 21 of the LiDAR sensor 20 is oriented closer to the second direction 32 than the first direction 31. You can turn it.

図6は、LiDARセンサ20から同時に出射されるN個のレーザパルス22を示す図である。図2および図3を参照しながら説明したように、回転するLiDARセンサ20のヘッド23は、所定角度ピッチαごとにN個のレーザパルス22を同時に出射する。図6は、所定角度ピッチαごとに出射されるレーザパルス22のうちの、鉛直方向33に垂直な平面方向に沿って出射されるN個のレーザパルス22を示している。 FIG. 6 is a diagram showing N laser pulses 22 simultaneously emitted from the LiDAR sensor 20. As described with reference to FIGS. 2 and 3, the rotating head 23 of the LiDAR sensor 20 simultaneously emits N laser pulses 22 at a predetermined angular pitch α. FIG. 6 shows N laser pulses 22 emitted along a plane direction perpendicular to the vertical direction 33 among the laser pulses 22 emitted at each predetermined angular pitch α.

図7は、進行する無人ヘリコプター1から出射されるレーザパルス22を示す図である。記載の便宜上、図7では、所定角度ピッチαごとに出射されるレーザパルス22のうちの、鉛直方向33に垂直な平面方向に沿って出射されるレーザパルス22を示している。LiDARセンサ20が一回転する間に無人ヘリコプター1が飛行する飛行距離をJで表している。 FIG. 7 is a diagram showing a laser pulse 22 emitted from an unmanned helicopter 1 traveling. For convenience of description, FIG. 7 shows the laser pulse 22 emitted along the plane direction perpendicular to the vertical direction 33 among the laser pulses 22 emitted at each predetermined angular pitch α. The flight distance that the unmanned helicopter 1 flies while the LiDAR sensor 20 makes one rotation is represented by J.

無人ヘリコプター1が距離J進む間にLiDARセンサ20は一回転し、所定角度ピッチαごとにN個のレーザパルス22を出射する。レーザパルス22が出射される回転角度のそれぞれにおいては、無人ヘリコプター1が距離Jだけ進むごとにN個のレーザパルス22が同時に出射される。このように、無人ヘリコプター1が進行する過程で、機体進行方向(第1方向31)に沿ったエリアに、レーザパルス22を密に照射することができる。機体進行方向31に沿ったエリア内の同一の物体(樹木等)に、様々な角度からレーザパルス22を密に照射することができ、機体進行方向31に沿ったエリアの詳細な3次元点群データを取得することができる。 While the unmanned helicopter 1 travels a distance J, the LiDAR sensor 20 makes one rotation and emits N laser pulses 22 at a predetermined angle pitch α. At each of the rotation angles at which the laser pulses 22 are emitted, N laser pulses 22 are simultaneously emitted each time the unmanned helicopter 1 travels by a distance J. In this way, in the process of the unmanned helicopter 1 traveling, the laser pulse 22 can be densely irradiated to the area along the traveling direction of the aircraft (first direction 31). The same object (tree, etc.) in the area along the aircraft traveling direction 31 can be densely irradiated with the laser pulse 22 from various angles, and a detailed three-dimensional point cloud of the area along the aircraft traveling direction 31 can be applied. You can get the data.

図8は、LiDARセンサ20を用いた計測対象エリア50の計測中、LiDARセンサ20の回転軸21が第2方向32を向いている形態を示す図である。図6と同様に、図8は、所定角度ピッチαごとに出射されるレーザパルス22のうちの、鉛直方向33に垂直な平面方向に沿って出射されるN個のレーザパルス22を示している。なお、回転軸21が厳密に第2方向32を向いている必要はなく、概ね第2方向32を向いていればよい。 FIG. 8 is a diagram showing a form in which the rotation axis 21 of the LiDAR sensor 20 faces the second direction 32 during the measurement of the measurement target area 50 using the LiDAR sensor 20. Similar to FIG. 6, FIG. 8 shows N laser pulses 22 emitted along a plane direction perpendicular to the vertical direction 33 among the laser pulses 22 emitted at predetermined angular pitch α. .. It should be noted that the rotating shaft 21 does not have to be exactly oriented in the second direction 32, and may be oriented substantially in the second direction 32.

図9は、LiDARセンサ20の回転軸21が第2方向32を向いている形態において、進行する無人ヘリコプター1から出射されるレーザパルス22を示す図である。記載の便宜上、図9では、所定角度ピッチαごとに出射されるレーザパルス22のうちの、鉛直方向33に垂直な平面方向に沿って出射されるレーザパルス22を示している。 FIG. 9 is a diagram showing a laser pulse 22 emitted from an unmanned helicopter 1 traveling in a form in which the rotation axis 21 of the LiDAR sensor 20 faces the second direction 32. For convenience of description, FIG. 9 shows the laser pulse 22 emitted along the plane direction perpendicular to the vertical direction 33 among the laser pulses 22 emitted at each predetermined angular pitch α.

図7を参照しながら説明したように、無人ヘリコプター1が距離J進む間にLiDARセンサ20は一回転し、所定角度ピッチαごとにN個のレーザパルス22を出射する。レーザパルス22が出射される回転角度のそれぞれにおいては、無人ヘリコプター1が距離Jだけ進むごとにN個のレーザパルス22が同時に出射される。回転軸21が第2方向32を向いている形態においても、無人ヘリコプター1が進行する過程で、機体進行方向31に沿ったエリアに、レーザパルス22を密に照射することができる。機体進行方向31に沿ったエリア内の同一の物体に、様々な角度からレーザパルス22を密に照射することができ、機体進行方向31に沿ったエリアの詳細な3次元点群データを取得することができる。 As described with reference to FIG. 7, the LiDAR sensor 20 makes one rotation while the unmanned helicopter 1 travels a distance J, and emits N laser pulses 22 at a predetermined angle pitch α. At each of the rotation angles at which the laser pulses 22 are emitted, N laser pulses 22 are simultaneously emitted each time the unmanned helicopter 1 travels by a distance J. Even in the form in which the rotation axis 21 faces the second direction 32, the laser pulse 22 can be densely irradiated to the area along the aircraft traveling direction 31 in the process of the unmanned helicopter 1 traveling. The same object in the area along the aircraft traveling direction 31 can be densely irradiated with the laser pulse 22 from various angles, and detailed three-dimensional point cloud data of the area along the aircraft traveling direction 31 can be acquired. be able to.

後述するように計測対象エリア50の計測を行うための飛行経路には多数の経路セグメントが含まれ得る。飛行経路に含まれる一つの経路セグメントの飛行において、機体進行方向31に沿ったエリアに繰り返しレーザパルス22を照射することができる。これにより、その一つの経路セグメントの飛行において高密度の3次元点群データを取得することができる。 As will be described later, the flight path for measuring the measurement target area 50 may include a large number of path segments. In the flight of one path segment included in the flight path, the area along the aircraft traveling direction 31 can be repeatedly irradiated with the laser pulse 22. This makes it possible to acquire high-density 3D point cloud data in the flight of that one path segment.

一つの経路セグメントの飛行においてLiDARセンサ20でスキャンしたエリアを、別の経路セグメントの飛行において再度詳細にスキャンしなくても、そのエリアにおける高密度の3次元点群データを取得することができる。 It is possible to acquire high-density 3D point cloud data in the area without having to scan the area scanned by the LiDAR sensor 20 in the flight of one route segment in detail again in the flight of another route segment.

図10は、計測対象エリア50の計測を行う無人ヘリコプター1の側面図である。 FIG. 10 is a side view of the unmanned helicopter 1 that measures the measurement target area 50.

上述したように、LiDARセンサ20は、所定角度ピッチαごとにレーザパルス22を出射する。説明の便宜上、図10は、それらのレーザパルス22のうちの一部のみを示している。具体的には、図10は、LiDARセンサ20から前方斜め下方向、真下方向、後方斜め下方向にそれぞれ出射されるレーザパルス22を示している。 As described above, the LiDAR sensor 20 emits a laser pulse 22 at a predetermined angle pitch α. For convenience of explanation, FIG. 10 shows only some of those laser pulses 22. Specifically, FIG. 10 shows a laser pulse 22 emitted from the LiDAR sensor 20 in the forward diagonally downward direction, the direct downward direction, and the rear diagonally downward direction, respectively.

本実施形態では、図10に示すように、樹木56等の計測対象物に対して、接近しながらのレーザパルス22の照射を行った後、引き続いて、遠ざかりながらのレーザパルス22の照射が行われる。無人ヘリコプター1が進行する過程で、計測対象物に対して連続的にレーザパルス22が照射される。特定の計測対象物に対する複数回の計測が連続的に行われるために、それぞれの計測で得られる点群データ間の地理座標系上の位置ずれを小さくすることができる。 In the present embodiment, as shown in FIG. 10, after irradiating the measurement object such as the tree 56 with the laser pulse 22 while approaching, the laser pulse 22 is subsequently irradiated while moving away. Will be. As the unmanned helicopter 1 advances, the laser pulse 22 continuously irradiates the object to be measured. Since a plurality of measurements are continuously performed on a specific measurement object, it is possible to reduce the positional deviation on the geographic coordinate system between the point cloud data obtained by each measurement.

図11は、比較例として、LiDARセンサ20の回転軸21を機体進行方向に向けた状態での計測を示している。無人ヘリコプター1の飛行経路66は、経路セグメント66aおよび66bを含んでいる。 FIG. 11 shows, as a comparative example, measurement in a state where the rotation axis 21 of the LiDAR sensor 20 is oriented in the traveling direction of the machine body. The flight path 66 of the unmanned helicopter 1 includes route segments 66a and 66b.

無人ヘリコプター1は、経路セグメント66aに沿って進行する過程で、例えば特定の樹木57の計測を行う。計測対象エリアはある程度の広さがあるため、無人ヘリコプター1は、樹木57の計測を行った後も、経路セグメント66aに沿った飛行を継続して別の計測対象物の計測を行う。経路セグメント66aの端部に達した無人ヘリコプター1は折り返し、次に、経路セグメント66bに沿って進行する。経路セグメント66aと経路セグメント66bとの間には所定の距離があけられている。無人ヘリコプター1は、経路セグメント66bに沿って進行する過程で、樹木57の計測を再び行う。経路セグメント66aを進行しながら計測して得られる点群データと、経路セグメント66bを進行しながら計測して得られる点群データとを組み合わせることで、高密度の3次元点群データを取得することができる。 The unmanned helicopter 1 measures, for example, a specific tree 57 in the process of traveling along the route segment 66a. Since the measurement target area has a certain area, the unmanned helicopter 1 continues to fly along the route segment 66a even after measuring the tree 57, and measures another measurement target. The unmanned helicopter 1 that has reached the end of the route segment 66a turns back and then travels along the route segment 66b. A predetermined distance is provided between the route segment 66a and the route segment 66b. The unmanned helicopter 1 measures the tree 57 again in the process of traveling along the route segment 66b. To acquire high-density three-dimensional point cloud data by combining the point cloud data obtained by measuring while traveling the route segment 66a and the point cloud data obtained by measuring while traveling the route segment 66b. Can be done.

しかし、経路セグメント66aを進行しながら樹木57を計測してから、経路セグメント66bを進行しながら樹木57の計測を行うまでの間に、無人ヘリコプター1は、比較的長い距離を飛行しているため、その間の累積誤差が点群データの座標のずれとして現れ得る。 However, since the unmanned helicopter 1 is flying a relatively long distance between the time when the tree 57 is measured while traveling along the route segment 66a and the time when the tree 57 is measured while traveling along the route segment 66b. , The cumulative error between them can appear as the coordinate deviation of the point cloud data.

例えば、GNSSと慣性計測装置(IMU:Inertial Measurement Unit)とを組み合わせて、無人ヘリコプター1の位置を検出する方法がある。無人ヘリコプター1の位置を高精度に検出しようとした場合、基準点に固定したGNSS(基準局)と無人ヘリコプター1に設けられたGNSSとを用いて、搬送波位相を利用した干渉測位を行うことが考えられる。しかし、山間部では、急斜面および背の高い樹木等によって人工衛星からの電波が遮られやすく、GNSSのみを用いて安定して位置を検出することは難しい場合がある。GNSSが使用できない期間は、IMUを用いて位置を推定し、飛行を継続する。しかし、IMUを用いて検出する座標には累積誤差が発生し、累積誤差は飛行距離に比例して大きくなる。 For example, there is a method of detecting the position of an unmanned helicopter 1 by combining a GNSS and an inertial measurement unit (IMU). When trying to detect the position of the unmanned helicopter 1 with high accuracy, it is conceivable to perform interference positioning using the carrier phase using the GNSS (reference station) fixed to the reference point and the GNSS provided in the unmanned helicopter 1. Will be. However, in mountainous areas, radio waves from artificial satellites are easily blocked by steep slopes and tall trees, and it may be difficult to stably detect the position using only GNSS. During the period when GNSS cannot be used, the IMU is used to estimate the position and continue the flight. However, a cumulative error occurs in the coordinates detected by using the IMU, and the cumulative error increases in proportion to the flight distance.

このため、樹木57を計測した後、比較的長い距離を飛行してから樹木57を再度計測した場合、点群データ間の地理座標系上の位置ずれが大きくなる場合がある。この位置ずれは、例えば、樹木の幹の直径を求めるときの誤差の原因になる。 Therefore, if the tree 57 is measured, then the tree 57 is measured again after flying a relatively long distance, the positional deviation on the geographic coordinate system between the point cloud data may become large. This misalignment causes, for example, an error in determining the diameter of the tree trunk.

一方、図10を参照しながら上述したように、本実施形態では、特定の樹木56に連続的にレーザパルス22を照射することができる。比較的短い距離の飛行の間に、特定の樹木56に接近しながらの計測と、その樹木56に遠ざかりながらの計測が行われる。特定の樹木56に接近しながら計測して得られる点群データと、その樹木56から遠ざかりながら計測して得られる点群データとの間の、地理座標系上の位置ずれを小さくすることができる。 On the other hand, as described above with reference to FIG. 10, in the present embodiment, the specific tree 56 can be continuously irradiated with the laser pulse 22. During a relatively short flight, measurements are taken while approaching a particular tree 56 and while moving away from that tree 56. It is possible to reduce the positional deviation on the geographic coordinate system between the point cloud data obtained by measuring while approaching a specific tree 56 and the point cloud data obtained by measuring while moving away from the tree 56. ..

図2に示したように、本実施形態のLiDARセンサ20は前方向および前方斜め上方向にもレーザパルス22を出射可能である。このため、計測対象エリア50に対して斜め上方向からだけではなく、横方向からレーザパルス22を照射したり、斜め下方向からレーザパルス22を照射したりすることができる。 As shown in FIG. 2, the LiDAR sensor 20 of the present embodiment can emit the laser pulse 22 in the forward direction and the forward diagonally upward direction. Therefore, it is possible to irradiate the measurement target area 50 not only from the diagonally upward direction but also from the lateral direction, or to irradiate the laser pulse 22 from the diagonally downward direction.

図12は、森林計測を行う無人ヘリコプター1を示す図である。図12に示す例では、森林54は斜面52に広がっている。無人ヘリコプター1は、斜面52に沿って上昇または下降しながら、計測対象エリアである森林54の計測を行う。 FIG. 12 is a diagram showing an unmanned helicopter 1 that performs forest measurement. In the example shown in FIG. 12, the forest 54 extends over the slope 52. The unmanned helicopter 1 measures the forest 54, which is the measurement target area, while ascending or descending along the slope 52.

斜面52に広がる森林54に対して、斜め上方向からだけではなく、横方向からレーザパルス22を照射したり、斜め下方向からレーザパルス22を照射したりすることができる。横方向からのレーザパルス22の照射では、基本的に日光を受けるために水平に生えている葉の間をレーザパルス22が通りやすくなる。レーザパルス22は樹木56の樹冠56aだけでなく、樹木56の幹56b、下層植生58および地表面59等にも到達し、反射される。これにより、樹冠点群だけでなく幹点群、下層植生点群および地表面点群を含む3次元点群データを得ることができる。 The forest 54 spreading on the slope 52 can be irradiated with the laser pulse 22 not only from the diagonally upward direction but also from the lateral direction, or the laser pulse 22 can be irradiated from the diagonally downward direction. Irradiation of the laser pulse 22 from the lateral direction makes it easier for the laser pulse 22 to pass between the leaves that grow horizontally because it is basically exposed to sunlight. The laser pulse 22 reaches not only the canopy 56a of the tree 56 but also the trunk 56b of the tree 56, the understory vegetation 58, the ground surface 59, and the like, and is reflected. As a result, it is possible to obtain three-dimensional point cloud data including not only the canopy point cloud but also the trunk point cloud, the understory vegetation point cloud and the ground surface point cloud.

次に、森林計測において無人ヘリコプター1を飛行させる飛行経路の設定方法を説明する。無人ヘリコプター1は、設定された飛行経路に沿って飛行するよう、プログラミングされている。 Next, a method of setting a flight path for flying an unmanned helicopter 1 in forest measurement will be described. The unmanned helicopter 1 is programmed to fly along a set flight path.

オペレータは、タブレットコンピュータ、基地局操縦装置等のコンピュータ装置を利用して、飛行経路を設定し得る。本明細書では、無人ヘリコプター1と、そのようなコンピュータ装置とを合わせて「計測システム」と呼ぶ。 The operator can set the flight path by using a computer device such as a tablet computer or a base station control device. In the present specification, the unmanned helicopter 1 and such a computer device are collectively referred to as a "measurement system".

図13は、無人ヘリコプター1とタブレットコンピュータ70とを含む計測システム100の一例を示している。図14は、無人ヘリコプター1と基地局操縦装置80とを含む計測システム100の一例を示している。タブレットコンピュータ70および基地局操縦装置80はいずれも、内蔵された、または外付けの記憶装置を有しており、当該記憶装置に地図データ90を記憶している。タブレットコンピュータ70および基地局操縦装置80は、地図データ90をディスプレイに表示してオペレータから飛行経路60の指定を受け付ける。タブレットコンピュータ70はタッチスクリーンパネルを有しており、オペレータからのタッチ操作により、無人ヘリコプター1を飛行させるべき飛行経路の指定、および絶対高度の指定を受け付ける。なお、本実施形態による基地局操縦装置80はノート型PCであり、かつタブレットコンピュータ70と同様のタッチ操作に対応しているとする。 FIG. 13 shows an example of a measurement system 100 including an unmanned helicopter 1 and a tablet computer 70. FIG. 14 shows an example of a measurement system 100 including an unmanned helicopter 1 and a base station control device 80. Both the tablet computer 70 and the base station control device 80 have a built-in or external storage device, and the map data 90 is stored in the storage device. The tablet computer 70 and the base station control device 80 display the map data 90 on the display and receive the designation of the flight path 60 from the operator. The tablet computer 70 has a touch screen panel, and accepts the designation of the flight route to which the unmanned helicopter 1 should fly and the designation of the absolute altitude by the touch operation from the operator. It is assumed that the base station control device 80 according to the present embodiment is a notebook PC and supports the same touch operation as the tablet computer 70.

以下、図13に示すタブレットコンピュータ70を例示して説明する。タブレットコンピュータ70の基本的な構成と基地局操縦装置80の基本的な構成とは概ね同じである。よって、下記の説明は基地局操縦装置80の説明として読み替えることができる。 Hereinafter, the tablet computer 70 shown in FIG. 13 will be illustrated and described. The basic configuration of the tablet computer 70 and the basic configuration of the base station control device 80 are substantially the same. Therefore, the following description can be read as a description of the base station control device 80.

図15は、タブレットコンピュータ70のハードウェア構成例を示している。 FIG. 15 shows a hardware configuration example of the tablet computer 70.

タブレットコンピュータ70は、CPU71と、メモリ72と、通信回路73と、画像処理回路74と、ディスプレイ75と、タッチスクリーンパネル76と、通信バス77とを有する。CPU71、メモリ72、通信回路73、画像処理回路74およびタッチスクリーンパネル76は通信バス77で接続されており、通信バス77を介して相互にデータを授受することが可能である。 The tablet computer 70 includes a CPU 71, a memory 72, a communication circuit 73, an image processing circuit 74, a display 75, a touch screen panel 76, and a communication bus 77. The CPU 71, the memory 72, the communication circuit 73, the image processing circuit 74, and the touch screen panel 76 are connected by the communication bus 77, and data can be exchanged with each other via the communication bus 77.

CPU71は、タブレットコンピュータ70の動作を制御する信号処理回路(コンピュータ)である。典型的にはCPU71は半導体集積回路である。CPU71を単に「処理回路」と呼ぶこともある。 The CPU 71 is a signal processing circuit (computer) that controls the operation of the tablet computer 70. Typically, the CPU 71 is a semiconductor integrated circuit. The CPU 71 may be simply referred to as a "processing circuit".

メモリ72は、CPU71の動作を制御するコンピュータプログラムを記憶している。メモリ72は、森林計測の制御をCPU71に実行させるためのコンピュータプログラムを記憶し得る。メモリ72は、無人ヘリコプター1の飛行の制御をCPU71に実行させるためのコンピュータプログラムを記憶していてもよい。上述したコンピュータプログラムと同様に、そのようなコンピュータプログラムは、それが記録された記録媒体からタブレットコンピュータ70へインストールしてもよいし、インターネット等の電気通信回線を介してダウンロードしてもよい。また、無線通信を介してそのようなコンピュータプログラムをタブレットコンピュータ70へインストールしてもよい。このようなコンピュータプログラムは、パッケージソフトウェアとして販売され得る。 The memory 72 stores a computer program that controls the operation of the CPU 71. The memory 72 may store a computer program for causing the CPU 71 to control the forest measurement. The memory 72 may store a computer program for causing the CPU 71 to control the flight of the unmanned helicopter 1. Similar to the computer programs described above, such computer programs may be installed on the tablet computer 70 from the recording medium on which they are recorded, or may be downloaded via a telecommunication line such as the Internet. Further, such a computer program may be installed on the tablet computer 70 via wireless communication. Such computer programs may be sold as packaged software.

メモリ72は、CPU71が実行するコンピュータプログラムを記憶する揮発性の記憶装置(例えばRAM)、および、地図データ90を記憶する不揮発性の記憶装置(例えばフラッシュメモリ)であり得る。RAMは、CPU71が演算を行う際のワークメモリとしても利用され得る。コンピュータプログラムは、フラッシュメモリに格納されていてもよい。CPU71は、タブレットコンピュータ70の起動時にフラッシュメモリからコンピュータプログラムを読み出してRAMに展開し、実行する。 The memory 72 may be a volatile storage device (for example, RAM) for storing a computer program executed by the CPU 71, and a non-volatile storage device (for example, flash memory) for storing map data 90. The RAM can also be used as a work memory when the CPU 71 performs an operation. The computer program may be stored in flash memory. When the tablet computer 70 starts up, the CPU 71 reads a computer program from the flash memory, expands it into RAM, and executes it.

通信回路73は、たとえば、Bluetooth(登録商標)および/またはWi-Fi(登録商標)規格に準拠した無線通信を行う無線通信回路である。無人ヘリコプター1の通信回路15fと同様、本明細書では、タブレットコンピュータ70は、Bluetooth(登録商標)規格および/またはWi-Fi規格に準拠した無線通信を行い、1対1で無人ヘリコプター1と通信する。通信回路73は、無人ヘリコプター1に送信すべきデータを、通信バス77を介してCPU71から受信する。また通信回路73は、無人ヘリコプター1から受信したデータ(例えばLiDARセンサ20の計測結果)を、通信バス77を介してCPU71および/またはメモリ72に送信する。 The communication circuit 73 is, for example, a wireless communication circuit that performs wireless communication conforming to the Bluetooth (registered trademark) and / or Wi-Fi (registered trademark) standard. Similar to the communication circuit 15f of the unmanned helicopter 1, in the present specification, the tablet computer 70 performs wireless communication conforming to the Bluetooth® standard and / or the Wi-Fi standard, and communicates with the unmanned helicopter 1 on a one-to-one basis. do. The communication circuit 73 receives data to be transmitted to the unmanned helicopter 1 from the CPU 71 via the communication bus 77. Further, the communication circuit 73 transmits the data received from the unmanned helicopter 1 (for example, the measurement result of the LiDAR sensor 20) to the CPU 71 and / or the memory 72 via the communication bus 77.

画像処理回路74は、CPU71の指示に従い、ディスプレイ(表示装置)75に表示する画像を生成する。たとえば画像処理回路74は、地図データ90を利用して計測対象エリア50の画像を表示し、タッチスクリーンパネル76を介して受け付けたオペレータのタッチ操作に応じて、ディスプレイ75上に飛行経路60を描画する。 The image processing circuit 74 generates an image to be displayed on the display (display device) 75 according to the instruction of the CPU 71. For example, the image processing circuit 74 displays an image of the measurement target area 50 using the map data 90, and draws a flight path 60 on the display 75 in response to an operator's touch operation received via the touch screen panel 76. do.

タッチスクリーンパネル76は、指やペンなどで行われたオペレータのタッチを検出することができる。検出方式として、静電式、抵抗膜式、光学式、超音波方式、電磁式などが知られている。たとえば、静電容量方式のタッチスクリーンパネル76の場合、タッチスクリーンパネル76は、特定の位置における静電容量の変化を検出し、当該変化に関するデータを、通信バス77を介してCPU71に送信する。CPU71は、送られてきたデータに基づいて、オペレータによるタッチの有無を判断する。「変化に関するデータ」の例は、静電容量が変化した位置および変化した時間長のデータである。 The touch screen panel 76 can detect an operator's touch made with a finger, a pen, or the like. As the detection method, an electrostatic method, a resistance film type, an optical method, an ultrasonic method, an electromagnetic method and the like are known. For example, in the case of the capacitive touch screen panel 76, the touch screen panel 76 detects a change in capacitance at a specific position and transmits data related to the change to the CPU 71 via the communication bus 77. The CPU 71 determines whether or not there is a touch by the operator based on the transmitted data. An example of "data on change" is data on the position where the capacitance changed and the time length changed.

本実施形態では、タッチスクリーンパネル76はディスプレイ75に重畳して設けられている。オペレータは、ディスプレイ75に表示された計測対象エリア50の画像を見ながら、所望のタッチ操作を行う。CPU71は、タッチスクリーンパネル76から出力された検出位置のデータが、ディスプレイ75に表示されている画像のどの位置を示しているかを判定する。なお、タッチスクリーンパネル76に代えて、またはタッチスクリーンパネル76とともに、マウス、キーボード、ジョイスティック、マイク等の他の入力装置を有していてもよい。 In this embodiment, the touch screen panel 76 is provided so as to be superimposed on the display 75. The operator performs a desired touch operation while looking at the image of the measurement target area 50 displayed on the display 75. The CPU 71 determines which position of the image displayed on the display 75 the detection position data output from the touch screen panel 76 indicates. In addition, instead of the touch screen panel 76, or together with the touch screen panel 76, another input device such as a mouse, a keyboard, a joystick, and a microphone may be provided.

以下、計測システム100のタブレットコンピュータ70を利用した飛行経路の設定方法と、設定された飛行経路に沿った無人ヘリコプター1の飛行方法を説明する。 Hereinafter, a method of setting a flight path using the tablet computer 70 of the measurement system 100 and a method of flying the unmanned helicopter 1 along the set flight path will be described.

図16は、例示的な実施形態による飛行経路の設定処理の手順を示すフローチャートである。図16に示す手順は、タブレットコンピュータ70または基地局操縦装置80のCPU71(図15)の制御により実行される。なお、複数の計測対象エリアが選択され得る場合には、そのうちの一つが予め指定されているとする。 FIG. 16 is a flowchart showing a procedure of flight path setting processing according to an exemplary embodiment. The procedure shown in FIG. 16 is executed under the control of the CPU 71 (FIG. 15) of the tablet computer 70 or the base station control device 80. When a plurality of measurement target areas can be selected, it is assumed that one of them is specified in advance.

ステップS2において、CPU71はその計測対象エリアに関する地図データを取得する。 In step S2, the CPU 71 acquires map data related to the measurement target area.

ステップS4において、CPU71はタッチスクリーンパネル76を介して飛行経路60の指定を受け付ける。飛行経路60の指定方法は種々考えられる。例えば、タブレットコンピュータ70には、計測対象エリア50、計測対象エリア50の等高線62、CPU71が演算した飛行経路60が表示される。例えば、CPU71は、等高線データを参照し、複数の等高線62を横切る経路セグメントを含む飛行経路60を演算して表示する。オペレータは、タッチ操作等の入力操作により飛行経路60に含まれる各経路セグメントの位置、経路セグメントの本数および経路セグメント間の距離等を調整することができる。 In step S4, the CPU 71 accepts the designation of the flight path 60 via the touch screen panel 76. Various methods for designating the flight path 60 can be considered. For example, the tablet computer 70 displays the measurement target area 50, the contour lines 62 of the measurement target area 50, and the flight path 60 calculated by the CPU 71. For example, the CPU 71 refers to the contour line data, calculates and displays the flight path 60 including the route segment crossing the plurality of contour lines 62. The operator can adjust the position of each route segment included in the flight route 60, the number of route segments, the distance between the route segments, and the like by an input operation such as a touch operation.

ステップS6において、CPU71は飛行経路60の設定が完了したか否かを判定する。例えばCPU71は、飛行経路60の設定を完了したことを示す入力をオペレータから受け付けるまでは、飛行経路60の設定が完了していないとして、ステップS4およびS6の処理を繰り返す。一方、飛行経路60の設定を完了したことを示す入力を受け付けると、CPU71は飛行経路60の設定が完了したと判定し、ステップS8に進む。ステップS8において、CPU71はタッチスクリーンパネル76を介して絶対高度の指定を受け付ける。図13には、絶対高度の数値を増加させる「+」ボタンと減少させる「-」ボタンとが表示されている。なお、ソフトウェアキーボードを表示させて数値を直接入力できるようにしてもよいし、ダイヤルまたはスライダ等のGUIを利用して入力できるようにしてもよい。 In step S6, the CPU 71 determines whether or not the setting of the flight path 60 is completed. For example, the CPU 71 repeats the processes of steps S4 and S6 on the assumption that the setting of the flight path 60 is not completed until the input indicating that the setting of the flight path 60 is completed is received from the operator. On the other hand, when the input indicating that the setting of the flight path 60 is completed is received, the CPU 71 determines that the setting of the flight path 60 is completed, and proceeds to step S8. In step S8, the CPU 71 accepts the absolute altitude designation via the touch screen panel 76. In FIG. 13, a “+” button for increasing the absolute altitude value and a “−” button for decreasing the absolute altitude value are displayed. It should be noted that the software keyboard may be displayed so that the numerical value can be directly input, or the numerical value may be input by using a GUI such as a dial or a slider.

以上の処理により、無人ヘリコプター1の飛行経路60が設定される。飛行経路60を示すデータは、例えば無線でタブレットコンピュータ70の通信回路73から送信され、無人ヘリコプター1の通信回路15f(図4)によって受信される。無人ヘリコプター1の信号処理回路15g(図4)は、受信したデータをRAM15iに格納する。その後、森林計測を実行する。 By the above processing, the flight path 60 of the unmanned helicopter 1 is set. The data indicating the flight path 60 is, for example, wirelessly transmitted from the communication circuit 73 of the tablet computer 70 and received by the communication circuit 15f (FIG. 4) of the unmanned helicopter 1. The signal processing circuit 15g (FIG. 4) of the unmanned helicopter 1 stores the received data in the RAM 15i. After that, forest measurement is performed.

図17は、飛行経路が設定された無人ヘリコプター1の飛行動作の手順を示すフローチャートである。図15に示す手順は、無人ヘリコプター1の信号処理回路15gの制御により実行される。 FIG. 17 is a flowchart showing the flight operation procedure of the unmanned helicopter 1 in which the flight path is set. The procedure shown in FIG. 15 is executed by controlling the signal processing circuit 15g of the unmanned helicopter 1.

ステップS10において、無人ヘリコプター1の信号処理回路15gは、GPSモジュール15a等を利用して自己位置を取得しながら、森林計測の開始位置まで無人ヘリコプター1を飛行させる。なお、ここで言う「開始位置」は、飛行経路60上の森林計測を開始する位置の経度および緯度に加え、絶対高度も含む。森林計測の開始位置に到達すると、ステップS12において、信号処理回路15gはLiDARセンサ20を用いた森林計測を開始する。 In step S10, the signal processing circuit 15g of the unmanned helicopter 1 flies the unmanned helicopter 1 to the start position of the forest measurement while acquiring its own position by using the GPS module 15a or the like. The "start position" referred to here includes the absolute altitude in addition to the longitude and latitude of the position where the forest measurement on the flight path 60 is started. When the start position of the forest measurement is reached, in step S12, the signal processing circuit 15g starts the forest measurement using the LiDAR sensor 20.

ステップS14において、信号処理回路15gは、設定された飛行経路60に沿って、かつ、設定された絶対高度で無人ヘリコプター1を飛行させる。 In step S14, the signal processing circuit 15g flies the unmanned helicopter 1 along the set flight path 60 and at the set absolute altitude.

ステップS16において、信号処理回路15gは、森林計測が終了したか否かを判定する。具体的には信号処理回路15gは、予め設定された飛行経路60に沿った飛行が完了したか否かを判定する。森林計測が終了するまでステップS14およびステップS16の処理を繰り返す。 In step S16, the signal processing circuit 15g determines whether or not the forest measurement has been completed. Specifically, the signal processing circuit 15g determines whether or not the flight along the preset flight path 60 is completed. The processes of steps S14 and S16 are repeated until the forest measurement is completed.

森林計測が終了すると、無人ヘリコプター1は、例えば自律飛行を行って帰還する。 When the forest measurement is completed, the unmanned helicopter 1 makes an autonomous flight, for example, and returns.

飛行経路60に含まれる複数の経路セグメントのそれぞれを飛行中にLiDARセンサ20から出力されたセンサーデータを組み合わせることで、高密度の3次元点群データを生成することができる。高密度の3次元点群データを生成する処理は、タブレットコンピュータ70が実行してもよいし、他の任意のコンピュータが実行してもよい。 By combining the sensor data output from the LiDAR sensor 20 during flight for each of the plurality of path segments included in the flight path 60, high-density three-dimensional point cloud data can be generated. The process of generating high-density three-dimensional point cloud data may be executed by the tablet computer 70 or any other computer.

図18は、飛行経路60の一例を示す図である。 FIG. 18 is a diagram showing an example of the flight path 60.

図18では複数の等高線62を破線で示している。飛行経路60は、複数の等高線62を横切る複数の経路セグメントを含む。その複数の経路セグメントには、第1経路セグメント60aおよび第2経路セグメント60bが含まれる。 In FIG. 18, a plurality of contour lines 62 are shown by broken lines. The flight path 60 includes a plurality of path segments that cross the plurality of contour lines 62. The plurality of route segments include a first route segment 60a and a second route segment 60b.

無人ヘリコプター1の信号処理回路15g(図4)は、複数の等高線62を横切る経路セグメントに沿って無人ヘリコプター1を飛行させる。計測対象エリア50の計測中、信号処理回路15gは、LiDARセンサ20の回転軸21が等高線62に沿った方向を向いた状態で無人ヘリコプター1を飛行させる。図12および図18を参照して、複数の等高線62を横切るように斜面52に沿って無人ヘリコプター1を飛行させることより、斜面52に広がる森林54に対して、斜め上方向からだけではなく、横方向からレーザパルス22を照射したり、斜め下方向からレーザパルス22を照射したりすることができる。 The signal processing circuit 15g (FIG. 4) of the unmanned helicopter 1 flies the unmanned helicopter 1 along a path segment that crosses a plurality of contour lines 62. During the measurement of the measurement target area 50, the signal processing circuit 15g flies the unmanned helicopter 1 with the rotation axis 21 of the LiDAR sensor 20 facing in the direction along the contour line 62. With reference to FIGS. 12 and 18, by flying the unmanned helicopter 1 along the slope 52 so as to cross the plurality of contour lines 62, the unmanned helicopter 1 is not only obliquely upward with respect to the forest 54 extending over the slope 52, but also from diagonally upward. The laser pulse 22 can be irradiated from the lateral direction, or the laser pulse 22 can be irradiated from the diagonally downward direction.

一本の経路セグメントは、鉛直方向33から見た平面視において、他のいくつかの経路セグメントと交差する。例えば、平面視において、第1経路セグメント60aは第2経路セグメント60bと交差している。互いに交差する複数の経路セグメントを飛行することにより、計測対象エリア50に複数の方位からレーザパルス22を照射することができ、計測対象エリア50の詳細な3次元点群データを取得することができる。 One path segment intersects several other path segments in plan view from the vertical direction 33. For example, in a plan view, the first path segment 60a intersects the second path segment 60b. By flying a plurality of path segments that intersect each other, the measurement target area 50 can be irradiated with the laser pulse 22 from a plurality of directions, and detailed three-dimensional point cloud data of the measurement target area 50 can be acquired. ..

このような、経路セグメント同士が交差する飛行経路60は、格子状の飛行経路となっている。格子状の飛行経路60を飛行することにより、計測対象エリア50に複数の方位からレーザパルス22を照射することができ、計測対象エリア50の詳細な3次元点群データを取得することができる。 The flight path 60 at which the path segments intersect with each other is a grid-like flight path. By flying along the grid-shaped flight path 60, the measurement target area 50 can be irradiated with the laser pulses 22 from a plurality of directions, and detailed three-dimensional point cloud data of the measurement target area 50 can be acquired.

次に、スキャンラインが一本のLiDARセンサ20が無人ヘリコプター1に設けられた形態について説明する。 Next, a mode in which the LiDAR sensor 20 having one scan line is provided in the unmanned helicopter 1 will be described.

上述したLiDARセンサ20はスキャンラインが複数本あり、所定角度ピッチαごとに複数のレーザパルス22を同時に出射していた。本発明の実施形態において、所定角度ピッチαごとに1個のレーザパルス22を出射する、スキャンラインが一本のLiDARセンサ20を用いることも可能である。そのようなLiDARセンサ20では、レーザパルス22の出力を大きくすることで、測定可能距離を長くすることができる。 The above-mentioned LiDAR sensor 20 has a plurality of scan lines, and simultaneously emits a plurality of laser pulses 22 at a predetermined angle pitch α. In the embodiment of the present invention, it is also possible to use the LiDAR sensor 20 having one scan line, which emits one laser pulse 22 for each predetermined angle pitch α. In such a LiDAR sensor 20, the measurable distance can be lengthened by increasing the output of the laser pulse 22.

図19は、スキャンラインが一本のLiDARセンサ20の回転軸21が臨む方向を説明する図である。図19は、鉛直方向33から見た平面視における無人ヘリコプター1を示している。 FIG. 19 is a diagram illustrating a direction in which the rotation axis 21 of the LiDAR sensor 20 having a single scan line faces. FIG. 19 shows an unmanned helicopter 1 in a plan view seen from the vertical direction 33.

LiDARセンサ20を用いた計測対象エリア50の計測中、LiDARセンサ20の回転軸21を第2方向32に対して傾ける。例示的な実施形態において、回転軸方向21aと第2方向32とがなす角度θは20度から40度であるが、これに限定されない。例えば、角度θは20度から30度であってもよい。 During the measurement of the measurement target area 50 using the LiDAR sensor 20, the rotation axis 21 of the LiDAR sensor 20 is tilted with respect to the second direction 32. In an exemplary embodiment, the angle θ between the rotation axis direction 21a and the second direction 32 is, but is not limited to, 20 to 40 degrees. For example, the angle θ may be 20 to 30 degrees.

LiDARセンサ20は、回転軸21に対して所定の角度を有する方向にレーザパルス22を出射する。例えば、図19に示すように、LiDARセンサ20は、回転軸21に対して直角の方向にレーザパルス22を出射する。LiDARセンサ20は、レーザパルス22を出射する方向を回転軸21の周りに回転させる。 The LiDAR sensor 20 emits a laser pulse 22 in a direction having a predetermined angle with respect to the rotation axis 21. For example, as shown in FIG. 19, the LiDAR sensor 20 emits a laser pulse 22 in a direction perpendicular to the rotation axis 21. The LiDAR sensor 20 rotates the direction in which the laser pulse 22 is emitted around the rotation axis 21.

図20は、スキャンラインが一本のLiDARセンサ20から出射されたレーザパルス22が計測対象エリア50に形成するレーザスポット24を示す図である。スキャンラインが1本のLiDARセンサ20を用いる場合、計測対象エリア50に形成されるレーザスポット24は1本のライン上に並ぶ。 FIG. 20 is a diagram showing a laser spot 24 formed in the measurement target area 50 by a laser pulse 22 emitted from a single LiDAR sensor 20 with a scan line. When the LiDAR sensor 20 having one scan line is used, the laser spots 24 formed in the measurement target area 50 are arranged on one line.

図20(a)は、回転軸方向21aが第2方向32に一致している形態において、LiDARセンサ20が一回転する間に平面上に形成されるレーザスポット24を示している。回転軸方向21aが第2方向32に一致している場合、レーザスポット24は、機体進行方向(第1方向31)に平行な直線上に並ぶ。 FIG. 20A shows a laser spot 24 formed on a plane while the LiDAR sensor 20 makes one rotation in a form in which the rotation axis direction 21a coincides with the second direction 32. When the rotation axis direction 21a coincides with the second direction 32, the laser spots 24 are aligned on a straight line parallel to the aircraft traveling direction (first direction 31).

図20(b)は、図19に示したように回転軸方向21aが第2方向32に対して傾いている形態において、LiDARセンサ20が一回転する間に平面上に形成されるレーザスポット24を示している。回転軸方向21aが第2方向32に対して傾いている場合、レーザスポット24は、機体進行方向31に対して傾いた直線上に並ぶ。 20 (b) shows a laser spot 24 formed on a plane while the LiDAR sensor 20 makes one rotation in a form in which the rotation axis direction 21a is tilted with respect to the second direction 32 as shown in FIG. Is shown. When the rotation axis direction 21a is tilted with respect to the second direction 32, the laser spots 24 are aligned on a straight line tilted with respect to the aircraft traveling direction 31.

図20(c)は、二個の直線上に並ぶレーザスポット24の群を示す図である。無人ヘリコプター1が距離J進む間にLiDARセンサ20は一回転し、直線上に並ぶレーザスポット24の群が二つ形成される。 FIG. 20 (c) is a diagram showing a group of laser spots 24 arranged on two straight lines. While the unmanned helicopter 1 travels a distance J, the LiDAR sensor 20 makes one rotation, forming two groups of laser spots 24 arranged in a straight line.

図21は、回転軸方向21aが第2方向32に対して傾いている形態において、進行する無人ヘリコプター1から出射されるレーザパルス22によって平面上に形成されるレーザスポット24を示す図である。無人ヘリコプター1が距離Jだけ進むごとに、直線上に並ぶレーザスポット24の群が形成され、全体としてレーザスポット24を第2方向32に拡げて分布させることができる。すなわち、第2方向32に幅を有するエリアをスキャンすることができる。 FIG. 21 is a diagram showing a laser spot 24 formed on a plane by a laser pulse 22 emitted from an unmanned helicopter 1 traveling in a form in which the rotation axis direction 21a is tilted with respect to the second direction 32. Every time the unmanned helicopter 1 advances by the distance J, a group of laser spots 24 arranged on a straight line is formed, and the laser spots 24 can be expanded and distributed in the second direction 32 as a whole. That is, it is possible to scan an area having a width in the second direction 32.

このように、LiDARセンサ20の回転軸21を第2方向32に対して傾けることで、スキャンラインが一本のLiDARセンサ20を用いた場合でも、レーザパルス22の照射位置を第2方向32に拡げることができ、照射漏れ領域を低減することができる。 By tilting the rotation axis 21 of the LiDAR sensor 20 with respect to the second direction 32 in this way, the irradiation position of the laser pulse 22 is set to the second direction 32 even when the LiDAR sensor 20 having a single scan line is used. It can be expanded and the irradiation leakage area can be reduced.

次に、LiDARセンサ20の回転軸21が無人ヘリコプター1の機体の左右方向よりも前後方向に近い方向を向いている場合の計測について説明する。 Next, measurement will be described when the rotation axis 21 of the LiDAR sensor 20 is oriented in a direction closer to the front-rear direction than the left-right direction of the aircraft of the unmanned helicopter 1.

図22は、鉛直方向33から見た平面視における無人ヘリコプター1を示している。図22に示す例では、回転軸21が無人ヘリコプター1の機体の前後方向を向いている。このような形態では、無人ヘリコプター1の信号処理回路15g(図4)は、回転軸21が機体進行方向(第1方向31)よりも第2方向32に近い方向を向くように、無人ヘリコプター1を飛行させる。例えば、図22に示すように、無人ヘリコプター1を機体の右斜め前方向に飛行させることで、回転軸21を第2方向32に近い方向に向けた状態で無人ヘリコプター1を飛行させることができる。これにより、回転軸21を第2方向32に近い方向に向けた状態で計測対象エリア50の計測を行うことができる。 FIG. 22 shows an unmanned helicopter 1 in a plan view seen from the vertical direction 33. In the example shown in FIG. 22, the rotating shaft 21 faces the front-rear direction of the body of the unmanned helicopter 1. In such a form, the signal processing circuit 15g (FIG. 4) of the unmanned helicopter 1 has the unmanned helicopter 1 so that the rotating shaft 21 faces the direction closer to the second direction 32 than the aircraft traveling direction (first direction 31). To fly. For example, as shown in FIG. 22, by flying the unmanned helicopter 1 diagonally forward to the right of the airframe, the unmanned helicopter 1 can be flown with the rotation axis 21 oriented in a direction close to the second direction 32. .. As a result, the measurement target area 50 can be measured with the rotation shaft 21 oriented in the direction close to the second direction 32.

次に、複数のLiDARセンサが設けられた無人ヘリコプター1を説明する。 Next, an unmanned helicopter 1 provided with a plurality of LiDAR sensors will be described.

図23は、複数のLiDARセンサが設けられた無人ヘリコプター1の正面図である。図23に示す例では、LiDARセンサ20に加えてLiDARセンサ(第2LiDARセンサ)40が無人ヘリコプター1に設けられている。LiDARセンサ40は、LiDARセンサ20と同様の構成を有している。LiDARセンサ40のヘッドは回転軸41を中心として回転する。回転するLiDARセンサ40のヘッドは、所定角度ピッチαごとにN個のレーザパルス42を同時に出射する。 FIG. 23 is a front view of the unmanned helicopter 1 provided with a plurality of LiDAR sensors. In the example shown in FIG. 23, the LiDAR sensor (second LiDAR sensor) 40 is provided in the unmanned helicopter 1 in addition to the LiDAR sensor 20. The LiDAR sensor 40 has the same configuration as the LiDAR sensor 20. The head of the LiDAR sensor 40 rotates about the rotation shaft 41. The head of the rotating LiDAR sensor 40 simultaneously emits N laser pulses 42 at a predetermined angle pitch α.

無人ヘリコプター1に設けられるLiDARセンサの個数は任意であり、三個以上のLiDARセンサが無人ヘリコプター1に設けられてもよい。ここでは、二つのLiDARセンサが設けられた無人ヘリコプター1を例示して説明する。 The number of LiDAR sensors provided in the unmanned helicopter 1 is arbitrary, and three or more LiDAR sensors may be provided in the unmanned helicopter 1. Here, an unmanned helicopter 1 provided with two LiDAR sensors will be illustrated and described.

図24は、LiDARセンサ20、40の回転軸21、41が臨む方向を説明する図である。図24は、鉛直方向33から見た平面視における無人ヘリコプター1を示している。平面視において、LiDARセンサ40の回転軸41は、LiDARセンサ20の回転軸21とは異なる方向を向いている。すなわち、回転軸方向21aと、回転軸41が臨む方向である回転軸方向41aとは互いに異なっている。回転軸方向41aと第2方向32とがなす角度θaは、角度θと同じであり得るが、互いに異なっていてもよい。 FIG. 24 is a diagram illustrating a direction in which the rotation axes 21 and 41 of the LiDAR sensors 20 and 40 face. FIG. 24 shows the unmanned helicopter 1 in a plan view seen from the vertical direction 33. In a plan view, the rotation axis 41 of the LiDAR sensor 40 faces in a different direction from the rotation axis 21 of the LiDAR sensor 20. That is, the rotation axis direction 21a and the rotation axis direction 41a, which is the direction in which the rotation axis 41 faces, are different from each other. The angle θa formed by the rotation axis direction 41a and the second direction 32 may be the same as the angle θ, but may be different from each other.

計測対象エリア50の計測中、平面視において、機体進行方向(第1方向31)よりも第2方向32に近い方向に回転軸41を向ける。例えば、機体進行方向31を前方向としたとき、LiDARセンサ20の回転軸21を左斜め前方から右斜め後方に臨ませ、第2LiDARセンサ40の回転軸41は右斜め前方から左斜め後方に臨ませる。 During the measurement of the measurement target area 50, the rotation axis 41 is directed in a direction closer to the second direction 32 than the aircraft traveling direction (first direction 31) in a plan view. For example, when the aircraft traveling direction 31 is the forward direction, the rotation axis 21 of the LiDAR sensor 20 faces diagonally from the front left to the diagonally rear right, and the rotation axis 41 of the second LiDAR sensor 40 faces diagonally forward to the left. No.

図25は、LiDARセンサ20から同時に出射されるN個のレーザパルス22、およびLiDARセンサ40から同時に出射されるN個のレーザパルス42を示す図である。図6と同様に、図25は、所定角度ピッチαごとに出射されるレーザパルス22のうちの、鉛直方向33に垂直な平面方向に沿って出射されるN個のレーザパルス22を示している。また、図25は、所定角度ピッチαごとに出射されるレーザパルス42のうちの、鉛直方向33に垂直な平面方向に沿って出射されるN個のレーザパルス42を示している。 FIG. 25 is a diagram showing N laser pulses 22 simultaneously emitted from the LiDAR sensor 20 and N laser pulses 42 simultaneously emitted from the LiDAR sensor 40. Similar to FIG. 6, FIG. 25 shows N laser pulses 22 emitted along a plane direction perpendicular to the vertical direction 33 among the laser pulses 22 emitted at predetermined angular pitch α. .. Further, FIG. 25 shows N laser pulses 42 emitted along the plane direction perpendicular to the vertical direction 33 among the laser pulses 42 emitted at each predetermined angular pitch α.

図26は、進行する無人ヘリコプター1から出射されるレーザパルス22、42を示す図である。記載の便宜上、図26では、所定角度ピッチαごとに出射されるレーザパルス22、42のうちの、鉛直方向33に垂直な平面方向に沿って出射されるレーザパルス22、42を示している。無人ヘリコプター1が距離J進む間に、LiDARセンサ20、40のそれぞれは一回転し、所定角度ピッチαごとにN個のレーザパルス22、42を出射する。 FIG. 26 is a diagram showing laser pulses 22 and 42 emitted from the traveling unmanned helicopter 1. For convenience of description, FIG. 26 shows the laser pulses 22 and 42 emitted along the plane direction perpendicular to the vertical direction 33 among the laser pulses 22 and 42 emitted at each predetermined angular pitch α. While the unmanned helicopter 1 travels a distance J, each of the LiDAR sensors 20 and 40 makes one rotation and emits N laser pulses 22 and 42 at a predetermined angle pitch α.

上述した図7は、一個のLiDARセンサ20から出射されるレーザパルス22を示している。図7に示す例では、機体進行方向31に沿った右側のエリアに多くのレーザパルス22を照射できているが、左側のエリアでは右側のエリアよりもレーザパルス22照射数が少なくなっている。 FIG. 7 described above shows a laser pulse 22 emitted from one LiDAR sensor 20. In the example shown in FIG. 7, a large number of laser pulses 22 can be irradiated to the area on the right side along the traveling direction 31 of the aircraft, but the number of laser pulse 22 irradiations is smaller in the area on the left side than in the area on the right side.

一方、無人ヘリコプター1がLiDARセンサ40をさらに備えた形態では、図26に示すように、機体進行方向31に沿った左側のエリアにLiDARセンサ40から多くのレーザパルス22を照射することができている。回転軸が互いに異なる方向を向いている二つのLiDARセンサ20、40からレーザパルス22、42を出射させることにより、より広い範囲に多くのレーザパルス22、42を照射することができる。 On the other hand, in the form in which the unmanned helicopter 1 is further equipped with the LiDAR sensor 40, as shown in FIG. 26, the area on the left side along the aircraft traveling direction 31 can be irradiated with a large number of laser pulses 22 from the LiDAR sensor 40. There is. By emitting the laser pulses 22 and 42 from the two LiDAR sensors 20 and 40 whose rotation axes are oriented in different directions, it is possible to irradiate a larger range of the laser pulses 22 and 42.

また、二つのLiDARセンサ20、40が互いに異なる方向にレーザパルス22、42を出射することにより、一方のLiDARセンサから多くのレーザパルスを照射することが難しいエリアを、他方のLiDARセンサで補完することができる。これにより、機体進行方向31に沿ったエリアにより多くのレーザパルス22を照射することができる。 Further, since the two LiDAR sensors 20 and 40 emit laser pulses 22 and 42 in different directions, the area where it is difficult to irradiate many laser pulses from one LiDAR sensor is complemented by the other LiDAR sensor. be able to. As a result, more laser pulses 22 can be irradiated to the area along the traveling direction 31 of the aircraft.

次に、二つのLiDARセンサ20、40が設けられた無人ヘリコプター1の変形例を説明する。 Next, a modified example of the unmanned helicopter 1 provided with the two LiDAR sensors 20 and 40 will be described.

図27は、LiDARセンサ20、40の回転軸21、41が臨む方向を説明する図である。図27に示す例では、平面視において、LiDARセンサ40の回転軸41は、第2方向32よりも第1方向31に近い方向を向いている。回転軸方向41aと第1方向31とがなす角度θbは、角度θと同じであってもよいし、互いに異なっていてもよい。計測対象エリア50の計測中、LiDARセンサ40の回転軸41が機体進行方向(第1方向31)に近い方向を向いていることにより、機体進行方向31に対する横方向にも広い範囲にわたってレーザパルス22を照射することができる。これにより、一本の経路セグメントに沿った飛行中により広いエリアの計測を行うことができる。 FIG. 27 is a diagram illustrating a direction in which the rotation axes 21 and 41 of the LiDAR sensors 20 and 40 face. In the example shown in FIG. 27, in a plan view, the rotation axis 41 of the LiDAR sensor 40 faces a direction closer to the first direction 31 than the second direction 32. The angle θb formed by the rotation axis direction 41a and the first direction 31 may be the same as the angle θ, or may be different from each other. During the measurement of the measurement target area 50, the rotation axis 41 of the LiDAR sensor 40 faces in a direction close to the aircraft traveling direction (first direction 31), so that the laser pulse 22 covers a wide range in the lateral direction with respect to the aircraft traveling direction 31. Can be irradiated. This makes it possible to measure a wider area during flight along a single path segment.

上述した実施形態によれば、無人ヘリコプター1が従来の航空機よりも低い高度を飛ぶことにより、レーザスポットの面内個数密度を高めるとともに、レーザスポット中心間隔を縮小することができる。 According to the above-described embodiment, the unmanned helicopter 1 can fly at an altitude lower than that of a conventional aircraft, thereby increasing the in-plane number density of laser spots and reducing the laser spot center spacing.

低い高度の飛行に伴い飛行速度を低下させた場合、バッテリから供給される電力で電動モータを動作させるマルチコプターでは、航続距離が短いため、計測対象エリアが狭くなってしまう。一方、内燃機関を動力源として飛行する無人ヘリコプターは、航続距離が長いため、飛行速度を低下させても、十分な計測対象エリアを確保することができる。 When the flight speed is reduced due to flight at a low altitude, the measurement target area becomes narrow because the cruising range is short in the multicopter that operates the electric motor with the electric power supplied from the battery. On the other hand, an unmanned helicopter that flies using an internal combustion engine as a power source has a long cruising range, so that a sufficient measurement target area can be secured even if the flight speed is reduced.

なお、本明細書では、LiDARセンサが設けられた無人航空機を例示して説明した。機械回転方式、MEMS方式、フェーズドアレイ方式のLiDARセンサを例示したが、フラッシュLiDARセンサを用いてもよい。フラッシュLiDARセンサには回転軸または揺動軸は存在しないが、斜面に広がる森林を対象とする森林計測を行い得るような位置および角度で無人ヘリコプター1に取り付けられればよい。 In this specification, an unmanned aerial vehicle provided with a LiDAR sensor has been illustrated and described. Although the mechanical rotation type, MEMS type, and phased array type LiDAR sensors have been exemplified, a flash LiDAR sensor may be used. Although the flash LiDAR sensor does not have a rotation axis or a swing axis, it may be attached to the unmanned helicopter 1 at a position and an angle capable of performing forest measurement for a forest spreading on a slope.

以上、本発明の例示的な実施形態を説明した。 The exemplary embodiments of the present invention have been described above.

本発明のある実施形態に係る計測システム100は、LiDARセンサ20が設けられた無人ヘリコプター1を飛行させて計測対象エリア50の計測を行う。計測システム100は、無人ヘリコプター1と、無人ヘリコプター1に設けられたLiDARセンサ20と、無人ヘリコプター1の飛行を制御する制御装置15とを備える。鉛直方向33から見た平面視において、無人ヘリコプター1の機体進行方向31を第1方向31とし、第1方向31に垂直な方向を第2方向32としたとき、LiDARセンサ20を用いた計測対象エリア50の計測中、無人ヘリコプター1は、LiDARセンサ20の回転軸21が第1方向31よりも第2方向32に近い方向を向いた状態で飛行する。 The measurement system 100 according to an embodiment of the present invention flies an unmanned helicopter 1 provided with a LiDAR sensor 20 to measure an area 50 to be measured. The measurement system 100 includes an unmanned helicopter 1, a LiDAR sensor 20 provided in the unmanned helicopter 1, and a control device 15 for controlling the flight of the unmanned helicopter 1. In the plan view seen from the vertical direction 33, when the aircraft traveling direction 31 of the unmanned helicopter 1 is the first direction 31 and the direction perpendicular to the first direction 31 is the second direction 32, the measurement target using the LiDAR sensor 20 is used. During the measurement of the area 50, the unmanned helicopter 1 flies in a state where the rotation axis 21 of the LiDAR sensor 20 faces a direction closer to the second direction 32 than the first direction 31.

LiDARセンサ20を用いた計測対象エリア50の計測中、LiDARセンサ20の回転軸21が第1方向31よりも第2方向32に近い方向を向いた状態で無人ヘリコプター1は飛行する。LiDARセンサ20は回転していることから、無人ヘリコプター1が進行する過程で、機体進行方向31に沿ったエリアに、レーザパルス22を密に照射することができる。これにより、例えば、LiDARセンサ20から複数のレーザパルス22が同時に出射される形態においては、機体進行方向31に沿ったエリアの同一箇所に、様々な角度からレーザパルス22を密に照射できる。その結果、機体進行方向31に沿ったエリアの詳細な3次元点群データを取得できる。さらに、LiDARセンサ20を回転させることにより、例えば、森林54を構成する樹木56に対し、様々な角度からレーザパルス22を照射することができる。 During the measurement of the measurement target area 50 using the LiDAR sensor 20, the unmanned helicopter 1 flies in a state where the rotation axis 21 of the LiDAR sensor 20 faces a direction closer to the second direction 32 than the first direction 31. Since the LiDAR sensor 20 is rotating, the laser pulse 22 can be densely applied to the area along the aircraft traveling direction 31 in the process of the unmanned helicopter 1 traveling. Thereby, for example, in the form in which a plurality of laser pulses 22 are simultaneously emitted from the LiDAR sensor 20, the laser pulses 22 can be densely irradiated to the same location in the area along the aircraft traveling direction 31 from various angles. As a result, detailed three-dimensional point cloud data of the area along the aircraft traveling direction 31 can be acquired. Further, by rotating the LiDAR sensor 20, for example, the trees 56 constituting the forest 54 can be irradiated with the laser pulse 22 from various angles.

飛行経路60に含まれる一つの経路セグメントの飛行において、機体進行方向31に沿ったエリアに繰り返しレーザパルス22を照射することができる。これにより、その一つの経路セグメントの飛行において高密度の3次元点群データを取得することができる。 In the flight of one path segment included in the flight path 60, the area along the aircraft traveling direction 31 can be repeatedly irradiated with the laser pulse 22. This makes it possible to acquire high-density 3D point cloud data in the flight of that one path segment.

一つの経路セグメントの飛行においてLiDARセンサ20でスキャンしたエリアを、別の経路セグメントの飛行において再度詳細にスキャンしなくても、そのエリアの高密度の3次元点群データを取得することができる。 It is possible to acquire high-density 3D point cloud data of the area scanned by the LiDAR sensor 20 in the flight of one route segment without having to scan the area in detail again in the flight of another route segment.

計測対象エリア50内の同一の物体に対して、連続的にレーザパルス22を照射することができる。これにより、例えば樹木56の上空を飛行しながら計測するとき、樹木56に接近しながら計測して得られる点群データと、その樹木56から遠ざかりながら計測して得られる点群データとの間の、地理座標系上の位置ずれを小さくすることができる。 The laser pulse 22 can be continuously applied to the same object in the measurement target area 50. Thereby, for example, when measuring while flying over the tree 56, between the point cloud data obtained by measuring while approaching the tree 56 and the point cloud data obtained by measuring while moving away from the tree 56. , The misalignment on the geographic coordinate system can be reduced.

ある実施形態において、LiDARセンサ20は、回転軸21が無人ヘリコプター1の機体の前後方向よりも左右方向に近い方向に向けられていてもよい。 In certain embodiments, the LiDAR sensor 20 may have its rotating shaft 21 oriented in a direction closer to the left-right direction than the front-rear direction of the unmanned helicopter 1.

機体の前後方向が機体進行方向31を向くという無人ヘリコプター1の通常の飛行姿勢において、LiDARセンサ20の回転軸21を第1方向31よりも第2方向32に近い方向に向かせることができる。 In the normal flight posture of the unmanned helicopter 1 in which the front-rear direction of the aircraft faces the aircraft traveling direction 31, the rotation axis 21 of the LiDAR sensor 20 can be oriented closer to the second direction 32 than the first direction 31.

ある実施形態において、LiDARセンサ20を用いた計測対象エリア50の計測中、制御装置15は、LiDARセンサ20の回転軸21が第1方向31よりも第2方向32に近い方向を向くように、無人ヘリコプター1を飛行させてもよい。 In one embodiment, during measurement of the measurement target area 50 using the LiDAR sensor 20, the control device 15 directs the rotation axis 21 of the LiDAR sensor 20 to face a direction closer to the second direction 32 than the first direction 31. The unmanned helicopter 1 may be flown.

LiDARセンサ20の回転軸21が無人ヘリコプター1の機体の前後方向よりも左右方向に近い方向を向いていない場合においても、その回転軸21を第2方向32に近い方向に向けた状態で無人ヘリコプター1を飛行させることができる。 Even if the rotation axis 21 of the LiDAR sensor 20 is not oriented closer to the left-right direction than the front-rear direction of the unmanned helicopter 1, the unmanned helicopter is oriented with the rotation axis 21 oriented toward the second direction 32. 1 can be flown.

ある実施形態において、計測対象エリア50の計測中、LiDARセンサ20の回転軸21は、第2方向32を向いていてもよい。 In one embodiment, the rotation axis 21 of the LiDAR sensor 20 may face the second direction 32 during the measurement of the measurement target area 50.

無人ヘリコプター1が進行する過程で、機体進行方向31に沿ったエリアに対してレーザパルス22をより密に照射できる。これにより、機体進行方向31に沿ったエリアのより詳細な3次元点群データを取得することができる。さらに、LiDARセンサ20を回転させることにより、例えば、森林54を構成する樹木56に対し、様々な角度からレーザパルス22を照射することができる。 In the process of traveling the unmanned helicopter 1, the laser pulse 22 can be more closely irradiated to the area along the aircraft traveling direction 31. As a result, more detailed three-dimensional point cloud data of the area along the aircraft traveling direction 31 can be acquired. Further, by rotating the LiDAR sensor 20, for example, the trees 56 constituting the forest 54 can be irradiated with the laser pulse 22 from various angles.

ある実施形態において、計測対象エリア50の計測中、平面視において、LiDARセンサ20の回転軸21は、第2方向32に対して傾いていてもよい。 In one embodiment, the rotation axis 21 of the LiDAR sensor 20 may be tilted with respect to the second direction 32 in a plan view during the measurement of the measurement target area 50.

LiDARセンサ20が地上に形成するレーザパルス22の照射位置を第2方向32に拡げて分布させることができる。スキャンラインが1本のLiDARセンサ20を用いる場合、回転軸21が第2方向32に一致していると、照射位置は第1方向31に平行な直線上に位置する。レーザパルス22の照射位置を第2方向32に拡げることにより、照射漏れ領域を低減できる。 The irradiation position of the laser pulse 22 formed on the ground by the LiDAR sensor 20 can be expanded and distributed in the second direction 32. When the LiDAR sensor 20 having one scan line is used, if the rotation axis 21 coincides with the second direction 32, the irradiation position is located on a straight line parallel to the first direction 31. By expanding the irradiation position of the laser pulse 22 in the second direction 32, the irradiation leakage region can be reduced.

ある実施形態において、LiDARセンサ20は、回転軸21に対して所定の角度を有する方向にレーザパルス22を出射し、レーザパルス22を出射する方向を回転軸21の周りに回転させてもよい。 In certain embodiments, the LiDAR sensor 20 may emit a laser pulse 22 in a direction having a predetermined angle with respect to the rotation axis 21 and rotate the direction in which the laser pulse 22 is emitted around the rotation axis 21.

スキャンラインが1本のLiDARセンサ20を用いる場合、地上に形成されるレーザパルス22の照射位置が1本のライン上に並ぶが、第2方向32に幅を有するエリアをスキャンすることができる。 When a LiDAR sensor 20 having one scan line is used, the irradiation positions of the laser pulses 22 formed on the ground are lined up on one line, but an area having a width in the second direction 32 can be scanned.

ある実施形態において、計測対象エリア50は、地表面59から複数の樹木56が立ち上がる森林54を含んでもよい。 In one embodiment, the measurement target area 50 may include a forest 54 in which a plurality of trees 56 rise from the ground surface 59.

森林54に様々な角度からレーザパルス22を照射することができ、レーザパルス22は樹木56の樹冠56aだけでなく、樹木56の幹56b、下層植生58および地表面59等にも到達し、反射される。これにより、樹冠点群だけでなく幹点群、下層植生点群および地表面点群を含む3次元点群データを得ることができる。 The forest 54 can be irradiated with the laser pulse 22 from various angles, and the laser pulse 22 reaches not only the canopy 56a of the tree 56 but also the trunk 56b of the tree 56, the understory vegetation 58, the ground surface 59, etc., and is reflected. Will be done. As a result, it is possible to obtain three-dimensional point cloud data including not only the canopy point cloud but also the trunk point cloud, the understory vegetation point cloud and the ground surface point cloud.

ある実施形態において、地表面59は斜面52を含み、計測対象エリア50の計測中、制御装置15は、無人ヘリコプター1を斜面52に沿って上昇または下降させてもよい。 In certain embodiments, the ground surface 59 includes a slope 52, and during measurement of the area 50 to be measured, the control device 15 may raise or lower the unmanned helicopter 1 along the slope 52.

斜面52に広がる森林54に対して、斜め上方向からだけではなく、横方向からレーザパルス22を照射したり、斜め下方向からレーザパルス22を照射したりすることができる。レーザパルス22は樹木56の樹冠56aだけでなく、樹木56の幹56b、下層植生58および地表面59等にも到達し、反射される。これにより、樹冠点群だけでなく幹点群、下層植生点群および地表面点群を含む3次元点群データを得ることができる。 The forest 54 spreading on the slope 52 can be irradiated with the laser pulse 22 not only from the diagonally upward direction but also from the lateral direction, or the laser pulse 22 can be irradiated from the diagonally downward direction. The laser pulse 22 reaches not only the canopy 56a of the tree 56 but also the trunk 56b of the tree 56, the understory vegetation 58, the ground surface 59, and the like, and is reflected. As a result, it is possible to obtain three-dimensional point cloud data including not only the canopy point cloud but also the trunk point cloud, the understory vegetation point cloud and the ground surface point cloud.

ある実施形態において、計測対象エリア50の計測中、制御装置15は、複数の等高線62を横切る第1経路セグメント60aに沿って無人ヘリコプター1を飛行させてもよい。 In certain embodiments, during the measurement of the area 50 to be measured, the control device 15 may fly the unmanned helicopter 1 along the first path segment 60a across the plurality of contour lines 62.

複数の等高線62を横切るように斜面52に沿って無人ヘリコプター1を飛行させることより、斜面52に広がる森林54に対して、斜め上方向からだけではなく、横方向からレーザパルス22を照射したり、斜め下方向からレーザパルス22を照射したりすることができる。 By flying the unmanned helicopter 1 along the slope 52 so as to cross the plurality of contour lines 62, the laser pulse 22 can be applied to the forest 54 spreading on the slope 52 not only from diagonally upward but also from the lateral direction. , The laser pulse 22 can be irradiated from diagonally downward.

ある実施形態において、計測対象エリア50の計測中、制御装置15は、LiDARセンサ20の回転軸21が等高線62に沿った方向を向いた状態で無人ヘリコプター1を飛行させてもよい。 In one embodiment, during the measurement of the measurement target area 50, the control device 15 may fly the unmanned helicopter 1 with the rotation axis 21 of the LiDAR sensor 20 facing in the direction along the contour line 62.

LiDARセンサ20の回転軸21が等高線62に沿った方向を向いた状態で斜面52に沿って無人ヘリコプター1が飛行することより、斜面52に広がる森林54に対して、斜め上方向からだけではなく、横方向からレーザパルス22を照射したり、斜め下方向からレーザパルス22を照射したりすることができる。 Since the unmanned helicopter 1 flies along the slope 52 with the rotation axis 21 of the LiDAR sensor 20 facing the direction along the contour line 62, the unmanned helicopter 1 flies not only from diagonally upward to the forest 54 spreading on the slope 52. , The laser pulse 22 can be irradiated from the lateral direction, or the laser pulse 22 can be irradiated from the diagonally downward direction.

ある実施形態において、計測対象エリア50の計測を行うときに無人ヘリコプター1を飛行させる飛行経路60は、平面視において、第1経路セグメント60aと交差する第2経路セグメント60bを含んでもよい。 In certain embodiments, the flight path 60 to which the unmanned helicopter 1 flies when measuring the measurement target area 50 may include a second path segment 60b that intersects the first path segment 60a in plan view.

互いに交差する複数の経路セグメントを飛行することにより、計測対象エリア50に複数の方位からレーザパルス22を照射することができ、計測対象エリア50の詳細な3次元点群データを取得することができる。 By flying a plurality of path segments that intersect each other, the measurement target area 50 can be irradiated with the laser pulse 22 from a plurality of directions, and detailed three-dimensional point cloud data of the measurement target area 50 can be acquired. ..

ある実施形態において、計測対象エリア50の計測を行うときに無人ヘリコプター1を飛行させる飛行経路60は、格子状の飛行経路60を含んでもよい。 In one embodiment, the flight path 60 for flying the unmanned helicopter 1 when measuring the measurement target area 50 may include a grid-like flight path 60.

格子状の飛行経路60を飛行することにより、計測対象エリア50に複数の方位からレーザパルス22を照射することができ、計測対象エリア50の詳細な3次元点群データを取得することができる。 By flying along the grid-shaped flight path 60, the measurement target area 50 can be irradiated with the laser pulses 22 from a plurality of directions, and detailed three-dimensional point cloud data of the measurement target area 50 can be acquired.

ある実施形態において、LiDARセンサ20に加えて第2LiDARセンサ40が無人ヘリコプター1に設けられており、平面視において、第2LiDARセンサ40の回転軸41は、LiDARセンサ20の回転軸21とは異なる方向を向いていてもよい。 In one embodiment, the second LiDAR sensor 40 is provided in the unmanned helicopter 1 in addition to the LiDAR sensor 20, and the rotation axis 41 of the second LiDAR sensor 40 is in a direction different from the rotation axis 21 of the LiDAR sensor 20 in a plan view. You may be facing.

回転軸21、41が互いに異なる方向を向いている二つのLiDARセンサ20、40からレーザパルス22、42を出射させることにより、より広い範囲に多くのレーザパルス22、42を照射することができる。 By emitting the laser pulses 22 and 42 from the two LiDAR sensors 20 and 40 whose rotating shafts 21 and 41 are oriented in different directions, it is possible to irradiate a larger range of the laser pulses 22 and 42.

ある実施形態において、計測対象エリア50の計測中、平面視において、第2LiDARセンサ40の回転軸41は、第1方向31よりも第2方向32に近い方向を向いており、機体進行方向31を前方向としたとき、LiDARセンサ20の回転軸21は左斜め前方から右斜め後方に臨んでおり、第2LiDARセンサ40の回転軸41は右斜め前方から左斜め後方に臨んでいてもよい。 In a certain embodiment, during the measurement of the measurement target area 50, the rotation axis 41 of the second LiDAR sensor 40 faces a direction closer to the second direction 32 than the first direction 31 in a plan view, and the aircraft traveling direction 31 is set. When viewed in the forward direction, the rotation axis 21 of the LiDAR sensor 20 may face diagonally from the front left to the diagonally rear right, and the rotation axis 41 of the second LiDAR sensor 40 may face diagonally forward to the left and diagonally rearward to the left.

機体進行方向31に沿ったエリアにより多くのレーザパルス22を照射することができる。また、二つのLiDARセンサ20が互いに異なる方向にレーザパルス22を出射することにより、一方のLiDARセンサ20から多くのレーザパルス22を照射することが難しいエリアを、他方のLiDARセンサ20で補完することができる。 More laser pulses 22 can be applied to the area along the aircraft traveling direction 31. Further, by emitting laser pulses 22 in different directions from the two LiDAR sensors 20, the area where it is difficult to irradiate many laser pulses 22 from one LiDAR sensor 20 is complemented by the other LiDAR sensor 20. Can be done.

ある実施形態において、計測対象エリア50の計測中、平面視において、第2LiDARセンサ40の回転軸41は、第2方向32よりも第1方向31に近い方向を向いていてもよい。 In a certain embodiment, during the measurement of the measurement target area 50, the rotation axis 41 of the second LiDAR sensor 40 may face in a direction closer to the first direction 31 than the second direction 32 in a plan view.

機体進行方向31に対する横方向にも広い範囲にわたってレーザパルス22を照射することができる。 The laser pulse 22 can be irradiated over a wide range in the lateral direction with respect to the traveling direction 31 of the aircraft.

ある実施形態において、無人ヘリコプター1は、内燃機関を動力源とする無人ヘリコプターまたは無人マルチコプターであってもよい。 In certain embodiments, the unmanned helicopter 1 may be an unmanned helicopter or an unmanned multicopter powered by an internal combustion engine.

バッテリから供給される電力で動作する電動モータを動力源とする場合は、航続距離が短いため、計測対象エリア50が狭くなってしまう。一方、内燃機関を動力源とする場合は、航続距離が長いため、十分な計測対象エリア50を確保することができる。 When an electric motor operated by electric power supplied from a battery is used as a power source, the cruising range is short, so that the measurement target area 50 becomes narrow. On the other hand, when the internal combustion engine is used as the power source, the cruising range is long, so that a sufficient measurement target area 50 can be secured.

本発明のある実施形態に係る計測対象エリア50の計測を行う方法は、LiDARセンサ20が設けられた無人ヘリコプター1を飛行させて計測対象エリア50の計測を行う。計測対象エリア50の計測を行う方法は、無人ヘリコプター1の飛行経路60を設定すること、設定された飛行経路60に沿って無人ヘリコプター1を飛行させること、鉛直方向33から見た平面視において、無人ヘリコプター1の機体進行方向を第1方向31とし、第1方向31に垂直な方向を第2方向32としたとき、LiDARセンサ20の回転軸21が第1方向31よりも第2方向32に近い方向を向いた状態で、計測対象エリア50をLiDARセンサ20でスキャンさせることを実行する。 In the method for measuring the measurement target area 50 according to the embodiment of the present invention, the unmanned helicopter 1 provided with the LiDAR sensor 20 is flown to measure the measurement target area 50. The method of measuring the measurement target area 50 is to set the flight path 60 of the unmanned helicopter 1, to fly the unmanned helicopter 1 along the set flight path 60, and to measure the plane view from the vertical direction 33. When the traveling direction of the unmanned helicopter 1 is the first direction 31 and the direction perpendicular to the first direction 31 is the second direction 32, the rotation axis 21 of the LiDAR sensor 20 is in the second direction 32 rather than the first direction 31. The LiDAR sensor 20 scans the measurement target area 50 in a state of facing a close direction.

LiDARセンサ20を用いた計測対象エリア50の計測中、LiDARセンサ20の回転軸21が第1方向31よりも第2方向32に近い方向を向いた状態で無人ヘリコプター1は飛行する。LiDARセンサ20は回転していることから、無人ヘリコプター1が進行する過程で、機体進行方向31に沿ったエリアに、レーザパルス22を密に照射することができる。これにより、例えば、LiDARセンサ20から複数のレーザパルス22が同時に出射される形態においては、機体進行方向31に沿ったエリアの同一箇所に、様々な角度からレーザパルス22を密に照射できる。その結果、機体進行方向31に沿ったエリアの詳細な3次元点群データを取得できる。さらに、LiDARセンサ20を回転させることにより、例えば、森林54を構成する樹木56に対し、様々な角度からレーザパルス22を照射することができる。 During the measurement of the measurement target area 50 using the LiDAR sensor 20, the unmanned helicopter 1 flies in a state where the rotation axis 21 of the LiDAR sensor 20 faces a direction closer to the second direction 32 than the first direction 31. Since the LiDAR sensor 20 is rotating, the laser pulse 22 can be densely applied to the area along the aircraft traveling direction 31 in the process of the unmanned helicopter 1 traveling. Thereby, for example, in the form in which a plurality of laser pulses 22 are simultaneously emitted from the LiDAR sensor 20, the laser pulses 22 can be densely irradiated to the same location in the area along the aircraft traveling direction 31 from various angles. As a result, detailed three-dimensional point cloud data of the area along the aircraft traveling direction 31 can be acquired. Further, by rotating the LiDAR sensor 20, for example, the trees 56 constituting the forest 54 can be irradiated with the laser pulse 22 from various angles.

飛行経路60に含まれる一つの経路セグメントの飛行において、機体進行方向31に沿ったエリアに繰り返しレーザパルス22を照射することができる。これにより、その一つの経路セグメントの飛行において高密度の3次元点群データを取得することができる。 In the flight of one path segment included in the flight path 60, the area along the aircraft traveling direction 31 can be repeatedly irradiated with the laser pulse 22. This makes it possible to acquire high-density 3D point cloud data in the flight of that one path segment.

一つの経路セグメントの飛行においてLiDARセンサ20でスキャンしたエリアを、別の経路セグメントの飛行において再度詳細にスキャンしなくても、そのエリアの高密度の3次元点群データを取得することができる。 It is possible to acquire high-density 3D point cloud data of the area scanned by the LiDAR sensor 20 in the flight of one route segment without having to scan the area in detail again in the flight of another route segment.

計測対象エリア50内の同一の物体に対して、連続的にレーザパルス22を照射することができる。これにより、例えば樹木56の上空を飛行しながら計測するとき、樹木56に接近しながら計測して得られる点群データと、その樹木56から遠ざかりながら計測して得られる点群データとの間の、地理座標系上の位置ずれを小さくすることができる。 The laser pulse 22 can be continuously applied to the same object in the measurement target area 50. Thereby, for example, when measuring while flying over the tree 56, between the point cloud data obtained by measuring while approaching the tree 56 and the point cloud data obtained by measuring while moving away from the tree 56. , The misalignment on the geographic coordinate system can be reduced.

ある実施形態において、飛行経路60は複数の経路セグメントを含み、上記方法は、複数の経路セグメントそれぞれを飛行中にLiDARセンサ20から出力されたセンサーデータを組み合わせて3次元点群データを生成することをさらに実行してもよい。 In one embodiment, the flight path 60 includes a plurality of path segments, and the above method combines the sensor data output from the LiDAR sensor 20 during flight for each of the plurality of path segments to generate three-dimensional point cloud data. May be further executed.

一つの経路セグメントの飛行においてLiDARセンサ20でスキャンしたエリアを、別の経路セグメントの飛行において再度詳細にスキャンしなくても、そのエリアの高密度の3次元点群データを取得することができる。これにより、計測対象エリア50の高密度の3次元点群データを取得することができる。 It is possible to acquire high-density 3D point cloud data of the area scanned by the LiDAR sensor 20 in the flight of one route segment without having to scan the area in detail again in the flight of another route segment. As a result, high-density three-dimensional point cloud data of the measurement target area 50 can be acquired.

ある実施形態において、計測対象エリア50は斜面52の森林54を含み、無人ヘリコプター1の飛行経路60を設定するステップは、対象エリア内の等高線62データを参照し、複数の等高線62を横切る経路セグメントを含む飛行経路60を設定することを含んでもよい。 In one embodiment, the area 50 to be measured includes the forest 54 on the slope 52, and the step of setting the flight path 60 of the unmanned helicopter 1 refers to the contour line 62 data in the target area and is a route segment that crosses the plurality of contour lines 62. May include setting a flight path 60 including.

複数の等高線62を横切るように斜面52に沿って無人ヘリコプター1を飛行させることより、斜面52に広がる森林54に対して、斜め上方向からだけではなく、横方向からレーザパルス22を照射したり、斜め下方向からレーザパルス22を照射したりすることができる。レーザパルス22は樹木56の樹冠56aだけでなく、樹木56の幹56b、下層植生58および地表面59等にも到達し、反射される。これにより、樹冠点群だけでなく幹点群、下層植生点群および地表面点群を含む3次元点群データを得ることができる。 By flying the unmanned helicopter 1 along the slope 52 so as to cross the plurality of contour lines 62, the laser pulse 22 can be applied to the forest 54 spreading on the slope 52 not only from diagonally upward but also from the lateral direction. , The laser pulse 22 can be irradiated from diagonally downward. The laser pulse 22 reaches not only the canopy 56a of the tree 56 but also the trunk 56b of the tree 56, the understory vegetation 58, the ground surface 59, and the like, and is reflected. As a result, it is possible to obtain three-dimensional point cloud data including not only the canopy point cloud but also the trunk point cloud, the understory vegetation point cloud and the ground surface point cloud.

本発明の技術は、無人航空機を利用して計測対象エリアの計測を行う技術分野に好適に利用され得る。 The technique of the present invention can be suitably used in a technical field in which an unmanned aerial vehicle is used to measure a measurement target area.

1:無人ヘリコプター(無人航空機)、 2:メインボディ、 3:テールボディ、 4:機体、 5:メインロータ、 6:テールロータ、 7:ラジエータ、 8:エンジン、 9:発電装置、 10:コントロールパネル、 11:表示灯、 12:スキッド、 13:リモコン受信アンテナ、 15:飛行制御ボックス(制御装置)、 15a:GPSモジュール、 15b:加速度センサ、 15c:気圧センサ、 15d:地磁気センサ、 15e:超音波センサ、 15f:通信回路、 15g:信号処理回路、 15h:ROM、 15i:RAM、 15j:記憶装置、 15k:内部バス、 20:LiDARセンサ、 21:回転軸、 21a:回転軸方向、 22:レーザパルス、 23:ヘッド 24:レーザスポット、 25:ブラケット、 31:機体進行方向(第1方向)、 32:機体進行方向に垂直な方向(第2方向)、 33:鉛直方向、 40:LiDARセンサ(第2LiDARセンサ)、 41:回転軸、 41a:回転軸方向、 42:レーザパルス、 50:計測対象エリア、 52:斜面、 54:森林、 56、57:樹木、 56a:樹冠、 56b:幹、 58:下層植生 59:地表面 60:飛行経路、 60a:第1経路セグメント、 60b:第2経路セグメント、 62:等高線 66:飛行経路、 66a、66b:経路セグメント、 70:タブレットコンピュータ、 71:CPU、 72:メモリ、 73:通信回路、 74:画像処理回路、 75:ディスプレイ、 76:タッチスクリーンパネル、 77:通信バス、 80:基地局操縦装置、 90:地図データ、 100:計測システム 1: Unmanned helicopter (unmanned aircraft), 2: Main body, 3: Tail body, 4: Aircraft, 5: Main rotor, 6: Tail rotor, 7: Radiator, 8: Engine, 9: Power generator, 10: Control panel , 11: Indicator light, 12: Skid, 13: Remote control receiving antenna, 15: Flight control box (control device), 15a: GPS module, 15b: Acceleration sensor, 15c: Pressure sensor, 15d: Geomagnetic sensor, 15e: Ultrasonic Sensor, 15f: Communication circuit, 15g: Signal processing circuit, 15h: ROM, 15i: RAM, 15j: Storage device, 15k: Internal bus, 20: LiDAR sensor, 21: Rotation axis, 21a: Rotation axis direction, 22: Laser Pulse, 23: Head 24: Laser spot, 25: Bracket, 31: Aircraft traveling direction (first direction), 32: Direction perpendicular to the aircraft traveling direction (second direction), 33: Vertical direction, 40: LiDAR sensor ( 2nd LiDAR sensor), 41: rotation axis, 41a: rotation axis direction, 42: laser pulse, 50: measurement target area, 52: slope, 54: forest, 56, 57: tree, 56a: canopy, 56b: trunk, 58 : Lower vegetation 59: Ground surface 60: Flight path, 60a: First path segment, 60b: Second path segment, 62: Contour line 66: Flight path, 66a, 66b: Path segment, 70: Tablet computer, 71: CPU, 72: Memory, 73: Communication circuit, 74: Image processing circuit, 75: Display, 76: Touch screen panel, 77: Communication bus, 80: Base station control device, 90: Map data, 100: Measurement system

Claims (19)

ライダー(LiDAR)センサが設けられた無人航空機を飛行させて計測対象エリアの計測を行う計測システムであって、
無人航空機と、
前記無人航空機に設けられたライダーセンサと、
前記無人航空機の飛行を制御する制御装置と、
を備え、
鉛直方向から見た平面視において、前記無人航空機の機体進行方向を第1方向とし、前記第1方向に垂直な方向を第2方向としたとき、
前記ライダーセンサを用いた前記計測対象エリアの計測中、前記無人航空機は、前記ライダーセンサの回転軸が前記第1方向よりも前記第2方向に近い方向を向いた状態で飛行する、計測システム。
It is a measurement system that measures the measurement target area by flying an unmanned aerial vehicle equipped with a lidar sensor.
With unmanned aerial vehicles,
The rider sensor provided on the unmanned aerial vehicle and
The control device that controls the flight of the unmanned aerial vehicle and
Equipped with
When the aircraft traveling direction of the unmanned aerial vehicle is the first direction and the direction perpendicular to the first direction is the second direction in a plan view seen from the vertical direction.
A measurement system in which the unmanned aerial vehicle flies in a state where the rotation axis of the rider sensor faces a direction closer to the second direction than the first direction during measurement of the measurement target area using the rider sensor.
前記ライダーセンサは、前記回転軸が前記無人航空機の機体の前後方向よりも左右方向に近い方向に向けられている、請求項1に記載の計測システム。 The measurement system according to claim 1, wherein the rider sensor has its rotation axis oriented in a direction closer to the left-right direction than the front-rear direction of the body of the unmanned aerial vehicle. 前記ライダーセンサを用いた前記計測対象エリアの計測中、前記制御装置は、前記ライダーセンサの前記回転軸が前記第1方向よりも前記第2方向に近い方向を向くように、前記無人航空機を飛行させる、請求項1または2に記載の計測システム。 During the measurement of the measurement target area using the rider sensor, the control device flies the unmanned aerial vehicle so that the rotation axis of the rider sensor faces a direction closer to the second direction than the first direction. The measurement system according to claim 1 or 2. 前記計測対象エリアの計測中、前記ライダーセンサの前記回転軸は、前記第2方向を向いている、請求項1から3のいずれかに記載の計測システム。 The measurement system according to any one of claims 1 to 3, wherein the rotation axis of the rider sensor faces the second direction during measurement of the measurement target area. 前記計測対象エリアの計測中、前記平面視において、前記ライダーセンサの前記回転軸は、前記第2方向に対して傾いている、請求項1から3のいずれかに記載の計測システム。 The measurement system according to any one of claims 1 to 3, wherein the rotation axis of the rider sensor is tilted with respect to the second direction in the plan view during the measurement of the measurement target area. 前記ライダーセンサは、前記回転軸に対して所定の角度を有する方向にレーザパルスを出射し、前記レーザパルスを出射する方向を前記回転軸の周りに回転させる、請求項5に記載の計測システム。 The measurement system according to claim 5, wherein the lidar sensor emits a laser pulse in a direction having a predetermined angle with respect to the rotation axis, and rotates the direction in which the laser pulse is emitted around the rotation axis. 前記計測対象エリアは、地表面から複数の樹木が立ち上がる森林を含む、請求項1から6のいずれかに記載の計測システム。 The measurement system according to any one of claims 1 to 6, wherein the measurement target area includes a forest in which a plurality of trees rise from the ground surface. 前記地表面は斜面を含み、
前記計測対象エリアの計測中、前記制御装置は、前記無人航空機を前記斜面に沿って上昇または下降させる、請求項7に記載の計測システム。
The ground surface includes a slope and
The measurement system according to claim 7, wherein the control device raises or lowers the unmanned aerial vehicle along the slope during measurement of the measurement target area.
前記計測対象エリアの計測中、前記制御装置は、複数の等高線を横切る第1経路セグメントに沿って前記無人航空機を飛行させる、請求項8に記載の計測システム。 The measurement system according to claim 8, wherein during measurement of the measurement target area, the control device flies the unmanned aerial vehicle along a first path segment that crosses a plurality of contour lines. 前記計測対象エリアの計測中、前記制御装置は、前記ライダーセンサの前記回転軸が等高線に沿った方向を向いた状態で前記無人航空機を飛行させる、請求項8または9に記載の計測システム。 The measurement system according to claim 8 or 9, wherein during the measurement of the measurement target area, the control device flies the unmanned aerial vehicle with the rotation axis of the rider sensor oriented in a direction along a contour line. 前記計測対象エリアの計測を行うときに前記無人航空機を飛行させる飛行経路は、前記平面視において、前記第1経路セグメントと交差する第2経路セグメントを含む、請求項9に記載の計測システム。 The measurement system according to claim 9, wherein the flight path for flying the unmanned aerial vehicle when measuring the measurement target area includes a second path segment that intersects with the first path segment in the plan view. 前記計測対象エリアの計測を行うときに前記無人航空機を飛行させる飛行経路は、格子状の飛行経路を含む、請求項1から11のいずれかに記載の計測システム。 The measurement system according to any one of claims 1 to 11, wherein the flight path for flying the unmanned aerial vehicle when measuring the measurement target area includes a grid-like flight path. 前記ライダーセンサに加えて第2ライダーセンサが前記無人航空機に設けられており、
前記平面視において、前記第2ライダーセンサの回転軸は、前記ライダーセンサの前記回転軸とは異なる方向を向いている、請求項1から12のいずれかに記載の計測システム。
In addition to the rider sensor, a second rider sensor is provided on the unmanned aerial vehicle.
The measurement system according to any one of claims 1 to 12, wherein the rotation axis of the second rider sensor faces a direction different from the rotation axis of the rider sensor in the plan view.
前記計測対象エリアの計測中、前記平面視において、
前記第2ライダーセンサの前記回転軸は、前記第1方向よりも前記第2方向に近い方向を向いており、
前記機体進行方向を前方向としたとき、前記ライダーセンサの前記回転軸は左斜め前方から右斜め後方に臨んでおり、前記第2ライダーセンサの前記回転軸は右斜め前方から左斜め後方に臨んでいる、請求項13に記載の計測システム。
During the measurement of the measurement target area, in the plan view,
The rotation axis of the second rider sensor is oriented in a direction closer to the second direction than the first direction.
When the traveling direction of the aircraft is the forward direction, the rotation axis of the rider sensor faces diagonally left front to diagonally rear right, and the rotation axis of the second rider sensor faces diagonally forward left to diagonally rear left. The measurement system according to claim 13.
前記計測対象エリアの計測中、前記平面視において、前記第2ライダーセンサの前記回転軸は、前記第2方向よりも前記第1方向に近い方向を向いている、請求項13に記載の計測システム。 The measurement system according to claim 13, wherein the rotation axis of the second rider sensor faces a direction closer to the first direction than the second direction in the plan view during the measurement of the measurement target area. .. 前記無人航空機は、内燃機関を動力源とする無人ヘリコプターまたは無人マルチコプターである、請求項1から15のいずれかに記載の計測システム。 The measurement system according to any one of claims 1 to 15, wherein the unmanned aerial vehicle is an unmanned helicopter or an unmanned multicopter powered by an internal combustion engine. ライダー(LiDAR)センサが設けられた無人航空機を飛行させて計測対象エリアの計測を行う方法であって、
前記無人航空機の飛行経路を設定すること、
設定された前記飛行経路に沿って前記無人航空機を飛行させること、
鉛直方向から見た平面視において、前記無人航空機の機体進行方向を第1方向とし、前記第1方向に垂直な方向を第2方向としたとき、前記ライダーセンサの回転軸が前記第1方向よりも前記第2方向に近い方向を向いた状態で、前記計測対象エリアを前記ライダーセンサでスキャンさせること、
を実行する、方法。
It is a method of flying an unmanned aerial vehicle equipped with a lidar sensor to measure the measurement target area.
Setting the flight path of the unmanned aerial vehicle,
Flying the unmanned aerial vehicle along the set flight path,
In a plan view seen from the vertical direction, when the traveling direction of the unmanned aircraft is the first direction and the direction perpendicular to the first direction is the second direction, the rotation axis of the rider sensor is from the first direction. The lidar sensor scans the measurement target area while facing the direction close to the second direction.
How to do it.
前記飛行経路は複数の経路セグメントを含み、
前記方法は、
前記複数の経路セグメントそれぞれを飛行中に前記ライダーセンサから出力されたセンサーデータを組み合わせて3次元点群データを生成すること、
をさらに実行する、請求項17に記載の方法。
The flight path includes multiple path segments and includes
The method is
To generate 3D point cloud data by combining the sensor data output from the rider sensor during flight of each of the plurality of path segments.
17. The method of claim 17.
前記計測対象エリアは斜面の森林を含み、
前記無人航空機の飛行経路を設定するステップは、前記対象エリア内の等高線データを参照し、複数の等高線を横切る経路セグメントを含む飛行経路を設定することを含む、請求項17または18に記載の方法。
The measurement target area includes the forest on the slope and
17. The method of claim 17 or 18, wherein the step of setting the flight path of the unmanned aerial vehicle refers to the contour data in the target area and includes setting a flight path including a route segment that crosses a plurality of contour lines. ..
JP2020175564A 2020-10-19 2020-10-19 Measuring system and measuring method Active JP7200191B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020175564A JP7200191B2 (en) 2020-10-19 2020-10-19 Measuring system and measuring method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020175564A JP7200191B2 (en) 2020-10-19 2020-10-19 Measuring system and measuring method

Publications (2)

Publication Number Publication Date
JP2022066942A true JP2022066942A (en) 2022-05-02
JP7200191B2 JP7200191B2 (en) 2023-01-06

Family

ID=81389814

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020175564A Active JP7200191B2 (en) 2020-10-19 2020-10-19 Measuring system and measuring method

Country Status (1)

Country Link
JP (1) JP7200191B2 (en)

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3992707A (en) * 1974-09-13 1976-11-16 Vereinigte Flugtechnische Werke-Fokker Gesellschaft Mit Beschrankter Haftung Reproduction of a field of view as scanned by a remote controlled aircraft
JPH1123263A (en) * 1997-06-30 1999-01-29 Asahi Koyo Kk Airborne laser measurement device for aircraft and measurement data processing / analysis method
JP3001866B1 (en) * 1998-10-26 2000-01-24 中日本航空株式会社 Surveying method and apparatus using flying object
US20040074296A1 (en) * 2002-02-01 2004-04-22 Perry Gavin John Apparatus and method for oscillating a transmitted laser beam of light within the field of view (fov) of a light receiving system
US20040218232A1 (en) * 2003-05-01 2004-11-04 Misha Fishman Method and apparatus for image formation from scan data and control of a scanning apparatus for the same
DE102004050682A1 (en) * 2003-11-18 2005-06-16 Riegl Laser Measurement Systems Gmbh Surveying device for object in space has opto-electronic distance measuring device to operate according to a signal runtime with a scan device for deflecting measuring rays
JP2008203123A (en) * 2007-02-21 2008-09-04 Japan Aerospace Exploration Agency Aircraft surface and ground observation equipment
US20100193214A1 (en) * 2007-07-24 2010-08-05 Abb Ag Electrical switchgear cabinet
JP2012140101A (en) * 2011-01-04 2012-07-26 Topcon Corp Flight control system for flying object
WO2019013151A1 (en) * 2017-07-10 2019-01-17 株式会社プロドローン Method for setting flight altitude of unmanned aerial vehicle, and unmanned aerial vehicle system
CN109254286A (en) * 2018-11-13 2019-01-22 武汉海达数云技术有限公司 Airborne laser radar optical scanner
JP6591131B1 (en) * 2019-02-07 2019-10-16 三菱電機株式会社 Structure measuring apparatus and structure measuring method
US20200193214A1 (en) * 2018-12-17 2020-06-18 Paul Lapstun Multi-View Scanning Aerial Cameras

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3992707A (en) * 1974-09-13 1976-11-16 Vereinigte Flugtechnische Werke-Fokker Gesellschaft Mit Beschrankter Haftung Reproduction of a field of view as scanned by a remote controlled aircraft
JPH1123263A (en) * 1997-06-30 1999-01-29 Asahi Koyo Kk Airborne laser measurement device for aircraft and measurement data processing / analysis method
JP3001866B1 (en) * 1998-10-26 2000-01-24 中日本航空株式会社 Surveying method and apparatus using flying object
US20040074296A1 (en) * 2002-02-01 2004-04-22 Perry Gavin John Apparatus and method for oscillating a transmitted laser beam of light within the field of view (fov) of a light receiving system
US20040218232A1 (en) * 2003-05-01 2004-11-04 Misha Fishman Method and apparatus for image formation from scan data and control of a scanning apparatus for the same
DE102004050682A1 (en) * 2003-11-18 2005-06-16 Riegl Laser Measurement Systems Gmbh Surveying device for object in space has opto-electronic distance measuring device to operate according to a signal runtime with a scan device for deflecting measuring rays
JP2008203123A (en) * 2007-02-21 2008-09-04 Japan Aerospace Exploration Agency Aircraft surface and ground observation equipment
US20100193214A1 (en) * 2007-07-24 2010-08-05 Abb Ag Electrical switchgear cabinet
JP2012140101A (en) * 2011-01-04 2012-07-26 Topcon Corp Flight control system for flying object
WO2019013151A1 (en) * 2017-07-10 2019-01-17 株式会社プロドローン Method for setting flight altitude of unmanned aerial vehicle, and unmanned aerial vehicle system
CN109254286A (en) * 2018-11-13 2019-01-22 武汉海达数云技术有限公司 Airborne laser radar optical scanner
US20200193214A1 (en) * 2018-12-17 2020-06-18 Paul Lapstun Multi-View Scanning Aerial Cameras
JP6591131B1 (en) * 2019-02-07 2019-10-16 三菱電機株式会社 Structure measuring apparatus and structure measuring method

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
""RIEGL VUX(R)-1UAV"", INTERNETARCHIVE [ONLINE], JPN6022044215, 5 December 2016 (2016-12-05), pages 6 Pages, ISSN: 0004904359 *
MORSDORF, FELIX 外5名: ""UAV-based LiDAR acquisition for the derivation of high-resolution forest and ground information"", THE LEADING EDGE, vol. Volume 36, Number 7, JPN6022044217, 1 July 2017 (2017-07-01), pages 566 - 570, ISSN: 0004904358 *

Also Published As

Publication number Publication date
JP7200191B2 (en) 2023-01-06

Similar Documents

Publication Publication Date Title
US11327149B2 (en) Laser speckle system and method for an aircraft
JP7254934B2 (en) Method for making forest measurements, forest measurement system and computer program
JP7141538B2 (en) A method for forest measurement, a forest measurement system, a method for determining a flight path of an unmanned aerial vehicle, a photographing method, a spraying method, and a computer program
CN113029117B (en) Flight sensor
CN102971657B (en) Laser Scanning Equipment and using method
US10386842B2 (en) Unmanned aerial vehicle light show
US8554395B2 (en) Method and system for facilitating autonomous landing of aerial vehicles on a surface
JP6290735B2 (en) Survey method
CA3123634A1 (en) Apparatuses, systems, and methods for gas flux measurements with mobile platforms
JP2017015527A (en) Wide area sensor system, flight detection method and program
CN102023003A (en) Unmanned helicopter three-dimensional positioning and mapping method based on laser detection and image recognition
JP2019053003A (en) Data processor, method for processing data, and data processing program
KR102467855B1 (en) A method for setting an autonomous navigation map, a method for an unmanned aerial vehicle to fly autonomously based on an autonomous navigation map, and a system for implementing the same
EP3093616A1 (en) Device and method for designating characteristic points
JP6508320B1 (en) Control system of unmanned aircraft
JP2019039868A (en) Information processing device, information processing method and program for information processing
US11644850B2 (en) Aircraft
JP7672834B2 (en) Forest condition estimation system, forest condition estimation method, and computer program
JP7200191B2 (en) Measuring system and measuring method
JP7374977B2 (en) Tree information estimation system, tree information estimation method, and computer program
JP2023056726A (en) Measurement system and method for measurement
JP2022143773A (en) Measurement system, measurement method and computer program
KR102384333B1 (en) Apparatus for Terrain flight including lidar sensor
JP2007033258A (en) Method and device for observing object to be observed
JP2022024771A (en) Forest measuring system, computer program, and method for generating trunk diameter estimation model

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210514

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220419

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220616

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220726

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220831

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221025

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221208

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221220

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221221

R150 Certificate of patent or registration of utility model

Ref document number: 7200191

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150