JP5920158B2 - Image storage device for moving body - Google Patents
Image storage device for moving body Download PDFInfo
- Publication number
- JP5920158B2 JP5920158B2 JP2012224222A JP2012224222A JP5920158B2 JP 5920158 B2 JP5920158 B2 JP 5920158B2 JP 2012224222 A JP2012224222 A JP 2012224222A JP 2012224222 A JP2012224222 A JP 2012224222A JP 5920158 B2 JP5920158 B2 JP 5920158B2
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- situation
- moving body
- acceleration
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000001133 acceleration Effects 0.000 claims description 105
- 230000002093 peripheral effect Effects 0.000 claims description 38
- 230000007423 decrease Effects 0.000 claims description 4
- 230000035939 shock Effects 0.000 claims description 2
- 238000000034 method Methods 0.000 description 17
- 230000007257 malfunction Effects 0.000 description 7
- 238000001514 detection method Methods 0.000 description 4
- 230000003247 decreasing effect Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Images
Landscapes
- Time Recorders, Dirve Recorders, Access Control (AREA)
- Traffic Control Systems (AREA)
Description
本発明は、移動体に搭載されたカメラにより撮影された周辺画像を耐久記憶媒体に記憶させるための処理を実施する移動体用画像記憶装置に関するものである。 The present invention relates to a moving body image storage device that performs processing for storing a peripheral image taken by a camera mounted on a moving body in a durable storage medium.
従来、CCDカメラによる画像や、各種センサから取得される情報をランダムアクセスメモリに記録し、事故発生により衝突センサが作動するとランダムアクセスメモリの記録情報をフラッシュメモリに転送し、フラッシュメモリに記録された情報をエンコーダを介して出力端子より取り出して、事故直前の画像情報を再生するようにしたドライブレコーダがある(例えば、特許文献1参照)。 Conventionally, images from a CCD camera and information acquired from various sensors are recorded in a random access memory, and when a collision sensor is activated due to an accident, the recorded information in the random access memory is transferred to the flash memory and recorded in the flash memory. There is a drive recorder that takes out information from an output terminal via an encoder and reproduces image information immediately before the accident (see, for example, Patent Document 1).
上記したようなドライブレコーダでは、一般的に衝突センサとして加速度センサが用いられ、加速度センサが一定の判定閾値(例えば、0.4G)以上の加速度を検知した場合に、ランダムアクセスメモリの記録情報がフラッシュメモリ等の耐久記憶媒体に転送される構成となっている。 In the drive recorder as described above, an acceleration sensor is generally used as a collision sensor. When the acceleration sensor detects an acceleration equal to or higher than a certain determination threshold (for example, 0.4 G), the recorded information in the random access memory is stored. It is configured to be transferred to a durable storage medium such as a flash memory.
このような、加速度センサが一定の判定閾値以上の加速度を検知した場合に、ランダムアクセスメモリの記録情報が耐久記憶媒体に転送されるような構成では、例えば、判定閾値が小さな値に設定されている場合には、急ブレーキや急ハンドル、急発進など、事故以外の理由でランダムアクセスメモリの記録情報が耐久記憶媒体に転送されてしまうといった誤動作が頻発する。このように、誤動作が頻発すると、不必要な記録が発生して電力を無駄に消費してしまったり、耐久記憶媒体の寿命を短くしてしまうといった問題が生じる。 In such a configuration in which the recorded information in the random access memory is transferred to the durable storage medium when the acceleration sensor detects an acceleration equal to or higher than a certain determination threshold, for example, the determination threshold is set to a small value. In such a case, malfunction such as sudden braking, sudden steering, sudden start, etc. frequently occurs such that the recorded information in the random access memory is transferred to the durable storage medium for reasons other than accidents. As described above, if malfunctions occur frequently, unnecessary recording occurs and power is wasted, and the life of the durable storage medium is shortened.
反対に、判定閾値を大きな値に設定した場合、事故が発生しても、ランダムアクセスメモリの記録情報が耐久記憶媒体に転送されず、事故直前の画像情報を再生できないといった問題も生じる。 On the other hand, when the determination threshold value is set to a large value, there is a problem that even if an accident occurs, the recorded information in the random access memory is not transferred to the durable storage medium, and the image information immediately before the accident cannot be reproduced.
このように、判定閾値の設定値によって、誤動作による耐久記憶媒体への画像情報の記録が頻発したり、事故が発生しても画像情報が耐久記憶媒体へ記録されないといった問題が生じる。 As described above, depending on the setting value of the determination threshold, there is a problem that image information is frequently recorded on the durable storage medium due to malfunction, or that image information is not recorded on the durable storage medium even if an accident occurs.
本発明は上記問題に鑑みたもので、誤動作による耐久記憶媒体への周辺画像の記憶を抑制し、かつ、より確実に衝突時における耐久記憶媒体への周辺画像の記憶を行うようにすることを目的とする。 The present invention has been made in view of the above problems, and is intended to suppress storage of a peripheral image in a durable storage medium due to a malfunction, and more reliably store a peripheral image in a durable storage medium at the time of a collision. Objective.
上記目的を達成するため、請求項1に記載の発明は、移動体に搭載された加速度センサにより判定閾値以上の大きさの加速度が検知されると、当該加速度が検知された時点を含む予め定められた期間に、移動体の周辺を撮影するカメラにより撮影された周辺画像を耐久記憶媒体に記憶させるための処理を実施する移動体用画像記憶装置であって、移動体が衝突する可能性の高い状況にあるか否かを判定する状況判定手段と、状況判定手段により移動体が衝突する可能性の高い状況にあると判定された場合、判定閾値を小さくするように変更する判定閾値変更手段と、を備え、加速度センサは、移動体の左右方向の加速度を検知するようになっており、状況判定手段は、移動体が衝突する可能性の高い状況として移動体が左右方向の衝撃を受ける可能性が高い状況にあるか否かを判定し、判定閾値変更手段は、移動体の左右方向の加速度の判定閾値を小さくするように変更することを特徴としている。 In order to achieve the above object, according to the first aspect of the present invention, when an acceleration greater than a determination threshold is detected by an acceleration sensor mounted on a moving body, a predetermined time including a point in time when the acceleration is detected is determined. A moving body image storage device that performs processing for storing a peripheral image captured by a camera that captures the periphery of a moving body in a durable storage medium during a predetermined period of time, and the mobile body may collide Situation determination means for determining whether or not the vehicle is in a high situation, and determination threshold change means for changing the determination threshold value to be smaller when the situation determination means determines that the mobile body is highly likely to collide When, with the acceleration sensor is adapted to detect the acceleration in the lateral direction of the moving body, the status determination means, the moving body is subjected to an impact in the lateral direction as likely to movable body collision situation Possibility to determine whether the high circumstances, the determination threshold changing means is characterized in that to change so as to reduce the determination threshold for the right and left direction of the acceleration of the moving body.
このような構成によれば、移動体が衝突する可能性の高い状況にあるか否かを判定し、移動体が衝突する可能性の高い状況にあると判定された場合、判定閾値を小さくするように変更し、加速度センサは、移動体の左右方向の加速度を検知するようになっており、状況判定手段は、移動体が衝突する可能性の高い状況として移動体が左右方向の衝撃を受ける可能性が高い状況にあるか否かを判定し、判定閾値変更手段は、移動体の左右方向の加速度の判定閾値を小さくするので、移動体が衝突する可能性の高い状況にあると判定された場合には、移動体が衝突する可能性の高い状況にないと判定された場合と比較して、判定閾値を小さくすることができ、誤動作による耐久記憶媒体への周辺画像の記憶を抑制し、かつ、より確実に衝突時における耐久記憶媒体への周辺画像の記憶を行うようにすることができる。
また、上記目的を達成するため、請求項2に記載の発明は、移動体に搭載された加速度センサにより判定閾値以上の大きさの加速度が検知されると、当該加速度が検知された時点を含む予め定められた期間に、移動体の周辺を撮影するカメラにより撮影された周辺画像を耐久記憶媒体に記憶させるための処理を実施する移動体用画像記憶装置であって、移動体が衝突する可能性の高い状況にあるか否かを判定する状況判定手段と、状況判定手段により移動体が衝突する可能性の高い状況にあると判定された場合、判定閾値を小さくするように変更する判定閾値変更手段と、を備え、加速度センサは、移動体の左右方向の加速度を検知するようになっており、状況判定手段は、移動体が衝突する可能性の高い状況として移動体が左右方向の衝撃を受ける可能性が高い状況にあるか否かを判定し、判定閾値変更手段は、移動体の左右方向の加速度の判定閾値を小さくするように変更することを特徴としている。
このような構成によれば、移動体が衝突する可能性の高い状況にあるか否かを判定し、移動体が衝突する可能性の高い状況にあると判定された場合、判定閾値を小さくするように変更し、加速度センサは、移動体の左右方向の加速度を検知するようになっており、状況判定手段は、移動体が衝突する可能性の高い状況として移動体が左右方向の衝撃を受ける可能性が高い状況にあるか否かを判定し、判定閾値変更手段は、移動体の左右方向の加速度の判定閾値を小さくするように変更するので、上記した請求項1に記載の発明と同様の効果を得ることができる。
According to such a configuration, it is determined whether or not there is a high possibility that the mobile body will collide, and if it is determined that the mobile body is highly likely to collide, the determination threshold value is decreased. The acceleration sensor detects the acceleration in the left-right direction of the moving body, and the situation determination means receives the impact in the left-right direction as a situation where the moving body is highly likely to collide. It is determined whether or not the situation is highly likely, and the judgment threshold value changing unit decreases the judgment threshold value of the acceleration in the left and right direction of the moving body, so that it is determined that the moving body is highly likely to collide. In this case, the determination threshold value can be reduced compared with the case where it is determined that the mobile object is not likely to collide, and the storage of peripheral images in the durable storage medium due to malfunction is suppressed. And more reliably in the event of a collision That it is possible to perform the storage of the peripheral image to the durable storage medium.
In order to achieve the above object, the invention according to
According to such a configuration, it is determined whether or not there is a high possibility that the mobile body will collide, and if it is determined that the mobile body is highly likely to collide, the determination threshold value is decreased. The acceleration sensor detects the acceleration in the left-right direction of the moving body, and the situation determination means receives the impact in the left-right direction as a situation where the moving body is highly likely to collide. Since it is determined whether or not the situation is highly likely and the determination threshold value changing unit changes the determination threshold value of the acceleration in the left-right direction of the moving body to be small, the same as in the above-described invention according to claim 1 The effect of can be obtained.
本発明の一実施形態に係る移動体用画像記憶装置の構成を図1に示す。本移動体用画像記憶装置は、車両に搭載された加速度センサ20により判定閾値以上の大きさの加速度が検知されると、当該加速度が検知された時点を含む予め定められた期間に、車両の周辺を撮影するカメラ10により撮影された周辺画像を不揮発性メモリ14に記憶させるドライブレコーダとして構成されている。
A configuration of an image storage device for a moving body according to an embodiment of the present invention is shown in FIG. When the
本ドライブレコーダは、前方カメラ10a、後方カメラ10b、画像取得装置11、記録制御装置12、揮発性メモリ13、不揮発性メモリ14、車線認識装置15および接近車両認識装置16を備えている。また、記録制御装置12には、横加速度センサ20a、縦加速度センサ20b、ステアリングセンサ21、方向指示スイッチ22および障害物検出センサ23から各種信号が車両信号として入力されている。
The drive recorder includes a
前方カメラ10aは、車両前方を撮影する車載カメラであり、車両前方に取り付けられている。また、後方カメラ10bは、車両後方を撮影する車載カメラであり、車両後方に取り付けられている。各車載カメラ10a、10bは、それぞれ撮影した周辺画像を一定のフレームレート(例えば、最大スペック60fps(Frame Per Second))で送出する。
The
画像取得装置11は、各車載カメラ10より入力される周辺画像をキャプチャする。具体的には、各車載カメラ10より入力される周辺画像から予め定められたフォーマット(例えば、JPEG、AVI等)の画像ファイルを生成し、生成した画像ファイルを記録制御装置12、車線認識装置15および接近車両認識装置16へ出力する。また、画像取得装置11は、予め定められたフレームレートで周辺画像をキャプチャすることが可能となっている。
The
記録制御装置12は、CPU、ROM、I/O等を備えたコンピュータとして構成されており、CPUはROMに記憶されたプログラムに従って各種処理を実施する。記録制御装置12の処理としては、画像取得装置11により生成された直近の一定期間分の画像ファイルを揮発性メモリ13に記憶させる処理、加速度センサ20より入力される信号に基づいて判定閾値以上の大きさ(絶対値)の加速度が検知されたことを判定すると、当該加速度が検知された時点を含む予め定められた期間に、車両の周辺を撮影するカメラ10により撮影された周辺画像を揮発性メモリ13から読み出して不揮発性メモリ14に記憶させる処理等がある。
The
揮発性メモリ13は、DRAM等を用いて構成されており、不揮発性メモリ14は、フラッシュメモリを用いて構成されている。
The
車線認識装置15および接近車両認識装置16は、車載カメラ10により撮影された車両周辺の画像から予め定められた特徴物を認識する画像認識装置として構成されている。
The
車線認識装置15は、画像取得装置11より車両周辺の画像ファイルを取得して、走行路の路面に描かれている車線を区切る区画線(センターライン、車道外側線など)を特徴物として認識するとともに、車両周辺の画像における区画線の位置および向きから車両が車線変更しているか否かを判定し、その判定結果を記録制御装置12へ出力する。なお、インターチェンジにおいて自車両が側道から本線へ合流するような状況も、自車両が車線変更している状況として判定する。
The
接近車両認識装置16は、画像取得装置11より車両周辺の画像ファイルを取得して車両の前方および後方の少なくとも一方に位置する車両を特徴物として認識するとともに、車両周辺の画像中の車両の大きさから当該車両と自車両との距離が基準値未満であるか否かを判定し、その判定結果を記録制御装置12へ出力する。
The approaching
横加速度センサ20aは、車両の左右方向の加速度を検知するように車両に搭載されている。横加速度センサ20aは、車両の左右方向の加速度に応じた信号を出力する。
The
縦加速度センサ20b、前後方向(進行方向と後退方向)の加速度を検知するように車両に搭載されている。縦加速度センサ20bは、前後方向の加速度に応じた信号を出力する。なお、本実施形態では、縦加速度センサ20bにより検出される車両の前後方向の加速度を、車両の縦加速度として説明する。 The longitudinal acceleration sensor 20b is mounted on the vehicle so as to detect acceleration in the front-rear direction (traveling direction and backward direction). The vertical acceleration sensor 20b outputs a signal corresponding to the longitudinal acceleration. In the present embodiment, the longitudinal acceleration of the vehicle detected by the longitudinal acceleration sensor 20b will be described as the longitudinal acceleration of the vehicle.
ステアリングセンサ21は、ステアリング操舵角に応じた信号を出力する。また、方向指示スイッチ22は、ステアリングコラムから延びるように設けられた方向指示レバーの操作位置に応じた信号を出力する。
The
障害物検出センサ23は、自車両の前方に位置する物体(車両)と自車両との距離を検出し、検出した距離を示す信号を出力するとともに、自車両の後方に位置する物体(車両)と自車両との距離を検出し、検出した距離を示す信号を出力する。なお、障害物検出センサ23は、ミリ波レーダ、超音波ソナー等を用いて構成することができる。
The
本ドライブレコーダは、車両周辺を撮影する車載カメラ10により撮影された車両周辺の画像を揮発性メモリ(一次記憶媒体)13に記憶させるとともに、車両に搭載された加速度センサ20により判定閾値以上の大きさの加速度が検知されると、当該加速度が検知された時点を含む予め定められた期間に、車両の周辺を撮影する車載カメラ10により撮影された周辺画像を揮発性メモリ13から読み出して不揮発性メモリ(耐久記憶媒体)14に記憶させるようになっている。なお、耐久記憶媒体とは、本ドライブレコーダへの電源の供給が停止してもデータを保持し続けることができる記憶媒体をいう。
The drive recorder stores an image of the vehicle periphery captured by the in-
また、本ドライブレコーダは、自車両が衝突する可能性の高い状況として、自車両が車線変更している状況と、自車両の前方および後方の少なくとも一方に位置する車両との距離が基準値未満となった状況を判定し、自車両が衝突する可能性の高い状況であると判定した場合、判定閾値を小さくするように変更する処理を行う。 In addition, this drive recorder has a possibility that the own vehicle will collide, and the distance between the situation where the own vehicle is changing the lane and the vehicle located at least one of the front and rear of the own vehicle is less than the reference value. When the situation is determined and it is determined that the vehicle is highly likely to collide, a process of changing the determination threshold value to be small is performed.
図2〜3、図6に、本実施形態に係るドライブレコーダの制御部のフローチャートを示す。なお、記録制御装置12の処理をドライブレコーダの制御部の処理として説明する。運転者の操作に応じて車両のイグニッションスイッチがオン状態になると、本ドライブレコーダは動作状態となり、記録制御装置12は、図2に示す処理を開始するとともに、画像取得装置11より入力される車両周辺の画像を、一定期間分(予め定められた複数フレーム分)、予め定められたフレームレートで揮発性メモリ13に記録させる処理を開始する。なお、このフレームレートは、車載カメラ10のフレームレートよりも低い値(本実施形態では、30fps)が初期値として設定され、後述する図6のS204、S206で変更される。
2 and 3 and 6 show flowcharts of the control unit of the drive recorder according to the present embodiment. The process of the
まず、閾値制御処理を実施する(S100)。図3に、この閾値制御処理のフローチャートを示す。この閾値制御処理では、まず、横加速度の判定閾値を予め定められた一定値(基準値)に設定するとともに、縦加速度の判定閾値を予め定められた一定値(基準値)に設定する(S102)。なお、横加速度の判定閾値と縦加速度の判定閾値は、同一の値としても、異なる値としてもよい。 First, threshold control processing is performed (S100). FIG. 3 shows a flowchart of the threshold control process. In this threshold value control process, first, the lateral acceleration determination threshold value is set to a predetermined constant value (reference value), and the vertical acceleration determination threshold value is set to a predetermined constant value (reference value) (S102). ). The lateral acceleration determination threshold and the vertical acceleration determination threshold may be the same value or different values.
次に、自車両が車線変更しているか否かを車線認識装置15から出力される判定結果に基づいて判定する(S104)。図4に、自車両が走行車線から追い越し車線へ車線変更している様子を示す。本実施形態では、判定精度を高めるため、車線認識装置15により自車両が車線変更していると判定され、かつ、ステアリングセンサ21より入力される信号に基づいてステアリング繰舵角が基準値以上となっていると判定され、かつ、方向指示スイッチ22が車両の旋回方向に操作されている場合に、自車両が車線変更していると判定する。
Next, it is determined based on the determination result output from the
ここで、車線認識装置15により自車両が車線変更していると判定され、かつ、ステアリング繰舵角が基準値以上となっていると判定され、かつ、方向指示スイッチ22が車両の旋回方向に操作されている場合、S104の判定はYESとなり、次に、横加速度の判定閾値を変化させる(S106)。具体的には、S102にて設定した横加速度の判定閾値をより小さくする。このように、横加速度の判定閾値を小さくすることで、車両の左右方向の衝撃が検出され易くなる。
Here, it is determined by the
また、車線認識装置15により自車両が車線変更していないと判定された場合、あるいは、ステアリング繰舵角が基準値以上となっていないと判定された場合、あるいは、方向指示スイッチ22が車両の旋回方向に操作されていない場合、S104の判定はNOとなり、次に、横加速度の判定閾値を変化させることなく、S108へ進む。
Further, when it is determined by the
S108では、自車両の前方および後方の少なくとも一方に位置する物体(車両)との距離が基準値未満となった状況か否かを接近車両認識装置16から出力される判定結果に基づいて判定する。図5に、自車両の前方および後方に前方車と後続車が走行している様子を示す。本実施形態では、判定制度を高めるため、接近車両認識装置16により自車両の前方および後方の少なくとも一方に位置する車両と自車両との距離が基準値未満であると判定され、かつ、障害物検出センサ23により入力される信号に基づいて車両の前方および後方の少なくとも一方に位置する車両と自車両との距離が基準値未満であると判定した場合、自車両の前方および後方の少なくとも一方に位置する物体(車両)との距離が基準値未満となった状況であると判定する。
In S108, it is determined based on the determination result output from the approaching
ここで、自車両の前方および後方の少なくとも一方に位置する物体(車両)と自車両との距離が基準値未満となった場合、S108の判定はYESとなり、次に、縦加速度の判定閾値を変化させる(S110)。具体的には、S102にて設定した縦加速度の判定閾値をより小さくする。このように、縦加速度の判定閾値を小さくすることで、車両の前後方向の衝撃が検出され易くなる。 Here, when the distance between the object (vehicle) located at least one of the front and rear of the host vehicle and the host vehicle is less than the reference value, the determination in S108 is YES, and then the vertical acceleration determination threshold is set. Change (S110). Specifically, the longitudinal acceleration determination threshold set in S102 is made smaller. As described above, by reducing the longitudinal acceleration determination threshold, it is easy to detect the impact in the front-rear direction of the vehicle.
図2の説明に戻り、次に、フレームレート制御処理(S200)を実施する。図6に、フレームレート制御処理のフローチャートを示す。なお、ここでは、揮発性メモリ13に記録する画像のフレームレートが車載カメラ10のフレームレートより低い値(本実施形態では、30fps)に設定されている。
Returning to the description of FIG. 2, the frame rate control process (S200) is then performed. FIG. 6 shows a flowchart of the frame rate control process. Here, the frame rate of the image recorded in the
まず、自車両が車線変更していると判断されたか否か、または、前方車または後続車が一定距離に近づいたか否かを判定する(S202)。具体的には、S104と同様に、自車両が車線変更しているか否かを判定するとともに、S108と同様に、自車両の前方および後方の少なくとも一方に位置する物体(車両)との距離が基準値未満となったか否かを判定し、自車両が車線変更しているか、または、自車両の前方および後方の少なくとも一方に位置する物体(車両)との距離が基準値未満となったかを判定する。 First, it is determined whether or not it is determined that the host vehicle has changed lanes, or whether or not the preceding vehicle or the following vehicle has approached a certain distance (S202). Specifically, as in S104, it is determined whether or not the host vehicle is changing lanes, and the distance from an object (vehicle) located at least one of the front and rear of the host vehicle is determined as in S108. It is determined whether or not the vehicle has become less than the reference value, and whether the vehicle has changed lanes or whether the distance to the object (vehicle) located at least one of the front and rear of the vehicle is less than the reference value judge.
ここで、自車両が車線変更している場合、または、自車両の前方および後方の少なくとも一方に位置する物体(車両)との距離が基準値未満となった場合、S202の判定はYESとなり、揮発性メモリ13に記録する画像のフレームレートを車載カメラ10のフレームレートと同一に設定する(S204)。上記したように、車載カメラ10のフレームレートが60fpsとなっており、揮発性メモリ13に記録する画像のフレームレートが30fpsに設定されている場合、揮発性メモリ13に記録する画像のフレームレートを車載カメラ10のフレームレートと同一の60fpsに設定する。このように、揮発性メモリ13に記録する画像のフレームレートを高くすることにより、車両の周辺画像をより鮮明に揮発性メモリ13に記録することができる。
Here, if the host vehicle has changed lanes, or if the distance to the object (vehicle) located at least one of the front and rear of the host vehicle is less than the reference value, the determination in S202 is YES, The frame rate of the image recorded in the
また、自車両が車線変更していない場合、および、自車両の前方および後方の少なくとも一方に位置する物体(車両)との距離が基準値未満となっていない場合には、S202の判定はNOとなり、揮発性メモリ13に記録する画像のフレームレートを車載カメラ10の最大スペックより下げて設定する(S206)。本実施形態では、揮発性メモリ13に記録する画像のフレームレートを30fpsに下げて設定し、本処理を終了する。
If the vehicle has not changed lanes and if the distance to the object (vehicle) located at least one of the front and rear of the vehicle is not less than the reference value, the determination in S202 is NO. Thus, the frame rate of the image recorded in the
図2に説明に戻り、次に、横加速度および縦加速度の少なくとも一方が判定閾値を超えたか否かを判定する(S300)。ここで、横加速度および縦加速度の少なくとも一方が判定閾値を超えた場合、S300の判定はYESとなり、加速度が検知された時点を含む予め定められた期間分(予め定められた複数フレーム分)の車両の周辺画像を揮発性メモリ13から読み出し、この車両の周辺画像に各センサ情報を付加して不揮発性メモリ14に記録する(S400)。なお、各センサ情報には、車速センサ(図示せず)より入力される信号に基づいて特定される車速、加速度、年月日時刻情報が含まれる。
Returning to FIG. 2, next, it is determined whether or not at least one of the lateral acceleration and the longitudinal acceleration has exceeded the determination threshold (S300). Here, when at least one of the lateral acceleration and the vertical acceleration exceeds the determination threshold, the determination in S300 is YES, and for a predetermined period (for a plurality of predetermined frames) including the time point when the acceleration is detected. The surrounding image of the vehicle is read from the
また、横加速度および縦加速度の少なくとも一方が判定閾値を超えない場合、S300の判定はNOとなり、不揮発性メモリ14への画像および各車両信号の記録を実施することなく、本処理を終了する。
If at least one of the lateral acceleration and the longitudinal acceleration does not exceed the determination threshold value, the determination in S300 is NO, and the process ends without recording the image and each vehicle signal in the
したがって、自車両が車線変更していない状況で、かつ、自車両の前方および後方の少なくとも一方に位置する物体(車両)との距離が基準値未満となっていない状況では、横加速度の判定閾値も縦加速度の判定閾値も比較的高い基準値に設定されているので、例えば、急ブレーキや急ハンドル、急発進などによる加減速が生じても、横加速度、縦加速度が判定閾値を超えたと判定されにくく、誤動作による不揮発性メモリ14への周辺画像の記憶が抑制される。
Therefore, in a situation where the host vehicle has not changed lanes and the distance from the object (vehicle) located at least one of the front and rear of the host vehicle is not less than the reference value, the threshold value for determining lateral acceleration Since the threshold for determining vertical acceleration is set to a relatively high reference value, for example, even if acceleration / deceleration occurs due to sudden braking, sudden steering, sudden start, etc., it is determined that the lateral acceleration and vertical acceleration have exceeded the determination threshold. This makes it difficult to store peripheral images in the
また、自車両が車線変更している状況でないと判定された場合、あるいは、自車両の前方および後方の少なくとも一方に位置する物体(車両)との距離が基準値未満となっていない状況では、揮発性メモリ13に記録する画像のフレームレートを車載カメラ10の最大スペックより下げられているので、CPU等の処理負荷が低減され、電力消費量も抑制される。
In addition, when it is determined that the vehicle is not in a situation where the lane is changed, or in a situation where the distance from the object (vehicle) located at least one of the front and rear of the vehicle is not less than the reference value, Since the frame rate of the image recorded in the
また、自車両が車線変更した場合には、横加速度の判定閾値が基準値よりも小さく変更されるため、比較的小さな衝撃でも、車両の周辺画像および各車両信号が揮発性メモリ13から読み出されて不揮発性メモリ14に記録される。
Further, when the host vehicle changes lanes, the lateral acceleration determination threshold value is changed to be smaller than the reference value, so that the surrounding image of the vehicle and each vehicle signal are read from the
また、自車両が車線変更している状況であると判定された場合、揮発性メモリ13に記録する画像のフレームレートが車載カメラ10の最大スペックに変更され、この揮発性メモリ13に記録された画像が同一フレームレートで不揮発性メモリ14に記録されるので、車両の周辺画像がより鮮明に揮発性メモリ13に記録される。
If it is determined that the vehicle is in a lane change state, the frame rate of the image recorded in the
また、自車両の前方および後方の少なくとも一方に位置する物体(車両)との距離が基準値未満となった場合には、縦加速度の判定閾値が基準値よりも小さく変更されるため、比較的小さな衝撃でも、車両の周辺画像が揮発性メモリ13から読み出されて不揮発性メモリ14に記録される。
Further, when the distance to the object (vehicle) located at least one of the front and rear of the host vehicle is less than the reference value, the longitudinal acceleration determination threshold is changed to be smaller than the reference value. Even with a small impact, the surrounding image of the vehicle is read from the
また、自車両の前方および後方の少なくとも一方に位置する物体(車両)との距離が基準値未満となった状況であると判定された場合も、揮発性メモリ13に記録する画像のフレームレートが車載カメラ10の最大スペックに変更され、この揮発性メモリ13に記録された画像が同一フレームレートで不揮発性メモリ14に記録されるので、車両の周辺画像がより鮮明に揮発性メモリ13に記録される。
Even when it is determined that the distance from the object (vehicle) located at least one of the front and rear of the host vehicle is less than the reference value, the frame rate of the image recorded in the
上記した構成によれば、車両が衝突する可能性の高い状況にあるか否かを判定し、車両が衝突する可能性の高い状況にあると判定された場合、判定閾値を小さくするように変更するので、車両が衝突する可能性の高い状況にあると判定された場合には、車両が衝突する可能性の高い状況にないと判定された場合と比較して、判定閾値を小さくすることができ、誤動作による不揮発性メモリ14への周辺画像の記憶を抑制し、かつ、より確実に衝突時における不揮発性メモリ14への周辺画像の記憶を行うようにすることができる。
According to the configuration described above, it is determined whether or not the vehicle is in a situation where there is a high possibility of a collision, and when it is determined that the vehicle is likely to collide, the determination threshold is changed to be small. Therefore, when it is determined that the vehicle is highly likely to collide, the determination threshold may be reduced compared to the case where it is determined that the vehicle is not likely to collide. It is possible to suppress the storage of the peripheral image in the
また、加速度センサ20は、車両の左右方向の加速度を検知するようになっており、車両が衝突する可能性の高い状況として車両が左右方向の衝撃を受ける可能性が高い状況であるか否かを判定し、車両が左右方向の衝撃を受ける可能性が高い状況であると判定した場合、車両の左右方向の加速度の判定閾値を小さくすることができる。
Further, the
なお、車両が車線変更する状況を車両が左右方向の衝撃を受ける可能性が高い状況として判定することができる。 It should be noted that the situation in which the vehicle changes lanes can be determined as a situation in which the vehicle is highly likely to receive a left-right impact.
また、加速度センサ20は、車両の前後方向の加速度を検知するようになっており、車両が衝突する可能性の高い状況として車両が前後方向の衝撃を受ける可能性が高い状況であるか否かを判定し、車両の前後方向の加速度の判定閾値を小さくすることもできる。
Further, the
なお、車両の前方および後方の少なくとも一方に位置する車両との距離が基準値未満となった状況を車両が前後方向の衝撃を受ける可能性が高い状況として判定することができる。 It should be noted that a situation in which the distance from the vehicle located at least one of the front and rear of the vehicle is less than the reference value can be determined as a situation in which the vehicle is highly likely to receive a longitudinal impact.
また、カメラにより撮影された周辺画像から予め定められた特徴物を認識し、この認識した特徴物に基づいて車両が衝突する可能性の高い状況にあるか否かを判定するようになっており、周辺画像を撮影するためのカメラを利用して車両が衝突する可能性の高い状況にあるか否かを判定するので、構成を簡素化することができる。 Also, a predetermined feature is recognized from a peripheral image photographed by the camera, and it is determined whether or not the vehicle is likely to collide based on the recognized feature. Since it is determined whether or not the vehicle is likely to collide using a camera for taking a peripheral image, the configuration can be simplified.
また、カメラにより撮影された周辺画像を一次記憶媒体に記憶させるとともに、加速度センサにより判定閾値以上の大きさの加速度が検知されると、当該加速度が検知された時点を含む予め定められた期間分の車両の周辺画像を揮発性メモリ13から読み出して不揮発性メモリ14に記憶させるようになっており、カメラより送出される周辺画像のフレームレートより低いフレームレートで周辺画像を一次記憶手段に記憶させるので、移動体が衝突する可能性の高い状況にあると判定された場合、カメラより送出される周辺画像と同一のフレームレートでカメラより送出される周辺画像を一次記憶手段に記憶させるので、周辺画像を一次記憶手段に記憶させるための処理負荷を低減し、電力消費量を抑制することができる。また、車両が衝突する可能性の高い状況にあると判定された場合、カメラより送出される周辺画像と同一のフレームレートでカメラより送出される周辺画像を一次記憶手段に記憶させるので、車両の周辺画像をより鮮明に揮発性メモリ13に記録することができる。
In addition, the peripheral image captured by the camera is stored in the primary storage medium, and when an acceleration greater than a determination threshold is detected by the acceleration sensor, a predetermined period including the time when the acceleration is detected is detected. The peripheral image of the vehicle is read from the
なお、本発明は上記実施形態に限定されるものではなく、本発明の趣旨に基づいて種々なる形態で実施することができる。 In addition, this invention is not limited to the said embodiment, Based on the meaning of this invention, it can implement with a various form.
例えば、上記実施形態では、車両の周辺を撮影するカメラ10により撮影された周辺画像を不揮発性メモリ14に記憶させるドライブレコーダを例に移動体用画像記憶装置について説明したが、例えば、鉄道車両、船舶、航空機等の移動体に搭載することもできる。
For example, in the above embodiment, the mobile image storage device has been described by way of example of a drive recorder that stores in the nonvolatile memory 14 a peripheral image captured by the
また、上記実施形態では、フラッシュメモリを耐久記憶媒体として用いたが、例えば、ハードディスク、EEPROM等の不揮発性記憶媒体を耐久記憶媒体として用いてもよい。また、例えば、ドライブレコーダと、情報センタ等に設置されたサーバとの間で通信するように構成し、サーバに設けられたハードディスク、フラッシュメモリ、DVD−R等を耐久記憶媒体として構成してもよい。この場合、移動体に搭載された加速度センサにより判定閾値以上の大きさの加速度が検知されると、当該加速度が検知された時点を含む予め定められた期間に、移動体の周辺を撮影するカメラにより撮影された周辺画像をドライブレコーダからサーバに送信する処理を実施し、サーバは、ドライブレコーダから送信された画像等を耐久記憶媒体に記憶させるように構成すればよい。 Moreover, in the said embodiment, although flash memory was used as a durable storage medium, you may use non-volatile storage media, such as a hard disk and EEPROM, as a durable storage medium, for example. Further, for example, the drive recorder may be configured to communicate with a server installed in an information center, and a hard disk, flash memory, DVD-R, etc. provided in the server may be configured as a durable storage medium. Good. In this case, when an acceleration greater than a determination threshold is detected by an acceleration sensor mounted on the moving body, a camera that captures the periphery of the moving body during a predetermined period including the time when the acceleration is detected The peripheral image captured by the above-described method may be transmitted from the drive recorder to the server, and the server may be configured to store the image transmitted from the drive recorder in the durable storage medium.
また、上記実施形態では、車両の前方および後方の少なくとも一方に位置する車両との距離が基準値未満となった状況を車両が前後方向の衝撃を受ける可能性が高い状況として判定し、車両が前後方向の衝撃を受ける可能性が高い状況であると判定した場合、縦加速度の判定閾値を小さくしたが、例えば、車両の左右方向に位置する車両との距離が基準値未満となった状況を車両が左右方向の衝撃を受ける可能性が高い状況として判定し、車両が左右方向の衝撃を受ける可能性が高い状況であると判定した場合、横加速度の判定閾値を小さくするように構成してもよい。 In the above embodiment, the situation in which the distance from the vehicle located at least one of the front and rear of the vehicle is less than the reference value is determined as a situation in which the vehicle is highly likely to receive an impact in the front-rear direction. When it is determined that there is a high possibility of receiving a longitudinal shock, the longitudinal acceleration determination threshold is reduced, but for example, a situation where the distance from the vehicle located in the left-right direction of the vehicle is less than the reference value. If the vehicle is determined to have a high probability of receiving a left-right impact, and if it is determined that the vehicle is highly likely to receive a left-right impact, the threshold for determining lateral acceleration is set to be small. Also good.
また、上記実施形態では、車両が左右方向の衝撃を受ける可能性が高い状況であると判定した場合、横加速度の判定閾値を小さくし、車両が前後方向の衝撃を受ける可能性が高い状況であると判定した場合、縦加速度の判定閾値を小さくしたが、車両が左右方向と前後方向の両方の衝撃を受ける可能性が高い状況であると判定した場合には、横加速度の判定閾値と縦加速度の判定閾値の両方を小さくするように構成することができる。 Further, in the above embodiment, when it is determined that the vehicle is highly likely to receive a left-right impact, the lateral acceleration determination threshold is decreased, and the vehicle is highly likely to receive a longitudinal impact. If it is determined that the vehicle is in a situation where it is highly likely that the vehicle will be subjected to both left-right and front-back impacts, the threshold value for the vertical acceleration is Both acceleration determination thresholds can be reduced.
なお、上記実施形態における構成と特許請求の範囲の構成との対応関係について説明すると、S104、S108が状況判定手段に相当し、S106、S110が判定閾値変更手段に相当し、車線認識装置15および接近車両認識装置16が画像認識手段に相当し、フレーム制御処理S200が記憶制御手段に相当する。
The correspondence relationship between the configuration in the above embodiment and the configuration of the claims will be described. S104 and S108 correspond to the situation determination unit, S106 and S110 correspond to the determination threshold change unit, and the
10a 前方カメラ
10b 後方カメラ
11 画像取得装置
12 記録制御装置
13 揮発性メモリ
14 不揮発性メモリ
15 車線認識装置
16 接近車両認識装置
20a 横加速度センサ
20b 縦加速度センサ
DESCRIPTION OF
Claims (6)
前記移動体が衝突する可能性の高い状況にあるか否かを判定する状況判定手段と、
前記状況判定手段により前記移動体が衝突する可能性の高い状況にあると判定された場合、前記判定閾値を小さくするように変更する判定閾値変更手段と、を備え、
前記加速度センサは、前記移動体の左右方向の加速度を検知するようになっており、
前記状況判定手段は、前記移動体が衝突する可能性の高い状況として前記移動体が左右方向の衝撃を受ける可能性が高い状況にあるか否かを判定し、
前記判定閾値変更手段は、前記移動体の左右方向の加速度の前記判定閾値を小さくするように変更することを特徴とする移動体用画像記憶装置。 When an acceleration greater than a determination threshold is detected by an acceleration sensor mounted on the moving body, the image is captured by a camera that captures the periphery of the moving body during a predetermined period including the time when the acceleration is detected. A moving body image storage device that performs processing for storing the peripheral image thus recorded in a durable storage medium,
Situation determination means for determining whether or not the mobile object is in a situation where there is a high possibility of collision;
If the moving object is determined to be in the most likely situation of collision by said status determination unit, and a determination threshold value changing means for changing to decrease said determination threshold value,
The acceleration sensor is adapted to detect lateral acceleration of the moving body,
The situation determination means determines whether or not the mobile body is highly likely to receive a left-right impact as a situation where the mobile body is likely to collide,
The determination threshold value changing unit changes the determination threshold value of the acceleration in the left-right direction of the moving object so as to be small .
前記移動体が衝突する可能性の高い状況にあるか否かを判定する状況判定手段と、
前記状況判定手段により前記移動体が衝突する可能性の高い状況にあると判定された場合、前記判定閾値を小さくするように変更する判定閾値変更手段と、を備え、
前記加速度センサは、前記移動体の前後方向の加速度を検知するようになっており、
前記状況判定手段は、前記移動体が衝突する可能性の高い状況として前記移動体が前後方向の衝撃を受ける可能性が高い状況にあるか否かを判定し、
前記判定閾値変更手段は、前記移動体の前後方向の加速度の前記判定閾値を小さくするように変更することを特徴とする移動体用画像記憶装置。 When an acceleration greater than a determination threshold is detected by an acceleration sensor mounted on the moving body, the image is captured by a camera that captures the periphery of the moving body during a predetermined period including the time when the acceleration is detected. A moving body image storage device that performs processing for storing the peripheral image thus recorded in a durable storage medium,
Situation determination means for determining whether or not the mobile object is in a situation where there is a high possibility of collision;
If the moving object is determined to be in the most likely situation of collision by said status determination unit, and a determination threshold value changing means for changing to decrease said determination threshold value,
The acceleration sensor is adapted to detect the acceleration in the front-rear direction of the moving body,
The situation determination means determines whether or not the moving body is highly likely to receive a longitudinal impact as a situation where the moving body is likely to collide,
The moving object image storage device, wherein the determination threshold value changing unit changes the determination threshold value of the acceleration in the front-rear direction of the moving object to be small .
前記状況判定手段は、前記車両が車線変更する状況を前記車両が左右方向の衝撃を受ける可能性が高い状況として判定することを特徴とする請求項1または2に記載の移動体用画像記憶装置。 The moving body is a vehicle;
The situation determining means, the vehicle is moving body image storage device according to claim 1 or 2, characterized in that determining a situation of changing lane as the vehicle has a high shock potential in the lateral direction situation .
前記状況判定手段は、前記画像認識手段により認識された前記特徴物に基づいて前記移動体が衝突する可能性の高い状況にあるか否かを判定することを特徴とする請求項1ないし4のいずれか1つに記載の移動体用画像記憶装置。 Image recognition means for recognizing a predetermined feature from a peripheral image photographed by the camera;
The situation determining means, according to claim 1, characterized in that determining whether the moving object based on the feature was recognized by the image recognizing means is in likely situation of collision The moving body image storage device according to any one of the above.
前記カメラより送出される前記周辺画像のフレームレートより低いフレームレートで前記周辺画像を前記一次記憶媒体に記憶させ、前記状況判定手段により前記移動体が衝突する可能性の高い状況にあると判定された場合、前記カメラより送出される前記周辺画像と同一のフレームレートで前記カメラより送出される前記周辺画像を前記一次記憶媒体に記憶させる記憶制御手段を備えたことを特徴とする請求項1ないし5のいずれか1つに記載の移動体用画像記憶装置。 A peripheral image captured by the camera is stored in a primary storage medium, and when an acceleration greater than a determination threshold is detected by the acceleration sensor, a predetermined period including a point in time when the acceleration is detected is detected. The peripheral image of the mobile body is read from the primary storage medium and stored in the durable storage medium,
The peripheral image is stored in the primary storage medium at a frame rate lower than the frame rate of the peripheral image transmitted from the camera, and the situation determination unit determines that the mobile object is highly likely to collide. The storage control means for storing the peripheral image transmitted from the camera at the same frame rate as the peripheral image transmitted from the camera in the primary storage medium. 5. The moving body image storage device according to any one of 5 above.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012224222A JP5920158B2 (en) | 2012-10-09 | 2012-10-09 | Image storage device for moving body |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012224222A JP5920158B2 (en) | 2012-10-09 | 2012-10-09 | Image storage device for moving body |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014078071A JP2014078071A (en) | 2014-05-01 |
JP5920158B2 true JP5920158B2 (en) | 2016-05-18 |
Family
ID=50783346
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012224222A Expired - Fee Related JP5920158B2 (en) | 2012-10-09 | 2012-10-09 | Image storage device for moving body |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5920158B2 (en) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6459443B2 (en) | 2014-11-28 | 2019-01-30 | 株式会社リコー | Detection device, detection system, detection method and program |
JP6608345B2 (en) | 2016-09-28 | 2019-11-20 | 日立建機株式会社 | Work machine |
JP6919428B2 (en) * | 2016-12-21 | 2021-08-18 | トヨタ自動車株式会社 | Vehicle data recording device |
JP6974059B2 (en) * | 2017-07-25 | 2021-12-01 | 矢崎エナジーシステム株式会社 | On-board unit and driving support device |
JP2019087969A (en) * | 2017-11-10 | 2019-06-06 | 株式会社トヨタマップマスター | Travel field investigation support device |
JP2020136900A (en) | 2019-02-19 | 2020-08-31 | ソニーセミコンダクタソリューションズ株式会社 | Imaging device, image recording device, and imaging method |
JP7310196B2 (en) * | 2019-03-22 | 2023-07-19 | 株式会社Jvcケンウッド | Recording device, recording method and program |
CN112146578B (en) * | 2019-06-28 | 2022-07-05 | 顺丰科技有限公司 | Scale ratio calculation method, device, equipment and storage medium |
JP7192678B2 (en) * | 2019-06-28 | 2022-12-20 | 株式会社Jvcケンウッド | VEHICLE RECORDING CONTROL DEVICE, RECORDING CONTROL METHOD AND PROGRAM |
JP7384181B2 (en) * | 2021-02-16 | 2023-11-21 | トヨタ自動車株式会社 | Image collection device, image collection method, and computer program for image collection |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008158987A (en) * | 2006-12-26 | 2008-07-10 | Mitsubishi Fuso Truck & Bus Corp | Drive recorder |
JP2008250463A (en) * | 2007-03-29 | 2008-10-16 | Pioneer Electronic Corp | Information recording device, information recording method, information recording program and computer-readable recording medium |
JP5362225B2 (en) * | 2008-01-09 | 2013-12-11 | 矢崎エナジーシステム株式会社 | Operation recording device and operation status recording method |
JP2010134745A (en) * | 2008-12-05 | 2010-06-17 | Fujitsu Ten Ltd | Drive recorder and video recording method for the same |
-
2012
- 2012-10-09 JP JP2012224222A patent/JP5920158B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2014078071A (en) | 2014-05-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5920158B2 (en) | Image storage device for moving body | |
JP6741582B2 (en) | Method for storing camera image data in vehicle accident data memory | |
JP2010538378A (en) | Vehicle control system for automobile | |
JP6711631B2 (en) | Monitoring system | |
JP6972938B2 (en) | Peripheral monitoring device | |
US10569770B1 (en) | Driver assistance system | |
JP4853227B2 (en) | Driving operation support device and program for driving operation support device | |
US20160347293A1 (en) | Autonomous braking system and autonomous braking method | |
CN206209911U (en) | Driving recorder with intelligence | |
KR20140143962A (en) | Apparatus for detecting accidental contact of the vehicle and method thereof | |
JP2012038229A (en) | Drive recorder | |
KR101390909B1 (en) | A system to detect and to decide the lateral lane change intention of drivers | |
JP2018106479A (en) | Parking control device, program, and recording medium | |
US11840220B2 (en) | Driver assistance system and control method thereof | |
JP2019025932A (en) | Traveling control device for vehicle | |
KR20210084713A (en) | Driver assistance system and driver assistance method | |
US10262478B2 (en) | Vehicle-data recorder | |
TW201442903A (en) | Event data recorder (EDR) having lane departure warning system (LDWS) and forward collision warning system (FCWS) functions | |
JP2008257616A (en) | Operating status storage device | |
JP5345798B2 (en) | Vehicle status recording device | |
JP4768499B2 (en) | In-vehicle peripheral other vehicle detection device | |
JP6302205B2 (en) | OBE | |
US20200114908A1 (en) | Apparatus for responding to vehicle water splashing, system having the same and method thereof | |
EP3643586A1 (en) | Driver assistance system | |
KR101557280B1 (en) | Apparatus and Method of recording event based image data |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20141217 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150819 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150825 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20151019 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160315 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160328 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5920158 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |