[go: up one dir, main page]

JP7118322B2 - Monitoring system - Google Patents

Monitoring system Download PDF

Info

Publication number
JP7118322B2
JP7118322B2 JP2022528939A JP2022528939A JP7118322B2 JP 7118322 B2 JP7118322 B2 JP 7118322B2 JP 2022528939 A JP2022528939 A JP 2022528939A JP 2022528939 A JP2022528939 A JP 2022528939A JP 7118322 B2 JP7118322 B2 JP 7118322B2
Authority
JP
Japan
Prior art keywords
moving image
data
distribution
abnormality
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022528939A
Other languages
Japanese (ja)
Other versions
JPWO2022009356A1 (en
JPWO2022009356A5 (en
Inventor
光貴 岩村
守真 横田
剛久 三輪
康次 長谷川
孝之 小平
誠司 奥村
博文 西川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Mitsubishi Electric Building Solutions Corp
Original Assignee
Mitsubishi Electric Corp
Mitsubishi Electric Building Solutions Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp, Mitsubishi Electric Building Solutions Corp filed Critical Mitsubishi Electric Corp
Publication of JPWO2022009356A1 publication Critical patent/JPWO2022009356A1/ja
Publication of JPWO2022009356A5 publication Critical patent/JPWO2022009356A5/ja
Application granted granted Critical
Publication of JP7118322B2 publication Critical patent/JP7118322B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/10Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using wireless transmission systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M11/00Telephonic communication systems specially adapted for combination with other electrical systems
    • H04M11/04Telephonic communication systems specially adapted for combination with other electrical systems with alarm systems, e.g. fire, police or burglar alarm systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Alarm Systems (AREA)
  • Telephonic Communication Services (AREA)
  • Closed-Circuit Television Systems (AREA)

Description

本発明は、カメラを用いた監視システムに関する。 The present invention relates to a surveillance system using cameras.

近年、カメラを用いた監視システムが多く用いられている。例えば、カメラに接続されたレコーダ内に画像解析装置を有し、異常時の前後のみ映像を録画し、異常時に異常検出メールを携帯端末に送付し、携帯端末側から異常時の映像を受信可能とすることにより、少ないデータ格納量と、少ないデータ通信料で異常発生時の画像を遠隔地より確認する監視システムが提案されている(例えば、特許文献1参照)。 In recent years, many surveillance systems using cameras have been used. For example, it is possible to have an image analysis device in the recorder connected to the camera, record images only before and after an abnormality, send an abnormality detection email to the mobile terminal when an abnormality occurs, and receive the image from the mobile terminal. A monitoring system has been proposed in which an image at the time of occurrence of an abnormality is remotely confirmed with a small data storage amount and a small data communication fee (see, for example, Patent Document 1).

特許第6266184号明細書Patent No. 6266184

しかし、特許文献1に記載された従来技術による監視システムでは、ユーザは、異常発生時に受信した異常検出メールによって連絡されたURLから動画をダウンロードして閲覧することにより異常の状況の確認を行うので、異常の状態を確認するのに時間が掛かる場合があった。また、異常シーンの内容、或いは、携帯端末の通信状態に応じて、最適なデータ配信方法が選択できず、迅速に異常の状況確認できない場合があった。 However, in the monitoring system according to the prior art disclosed in Patent Document 1, the user checks the status of the abnormality by downloading and viewing the video from the URL notified by the abnormality detection mail received when the abnormality occurs. , it may take time to confirm the status of the abnormality. In addition, depending on the content of the abnormal scene or the communication state of the mobile terminal, it may not be possible to select the optimum data delivery method, and it may not be possible to quickly check the abnormal situation.

そこで、本発明は、ユーザが迅速に異常の状態を確認できる監視システムを提供することを目的とする。 SUMMARY OF THE INVENTION Accordingly, it is an object of the present invention to provide a monitoring system that allows a user to quickly check the state of an abnormality.

本発明の監視システムは、カメラが撮像した動画データを格納すると共に、前記カメラが撮像した動画データを分析し、異常を検出した際に異常発生時刻を含むアラーム信号を生成する画像分析格納装置と、前記画像分析格納装置と通信し、前記画像分析格納装置から前記アラーム信号を受信した際に、前記画像分析格納装置に格納された動画データの内の前記異常発生時刻の前後における設定時間分の動画データを記録動画データとして前記画像分析格納装置から受信する通信装置と、前記通信装置と通信し、前記通信装置から前記記録動画データを受信し、受信した前記記録動画データに基づいて異常状態情報を携帯端末に配信するサーバと、を備え、前記サーバは、前記通信装置から前記記録動画データを取得する画像取得部と、前記携帯端末との通信状態データと前記異常の緊急度と前記異常状態情報の配信方法とを関連付けて格納した配信方法選択マップと、前記画像取得部から入力された前記記録動画データに基づいて前記異常の緊急度を判定し、判定した前記異常の緊急度と前記携帯端末から受信した前記携帯端末との前記通信状態データと前記配信方法選択マップとに基づいて前記携帯端末に配信する前記異常状態情報の配信方法を選択する配信方法選択部と、前記配信方法選択部が選択した配信方法に基づいて前記携帯端末に配信する前記異常状態情報の配信データを生成する配信データ生成部と、を備え、前記通信状態データは、前記携帯端末との通信速度と前記携帯端末との送受信電波強度とを含み、前記配信方法選択部は、前記異常の緊急度と前記通信速度と前記送受信電波強度と前記配信方法選択マップとに基づいて前記携帯端末に配信する前記異常状態情報の配信方法を選択し、前記配信方法選択部は、前記記録動画データの全部配信と、前記記録動画データの一部配信と、記録動画の少なくとも1つのフレーム画像データの配信と、異常状態を示すテキストデータの配信と、異常検出メールの配信との内のいずれか一つの配信方法を選択し、前記画像取得部は、前記配信方法選択部が前記記録動画データの全部配信を選択した場合であって、ユーザが確認すべき特徴事項が前記記録動画の記録時間の全体に分布している場合には、前記通信装置を介して前記画像分析格納装置に前記異常発生時刻の前後における設定時間を長くさせる指令を出力し、前記通信装置を介して長くした設定時間分の動画データを前記記録動画データとして前記画像分析格納装置から受信すること、を特徴とする。 A monitoring system of the present invention stores moving image data captured by a camera, analyzes the moving image data captured by the camera, and generates an alarm signal including an abnormality occurrence time when an abnormality is detected; and an image analysis storage device. , when communicating with the image analysis storage device and receiving the alarm signal from the image analysis storage device, the moving image data stored in the image analysis storage device for a set time before and after the abnormality occurrence time a communication device that receives moving image data as recorded moving image data from the image analyzing and storing device; communicates with the communication device; receives the recorded moving image data from the communication device; and abnormal state information based on the received recorded moving image data. to a mobile terminal, wherein the server includes an image acquisition unit that acquires the recorded moving image data from the communication device, communication status data with the mobile terminal, the emergency level of the abnormality, and the abnormal state determining the urgency of the abnormality based on a distribution method selection map stored in association with information distribution methods and the recorded video data input from the image acquisition unit; a distribution method selection unit that selects a distribution method of the abnormal state information to be distributed to the mobile terminal based on the communication state data with the mobile terminal received from the terminal and the distribution method selection map; and the distribution method selection unit. a distribution data generation unit that generates distribution data of the abnormal state information to be distributed to the mobile terminal based on a distribution method selected by the The abnormal state to be distributed to the mobile terminal based on the urgency of the abnormality, the communication speed, the transmission/reception radio wave intensity, and the distribution method selection map. The information distribution method is selected, and the distribution method selection unit distributes all of the recorded moving image data, distributes a portion of the recorded moving image data, distributes at least one frame image data of the recorded moving image, and determines an abnormal state. When the distribution method selection unit selects distribution of all of the recorded moving image data, the image acquisition unit selects one of the distribution method of the text data indicating and the distribution of the abnormality detection mail. If the features to be confirmed by the user are distributed over the entire recording time of the recorded moving image, the image analysis storage device is sent via the communication device to the set time before and after the abnormal occurrence time. Output a command to lengthen, and the set time lengthened via the communication device is received from the image analysis storage device as the recorded moving image data .

これにより、異常シーンの内容、或いは、携帯端末の通信状態に応じて、最適なデータ配信方法を選択できるので、ユーザが迅速に異常の状態を確認できる。 As a result, the optimum data distribution method can be selected according to the content of the abnormal scene or the communication state of the mobile terminal, so that the user can quickly confirm the abnormal state.

これにより、携帯端末との通信速度と携帯端末との送受信電波強度に応じて最適なデータ配信方法を選択できるので、ユーザがより迅速に異常の状態を確認できる。 As a result, the optimum data distribution method can be selected according to the communication speed with the mobile terminal and the intensity of the radio waves transmitted and received with the mobile terminal, so that the user can more quickly confirm the abnormal state.

このように、記録動画データの全部配信と、記録動画データの一部配信と、記録動画の少なくとも1つのフレーム画像データの配信と、異常状態を示すテキストデータの配信をするので、ユーザは、従来技術の監視システムのように、異常検出メールによって連絡されたURLから動画をダウンロードして閲覧することなく、配信された異常状態情報によって異常の状態を把握できる。このため、ユーザは、迅速に異常の状態を確認することができる。また、異常の緊急度が低く、携帯端末との通信状態が低い場合には異常検出メールを発信することによりユーザに迅速に異常の発生を連絡することができる。 In this way, all of the recorded moving image data, part of the recorded moving image data, at least one frame image data of the recorded moving image, and text data indicating an abnormal state are distributed. Unlike the technical monitoring system, the abnormal state can be grasped from the distributed abnormal state information without downloading and viewing the moving image from the URL notified by the abnormality detection mail. Therefore, the user can quickly confirm the abnormal state. Further, when the urgency of the abnormality is low and the communication state with the portable terminal is low, the occurrence of the abnormality can be quickly notified to the user by sending an abnormality detection mail.

このように、ユーザが確認すべき特徴事項が前記記録動画の記録時間の全体に分布しており、ユーザにとって記録動画データの記録時間が短いと思われる場合には、記録時間を長くした記録動画データの全部或いは記録動画の低画質データを配信するので、ユーザが再度動画データの閲覧要求をせずに容易に異常状態を確認することができる。 In this way, when the features to be confirmed by the user are distributed over the entire recording time of the recorded moving image, and the user thinks that the recording time of the recorded moving image data is short, a recorded moving image with a longer recording time is selected. Since all of the data or the low-quality data of the recorded moving image is distributed, the user can easily confirm the abnormal state without requesting viewing of the moving image data again.

本発明の監視システムにおいて、前記記録動画データの一部配信は、ユーザが確認すべき特徴事項を含むように前記記録動画データを編集した記録動画部分データを配信する記録動画部分データ配信と、前記記録動画データの画質を低下させた記録動画低画質データを配信する記録動画低画質データ配信と、を含み、前記配信方法選択部は、前記記録動画データの一部配信を選択した場合で、ユーザが確認すべき特徴事項が前記記録動画の記録時間の一部にのみ存在している場合には前記記録動画部分データ配信を選択し、そうでない場合には前記記録動画低画質データ配信を選択してもよい。 In the monitoring system of the present invention, the partial distribution of the recorded moving image data includes: a recorded moving image partial data distribution for distributing recorded recorded moving image partial data obtained by editing the recorded moving image data so as to include features to be checked by the user; low image quality recorded moving image data distribution for distributing low image quality recorded moving image data in which the image quality of the recorded moving image data is reduced, wherein the distribution method selection unit selects partial distribution of the recorded moving image data, and the user If the features to be confirmed exist only in part of the recording time of the recorded moving image, the above-mentioned recorded moving image partial data distribution is selected, and if not, the recorded moving image low-quality data distribution is selected. may

このように、ユーザが確認すべき特徴事項に応じて記録動画データの一部を抽出してユーザに配信するので、ユーザは迅速に異常の状態を確認できる。 In this way, a part of the recorded moving image data is extracted according to the feature items that the user should check and distributed to the user, so the user can quickly check the abnormal state.

本発明の監視システムにおいて、前記画像取得部は、前記配信方法選択部が前記記録動画低画質データ配信を選択した場合であって、ユーザが確認すべき特徴事項が前記記録動画の記録時間の全体に分布している場合には、前記通信装置を介して前記画像分析格納装置に前記異常発生時刻の前後における設定時間を長くさせる指令を出力し、前記通信装置を介して長くした設定時間分の動画データを前記記録動画データとして前記画像分析格納装置から受信してもよい。 In the monitoring system according to the present invention, the image acquisition unit is configured such that when the distribution method selection unit selects the distribution of the recorded moving image low-quality data, the characteristic item to be confirmed by the user is the entire recording time of the recorded moving image. , a command is output to the image analysis storage device via the communication device to extend the set time before and after the abnormality occurrence time, and the lengthened set time is output via the communication device. Video data may be received from the image analysis storage device as the recorded video data.

このように、ユーザが確認すべき特徴事項が前記記録動画の記録時間の全体に分布しており、ユーザにとって記録動画データの記録時間が短いと思われる場合には、記録時間を長くした記録動画データの全部或いは記録動画の低画質データを配信するので、ユーザが再度動画データの閲覧要求をせずに容易に異常状態を確認することができる。 In this way, when the features to be confirmed by the user are distributed over the entire recording time of the recorded moving image, and the user thinks that the recording time of the recorded moving image data is short, a recorded moving image with a longer recording time is selected. Since all of the data or the low-quality data of the recorded moving image is distributed, the user can easily confirm the abnormal state without requesting viewing of the moving image data again.

本発明の監視システムにおいて、前記配信方法選択部は、前記異常の緊急度が高く、前記通信速度と前記送受信電波強度の両方が高い場合には、前記記録動画データの全部配信を選択し、前記異常の緊急度が高く、前記通信速度又は前記送受信電波強度のいずれか一方のみが高い場合には、前記記録動画データの一部配信を選択し、前記異常の緊急度が高いが、前記通信速度と前記送受信電波強度の両方が高くない場合には、異常状態を示すテキストデータの配信を選択してもよい。 In the monitoring system of the present invention, the distribution method selection unit selects distribution of all of the recorded moving image data when the emergency of the abnormality is high and both the communication speed and the transmission/reception radio wave intensity are high. If the urgency of the abnormality is high and only one of the communication speed and the transmission/reception radio wave intensity is high, partial distribution of the recorded video data is selected, and the urgency of the abnormality is high but the communication speed is high. and the transmission/reception radio wave intensity are not high, delivery of text data indicating an abnormal state may be selected.

本発明の監視システムにおいて、前記配信方法選択部は、前記異常の緊急度が高くなく、前記通信速度と前記送受信電波強度の両方が高い場合には、ユーザが確認すべき特徴事項を含む前記記録動画の少なくとも1つのフレーム画像の配信を選択し、前記異常の緊急度が高くなく、前記通信速度又は前記送受信電波強度のいずれか一方のみが高い場合には、異常状態を示すテキストデータの配信を選択し、前記異常の緊急度が高くなく、前記通信速度と前記送受信電波強度の両方が高くない場合には、異常検出メールの配信を選択してもよい。 In the monitoring system according to the present invention, the delivery method selection unit selects the record including the characteristics to be confirmed by the user when the urgency of the abnormality is not high and both the communication speed and the transmission/reception radio wave intensity are high. At least one frame image of a moving image is selected to be distributed, and text data indicating an abnormal state is distributed when only one of the communication speed and the transmission/reception radio wave intensity is high and the urgency of the abnormality is not high. If the urgency of the abnormality is not high and both the communication speed and the transmission/reception radio wave intensity are not high, delivery of the abnormality detection mail may be selected.

このように、携帯端末との通信速度と携帯端末との送受信電波強度に応じて最適なデータ配信方法を選択できるので、ユーザがより迅速に異常の状態を確認できる。 In this manner, since the optimum data distribution method can be selected according to the communication speed with the mobile terminal and the intensity of the radio waves transmitted and received with the mobile terminal, the user can quickly confirm the abnormal state.

本発明の監視システムにおいて、前記サーバは、ユーザの属性とユーザの指定配信方法とを関連付けて格納したユーザデータベースを含み、前記配信方法選択部は、選択した配信方法と、前記ユーザデータベースに格納されたユーザの前記指定配信方法とが同一でない場合には、ユーザの前記指定配信方法を前記配信データ生成部に出力してもよい。 In the monitoring system of the present invention, the server includes a user database that stores user attributes and user-specified distribution methods in association with each other, and the distribution method selection unit selects the selected distribution method and the distribution method stored in the user database. If the distribution method designated by the user is not the same as the distribution method designated by the user, the distribution method designated by the user may be output to the distribution data generation unit.

これにより、ユーザの指定配信方法に基づいて異常情報を配信することができるので、監視システムの使い勝手を向上させることができる。 As a result, the abnormality information can be distributed based on the distribution method designated by the user, so that the usability of the monitoring system can be improved.

本発明の監視システムにおいて、前記携帯端末は、前記サーバから受信した前記異常状態情報に応じて前記サーバと通信し、前記サーバから前記記録動画データを受信してもよい。 In the monitoring system of the present invention, the mobile terminal may communicate with the server according to the abnormal state information received from the server, and receive the recorded moving image data from the server.

これにより、ユーザは画像分析格納装置に格納された動画データを自由に閲覧して異常の確認を行うことができる。 As a result, the user can freely view the moving image data stored in the image analysis storage device and check for abnormalities.

本発明は、ユーザが迅速に異常の状態を確認できる監視システムを提供できる。 INDUSTRIAL APPLICABILITY The present invention can provide a monitoring system that allows a user to quickly check an abnormal state.

実施形態の監視システムの構成を示す系統図である。BRIEF DESCRIPTION OF THE DRAWINGS It is a system diagram which shows the structure of the monitoring system of embodiment. 図1に示すカメラ装置の画像格納部の第1メモリと第2メモリの動画格納時間を示す説明図である。2 is an explanatory diagram showing moving image storage times of a first memory and a second memory of an image storage unit of the camera device shown in FIG. 1; FIG. 図1に示す監視システムの画像分析部の画像分析動作を示す説明図である。FIG. 3 is an explanatory diagram showing an image analysis operation of an image analysis unit of the monitoring system shown in FIG. 1; 図1に示す監視システムのサーバを形成する汎用コンピュータのハードウェア構成図である。2 is a hardware configuration diagram of a general-purpose computer forming a server of the monitoring system shown in FIG. 1; FIG. 図1に示す配信方法選択マップのデータベース構造を示す図である。2 is a diagram showing the database structure of the distribution method selection map shown in FIG. 1; FIG. 実施形態の監視システムの動作処理を示すシーケンス図である。It is a sequence diagram showing operation processing of the monitoring system of the embodiment. 図6に示す動作処理におけるレコーダの動作を示すフローチャートである。7 is a flow chart showing the operation of the recorder in the operation process shown in FIG. 6; 図6に示す動作処理における通信装置の動作を示すフローチャートである。7 is a flowchart showing the operation of the communication device in the operation process shown in FIG. 6; 図6に示す動作処理におけるサーバの動作を示すフローチャートである。FIG. 7 is a flow chart showing the operation of the server in the operation process shown in FIG. 6; FIG. 図9に示す配信方法選択処理におけるサーバの動作を示すフローチャートである。FIG. 10 is a flow chart showing the operation of the server in the distribution method selection process shown in FIG. 9; FIG. 図9に示す配信方法選択処理におけるサーバの動作を示すフローチャートである。FIG. 10 is a flow chart showing the operation of the server in the distribution method selection process shown in FIG. 9; FIG. 図10に示す設定時間延長処理における通信装置の動作を示すフローチャートである。11 is a flowchart showing the operation of the communication device in the set time extension process shown in FIG. 10; 実施形態の監視システムの他の動作処理を示すシーケンス図である。FIG. 10 is a sequence diagram showing another operation process of the monitoring system of the embodiment;

以下、図面を参照しながら実施形態の監視システム100について説明する。図1に示すように、カメラ11を含む画像分析格納装置10と、画像分析格納装置10から記録動画データを受信する通信装置30と、通信装置30から受信した記録動画データに基づいて異常状態情報を携帯端末50に配信するサーバ40と、を備えている。なお、以下の説明では、監視システム100は、カメラ11によってビル内の動画を撮像し、この動画に基づいて、不審者の侵入、災害の発生等、ビル内での異常発生を監視するシステムとして説明するが、監視システム100は、例えば、病院、学校、工場等他の建物、或いは、河川の水位等の屋外の事象の監視にも適用可能である。 A monitoring system 100 according to an embodiment will be described below with reference to the drawings. As shown in FIG. 1, an image analysis and storage device 10 including a camera 11, a communication device 30 for receiving recorded moving image data from the image analysis and storage device 10, and abnormal condition information based on the recorded moving image data received from the communication device 30. to the mobile terminal 50. In the following description, the monitoring system 100 captures moving images in the building with the camera 11, and based on the moving images, the monitoring system 100 is used as a system for monitoring abnormal occurrences in the building, such as the intrusion of suspicious persons and the occurrence of disasters. As will be explained, the monitoring system 100 is also applicable to monitoring other buildings such as hospitals, schools, factories, etc., or outdoor events such as river levels.

画像分析格納装置10は、監視対象のビルに設置される装置で、監視対象のビルの内部の動画を撮像する複数のカメラ11と動画データを格納するレコーダ12とを含んでいる。カメラ11は動画の撮像を行うことができる監視カメラである。レコーダ12は、カメラ11に接続されてカメラ11の撮像した動画データを格納する画像格納部13と、画像格納部13と接続されてカメラ11の撮像した動画データを分析してビル内に異常の発生があるかどうかを分析する画像分析部16と、画像分析部16から異常発生の信号を受けてアラーム信号を生成するアラーム信号生成部17とを含んでいる。レコーダ12は、内部に演算処理を行うCPUとデータ、プログラムを格納する記憶装置とで構成されるコンピュータであり、画像格納部13、画像分析部16、アラーム信号生成部17は、CPUがプログラムを実行することにより構成される機能ブロックである。 The image analysis storage device 10 is installed in a building to be monitored, and includes a plurality of cameras 11 for capturing moving images inside the building to be monitored and a recorder 12 for storing moving image data. The camera 11 is a monitoring camera capable of capturing moving images. The recorder 12 is connected to the camera 11 to store the moving image data captured by the camera 11. The recorder 12 is connected to the image storage unit 13 and analyzes the moving image data captured by the camera 11 to detect abnormalities in the building. It includes an image analysis unit 16 that analyzes whether or not there is an occurrence, and an alarm signal generation unit 17 that receives an abnormality occurrence signal from the image analysis unit 16 and generates an alarm signal. The recorder 12 is a computer composed of a CPU that internally performs arithmetic processing and a storage device that stores data and programs. It is a functional block configured by execution.

レコーダ12の画像格納部13は、第1メモリ14、第2メモリ15の2つの動画データ格納領域を有している。図2に示すように、第1メモリ14は、カメラ11で撮像した、1日、あるいは数日、あるいは一週間程度の長期間の動画データを更新しながら保存しておくものである。例えば、1日分の動画データを保存する場合、第1メモリ14には現時点から1日前までの動画データが保存され、それ以前の動画データは順次消去されていく。数日、一週間分の動画データを保存する場合も同様である。第1メモリ14に格納される動画データには撮像時刻が入っている。図2に示すように、第2メモリ15は、第1メモリ14に格納された動画データの中から、ある時刻t1の前の前設定時間と時刻t1の後の後設定時間との合計の設定時間分の短期間の動画データを1つまたは複数保存するものである。前設定時間は、図2に示す時刻t1と時刻t2との間の時間である。後設定時間は図2に示す時刻t1と時刻t3との間の時間である。設定時間は、前設定時間と後設定時間との合計時間であり、図2に示す時刻t2と時刻t3との間の時間である。前設定時間、後設定時間は、例えば、30秒でもよいし、1分、5分、或いは10分でもよい。画像格納部13は、外部から動画要求信号が入力された場合に、第2メモリ15に格納されている動画データを外部に出力することができるよう構成されている。なお、前設定時間、後設定時間は外部からの指令によって変更することができる。 The image storage unit 13 of the recorder 12 has two moving image data storage areas, a first memory 14 and a second memory 15 . As shown in FIG. 2, the first memory 14 stores moving image data captured by the camera 11 for a long period of one day, several days, or one week while being updated. For example, when one day's moving image data is to be saved, the first memory 14 stores the moving image data from the current time to one day ago, and the moving image data before that is sequentially deleted. The same is true when storing moving image data for several days or one week. The moving image data stored in the first memory 14 contains the imaging time. As shown in FIG. 2, the second memory 15 sets the sum of the pre-set time before a certain time t1 and the post-set time after the time t1 from the moving image data stored in the first memory 14. It stores one or a plurality of short-term video data for an hour. The pre-set time is the time between time t1 and time t2 shown in FIG. The post-set time is the time between time t1 and time t3 shown in FIG. The set time is the total time of the pre-set time and the post-set time, and is the time between time t2 and time t3 shown in FIG. The pre-set time and the post-set time may be, for example, 30 seconds, 1 minute, 5 minutes, or 10 minutes. The image storage unit 13 is configured to output the moving image data stored in the second memory 15 to the outside when a moving image request signal is input from the outside. Note that the pre-set time and the post-set time can be changed by an external command.

画像分析部16は、カメラ11が撮像した動画を分析し、異常の発生を検出する。図3を参照しながらカメラ11でビルの入口ドア22を監視する場合を例に、動画の分析と異常検知について簡単に説明する。 The image analysis unit 16 analyzes the moving image captured by the camera 11 and detects the occurrence of an abnormality. With reference to FIG. 3, analysis of moving images and detection of anomalies will be briefly described, taking as an example a case where the entrance door 22 of a building is monitored by the camera 11. FIG.

ビルの入口ドア22が施錠されている場合、画像分析部16にはビルの入口ドア22の基準画像として図3の(a)に示すような入口ドア22が閉じた状態の画像が格納されている。画像分析部16は、カメラ11から入力される動画と図3の(a)に示す基準画像とを比較して両者に差が無い場合には、異常は発生していないと判断する。一方、カメラ11から図3の(b)に示すように入口ドア22が開いた状態の動画が入力された場合、この動画と図3の(a)に示す基準画像とに差異が発生する。このように、カメラ11から入力された動画と基準画像との間に差異が発生した場合、画像分析部16は、入口ドア22に異常が発生の可能性があると判断する。 When the entrance door 22 of the building is locked, the image analysis unit 16 stores an image of the entrance door 22 closed as shown in FIG. 3A as a reference image of the entrance door 22 of the building. there is The image analysis unit 16 compares the moving image input from the camera 11 with the reference image shown in FIG. 3A, and if there is no difference between the two, determines that no abnormality has occurred. On the other hand, when a moving image of the state where the entrance door 22 is open is input from the camera 11 as shown in FIG. 3B, a difference occurs between this moving image and the reference image shown in FIG. 3A. In this way, when there is a difference between the moving image input from the camera 11 and the reference image, the image analysis unit 16 determines that there is a possibility that the entrance door 22 is abnormal.

次に、画像分析部16は、図3の(b)に示すように、入口ドア22から入って来る人25を認識する。そして、その人25の着用している服と予め基準画像として格納している警備員の制服とを比較し、その人25が警備員であるかどうかを判断する。画像分析部16は、入口ドア22から入ってきた人25が警備員であった場合には、入口ドア22からの侵入は発生していないと判断する。一方、入口ドア22から入ってきた人25が警備員では無い場合には、入口ドア22に侵入が発生したと判断する。そして、異常が発生したことをアラーム信号生成部17に出力する。 Next, the image analysis unit 16 recognizes a person 25 entering through the entrance door 22, as shown in FIG. 3(b). Then, the clothes worn by the person 25 are compared with the uniform of a security guard stored in advance as a reference image to determine whether the person 25 is a security guard. If the person 25 who entered through the entrance door 22 is a security guard, the image analysis unit 16 determines that an intrusion through the entrance door 22 has not occurred. On the other hand, if the person 25 entering through the entrance door 22 is not a security guard, it is determined that the entrance door 22 has been intruded. Then, it outputs to the alarm signal generator 17 that an abnormality has occurred.

アラーム信号生成部17は、画像分析部16から異常発生の信号を受信すると異常発生時刻を含むアラーム信号を生成する。アラーム信号は、例えば、「侵入発生」、「1階Aゾーン」等の異常の種類と異常の発生場所等と異常発生時刻とで構成される信号である。異常の種類については、例えば、数字4ケタによる「0010」等のコードを用いるようにしてもよい。 The alarm signal generation unit 17 generates an alarm signal including the time of occurrence of the abnormality upon receiving a signal indicating the occurrence of an abnormality from the image analysis unit 16 . The alarm signal is a signal composed of, for example, the type of abnormality such as "intrusion" or "zone A on the first floor", the place of occurrence of the abnormality, and the time of occurrence of the abnormality. For the type of abnormality, for example, a four-digit code such as "0010" may be used.

図1に戻って、通信装置30は、画像分析格納装置10の接続されているビル内のLAN回線とセキュリティの確保された遠隔通信ネットワーク35を接続するゲートウェイ装置である。通信装置30は、画像分析格納装置10と通信し、画像分析格納装置10からアラーム信号を受信した際に、画像分析格納装置10のレコーダ12の第2メモリ15に格納された動画データの内の異常発生時刻の前後における設定時間分の動画データを記録動画データとして受信し、受信した記録動画データをサーバ40に出力する。 Returning to FIG. 1, the communication device 30 is a gateway device that connects the LAN line in the building to which the image analysis storage device 10 is connected to a secure telecommunications network 35 . The communication device 30 communicates with the image analysis storage device 10, and when receiving an alarm signal from the image analysis storage device 10, the video data stored in the second memory 15 of the recorder 12 of the image analysis storage device 10. The moving image data for the set time before and after the time when the abnormality occurred is received as recorded moving image data, and the received recorded moving image data is output to the server 40 .

携帯端末50は、監視システム100のユーザであるビルの管理者、オーナー等が所有し、メールの送受信、画像データの受信、閲覧ができるスマートフォン、タブレット端末等である。携帯端末50は、監視対象のビルから離れた遠隔地に位置していてもよい。 The mobile terminal 50 is owned by a building manager, owner, or the like who is a user of the monitoring system 100, and is a smart phone, a tablet terminal, or the like capable of sending/receiving emails, receiving image data, and viewing image data. The mobile terminal 50 may be located in a remote location away from the monitored building.

サーバ40は、通信装置30と通信し、通信装置30から記録動画データを受信し、受信した記録動画データに基づいて異常状態情報を携帯端末50に配信する。サーバ40は、通信部41と、端末通信部42と、画像取得部43と、配信方法選択部44と、配信データ生成部45と、画像データベース46と、ユーザデータベース47と、配信方法選択マップ60の各機能ブロックを含んでいる。 The server 40 communicates with the communication device 30, receives the recorded moving image data from the communication device 30, and distributes the abnormal state information to the mobile terminal 50 based on the received recorded moving image data. The server 40 includes a communication unit 41, a terminal communication unit 42, an image acquisition unit 43, a distribution method selection unit 44, a distribution data generation unit 45, an image database 46, a user database 47, and a distribution method selection map 60. contains each functional block of

サーバ40の各機能ブロックは、図4に示すような汎用コンピュータ150によって実現することができる。図4に示すように、汎用コンピュータ150は、情報処理を行うプロセッサであるCPU151と、情報処理の際にデータを一時的に記憶するROM152、RAM153と、プログラムやユーザのデータ等を格納するハードディスクドライブ(HDD)154と、入力手段として設けられたマウス155と、キーボード156、及び表示装置として設けられたディスプレイ157とを含んでいる。CPU151とROM152とRAM153とHDD154とはデータバス160によって接続されている。また、マウス155とキーボード156とディスプレイ157とは入出力コントローラ158を介してデータバス160に接続されている。また、データバス160には通信手段として設けられたネットワークコントローラ159が接続されている。 Each functional block of the server 40 can be realized by a general-purpose computer 150 as shown in FIG. As shown in FIG. 4, the general-purpose computer 150 includes a CPU 151 that is a processor that performs information processing, a ROM 152 and a RAM 153 that temporarily store data during information processing, and a hard disk drive that stores programs and user data. (HDD) 154, a mouse 155 provided as input means, a keyboard 156, and a display 157 provided as a display device. The CPU 151 , ROM 152 , RAM 153 and HDD 154 are connected by a data bus 160 . The mouse 155 , keyboard 156 and display 157 are also connected to the data bus 160 via the input/output controller 158 . A network controller 159 provided as communication means is connected to the data bus 160 .

サーバ40の通信部41、端末通信部42、画像取得部43、配信方法選択部44、配信データ生成部45は、図4に示す汎用コンピュータ150のハードウェアとCPU151で動作するプログラムとの協調動作により実現される。画像データベース46、ユーザデータベース47は、図4に示す汎用コンピュータ150のHDD154にそれぞれ動画データ、ユーザデータを格納することにより実現される。また、配信方法選択マップ60は、図4に示す汎用コンピュータ150のHDD154に格納されている。なお、HDD154に代えて、外部の記憶手段をネットワーク経由で利用することによって実現してもよい。 The communication unit 41, the terminal communication unit 42, the image acquisition unit 43, the distribution method selection unit 44, and the distribution data generation unit 45 of the server 40 cooperate with the hardware of the general-purpose computer 150 shown in FIG. It is realized by The image database 46 and the user database 47 are implemented by storing moving image data and user data in the HDD 154 of the general-purpose computer 150 shown in FIG. 4, respectively. Also, the distribution method selection map 60 is stored in the HDD 154 of the general-purpose computer 150 shown in FIG. Incidentally, instead of the HDD 154, it may be realized by using an external storage means via a network.

通信部41は、遠隔通信ネットワーク35に接続されており、通信装置30を介して画像分析格納装置10との間でデータの授受を行う。端末通信部42は、遠隔通信ネットワーク36に接続されており、携帯端末50との間でデータの授受を行う。 The communication unit 41 is connected to the remote communication network 35 and exchanges data with the image analysis storage device 10 via the communication device 30 . The terminal communication unit 42 is connected to the remote communication network 36 and exchanges data with the mobile terminal 50 .

画像取得部43は、通信部41が通信装置30から受信した記録動画データを取得し、画像データベース46に格納する。配信方法選択部44は、画像取得部43から入力された記録動画データに基づいて異常の緊急度を判定し、判定した異常の緊急度と携帯端末50から受信した携帯端末50との通信状態データと配信方法選択マップ60とに基づいて携帯端末50に配信する異常状態情報の配信方法を選択する。ここで、配信方法選択マップ60は、図5に示すように携帯端末50との通信状態データと異常の緊急度と異常状態情報の配信方法とを関連付けて格納したマップである。配信方法選択マップ60については後で詳しく説明する。 The image acquisition unit 43 acquires recorded moving image data received by the communication unit 41 from the communication device 30 and stores the data in the image database 46 . The distribution method selection unit 44 determines the urgency of the abnormality based on the recorded moving image data input from the image acquisition unit 43, and combines the determined urgency of the abnormality with the communication status data with the mobile terminal 50 received from the mobile terminal 50. and the delivery method selection map 60, the delivery method of the abnormal state information to be delivered to the mobile terminal 50 is selected. Here, the distribution method selection map 60 is a map in which communication state data with the mobile terminal 50, the degree of urgency of the abnormality, and the distribution method of the abnormal state information are stored in association with each other, as shown in FIG. The distribution method selection map 60 will be described later in detail.

配信データ生成部45は配信方法選択部44が選択した配信方法に基づいて携帯端末50に配信する異常状態情報の配信データを生成して端末通信部42に出力する。 The distribution data generation unit 45 generates distribution data of abnormal state information to be distributed to the mobile terminal 50 based on the distribution method selected by the distribution method selection unit 44 and outputs the distribution data to the terminal communication unit 42 .

画像データベース46には、通信部41が通信装置30から受信した記録動画データが格納されている。ユーザデータベース47には、監視システム100のユーザであるビルの管理者、オーナー等のメールアドレス、住所、電話番号等のユーザの属性とユーザの指定配信方法とが関連付けられて格納されている。ここで、指定配信方法は、後で説明する配信方法選択マップ60に格納されている配信方法と同様、記録動画データの全部配信、記録動画データの一部配信、フレーム画像の配信、異常状態を示すテキストデータの配信、異常検出メールの配信としてもよいし、後で説明する、記録動画部分データ配信、記録動画低画質データ配信を含んでもよい。また、これ以外の配信方法を指定配信方法として格納してもよい。ユーザは、携帯端末50でサーバ40と通信してユーザデータベース47に格納されている指定配信方法を自由に変更することができる。 The image database 46 stores recorded moving image data received by the communication unit 41 from the communication device 30 . The user database 47 stores user attributes such as e-mail addresses, addresses, telephone numbers, etc. of building administrators and owners who are users of the monitoring system 100, and user-designated distribution methods in association with each other. Here, the specified delivery method is the same as the delivery method stored in the delivery method selection map 60, which will be described later, and includes delivery of all recorded moving image data, delivery of part of recorded moving image data, delivery of frame images, and distribution of abnormal conditions. It may be the delivery of the text data indicated, the delivery of the abnormality detection mail, or the delivery of the recorded moving image partial data and the recorded moving image low image quality data, which will be described later. Also, a delivery method other than this may be stored as the designated delivery method. The user can freely change the specified delivery method stored in the user database 47 by communicating with the server 40 using the portable terminal 50 .

サーバ40は、ネットワークに接続されていれば、例えば、クラウド上のサーバ装置でもよいし、監視対象のビルから離れた遠隔地にあるデータセンター等に設置したサーバ装置でもよい。 As long as the server 40 is connected to a network, it may be, for example, a server device on a cloud, or a server device installed in a remote data center or the like away from the building to be monitored.

次に、図5を参照しながら配信方法選択マップ60について説明する。先に説明したように、配信方法選択マップ60は、携帯端末50との通信状態データと異常の緊急度と異常状態情報の配信方法とを関連付けて格納したマップである。通信状態データは、サーバ40の端末通信部42と携帯端末50との通信速度、及び、サーバ40の端末通信部42と携帯端末50との送受信電波強度を含んでいる。図5に示すように、配信方法選択マップ60は、携帯端末50との通信速度と、携帯端末50との送受信電波強度と、異常の緊急度とによって選択する配信方法を決めたマトリクスマップである。図5において、配信方法1は、記録動画データの全部配信を示す。配信方法2は、記録動画データの一部配信を示す。配信方法3は、ユーザが確認すべき特徴事項を含む記録動画の少なくとも1つのフレーム画像の配信を示す。配信方法4は、異常状態を示すテキストデータの配信を示す。配信方法5は、異常検出メールの配信を示す。 Next, the distribution method selection map 60 will be described with reference to FIG. As described above, the distribution method selection map 60 is a map in which communication status data with the mobile terminal 50, the degree of urgency of the abnormality, and the distribution method of the abnormal state information are stored in association with each other. The communication state data includes the communication speed between the terminal communication unit 42 of the server 40 and the mobile terminal 50 and the transmission/reception radio wave intensity between the terminal communication unit 42 of the server 40 and the mobile terminal 50 . As shown in FIG. 5, the distribution method selection map 60 is a matrix map that determines the distribution method to be selected according to the communication speed with the mobile terminal 50, the strength of the radio waves transmitted and received with the mobile terminal 50, and the urgency of the abnormality. . In FIG. 5, distribution method 1 indicates distribution of all recorded moving image data. Distribution method 2 indicates partial distribution of recorded moving image data. Distribution method 3 indicates distribution of at least one frame image of a recorded moving image including features to be confirmed by the user. Delivery method 4 indicates delivery of text data indicating an abnormal state. Delivery method 5 indicates delivery of anomaly detection mail.

配信方法1の記録動画データの全部配信は、通信装置30から取得した記録画像データの画質の低下処理等をせず、オリジナルのデータのまま配信する配信方法である。配信方法2の記録動画データの一部配信は、通信装置30から取得した記録画像データを編集してオリジナルのデータの一部を配信する配信方法である。記録動画データの一部配信は、ユーザが確認すべき特徴事項を含むように記録動画データを編集した記録動画部分データを配信する記録動画部分データ配信と、記録動画データの画質を低下させた記録動画低画質データを配信する記録動画低画質データ配信とを含む。ここで、記録動画部分データは、例えば、記録画像データから図3に示す時刻t1の前後数秒の動画を抽出した動画データでもよいし、盗難発生をとらえた動画データの中の盗難の瞬間の動画データや、犯人の顔が含まれている瞬間の動画データでもよい。 Distribution method 1, which distributes all of the recorded moving image data, is a method of distributing the original data as it is without subjecting the recorded image data obtained from the communication device 30 to image quality reduction processing. Partial delivery of recorded moving image data of delivery method 2 is a delivery method of editing recorded image data acquired from the communication device 30 and delivering part of the original data. Partial distribution of recorded moving image data includes partial recorded moving image data distribution in which recorded moving image data is edited to include features to be confirmed by the user, and recorded moving image data with reduced image quality. Recorded moving image low image quality data distribution for distributing moving image low image quality data. Here, the recorded moving image partial data may be, for example, moving image data obtained by extracting moving images several seconds before and after time t1 shown in FIG. Data or video data of the moment when the criminal's face is included may be used.

配信方法3のユーザが確認すべき特徴事項を含む記録動画の少なくとも1つのフレーム画像の配信は、例えば、記録画像データの図3に示す時刻t1の前後数秒の動画データから1つあるいは複数のフレーム画像を抽出した画像の配信でもよる。また、盗難発生をとらえた動画の中の盗難中のフレーム画像や、犯人の顔が含まれているフレーム画像の配信でもよい。配信方法4の異常状態を示すテキストデータの配信は、例えば、「不審者の侵入が発生しました」、「火災が発生しています。緊急事態です」というような異常状態を示すテキストデータの配信である。配信方法5の異常検出メールは、例えば、「異常検出」という文面のメールを発信する配信方法である。 The distribution of at least one frame image of the recorded moving image containing the features to be confirmed by the user in the distribution method 3 is, for example, one or more frames from the moving image data several seconds before and after the time t1 shown in FIG. 3 of the recorded image data. It also depends on the distribution of the extracted image. It is also possible to distribute a frame image during theft in a moving image capturing the occurrence of theft, or a frame image including the face of the criminal. The distribution of text data indicating an abnormal state of distribution method 4 is, for example, distribution of text data indicating an abnormal state such as "A suspicious person has intruded" or "There is a fire. It is an emergency." is. The anomaly detection mail of delivery method 5 is, for example, a delivery method of sending an e-mail with the text "abnormality detected".

図5に示す配信方法選択マップ60によれば、配信方法選択部44は、異常の緊急度が高く、通信速度と送受信電波強度の両方が高い場合には、配信方法1の記録動画データの全部配信を選択する。また、配信方法選択部44は、異常の緊急度が高く、通信速度又は送受信電波強度のいずれか一方のみが高い場合、配信方法2の記録動画データの一部配信を選択する。更に、配信方法選択部44は、異常の緊急度が高いが、通信速度と送受信電波強度の両方が高くない場合、すなわち、通信速度又は送受信電波強度の両方が中程度か低い場合には、配信方法4の異常状態を示すテキストデータの配信を選択する。 According to the distribution method selection map 60 shown in FIG. Choose delivery. In addition, when the urgency of the abnormality is high and only one of the communication speed and the transmission/reception radio wave intensity is high, the distribution method selection unit 44 selects partial distribution of the recorded moving image data of the distribution method 2 . Furthermore, when the urgency of the abnormality is high, but both the communication speed and the strength of the transmitted and received radio waves are not high, that is, when both the communication speed and the strength of the transmitted and received radio waves are medium or low, the distribution method selection unit 44 Select delivery of text data indicating the abnormal state of Method 4.

また、配信方法選択部44は、異常の緊急度が高くなく、通信速度と送受信電波強度の両方が高い場合に、すなわち、異常の緊急度が中程度か低い場合で通信速度と送受信電波強度の両方が高い場合には、配信方法3のユーザが確認すべき特徴事項を含む記録動画の少なくとも1つのフレーム画像の配信を選択する。また、配信方法選択部44は、異常の緊急度が中程度か低い場合で、通信速度又は送受信電波強度のいずれか一方のみが高い場合には、配信方法4の異常状態を示すテキストデータの配信を選択する。更に、配信方法選択部44は、異常の緊急度が中程度か低い場合で、通信速度と送受信電波強度の両方が中程度か低い場合には、配信方法5の異常検出メールの配信を選択する。 In addition, when the urgency of the abnormality is not high and both the communication speed and the strength of the transmitted and received radio waves are high, that is, when the degree of urgency of the abnormality is medium or low, the distribution method selection unit 44 determines whether the communication speed and the strength of the transmitted and received radio waves If both are high, the delivery method 3 of at least one frame image of the recorded video containing the features to be confirmed by the user is selected. In addition, when the urgency of the abnormality is medium or low and only one of the communication speed and the transmission/reception radio wave intensity is high, the distribution method selection unit 44 distributes the text data indicating the abnormal state by the distribution method 4. to select. Furthermore, when the urgency of the abnormality is medium or low and both the communication speed and the transmission/reception radio wave intensity are medium or low, the distribution method selection unit 44 selects distribution method 5, which is the distribution of the abnormality detection mail. .

次に図6から図12を参照しながら実施形態の監視システム100の動作について説明する。 Next, operation of the monitoring system 100 of the embodiment will be described with reference to FIGS. 6 to 12. FIG.

図6に示すように、カメラ11で撮像した動画データはレコーダ12に送られる。図7のステップS101に示すように、レコーダ12はカメラ11から受け取った動画データを第1メモリ14に格納していく。また、図7のステップS102に示すように、レコーダ12の画像分析部16は、先に説明したような方法で動画データと基準画像データとを比較、分析して異常発生の検出を行う。異常発生が検出されない場合には、レコーダ12は図7のステップS101に戻ってカメラ11の動画データの格納と異常発生の検出動作を繰り返し実行する。 As shown in FIG. 6, moving image data captured by camera 11 is sent to recorder 12 . As shown in step S101 in FIG. 7, the recorder 12 stores the moving image data received from the camera 11 in the first memory 14. FIG. Further, as shown in step S102 of FIG. 7, the image analysis unit 16 of the recorder 12 compares and analyzes the moving image data and the reference image data by the method described above to detect the occurrence of an abnormality. If the occurrence of an abnormality is not detected, the recorder 12 returns to step S101 in FIG. 7 and repeats the operation of storing the moving image data of the camera 11 and detecting the occurrence of an abnormality.

一方、通信装置30は、図8のステップS201に示すようにレコーダ12に対してポーリングを行っている。ポーリングは、例えば、1回/分程度の頻度で行ってもよい。 On the other hand, the communication device 30 polls the recorder 12 as shown in step S201 of FIG. Polling may be performed, for example, at a frequency of about once per minute.

そして、図7のステップS103で画像分析部16が異常発生を検出したら、画像分析部16は、異常発生を検出した信号をアラーム信号生成部17に送信する。図7のステップS104において、アラーム信号生成部17は、画像分析部16から送信された信号に基づいて異常の種類と異常の発生場所等と異常発生時刻とで構成されるアラーム信号を生成する。 Then, when the image analysis unit 16 detects the occurrence of an abnormality in step S103 of FIG. In step S104 of FIG. 7, the alarm signal generation unit 17 generates an alarm signal composed of the type of abnormality, the place of occurrence of the abnormality, and the time of occurrence of the abnormality based on the signal transmitted from the image analysis unit 16. FIG.

レコーダ12は、アラーム信号を生成した後に、図7のステップS105に示すように通信装置30からのポーリングを受信したら、図7のステップS106に示すように、アラーム信号生成部17が生成したアラーム信号を通信装置30に送信する。 After generating the alarm signal, the recorder 12 receives polling from the communication device 30 as shown in step S105 of FIG. to the communication device 30 .

通信装置30は、図8のステップS202に示すように、レコーダ12からアラーム信号を受信したら、図8のステップS203に進み、レコーダ12に対して記録動画データ要求信号を出力する。 Upon receiving the alarm signal from the recorder 12 as shown in step S202 in FIG. 8, the communication device 30 proceeds to step S203 in FIG.

レコーダ12は、図7のステップS107に示すように通信装置30から記録動画データ要求信号を受信するまで待機する。そして、レコーダ12は、通信装置30から記録動画データ要求信号を受信したら、第1メモリ14に格納されている画像データの内、図2に示すように画像分析部16によって特定された異常発生時刻の前設定時間と後設定時間の合計の設定時間分の動画データを記録動画データとして第2メモリ15に書き出す。そして、レコーダ12は、図7のステップS108に示すように、第2メモリ15に書き出した記録動画データを通信装置30に送信する。 The recorder 12 waits until it receives the recorded moving image data request signal from the communication device 30 as shown in step S107 of FIG. Then, when the recorder 12 receives the recorded moving image data request signal from the communication device 30, the abnormality occurrence time specified by the image analysis unit 16 as shown in FIG. Moving image data for a set time, which is the sum of the pre-set time and the post-set time, is written to the second memory 15 as recorded moving image data. Then, the recorder 12 transmits the recorded moving image data written to the second memory 15 to the communication device 30, as shown in step S108 of FIG.

通信装置30は、図8のステップS204に示すように、レコーダ12から記録動画データを受信するまで待機し、記録動画データを受信したら図8のステップS205に進んで、サーバ40に対してアラーム信号を送信する。 As shown in step S204 in FIG. 8, the communication device 30 waits until the recorded moving image data is received from the recorder 12, and when the recorded moving image data is received, proceeds to step S205 in FIG. to send.

図9のステップS301に示すように、サーバ40は、通信装置30からアラーム信号を受信するまで待機し、アラーム信号を受信したら、図9のステップS302に示すように、通信装置30に対して記録動画データ要求信号を送信する。 As shown in step S301 of FIG. 9, the server 40 waits until an alarm signal is received from the communication device 30, and when the alarm signal is received, as shown in step S302 of FIG. Send video data request signal.

通信装置30は、図8のステップS206に示すように、サーバ40からの記録動画データ要求信号を受信するまで待機し、記録動画データ要求信号を受信したら図8のステップS207に進んで記録動画データをサーバ40に送信する。 As shown in step S206 in FIG. 8, the communication device 30 waits until it receives the recorded moving image data request signal from the server 40, and upon receiving the recorded moving image data request signal, proceeds to step S207 in FIG. to the server 40.

サーバ40の画像取得部43は、図9のステップS303に示すように、記録動画データを受信するまで待機し、記録動画データを受信したら、図9のステップS304に進み、画像データベース46に記録動画データを格納、保存する。また、画像取得部43は、記録動画データを配信方法選択部44に出力する。 The image acquiring unit 43 of the server 40 waits until the recorded moving image data is received as shown in step S303 of FIG. Store and save data. Also, the image acquisition unit 43 outputs the recorded moving image data to the delivery method selection unit 44 .

サーバ40の端末通信部42は、図9のステップS305において、携帯端末50との通信速度と、携帯端末50との送受信電波強度とを取得して配信方法選択部44に出力する。 The terminal communication unit 42 of the server 40 acquires the communication speed with the mobile terminal 50 and the intensity of the radio waves transmitted and received with the mobile terminal 50 and outputs them to the distribution method selection unit 44 in step S305 of FIG.

配信方法選択部44は、図9のステップS306において、図10,11に示す配信方法選択処理を実行し、画像配信方法と付属データとを配信データ生成部45に出力する。配信方法選択処理については、後で詳細に説明する。 The distribution method selection unit 44 executes the distribution method selection process shown in FIGS. 10 and 11 in step S306 of FIG. The distribution method selection process will be described later in detail.

サーバ40の配信データ生成部45は、図9のステップS307において、画像データベース46から記録動画データを読み出し、配信方法選択部44から入力された配信方法と付属データとに基づいて、携帯端末50に配信する配信データを生成して端末通信部42に出力する。そして、端末通信部42は、図9のステップS308において、携帯端末50に配信データを送信する。 In step S307 of FIG. 9, the distribution data generation unit 45 of the server 40 reads the recorded moving image data from the image database 46, and based on the distribution method and the attached data input from the distribution method selection unit 44, sends the data to the mobile terminal 50. It generates distribution data to be distributed and outputs it to the terminal communication unit 42 . Then, the terminal communication unit 42 transmits the distribution data to the mobile terminal 50 in step S308 of FIG.

端末通信部42は、図9のステップS309で携帯端末50から記録動画データ要求信号が入力されるまで待機し、携帯端末50から記録動画データ要求信号が入力された場合には、記録動画要求信号を配信方法選択部44に出力する。配信方法選択部44は、配信方法として記録動画データの全部配信を選択して配信方法と付属データを配信データ生成部45に出力する。配信データ生成部45は記録動画データを画像データベース46から読み出して配信データとして端末通信部42に出力する。端末通信部42は、図9のステップS310において、入力された記録動画データを携帯端末50に送信する。 Terminal communication unit 42 waits until a recorded moving image data request signal is input from portable terminal 50 in step S309 of FIG. is output to the distribution method selection unit 44 . The distribution method selection unit 44 selects distribution of all recorded moving image data as the distribution method, and outputs the distribution method and the attached data to the distribution data generation unit 45 . The distribution data generation unit 45 reads the recorded moving image data from the image database 46 and outputs it to the terminal communication unit 42 as distribution data. The terminal communication unit 42 transmits the input recorded moving image data to the portable terminal 50 in step S310 of FIG.

次に図10,11を参照しながら配信方法選択処理について説明する。図10に示すように、配信方法選択部44は、図10のステップS401で画像取得部43から記録動画データを取得し、図10のステップS402で端末通信部42から携帯端末50との通信速度、送受信電波強度を取得する。そして、配信方法選択部44は、図10のステップS403において、記録動画から異常の緊急度を判定する。 Next, distribution method selection processing will be described with reference to FIGS. As shown in FIG. 10, the distribution method selection unit 44 acquires recorded moving image data from the image acquisition unit 43 in step S401 of FIG. , to obtain the strength of the transmitted and received radio waves. Then, in step S403 of FIG. 10, the distribution method selection unit 44 determines the urgency of the abnormality from the recorded moving image.

記録動画に基づいて、異常の緊急度を判定する方法はいろいろな方法があるが、先に図3を参照して説明した例のように、記録動画と基準画像とを比較する方法がある。例えば、入口ドア22から人25が入って来る場合、その人25の着用している服が予め基準画像として格納している警備員の制服ではなく、予め基準画像として登録した凶器の画像が存在する場合には、緊急度が高いと判定する。また、警備員の制服を着用しておらず、走って侵入してきた場合には、緊急度は中程度と判断する。更に、警備員の制服を着用していないが、配達員の制服を着用している場合には、緊急度は低いと判定する。また、河川の水位を監視している場合に、河川の水位の上昇の程度に応じて緊急度を判定するようにしてもよい。配信方法選択部44は、異常の緊急度の判定が終了したら図10のステップS404に進んで、図5に示す配信方法選択マップ60に基づいて異常状態情報の配信方法の選択を行う。 There are various methods for judging the degree of urgency of an abnormality based on a recorded moving image, but there is a method of comparing a recorded moving image and a reference image, as in the example described above with reference to FIG. For example, when a person 25 enters through the entrance door 22, the clothes worn by the person 25 are not the uniform of a security guard stored in advance as a reference image, but an image of a weapon registered in advance as a reference image. If so, it is determined that the urgency is high. In addition, if a person does not wear a security guard's uniform and runs to break in, the degree of urgency is judged to be moderate. Furthermore, if the person is not wearing the uniform of a security guard but is wearing the uniform of a delivery person, it is determined that the degree of urgency is low. Further, when the water level of the river is being monitored, the degree of urgency may be determined according to the degree of increase in the water level of the river. When the abnormality urgency determination is completed, the distribution method selection unit 44 proceeds to step S404 in FIG. 10, and selects a distribution method for the abnormal state information based on the distribution method selection map 60 shown in FIG.

ここで、配信方法選択部44は、携帯端末50との間の回線種類に基づいて通信速度の高速、中速、低速の判定をしてもよい。例えば、回線の種類が、WiFi,5G,4G等の場合は高速、3Gの場合は中速、電話回線の場合は低速のように判定してもよい。また、配信方法選択部44は、携帯端末50から携帯端末50の現在位置情報を取得し、携帯端末50の現在位置に基づいて送受信電波強度の高強度、中強度、低強度の判定をしてもよい。例えば、携帯端末50が移動中の場合には、中強度、携帯端末50が地下にある場合には、低強度のように判定してもよい。 Here, the distribution method selection unit 44 may determine whether the communication speed is high speed, medium speed, or low speed based on the type of line with the mobile terminal 50 . For example, if the line type is WiFi, 5G, 4G, etc., it may be determined as high speed, if it is 3G, it is medium speed, and if it is a telephone line, it may be determined as low speed. Further, the distribution method selection unit 44 acquires the current position information of the mobile terminal 50 from the mobile terminal 50, and determines whether the intensity of the transmitted and received radio waves is high, medium, or low based on the current position of the mobile terminal 50. good too. For example, when the mobile terminal 50 is moving, the intensity may be medium, and when the mobile terminal 50 is underground, the intensity may be low.

そして、配信方法選択部44は、通信速度の高速、中速、低速と、送受信電波強度の高強度、中強度、低強度と、異常の緊急度の高い、中程度、低いと、に基づいて、図5に示す配信方法選択マップ60から1つの配信方法を選択する。先に説明したように、例えば、異常の緊急度が高く、通信速度と送受信電波強度の両方が高い場合には、配信方法選択部44は配信方法1の記録動画データの全部配信を選択する。また、異常の緊急度が高く、通信速度又は送受信電波強度のいずれか一方のみが高い場合、配信方法選択部44は配信方法2の記録動画データの一部配信を選択する。 Then, the distribution method selection unit 44 selects based on high, medium, and low communication speeds, high, medium, and low transmission and reception radio wave strengths, and high, medium, and low urgency of anomalies. , selects one distribution method from the distribution method selection map 60 shown in FIG. As described above, for example, when the urgency of the abnormality is high and both the communication speed and the transmission/reception radio wave intensity are high, the distribution method selection unit 44 selects distribution method 1 to distribute all of the recorded moving image data. If the urgency of the abnormality is high and only one of the communication speed and the transmission/reception radio wave intensity is high, the distribution method selection unit 44 selects distribution method 2 to partially distribute the recorded moving image data.

配信方法選択部44は、配信方法を選択したら、図10のステップS405に進んで記録動画データの一部配信を選択したかどうかを判断する。そして、図10のステップS405でYESと判断した場合、図10のステップS406に進んで、ユーザが確認すべき特徴事項が記録動画の記録時間の一部にのみ存在しているかどうかを判断する。例えば、先に説明した入口ドア22から人25が入って来る場合、入口ドア22からの人25の侵入動作が記録されているのは図3に示す時刻t1の前後数秒であり、それ以前は、入口ドア22が閉まった状態の画像であり、その後は、入口ドア22が開いた状態の画像となる場合がある。この場合、ユーザの確認すべき特徴事項は、図3に示す時刻t1の前後数秒にのみ記録されている入口ドア22からの人25の侵入動作である。このような場合、配信方法選択部44は、図10のステップS406でYESと判断して図10のステップS407に進んで記録動画部分データ配信を選択する。 After selecting the distribution method, the distribution method selection unit 44 proceeds to step S405 in FIG. 10 and determines whether partial distribution of the recorded moving image data is selected. If YES is determined in step S405 of FIG. 10, the process advances to step S406 of FIG. 10 to determine whether or not the feature items to be confirmed by the user exist only in part of the recording time of the recorded moving image. For example, when the person 25 enters through the entrance door 22 described above, the movement of the person 25 entering through the entrance door 22 is recorded for several seconds before and after time t1 shown in FIG. , the entrance door 22 is closed, and thereafter, the entrance door 22 may be opened. In this case, the characteristic item to be confirmed by the user is the intrusion action of the person 25 through the entrance door 22, which is recorded only for several seconds before and after the time t1 shown in FIG. In such a case, the distribution method selection unit 44 determines YES in step S406 of FIG. 10, proceeds to step S407 of FIG. 10, and selects recorded moving image partial data distribution.

このように,記録動画部分データ配信は、ユーザが確認すべき特徴事項を含むように記録動画データを編集した記録動画部分データを配信する。先の例で説明すると、記録画像データから図3に示す時刻t1の前後数秒の画像を抽出した動画データが記録動画部分データとなる。 In this way, recorded moving image partial data distribution distributes recorded moving image partial data in which recorded moving image data is edited so as to include features to be confirmed by the user. In the previous example, moving image data obtained by extracting images several seconds before and after time t1 shown in FIG. 3 from the recorded image data is recorded moving image partial data.

また、配信方法選択部44は、図10のステップS406でNOと判断した場合には、図10のステップS408に進んで記録動画低画質データ配信を選択する。ここで、記録動画低画質データ配信は、記録動画データの画質を低下させた設定時間分の記録動画低画質データを配信する。 If the distribution method selection unit 44 determines NO in step S406 of FIG. 10, the distribution method selection unit 44 proceeds to step S408 of FIG. Here, in the recorded moving image low image quality data distribution, the recorded moving image low image quality data for the set time with the image quality of the recorded moving image data lowered is distributed.

配信方法選択部44は、記録動画低画質データ配信を選択した場合、図10のステップS409に進んで、ユーザが確認すべき特徴事項が記録動画の記録時間の全体に分布しているかどうかを判断する。そして、図10のステップS409でYESと判断した場合には、図10のステップS410に進んで後で説明する設定時間延長処理を行う。 When the distribution method selection unit 44 selects low-quality recorded moving image data distribution, the distribution method selection unit 44 advances to step S409 of FIG. do. If YES is determined in step S409 of FIG. 10, the process advances to step S410 of FIG. 10 to perform set time extension processing, which will be described later.

また、配信方法選択部44は、図10のステップS405でNOと判断した場合、図10のステップS411に進んで記録動画の全部配信を選択したかどうかを判断する。そして、図10のステップS411でYESと判断した場合も記録動画低画質データ配信を選択した場合と同様、図10のステップS409でYESと判断した場合には、図10のステップS410に進んで設定時間延長処理を行う。設定時間延長処理については、後で詳細に説明する。 If the distribution method selection unit 44 determines NO in step S405 of FIG. 10, the distribution method selection unit 44 advances to step S411 of FIG. 10 to determine whether distribution of all recorded moving images has been selected. If YES is determined in step S411 of FIG. 10, similarly to the case of selecting low-quality recorded moving image data distribution, if YES is determined in step S409 of FIG. Perform time extension processing. The set time extension process will be described later in detail.

配信方法選択部44は、図10のステップS407に進んで記録動画部分データ配信を選択した場合、図10のステップS409でNOと判断した場合、図10のステップS411でNOと判断した場合には、図11のステップS412に進んでユーザデータベース47からユーザの指定配信方法を読み出す。そして、図11のステップS413で、先にステップS401~S411で選択した配信方法と、ユーザデータベース47に格納されたユーザの指定配信方法とが同一かどうかを判断する。そして、図11のステップS413でYESと判断した場合には、図11のステップS414に進み、先にステップS401~S411で選択した配信方法を配信データ生成部45に出力する。一方、図11のステップS413でNOと判断した場合には、図11のステップS415に進み、ユーザの指定配信方法を配信データ生成部45に出力する。 If the distribution method selection unit 44 proceeds to step S407 in FIG. 10 and selects the recorded moving image partial data distribution, if it determines NO in step S409 in FIG. , the process proceeds to step S412 in FIG. 11 to read out the distribution method specified by the user from the user database 47. Then, in step S413 of FIG. 11, it is determined whether or not the distribution method previously selected in steps S401 to S411 is the same as the distribution method specified by the user stored in the user database 47 or not. 11, the flow advances to step S414 in FIG. 11 to output the distribution method previously selected in steps S401 to S411 to the distribution data generator 45. FIG. On the other hand, if NO is determined in step S413 of FIG. 11, the flow advances to step S415 of FIG.

ここで、配信方法選択部44は、記録動画部分データ配信を配信データ生成部45に出力する場合には、記録動画データの中から抽出する時間のデータを付属データとして一緒に出力する。先の例で言えば、付属データは、動画データを抽出する時間として図3に示す時刻t1の前後数秒というデータである。また、配信方法選択部44は、記録動画低画質データ配信を出力する場合には、携帯端末50との通信速度、送受信電波強度に応じて、どの程度の画質低減を行うかの画質低減度を付属データとして一緒に出力する。また、ユーザが確認すべき特徴事項を含む記録動画の少なくとも1つのフレーム画像の配信を出力する場合には、記録動画データの中から抽出するフレーム画像の時間データを付属データとして一緒に出力する。また、異常状態を示すテキストデータの配信を出力する場合には、付属データとして異常状態を示すテキストデータを一緒に出力する。 Here, when outputting recorded moving image partial data distribution to the distribution data generating unit 45, the distribution method selecting unit 44 also outputs time data extracted from the recorded moving image data as attached data. In the above example, the attached data is data indicating several seconds before and after the time t1 shown in FIG. 3 as the time for extracting the moving image data. Further, when outputting recorded moving image low image quality data distribution, the distribution method selection unit 44 selects the degree of image quality reduction according to the communication speed with the mobile terminal 50 and the strength of the transmission/reception radio wave. Output together as attached data. Also, when outputting distribution of at least one frame image of a recorded moving image containing features to be confirmed by the user, the time data of the frame image extracted from the recorded moving image data is output together as attached data. When outputting distribution of text data indicating an abnormal state, the text data indicating the abnormal state is also output as attached data.

配信方法選択部44は、画像配信方法と付属データとを配信データ生成部45に出力したら図9のステップS306に示す配信方法選択処理を終了する。 After outputting the image distribution method and the attached data to the distribution data generation unit 45, the distribution method selection unit 44 ends the distribution method selection process shown in step S306 of FIG.

次に図11,12を参照しながら、図10のステップS410に示す設定時間延長処理とその後の動作について説明する。設定時間延長処理は、ユーザが確認すべき特徴事項が記録動画の記録時間の全体に分布しており、特徴事項の一部が記録動画データに含まれていない可能性が有る場合に、レコーダ12の設定時間を長くして、長くした設定時間分の動画データを記録動画データとして取得する処理である。 Next, the set time extension process shown in step S410 of FIG. 10 and subsequent operations will be described with reference to FIGS. The set time extension process is performed when the feature items to be confirmed by the user are distributed over the entire recording time of the recorded moving image and there is a possibility that some of the feature items are not included in the recorded moving image data. , and acquires moving image data for the lengthened set time as recorded moving image data.

サーバ40の画像取得部43は、配信方法選択部44が図10のステップS409でYESと判断した場合、通信装置30を介して画像分析格納装置10に異常発生時刻の前後における前設定時間、又は、後設定時間を長くさせる指令を出力する。 If the distribution method selection unit 44 determines YES in step S409 of FIG. , and outputs a command to lengthen the set time.

図12のステップS501に示すように、通信装置30は画像取得部43からの設定時間延長処理指令を受信するまで待機している。通信装置30は、画像取得部43からの設定時間延長処理指令を受信したら、図12のステップS502に進んで、レコーダ12の前設定時間と後設定時間のいずれか一方又は両方を延長する。そして、通信装置30は、図12のステップS503においてレコーダ12に延長した設定時間分の記録動画データを取得する記録動画データ要求を出力する。 As shown in step S501 in FIG. 12, the communication device 30 is on standby until receiving a set time extension processing command from the image acquisition unit 43. FIG. Upon receiving the set time extension processing command from the image acquisition unit 43, the communication device 30 proceeds to step S502 in FIG. 12 to extend either or both of the pre-set time and post-set time of the recorder 12. Then, the communication device 30 outputs a recorded moving image data request for acquiring recorded moving image data for the extended set time to the recorder 12 in step S503 of FIG.

レコーダ12は、記録動画要求信号を受信したら、先に説明したと同様、第1メモリ14に格納されている画像データの内、延長された設定時間分の動画データを記録動画データとして第2メモリ15に書き出す。そして、レコーダ12は第2メモリ15に書き出した記録動画データを通信装置30に送信する。 When the recorder 12 receives the recording moving image request signal, the recorder 12 stores the moving image data for the extended set time from the image data stored in the first memory 14 as the recording moving image data in the second memory in the same manner as described above. Write out on 15. Then, the recorder 12 transmits the recorded moving image data written to the second memory 15 to the communication device 30 .

図12のステップS504に示すように、通信装置30は、記録動画データを受信するまで待機する。また、通信装置30は、記録画像データを受信したら図12のステップS505に示すように、サーバ40の画像取得部43からの記録動画要求信号が入力されるまで待機する。そして、通信装置30は、記録動画要求信号が入力されたら、図12のステップS506に示すようにサーバ40の画像取得部43に延長された設定時間分の記録動画データを送信する As shown in step S504 of FIG. 12, the communication device 30 waits until the recorded moving image data is received. Further, when the recording image data is received, the communication device 30 waits until a recording moving image request signal is input from the image acquisition unit 43 of the server 40, as shown in step S505 of FIG. Then, when the recorded moving image request signal is input, the communication device 30 transmits recorded moving image data for the extended set time to the image acquisition unit 43 of the server 40 as shown in step S506 of FIG.

設定時間延長処理が終了したらサーバ40の画像取得部43は、図9のステップS303で記録画像データを受信するまで待機した後、図9のステップS304、ステップS305で記録動画データを画像データベース46に格納すると共に携帯端末50の端末通信状態データを取得する。そして、サーバ40の配信方法選択部44は、先ほどと同様、配信方法選択処理を実行する。そして、図10のステップS409でNOと判断した場合には、ユーザが確認すべき特徴事項の全部が記録動画データに含まれていると判断して、図11のステップS412~S414、S415を実行して配信方法と付属データを配信データ生成部45に出力する。 When the set time extension process ends, the image acquisition unit 43 of the server 40 waits until the recorded image data is received in step S303 of FIG. While storing, the terminal communication state data of the mobile terminal 50 is acquired. Then, the distribution method selection unit 44 of the server 40 executes the distribution method selection process as before. If NO is determined in step S409 of FIG. 10, it is determined that all the feature items to be confirmed by the user are included in the recorded moving image data, and steps S412 to S414 and S415 of FIG. 11 are executed. Then, the distribution method and attached data are output to the distribution data generation unit 45 .

また、図10のステップS409でYESと判断した場合には、ユーザが確認すべき特徴事項の一部が記録動画データに含まれていないと判断して、図10でYESと判断するまで設定時間延長処理を繰り返して実行する。 If it is determined YES in step S409 of FIG. 10, it is determined that some of the feature items that the user should confirm are not included in the recorded moving image data, and the set time is required until YES is determined in FIG. Repeat the extension process.

以上説明したように、実施形態の監視システム100は、携帯端末50との通信速度と、携帯端末50との送受信電波強度と、異常の緊急度とによって配信法保を選択視し、選択した配信方法によって携帯端末50の配信データを送信するので、通信速度が低い場合や送受信電波強度が低い場合でもテキストデータやフレーム画像データの配信により確実にユーザに異常状態を通知することができる。また、通信速度や送受信電波強度が高い場合には、クリアな画像をユーザに配信することにより、ユーザが容易に異常の状態を理解することができる。 As described above, the monitoring system 100 of the embodiment selects the distribution method according to the communication speed with the mobile terminal 50, the strength of the radio wave transmitted and received with the mobile terminal 50, and the degree of urgency of the abnormality. Since the distribution data of the portable terminal 50 is transmitted according to the method, even when the communication speed is low or the transmission/reception radio wave intensity is low, the abnormal state can be surely notified to the user by distributing the text data or the frame image data. Also, when the communication speed or the intensity of the transmitted and received radio waves is high, the user can easily understand the abnormal state by delivering a clear image to the user.

また、監視システム100は、記録動画データの全部配信と、記録動画データの一部配信と、記録動画の少なくとも1つのフレーム画像データの配信と、異常状態を示すテキストデータの配信をするので、ユーザは、従来技術の監視システムのように、異常検出メールによって連絡されたURLから動画をダウンロードして閲覧することなく、配信された異常状態情報によって異常の状態を把握できる。このため、ユーザは、迅速に異常の状態を確認することができる。また、異常の緊急度が低く、携帯端末との通信状態が低い場合には異常検出メールを発信することによりユーザに迅速に異常の発生を連絡することができる。 In addition, since the monitoring system 100 distributes all of the recorded moving image data, a part of the recorded moving image data, at least one frame image data of the recorded moving image, and text data indicating an abnormal state, the user can Unlike the monitoring system of the prior art, it is possible to grasp the state of an abnormality based on the distributed abnormality information, without downloading and viewing a moving image from the URL notified by the abnormality detection mail. Therefore, the user can quickly confirm the abnormal state. In addition, when the urgency of the abnormality is low and the communication state with the mobile terminal is low, the occurrence of the abnormality can be promptly notified to the user by sending an abnormality detection mail.

更に、実施形態の監視システム100は、ユーザが確認すべき特徴事項に応じて記録動画部分データ配信、記録動画低画質データ配信を選択し、記録動画データの一部を抽出してユーザに配信する。これにより、ユーザは特徴事項をすぐに確認でき、異常状態を迅速に確認することができる。 Furthermore, the monitoring system 100 of the embodiment selects the recorded moving image partial data distribution or the recorded moving image low image quality data distribution according to the feature items to be confirmed by the user, extracts a part of the recorded moving image data, and distributes it to the user. . As a result, the user can immediately confirm the characteristic items and quickly confirm the abnormal state.

また、監視システム100は、ユーザが確認すべき特徴事項が記録動画の記録時間の全体に分布しており、ユーザにとって記録動画データの記録時間が短いと思われる場合には設定時間延長処理を行って、記録時間を長くした記録動画データの全部或いは記録動画の低画質データを配信するので、ユーザが再度動画データの閲覧要求をせずに容易に異常状態を確認することができる。 In addition, the monitoring system 100 performs set time extension processing when the feature items to be confirmed by the user are distributed throughout the recording time of the recorded moving image and the recording time of the recorded moving image data is considered short for the user. Therefore, the user can easily confirm the abnormal state without requesting viewing of the moving image data again, because all of the recorded moving image data with a longer recording time or low image quality data of the recorded moving image is distributed.

以上説明したように、実施形態の監視システム100は、ユーザが迅速に異常の状態を確認できる。 As described above, the monitoring system 100 of the embodiment allows the user to quickly check the abnormal state.

以上の説明では、実施形態の監視システム100は、記録動画データの全部配信、又は、記録動画低画質データ配信を選択した場合で、ユーザが確認すべき特徴事項が前記記録動画の記録時間の全体に分布している場合には、設定時間延長処理を行うこととして説明したがこれ限らない。例えば、設定時間延長処理を行わず、当初の設定時間分の記録動画データをそのまま配信するようにしてもよいし、当初の設定時間分の記録画像データの画質を低減した記録動画低画質データを配信するようにしてもよい。 In the above description, the monitoring system 100 according to the embodiment selects the distribution of all recorded moving image data or the distribution of recorded moving image low-quality data, and the characteristic item to be confirmed by the user is the entire recording time of the recorded moving image. Although it has been described that the set time extension processing is performed when the distribution is , the present invention is not limited to this. For example, the recorded moving image data for the initially set time may be distributed as it is without performing the set time extension processing, or the recorded moving image low image quality data for the initially set time with the image quality of the recorded image data reduced may be sent. You may make it distribute.

また、ユーザデータベース47にユーザの指定配信方法を格納していない場合には、図11のステップS412~S415を実行せずに、配信方法選択部44が選択した配信方法によって携帯端末50に異常状態情報を配信してもよい。 If the user database 47 does not store the specified distribution method of the user, the abnormal state is detected in the portable terminal 50 by the distribution method selected by the distribution method selection unit 44 without executing steps S412 to S415 of FIG. Information may be distributed.

また、監視システム100は、図9のステッブS309、S310を実行せず、携帯端末50に異常状態情報の配信を行ったら、動作を停止してもよい。 Alternatively, the monitoring system 100 may stop the operation after delivering the abnormal state information to the mobile terminal 50 without executing the steps S309 and S310 of FIG.

次に、図13を参照しながら、監視システム100の他の動作処理について簡単に説明する。この動作処理は、監視システム100ユーザから携帯端末50によって時刻を指定してカメラ11の撮像した動画の閲覧要求があった場合に閲覧動画を携帯端末50に送信する動作である。 Next, another operational process of the monitoring system 100 will be briefly described with reference to FIG. 13 . This operation process is an operation of transmitting a browsed moving image to the mobile terminal 50 when the user of the monitoring system 100 requests viewing of the moving image captured by the camera 11 by designating the time using the mobile terminal 50 .

図13に示すように、監視システム100のユーザが携帯端末50からサーバ40にアクセスして指定時刻の動画の閲覧を要求する閲覧動画要求を入力すると、図13に示すように、サーバ40は、通信装置30に対して指定時刻を含む閲覧動画要求を発信する。これを受けた通信装置30は、画像分析格納装置10のレコーダ12に閲覧動画要求を送信する。閲覧動画要求を受信したレコーダ12は、第1メモリ14に格納されている動画データの内、閲覧動画要求に含まれる指定時刻の前後の設定時間分の動画データを閲覧動画データとして第2メモリ15に書き出し、通信装置30に閲覧動画データをサーバ40に送信する。サーバ40は、受信した閲覧動画データを画像データベース46に格納すると共に、ユーザの携帯端末50に閲覧動画データを送信する。 As shown in FIG. 13, when the user of the monitoring system 100 accesses the server 40 from the mobile terminal 50 and inputs a viewing video request requesting viewing of a video at a specified time, the server 40, as shown in FIG. A viewing video request including a specified time is transmitted to the communication device 30 . The communication device 30 having received this transmits a viewing moving image request to the recorder 12 of the image analysis storage device 10 . The recorder 12 that has received the viewing moving image request converts the moving image data for the set time before and after the specified time included in the viewing moving image request from the moving image data stored in the first memory 14 into the viewing moving image data in the second memory 15 . , and the communication device 30 transmits the browsed moving image data to the server 40 . The server 40 stores the received browsed moving image data in the image database 46 and also transmits the browsed moving image data to the mobile terminal 50 of the user.

これにより、ユーザは送信された閲覧動画データを受信し、携帯端末50で指定した時刻の前後の設定時間分の動画を遠隔地から閲覧することができる。 Thereby, the user can receive the transmitted browsed moving image data and remotely browse the moving images for the set time before and after the time specified by the portable terminal 50 .

なお、監視システム100は、図13を参照して説明した閲覧動画を携帯端末50に配信する動作 を備えていなくてもよい。 Note that the monitoring system 100 may not have the operation of distributing the browsed moving image to the mobile terminal 50 as described with reference to FIG. 13 .

10 画像分析格納装置、11 カメラ、12 レコーダ、13 画像格納部、14 第1メモリ、15 第2メモリ、16 画像分析部、17 アラーム信号生成部、22 入口ドア、25 人、30 通信装置、35,36 遠隔通信ネットワーク、40 サーバ、41 通信部、42 端末通信部、43 画像取得部、44 配信方法選択部、45 配信データ生成部、46 画像データベース、47 ユーザデータベース、50 携帯端末、60 配信方法選択マップ、100 監視システム、150 汎用コンピュータ、151 CPU、152 ROM、153 RAM、154 HDD、155 マウス、156 キーボード、157 ディスプレイ、158 入出力コントローラ、159 ネットワークコントローラ、160 データバス。
10 image analysis storage device 11 camera 12 recorder 13 image storage unit 14 first memory 15 second memory 16 image analysis unit 17 alarm signal generator 22 entrance door 25 person 30 communication device 35 , 36 remote communication network, 40 server, 41 communication unit, 42 terminal communication unit, 43 image acquisition unit, 44 distribution method selection unit, 45 distribution data generation unit, 46 image database, 47 user database, 50 portable terminal, 60 distribution method Selection Map, 100 Monitoring System, 150 General Purpose Computer, 151 CPU, 152 ROM, 153 RAM, 154 HDD, 155 Mouse, 156 Keyboard, 157 Display, 158 Input/Output Controller, 159 Network Controller, 160 Data Bus.

Claims (11)

監視システムであって、
カメラが撮像した動画データを格納すると共に、前記カメラが撮像した動画データを分析し、異常を検出した際に異常発生時刻を含むアラーム信号を生成する画像分析格納装置と、
前記画像分析格納装置と通信し、前記画像分析格納装置から前記アラーム信号を受信した際に、前記画像分析格納装置に格納された動画データの内の前記異常発生時刻の前後における設定時間分の動画データを記録動画データとして前記画像分析格納装置から受信する通信装置と、
前記通信装置と通信し、前記通信装置から前記記録動画データを受信し、受信した前記記録動画データに基づいて異常状態情報を携帯端末に配信するサーバと、を備え、
前記サーバは、
前記通信装置から前記記録動画データを取得する画像取得部と、
前記携帯端末との通信状態データと前記異常の緊急度と前記異常状態情報の配信方法とを関連付けて格納した配信方法選択マップと、
前記画像取得部から入力された前記記録動画データに基づいて前記異常の緊急度を判定し、判定した前記異常の緊急度と前記携帯端末から受信した前記携帯端末との前記通信状態データと前記配信方法選択マップとに基づいて前記携帯端末に配信する前記異常状態情報の配信方法を選択する配信方法選択部と、
前記配信方法選択部が選択した配信方法に基づいて前記携帯端末に配信する前記異常状態情報の配信データを生成する配信データ生成部と、を備え
前記通信状態データは、前記携帯端末との通信速度と前記携帯端末との送受信電波強度とを含み、
前記配信方法選択部は、前記異常の緊急度と前記通信速度と前記送受信電波強度と前記配信方法選択マップとに基づいて前記携帯端末に配信する前記異常状態情報の配信方法を選択し、
前記配信方法選択部は、前記記録動画データの全部配信と、前記記録動画データの一部配信と、記録動画の少なくとも1つのフレーム画像データの配信と、異常状態を示すテキストデータの配信と、異常検出メールの配信との内のいずれか一つの配信方法を選択し、
前記画像取得部は、前記配信方法選択部が前記記録動画データの全部配信を選択した場合であって、ユーザが確認すべき特徴事項が前記記録動画の記録時間の全体に分布している場合には、前記通信装置を介して前記画像分析格納装置に前記異常発生時刻の前後における設定時間を長くさせる指令を出力し、前記通信装置を介して長くした設定時間分の動画データを前記記録動画データとして前記画像分析格納装置から受信すること、
を特徴とする監視システム。
A monitoring system,
an image analysis storage device that stores moving image data captured by a camera, analyzes the moving image data captured by the camera, and generates an alarm signal including an abnormality occurrence time when an abnormality is detected;
When communicating with the image analysis and storage device and receiving the alarm signal from the image analysis and storage device, moving images for a set time before and after the time when the abnormality occurred in the moving image data stored in the image analysis and storage device a communication device that receives data as recorded video data from the image analysis storage device;
a server that communicates with the communication device, receives the recorded moving image data from the communication device, and delivers abnormal state information to a mobile terminal based on the received recorded moving image data;
The server is
an image acquisition unit that acquires the recorded moving image data from the communication device;
a distribution method selection map storing communication state data with the mobile terminal, the degree of urgency of the abnormality, and a distribution method of the abnormal state information in association with each other;
determining the urgency of the abnormality based on the recorded video data input from the image acquisition unit, and determining the urgency of the abnormality, the communication state data with the mobile terminal received from the mobile terminal, and the distribution; a delivery method selection unit that selects a delivery method of the abnormal state information to be delivered to the mobile terminal based on a method selection map;
a distribution data generation unit that generates distribution data of the abnormal state information to be distributed to the mobile terminal based on the distribution method selected by the distribution method selection unit ;
The communication state data includes a communication speed with the mobile terminal and an intensity of a radio wave transmitted and received with the mobile terminal,
The delivery method selection unit selects a delivery method of the abnormal state information to be delivered to the mobile terminal based on the urgency of the abnormality, the communication speed, the transmission/reception radio wave intensity, and the delivery method selection map,
The distribution method selection unit distributes all of the recorded moving image data, distributes a portion of the recorded moving image data, distributes at least one frame image data of the recorded moving image, distributes text data indicating an abnormal state, and distributes abnormal state data. Select one delivery method from Delivery of detected emails and
When the distribution method selection unit selects distribution of all of the recorded moving image data, and when the characteristic items to be confirmed by the user are distributed over the entire recording time of the recorded moving image, the image acquisition unit outputs a command to the image analysis and storage device via the communication device to lengthen the set time before and after the time when the abnormality occurred, and records moving image data for the lengthened set time via the communication device as the recorded moving image data. receiving from the image analysis storage device as
A surveillance system characterized by:
請求項に記載の監視システムであって、
前記記録動画データの一部配信は、ユーザが確認すべき特徴事項を含むように前記記録動画データを編集した記録動画部分データを配信する記録動画部分データ配信と、前記記録動画データの画質を低下させた記録動画低画質データを配信する記録動画低画質データ配信と、を含み、
前記配信方法選択部は、前記記録動画データの一部配信を選択した場合で、
ユーザが確認すべき特徴事項が前記記録動画の記録時間の一部にのみ存在している場合には前記記録動画部分データ配信を選択し、そうでない場合には前記記録動画低画質データ配信を選択すること、
を特徴とする監視システム。
A monitoring system according to claim 1 , wherein
The partial distribution of the recorded moving image data includes the recorded moving image partial data distribution in which the recorded moving image data is edited so as to include features to be confirmed by the user, and the recorded moving image partial data distribution in which the recorded moving image data is distributed. and low-quality recorded video data distribution for distributing recorded video low-quality data that has been set,
When the distribution method selection unit selects partial distribution of the recorded video data,
If the characteristic items to be confirmed by the user exist only in part of the recording time of the recorded moving image, the recorded moving image partial data distribution is selected, and if not, the recorded moving image low-quality data distribution is selected. to do
A surveillance system characterized by:
監視システムであって、A surveillance system,
カメラが撮像した動画データを格納すると共に、前記カメラが撮像した動画データを分析し、異常を検出した際に異常発生時刻を含むアラーム信号を生成する画像分析格納装置と、 an image analysis storage device that stores moving image data captured by a camera, analyzes the moving image data captured by the camera, and generates an alarm signal including an abnormality occurrence time when an abnormality is detected;
前記画像分析格納装置と通信し、前記画像分析格納装置から前記アラーム信号を受信した際に、前記画像分析格納装置に格納された動画データの内の前記異常発生時刻の前後における設定時間分の動画データを記録動画データとして前記画像分析格納装置から受信する通信装置と、 When communicating with the image analysis and storage device and receiving the alarm signal from the image analysis and storage device, moving images for a set time before and after the time when the abnormality occurred in the moving image data stored in the image analysis and storage device a communication device that receives data as recorded video data from the image analysis storage device;
前記通信装置と通信し、前記通信装置から前記記録動画データを受信し、受信した前記記録動画データに基づいて異常状態情報を携帯端末に配信するサーバと、を備え、 a server that communicates with the communication device, receives the recorded moving image data from the communication device, and delivers abnormal state information to a mobile terminal based on the received recorded moving image data;
前記サーバは、 The server is
前記通信装置から前記記録動画データを取得する画像取得部と、 an image acquisition unit that acquires the recorded moving image data from the communication device;
前記携帯端末との通信状態データと前記異常の緊急度と前記異常状態情報の配信方法とを関連付けて格納した配信方法選択マップと、 a distribution method selection map storing communication status data with the mobile terminal, the degree of urgency of the abnormality, and a distribution method of the abnormality information in association with each other;
前記画像取得部から入力された前記記録動画データに基づいて前記異常の緊急度を判定し、判定した前記異常の緊急度と前記携帯端末から受信した前記携帯端末との前記通信状態データと前記配信方法選択マップとに基づいて前記携帯端末に配信する前記異常状態情報の配信方法を選択する配信方法選択部と、 determining the urgency of the abnormality based on the recorded video data input from the image acquisition unit, and determining the urgency of the abnormality, the communication state data with the mobile terminal received from the mobile terminal, and the distribution; a delivery method selection unit that selects a delivery method of the abnormal state information to be delivered to the mobile terminal based on a method selection map;
前記配信方法選択部が選択した配信方法に基づいて前記携帯端末に配信する前記異常状態情報の配信データを生成する配信データ生成部と、を備え、 a distribution data generation unit that generates distribution data of the abnormal state information to be distributed to the mobile terminal based on the distribution method selected by the distribution method selection unit;
前記通信状態データは、前記携帯端末との通信速度と前記携帯端末との送受信電波強度とを含み、The communication state data includes a communication speed with the mobile terminal and an intensity of a radio wave transmitted and received with the mobile terminal,
前記配信方法選択部は、前記異常の緊急度と前記通信速度と前記送受信電波強度と前記配信方法選択マップとに基づいて前記携帯端末に配信する前記異常状態情報の配信方法を選択し、The delivery method selection unit selects a delivery method of the abnormal state information to be delivered to the mobile terminal based on the urgency of the abnormality, the communication speed, the transmission/reception radio wave intensity, and the delivery method selection map,
前記配信方法選択部は、前記記録動画データの全部配信と、前記記録動画データの一部配信と、記録動画の少なくとも1つのフレーム画像データの配信と、異常状態を示すテキストデータの配信と、異常検出メールの配信との内のいずれか一つの配信方法を選択し、The distribution method selection unit distributes all of the recorded moving image data, distributes a portion of the recorded moving image data, distributes at least one frame image data of the recorded moving image, distributes text data indicating an abnormal state, and distributes abnormal state data. Select one delivery method from Delivery of detected emails and
前記記録動画データの一部配信は、ユーザが確認すべき特徴事項を含むように前記記録動画データを編集した記録動画部分データを配信する記録動画部分データ配信と、前記記録動画データの画質を低下させた記録動画低画質データを配信する記録動画低画質データ配信と、を含み、The partial distribution of the recorded moving image data includes the recorded moving image partial data distribution in which the recorded moving image data is edited so as to include features to be confirmed by the user, and the recorded moving image partial data distribution in which the recorded moving image data is reduced in image quality. and low-quality recorded video data distribution for distributing recorded video low-quality data that has been set,
前記配信方法選択部は、前記記録動画データの一部配信を選択した場合で、When the distribution method selection unit selects partial distribution of the recorded video data,
ユーザが確認すべき特徴事項が前記記録動画の記録時間の一部にのみ存在している場合には前記記録動画部分データ配信を選択し、そうでない場合には前記記録動画低画質データ配信を選択すること、 If the characteristic items to be confirmed by the user exist only in part of the recording time of the recorded moving image, the recorded moving image partial data distribution is selected, and if not, the recorded moving image low-quality data distribution is selected. to do
を特徴とする監視システム。 A surveillance system characterized by:
請求項2又は3に記載の監視システムであって、
前記画像取得部は、前記配信方法選択部が前記記録動画低画質データ配信を選択した場合であって、ユーザが確認すべき特徴事項が前記記録動画の記録時間の全体に分布している場合には、前記通信装置を介して前記画像分析格納装置に前記異常発生時刻の前後における設定時間を長くさせる指令を出力し、前記通信装置を介して長くした設定時間分の動画データを前記記録動画データとして前記画像分析格納装置から受信すること、
を特徴とする監視システム。
A monitoring system according to claim 2 or 3 ,
When the distribution method selection unit selects the distribution of the recorded moving image low-quality data, and when the characteristic items to be checked by the user are distributed over the entire recording time of the recorded moving image, the image acquisition unit outputs a command to the image analysis and storage device via the communication device to lengthen the set time before and after the time when the abnormality occurred, and records moving image data for the lengthened set time via the communication device as the recorded moving image data. receiving from the image analysis storage device as
A surveillance system characterized by:
請求項からのいずれか1項に記載の監視システムであって、
前記配信方法選択部は、
前記異常の緊急度が高く、前記通信速度と前記送受信電波強度の両方が高い場合には、前記記録動画データの全部配信を選択し、
前記異常の緊急度が高く、前記通信速度又は前記送受信電波強度のいずれか一方のみが高い場合には、前記記録動画データの一部配信を選択し、
前記異常の緊急度が高いが、前記通信速度と前記送受信電波強度の両方が高くない場合には、異常状態を示すテキストデータの配信を選択すること、
を特徴とする監視システム。
A monitoring system according to any one of claims 1 to 4 ,
The delivery method selection unit
when the urgency of the abnormality is high and both the communication speed and the transmission/reception radio wave intensity are high, selecting to distribute all of the recorded video data;
when the urgency of the abnormality is high and only one of the communication speed and the transmission/reception radio wave intensity is high, selecting partial distribution of the recorded video data,
Selecting delivery of text data indicating an abnormal state when the urgency of the abnormality is high but both the communication speed and the transmission/reception radio wave intensity are not high;
A surveillance system characterized by:
監視システムであって、 A surveillance system,
カメラが撮像した動画データを格納すると共に、前記カメラが撮像した動画データを分析し、異常を検出した際に異常発生時刻を含むアラーム信号を生成する画像分析格納装置と、 an image analysis storage device that stores moving image data captured by a camera, analyzes the moving image data captured by the camera, and generates an alarm signal including an abnormality occurrence time when an abnormality is detected;
前記画像分析格納装置と通信し、前記画像分析格納装置から前記アラーム信号を受信した際に、前記画像分析格納装置に格納された動画データの内の前記異常発生時刻の前後における設定時間分の動画データを記録動画データとして前記画像分析格納装置から受信する通信装置と、 When communicating with the image analysis and storage device and receiving the alarm signal from the image analysis and storage device, moving images for a set time before and after the time when the abnormality occurred in the moving image data stored in the image analysis and storage device a communication device that receives data as recorded video data from the image analysis storage device;
前記通信装置と通信し、前記通信装置から前記記録動画データを受信し、受信した前記記録動画データに基づいて異常状態情報を携帯端末に配信するサーバと、を備え、 a server that communicates with the communication device, receives the recorded moving image data from the communication device, and delivers abnormal state information to a mobile terminal based on the received recorded moving image data;
前記サーバは、 The server is
前記通信装置から前記記録動画データを取得する画像取得部と、 an image acquisition unit that acquires the recorded moving image data from the communication device;
前記携帯端末との通信状態データと前記異常の緊急度と前記異常状態情報の配信方法とを関連付けて格納した配信方法選択マップと、 a distribution method selection map storing communication status data with the mobile terminal, the degree of urgency of the abnormality, and a distribution method of the abnormality information in association with each other;
前記画像取得部から入力された前記記録動画データに基づいて前記異常の緊急度を判定し、判定した前記異常の緊急度と前記携帯端末から受信した前記携帯端末との前記通信状態データと前記配信方法選択マップとに基づいて前記携帯端末に配信する前記異常状態情報の配信方法を選択する配信方法選択部と、 determining the urgency of the abnormality based on the recorded video data input from the image acquisition unit, and determining the urgency of the abnormality, the communication state data with the mobile terminal received from the mobile terminal, and the distribution; a delivery method selection unit that selects a delivery method of the abnormal state information to be delivered to the mobile terminal based on a method selection map;
前記配信方法選択部が選択した配信方法に基づいて前記携帯端末に配信する前記異常状態情報の配信データを生成する配信データ生成部と、を備え、 a distribution data generation unit that generates distribution data of the abnormal state information to be distributed to the mobile terminal based on the distribution method selected by the distribution method selection unit;
前記通信状態データは、前記携帯端末との通信速度と前記携帯端末との送受信電波強度とを含み、The communication state data includes a communication speed with the mobile terminal and an intensity of a radio wave transmitted and received with the mobile terminal,
前記配信方法選択部は、前記異常の緊急度と前記通信速度と前記送受信電波強度と前記配信方法選択マップとに基づいて前記携帯端末に配信する前記異常状態情報の配信方法を選択し、The delivery method selection unit selects a delivery method of the abnormal state information to be delivered to the mobile terminal based on the urgency of the abnormality, the communication speed, the transmission/reception radio wave intensity, and the delivery method selection map,
前記配信方法選択部は、前記記録動画データの全部配信と、前記記録動画データの一部配信と、記録動画の少なくとも1つのフレーム画像データの配信と、異常状態を示すテキストデータの配信と、異常検出メールの配信との内のいずれか一つの配信方法を選択し、The distribution method selection unit distributes all of the recorded moving image data, distributes a portion of the recorded moving image data, distributes at least one frame image data of the recorded moving image, distributes text data indicating an abnormal state, and distributes abnormal state data. Select one delivery method from Delivery of detected emails and
前記配信方法選択部は、 The delivery method selection unit
前記異常の緊急度が高く、前記通信速度と前記送受信電波強度の両方が高い場合には、前記記録動画データの全部配信を選択し、 when the urgency of the abnormality is high and both the communication speed and the transmission/reception radio wave intensity are high, selecting to distribute all of the recorded video data;
前記異常の緊急度が高く、前記通信速度又は前記送受信電波強度のいずれか一方のみが高い場合には、前記記録動画データの一部配信を選択し、 when the urgency of the abnormality is high and only one of the communication speed and the transmission/reception radio wave intensity is high, selecting partial distribution of the recorded video data,
前記異常の緊急度が高いが、前記通信速度と前記送受信電波強度の両方が高くない場合には、異常状態を示すテキストデータの配信を選択すること、 Selecting delivery of text data indicating an abnormal state when the urgency of the abnormality is high but both the communication speed and the transmission/reception radio wave intensity are not high;
を特徴とする監視システム。 A surveillance system characterized by:
請求項から6のいずれか1項に記載の監視システムであって、
前記配信方法選択部は、
前記異常の緊急度が高くなく、前記通信速度と前記送受信電波強度の両方が高い場合には、ユーザが確認すべき特徴事項を含む前記記録動画の少なくとも1つのフレーム画像の配信を選択し、
前記異常の緊急度が高くなく、前記通信速度又は前記送受信電波強度のいずれか一方のみが高い場合には、異常状態を示すテキストデータの配信を選択し、
前記異常の緊急度が高くなく、前記通信速度と前記送受信電波強度の両方が高くない場合には、異常検出メールの配信を選択すること、
を特徴とする監視システム。
A monitoring system according to any one of claims 1 to 6,
The delivery method selection unit
when the urgency of the abnormality is not high and both the communication speed and the strength of the transmitted and received radio waves are high, selecting delivery of at least one frame image of the recorded moving image containing features to be confirmed by the user;
If the urgency of the abnormality is not high and only one of the communication speed and the transmission/reception radio wave intensity is high, selecting delivery of text data indicating the abnormal state,
Selecting delivery of an anomaly detection email when the urgency of the anomaly is not high and both the communication speed and the transmission/reception radio wave intensity are not high;
A surveillance system characterized by:
監視システムであって、A monitoring system,
カメラが撮像した動画データを格納すると共に、前記カメラが撮像した動画データを分析し、異常を検出した際に異常発生時刻を含むアラーム信号を生成する画像分析格納装置と、 an image analysis storage device that stores moving image data captured by a camera, analyzes the moving image data captured by the camera, and generates an alarm signal including an abnormality occurrence time when an abnormality is detected;
前記画像分析格納装置と通信し、前記画像分析格納装置から前記アラーム信号を受信した際に、前記画像分析格納装置に格納された動画データの内の前記異常発生時刻の前後における設定時間分の動画データを記録動画データとして前記画像分析格納装置から受信する通信装置と、 When communicating with the image analysis and storage device and receiving the alarm signal from the image analysis and storage device, moving images for a set time before and after the time when the abnormality occurred in the moving image data stored in the image analysis and storage device a communication device that receives data as recorded video data from the image analysis storage device;
前記通信装置と通信し、前記通信装置から前記記録動画データを受信し、受信した前記記録動画データに基づいて異常状態情報を携帯端末に配信するサーバと、を備え、 a server that communicates with the communication device, receives the recorded moving image data from the communication device, and delivers abnormal state information to a mobile terminal based on the received recorded moving image data;
前記サーバは、 The server is
前記通信装置から前記記録動画データを取得する画像取得部と、 an image acquisition unit that acquires the recorded moving image data from the communication device;
前記携帯端末との通信状態データと前記異常の緊急度と前記異常状態情報の配信方法とを関連付けて格納した配信方法選択マップと、 a distribution method selection map storing communication state data with the mobile terminal, the degree of urgency of the abnormality, and a distribution method of the abnormal state information in association with each other;
前記画像取得部から入力された前記記録動画データに基づいて前記異常の緊急度を判定し、判定した前記異常の緊急度と前記携帯端末から受信した前記携帯端末との前記通信状態データと前記配信方法選択マップとに基づいて前記携帯端末に配信する前記異常状態情報の配信方法を選択する配信方法選択部と、 determining the urgency of the abnormality based on the recorded moving image data input from the image acquisition unit, and determining the urgency of the abnormality, the communication state data with the mobile terminal received from the mobile terminal, and the distribution; a delivery method selection unit that selects a delivery method of the abnormal state information to be delivered to the mobile terminal based on a method selection map;
前記配信方法選択部が選択した配信方法に基づいて前記携帯端末に配信する前記異常状態情報の配信データを生成する配信データ生成部と、を備え、 a distribution data generation unit that generates distribution data of the abnormal state information to be distributed to the mobile terminal based on the distribution method selected by the distribution method selection unit;
前記通信状態データは、前記携帯端末との通信速度と前記携帯端末との送受信電波強度とを含み、The communication state data includes a communication speed with the mobile terminal and an intensity of a radio wave transmitted and received with the mobile terminal,
前記配信方法選択部は、前記異常の緊急度と前記通信速度と前記送受信電波強度と前記配信方法選択マップとに基づいて前記携帯端末に配信する前記異常状態情報の配信方法を選択し、The delivery method selection unit selects a delivery method of the abnormal state information to be delivered to the mobile terminal based on the urgency of the abnormality, the communication speed, the transmission/reception radio wave intensity, and the delivery method selection map,
前記配信方法選択部は、前記記録動画データの全部配信と、前記記録動画データの一部配信と、記録動画の少なくとも1つのフレーム画像データの配信と、異常状態を示すテキストデータの配信と、異常検出メールの配信との内のいずれか一つの配信方法を選択し、The distribution method selection unit distributes all of the recorded moving image data, distributes a portion of the recorded moving image data, distributes at least one frame image data of the recorded moving image, distributes text data indicating an abnormal state, and distributes abnormal state data. Select one delivery method from Delivery of detected emails and
前記配信方法選択部は、 The delivery method selection unit
前記異常の緊急度が高くなく、前記通信速度と前記送受信電波強度の両方が高い場合には、ユーザが確認すべき特徴事項を含む前記記録動画の少なくとも1つのフレーム画像の配信を選択し、 when the urgency of the abnormality is not high and both the communication speed and the strength of the transmitted and received radio waves are high, selecting delivery of at least one frame image of the recorded moving image containing features to be confirmed by the user;
前記異常の緊急度が高くなく、前記通信速度又は前記送受信電波強度のいずれか一方のみが高い場合には、異常状態を示すテキストデータの配信を選択し、 If the urgency of the abnormality is not high and only one of the communication speed and the transmission/reception radio wave intensity is high, selecting delivery of text data indicating the abnormal state,
前記異常の緊急度が高くなく、前記通信速度と前記送受信電波強度の両方が高くない場合には、異常検出メールの配信を選択すること、 Selecting delivery of an anomaly detection email when the urgency of the anomaly is not high and both the communication speed and the transmission/reception radio wave intensity are not high;
を特徴とする監視システム。 A surveillance system characterized by:
請求項から8のいずれか1項に記載の監視システムであって、
前記サーバは、ユーザの属性とユーザの指定配信方法とを関連付けて格納したユーザデータベースを含み、
前記配信方法選択部は、選択した配信方法と、前記ユーザデータベースに格納されたユーザの前記指定配信方法とが同一でない場合には、ユーザの前記指定配信方法を前記配信データ生成部に出力すること、
を特徴とする監視システム。
A monitoring system according to any one of claims 1 to 8,
The server includes a user database that stores user attributes and user-specified distribution methods in association with each other,
When the selected distribution method and the user's designated distribution method stored in the user database are not the same, the distribution method selection unit outputs the user's designated distribution method to the distribution data generation unit. ,
A surveillance system characterized by:
監視システムであって、A monitoring system,
カメラが撮像した動画データを格納すると共に、前記カメラが撮像した動画データを分析し、異常を検出した際に異常発生時刻を含むアラーム信号を生成する画像分析格納装置と、 an image analysis storage device that stores moving image data captured by a camera, analyzes the moving image data captured by the camera, and generates an alarm signal including an abnormality occurrence time when an abnormality is detected;
前記画像分析格納装置と通信し、前記画像分析格納装置から前記アラーム信号を受信した際に、前記画像分析格納装置に格納された動画データの内の前記異常発生時刻の前後における設定時間分の動画データを記録動画データとして前記画像分析格納装置から受信する通信装置と、 When communicating with the image analysis and storage device and receiving the alarm signal from the image analysis and storage device, moving images for a set time before and after the time when the abnormality occurred in the moving image data stored in the image analysis and storage device a communication device that receives data as recorded video data from the image analysis storage device;
前記通信装置と通信し、前記通信装置から前記記録動画データを受信し、受信した前記記録動画データに基づいて異常状態情報を携帯端末に配信するサーバと、を備え、 a server that communicates with the communication device, receives the recorded moving image data from the communication device, and delivers abnormal state information to a mobile terminal based on the received recorded moving image data;
前記サーバは、 The server is
前記通信装置から前記記録動画データを取得する画像取得部と、 an image acquisition unit that acquires the recorded moving image data from the communication device;
前記携帯端末との通信状態データと前記異常の緊急度と前記異常状態情報の配信方法とを関連付けて格納した配信方法選択マップと、 a distribution method selection map storing communication state data with the mobile terminal, the degree of urgency of the abnormality, and a distribution method of the abnormal state information in association with each other;
前記画像取得部から入力された前記記録動画データに基づいて前記異常の緊急度を判定し、判定した前記異常の緊急度と前記携帯端末から受信した前記携帯端末との前記通信状態データと前記配信方法選択マップとに基づいて前記携帯端末に配信する前記異常状態情報の配信方法を選択する配信方法選択部と、 determining the urgency of the abnormality based on the recorded moving image data input from the image acquisition unit, and determining the urgency of the abnormality, the communication state data with the mobile terminal received from the mobile terminal, and the distribution; a delivery method selection unit that selects a delivery method of the abnormal state information to be delivered to the mobile terminal based on a method selection map;
前記配信方法選択部が選択した配信方法に基づいて前記携帯端末に配信する前記異常状態情報の配信データを生成する配信データ生成部と、を備え、 a distribution data generation unit that generates distribution data of the abnormal state information to be distributed to the mobile terminal based on the distribution method selected by the distribution method selection unit;
前記通信状態データは、前記携帯端末との通信速度と前記携帯端末との送受信電波強度とを含み、The communication state data includes a communication speed with the mobile terminal and an intensity of a radio wave transmitted and received with the mobile terminal,
前記配信方法選択部は、前記異常の緊急度と前記通信速度と前記送受信電波強度と前記配信方法選択マップとに基づいて前記携帯端末に配信する前記異常状態情報の配信方法を選択し、The delivery method selection unit selects a delivery method of the abnormal state information to be delivered to the mobile terminal based on the urgency of the abnormality, the communication speed, the transmission/reception radio wave intensity, and the delivery method selection map,
前記配信方法選択部は、前記記録動画データの全部配信と、前記記録動画データの一部配信と、記録動画の少なくとも1つのフレーム画像データの配信と、異常状態を示すテキストデータの配信と、異常検出メールの配信との内のいずれか一つの配信方法を選択し、The distribution method selection unit distributes all of the recorded moving image data, distributes a portion of the recorded moving image data, distributes at least one frame image data of the recorded moving image, distributes text data indicating an abnormal state, and distributes abnormal state data. Select one delivery method from Delivery of detected emails and
前記サーバは、ユーザの属性とユーザの指定配信方法とを関連付けて格納したユーザデータベースを含み、The server includes a user database that stores user attributes and user-specified distribution methods in association with each other,
前記配信方法選択部は、選択した配信方法と、前記ユーザデータベースに格納されたユーザの前記指定配信方法とが同一でない場合には、ユーザの前記指定配信方法を前記配信データ生成部に出力すること、 When the selected distribution method and the user's designated distribution method stored in the user database are not the same, the distribution method selection unit outputs the user's designated distribution method to the distribution data generation unit. ,
を特徴とする監視システム。 A surveillance system characterized by:
請求項1から10のいずれか1項に記載の監視システムであって、
前記携帯端末は、前記サーバから受信した前記異常状態情報に応じて前記サーバと通信し、前記サーバから前記記録動画データを受信すること、
を特徴とする監視システム。
A monitoring system according to any one of claims 1 to 10 ,
the mobile terminal communicating with the server according to the abnormal state information received from the server and receiving the recorded video data from the server;
A surveillance system characterized by:
JP2022528939A 2020-07-09 2020-07-09 Monitoring system Active JP7118322B2 (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2020/026772 WO2022009356A1 (en) 2020-07-09 2020-07-09 Monitoring system

Publications (3)

Publication Number Publication Date
JPWO2022009356A1 JPWO2022009356A1 (en) 2022-01-13
JPWO2022009356A5 JPWO2022009356A5 (en) 2022-08-10
JP7118322B2 true JP7118322B2 (en) 2022-08-15

Family

ID=79552398

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022528939A Active JP7118322B2 (en) 2020-07-09 2020-07-09 Monitoring system

Country Status (3)

Country Link
JP (1) JP7118322B2 (en)
CN (1) CN115836516B (en)
WO (1) WO2022009356A1 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20250095375A1 (en) * 2022-03-16 2025-03-20 Nec Corporation Image processing apparatus, image processing method, and non-transitory storage medium
JP7751960B2 (en) * 2022-05-12 2025-10-09 株式会社 ミックウェア Management device, management method, management program, and provision system
TWI840293B (en) * 2023-08-18 2024-04-21 合作金庫商業銀行股份有限公司 Auto recording system and method for photographic image of safe deposit box

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006085500A1 (en) 2005-02-09 2006-08-17 Matsushita Electric Industrial Co., Ltd. Monitoring camera device, monitoring system using the same, and monitoring image transmission method
JP6266184B1 (en) 2017-03-16 2018-01-24 三菱電機ビルテクノサービス株式会社 Monitoring system
JP2018101416A (en) 2016-12-21 2018-06-28 ホーチキ株式会社 Fire monitoring system

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017208391A1 (en) * 2016-06-01 2017-12-07 三菱電機株式会社 Monitoring apparatus and monitoring method

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006085500A1 (en) 2005-02-09 2006-08-17 Matsushita Electric Industrial Co., Ltd. Monitoring camera device, monitoring system using the same, and monitoring image transmission method
JP2018101416A (en) 2016-12-21 2018-06-28 ホーチキ株式会社 Fire monitoring system
JP6266184B1 (en) 2017-03-16 2018-01-24 三菱電機ビルテクノサービス株式会社 Monitoring system

Also Published As

Publication number Publication date
CN115836516B (en) 2024-03-15
WO2022009356A1 (en) 2022-01-13
CN115836516A (en) 2023-03-21
JPWO2022009356A1 (en) 2022-01-13

Similar Documents

Publication Publication Date Title
US10665072B1 (en) Sensor to characterize the behavior of a visitor or a notable event
JP6266184B1 (en) Monitoring system
US10123051B2 (en) Video analytics with pre-processing at the source end
US8417090B2 (en) System and method for management of surveillance devices and surveillance footage
US6690411B2 (en) Security system
JP7118322B2 (en) Monitoring system
US20080284580A1 (en) Video alarm verification
KR100696728B1 (en) Surveillance information transmission device and surveillance information transmission method
CN110120113A (en) Data processing method and device, access control equipment and access control system
US20150287306A1 (en) Proactive Loss Prevention System
EP2654308A2 (en) System for monitoring the misuse of image information
JP3908707B2 (en) Security monitoring system, security monitoring method, and security monitoring program
CN201087655Y (en) Mobile Network Monitoring Safe
JP6872963B2 (en) Surveillance camera system
CN101205783A (en) Mobile Network Monitoring Safe
CN113557553B (en) Visitor entry and exit management system
JP6870885B1 (en) Unmanned viewing system
CN206656471U (en) Air conditioner and monitoring system based on air conditioner
JP2002230654A (en) Remote monitoring system
WO2004012457A1 (en) Remote control monitoring system
JP2010140193A (en) Image recording device, image accumulation method, and security system
KR100950734B1 (en) Automatic recognition method of abnormal status in home alarm system and internet refrigerator
JP2005094642A (en) Surveillance camera system
KR20010100434A (en) Image Monitoring Security System And Image Transmission Function Thereof
JP6577627B1 (en) Video surveillance system and method and imaging apparatus

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220517

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220517

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20220517

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220705

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220802

R150 Certificate of patent or registration of utility model

Ref document number: 7118322

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250