JP2016086237A - Server device and method - Google Patents
Server device and methodDownload PDFInfo
- Publication number
- JP2016086237A JP2016086237AJP2014216480AJP2014216480AJP2016086237AJP 2016086237 AJP2016086237 AJP 2016086237AJP 2014216480 AJP2014216480 AJP 2014216480AJP 2014216480 AJP2014216480 AJP 2014216480AJP 2016086237 AJP2016086237 AJP 2016086237A
- Authority
- JP
- Japan
- Prior art keywords
- captured image
- social infrastructure
- image
- server
- infrastructure
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
Abstract
Description
Translated fromJapanese本開示は、橋梁やトンネルなどのインフラストラクチャー（以下、「社会インフラ」ともいう）を維持管理するための技術に関し、特に、社会インフラの維持管理を容易にするための技術に関する。 The present disclosure relates to technology for maintaining and managing infrastructure such as bridges and tunnels (hereinafter also referred to as “social infrastructure”), and more particularly to technology for facilitating maintenance and management of social infrastructure.
近年、橋梁やトンネルなどの社会インフラの老朽化が進んでおり、これら社会インフラを適切に管理するため、地方自治体などによる定期的な点検が義務化されることとなっている。点検対象となるトンネルの数や橋梁の数は膨大なものとなっており、これら社会インフラを効率よく維持管理することが求められている。 In recent years, social infrastructure such as bridges and tunnels has been aged, and in order to properly manage these social infrastructures, periodic inspections by local governments and the like have become mandatory. The number of tunnels and bridges to be inspected is enormous, and it is required to maintain and manage these social infrastructures efficiently.
社会インフラを定期的に点検するため、例えば近接目視により確認するなどの検査方法が規定されている。また、作業現場で検査する検査者の負担を軽減するための様々な技術が検討されている。例えば、特開２００７−２６２５５号公報（特許文献１）は、トンネル壁面など、撮影時期の異なる２枚の画像からクラックなどの変状点の進捗状況を抽出するための技術を記載している。 In order to regularly check social infrastructure, an inspection method such as a close visual check is prescribed. Various techniques for reducing the burden on the inspector inspecting at the work site have been studied. For example, Japanese Patent Application Laid-Open No. 2007-26255 (Patent Document 1) describes a technique for extracting the progress status of deformation points such as cracks from two images with different shooting times such as a tunnel wall surface.
特許文献１に記載された技術によると、調査実施時期の異なる２枚の画像を利用して、１回目の調査結果を最大限に利用し、２回目の調査結果画像から鉄道トンネル等の変状の進行及び新たな変状部分の抽出とを行う。これにより、第１回目の画像に現れていなかったが、第２回目の画像に新たに発生したクラックなどの変状点のみを画像処理技術によって出力する。このように、画像処理により、変状点の進捗状況を抽出する技術が知られているが、この他にも、社会インフラを点検する点検員の派遣に伴う負担を軽減する技術なども必要とされている。 According to the technique described in Patent Document 1, the first survey result is used to the maximum by using two images with different survey implementation times, and the second survey result image is transformed into a railway tunnel or the like. And the extraction of a new deformed part. As a result, although not appearing in the first image, only deformed points such as cracks newly generated in the second image are output by the image processing technique. As described above, a technique for extracting the progress status of deformation points by image processing is known, but in addition to this, a technique for reducing the burden associated with dispatching inspectors to check social infrastructure is also necessary. Has been.
本開示は、橋梁やトンネルなどの社会インフラを維持管理するインフラ管理事業者にとって、さらに維持管理の負担を軽減し、効率を高めることができる技術を提供することを目的としている。 An object of the present disclosure is to provide a technology capable of further reducing the burden of maintenance and improving efficiency for an infrastructure management company that maintains and manages social infrastructure such as bridges and tunnels.
一実施形態に従うサーバ装置は、外部の装置とデータを送受信するように構成された通信部と、管理対象の社会インフラを定期的に撮影する検知用の装置により撮影された社会インフラの撮影画像を記憶するように構成された記憶部と、サーバ装置の動作を制御するように構成された制御部とを備える。制御部は、通信部により、外部の通信装置から撮影画像を受信して、受信された撮影画像と、当該撮影画像の撮影タイミングとを対応付けて記憶部に記憶させるための画像受信部と、受信された撮影画像の撮影タイミングよりも過去に撮影された撮影画像を記憶部から読み出して、受信された撮影画像と、読み出した過去に撮影された撮影画像とを比較することにより、社会インフラに異常が発生したことを検知する画像認識部と、社会インフラに異常が発生したことが検知された場合に、検知の結果を、外部の情報処理装置へ送信する送信部とを含む。 A server device according to an embodiment captures a captured image of a social infrastructure captured by a communication unit configured to transmit and receive data to and from an external device, and a detection device that periodically captures the social infrastructure to be managed. A storage unit configured to store data and a control unit configured to control the operation of the server device are provided. The control unit receives a captured image from an external communication device by the communication unit, associates the received captured image with the capturing timing of the captured image, and stores the image in the storage unit, and By reading a captured image taken in the past from the shooting timing of the received captured image from the storage unit and comparing the received captured image with the read captured image taken in the past, social infrastructure can be used. An image recognition unit that detects that an abnormality has occurred, and a transmission unit that transmits a detection result to an external information processing apparatus when it is detected that an abnormality has occurred in social infrastructure.
一実施形態によると、送信部は、異常が発生したことが検知された撮影タイミングの撮影画像を外部の情報処理装置に対し送信するように構成されている。制御部は、さらに、外部の情報処理装置から、送信された撮影画像が、社会インフラに異常が発生した状態であるか否かを示すフィードバック情報を受信して、受信したフィードバック情報と、外部の情報処理装置に送信した撮影画像とを対応付けて記憶部に記憶させるフィードバック処理部を含む。画像認識部は、受信された撮影画像の撮影タイミングよりも過去に撮影された撮影画像と、フィードバック情報とを記憶部から読み出して、受信された撮影画像と、過去に撮影された撮影画像と、読み出したフィードバック情報とに基づいて、社会インフラに異常が発生したことを検知するように構成される。 According to an embodiment, the transmission unit is configured to transmit a captured image at a capturing timing at which an abnormality has been detected to an external information processing apparatus. The control unit further receives feedback information indicating whether or not the transmitted captured image is in a state where an abnormality has occurred in the social infrastructure from an external information processing device, and the received feedback information and the external information A feedback processing unit that stores the captured image transmitted to the information processing apparatus in association with each other is included. The image recognition unit reads a captured image captured in the past from the capturing timing of the received captured image and feedback information from the storage unit, the received captured image, the captured image captured in the past, Based on the read feedback information, it is configured to detect that an abnormality has occurred in the social infrastructure.
一実施形態によると、送信部は、社会インフラに異常が発生したことが画像認識部により検知されない場合に、検知結果を外部の情報処理装置へ送信しないよう構成されている。 According to an embodiment, the transmission unit is configured not to transmit a detection result to an external information processing apparatus when the image recognition unit does not detect that an abnormality has occurred in social infrastructure.
一実施形態によると、検知用の装置は、予め定められた移動範囲内を移動して社会インフラを撮影するように構成されている。画像受信部は、検知用の装置が社会インフラを撮影した位置を示す撮影位置情報を受信し、撮影画像と、撮影画像の撮影タイミングと、撮影画像を撮影した撮影位置情報とを対応付けて記憶部に記憶させるよう構成されている。画像認識部は、撮影位置情報に示される位置ごとに、受信された撮影画像と、過去に撮影された撮影画像とを比較することにより、社会インフラを撮影した位置と対応付けて社会インフラに異常が発生したことを検知するように構成されている。送信部は、検知の結果と、社会インフラを撮影した位置とを外部の情報処理装置へ送信するように構成されている。 According to one embodiment, the detection device is configured to move within a predetermined movement range and image social infrastructure. The image receiving unit receives shooting position information indicating a position where the detection device has shot the social infrastructure, and stores the shot image, shooting timing of the shot image, and shooting position information of the shot image in association with each other. It is comprised so that it may memorize in a part. The image recognizing unit compares the received captured image with the captured image captured in the past for each position indicated in the capturing position information, and associates the social infrastructure with the captured position of the social infrastructure. It is comprised so that it may detect that this occurred. The transmission unit is configured to transmit a detection result and a position where the social infrastructure is photographed to an external information processing apparatus.
一実施形態に従うと、サーバ装置により、管理対象の社会インフラの維持管理をするための方法が提供される。この方法は、サーバ装置が、外部の通信装置から社会インフラの撮影画像を受信して、受信された撮影画像と、当該撮影画像の撮影タイミングとを対応付けてサーバ装置のメモリに記憶させるステップと、受信された撮影画像の撮影タイミングよりも過去に撮影された撮影画像をメモリから読み出して、受信される撮影画像と、読み出した過去に撮影された撮影画像とを比較することにより、社会インフラに異常が発生したことを検知するステップと、社会インフラに異常が発生したことが検知するステップにより検知された場合に、検知の結果を、外部の情報処理装置へ送信するステップとを含む。 According to one embodiment, a server device provides a method for maintaining and managing a social infrastructure to be managed. In this method, the server device receives a photographed image of social infrastructure from an external communication device, stores the received photographed image and the photographing timing of the photographed image in association with each other in a memory of the server device; By reading the captured image taken in the past from the shooting timing of the received captured image from the memory and comparing the received captured image with the read captured image captured in the past, A step of detecting that an abnormality has occurred, and a step of transmitting a result of the detection to an external information processing apparatus when detected by the step of detecting that an abnormality has occurred in social infrastructure.
一実施形態によると、橋梁やトンネルなどを管理するインフラ管理事業者は、サーバ装置が異常を検知した場合に、サーバ装置から検知の結果を受信することができ、例えば社会インフラの異常が発生した場合に、作業員を異常発生個所へ派遣するなどの対応をすることができる。 According to one embodiment, an infrastructure management company that manages bridges, tunnels, and the like can receive a detection result from a server device when the server device detects an abnormality, for example, a social infrastructure abnormality has occurred. In such cases, it is possible to take measures such as dispatching workers to locations where an abnormality has occurred.
そのため、異常の発生の有無にかかわらず常に作業員を社会インフラの設置箇所へ派遣する必要がなくなり、インフラ管理事業者の負担を軽減することができる。 Therefore, it is not necessary to always dispatch workers to the location where the social infrastructure is installed regardless of whether or not an abnormality has occurred, and the burden on the infrastructure management business operator can be reduced.
この発明の上記および他の目的、特徴、局面および利点は、添付の図面と関連して理解されるこの発明に関する次の詳細な説明から明らかとなるであろう。 The above and other objects, features, aspects and advantages of the present invention will become apparent from the following detailed description of the present invention taken in conjunction with the accompanying drawings.
以下、図面を参照しつつ、本発明の実施の形態について説明する。以下の説明では、同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがって、それらについての詳細な説明は繰り返さない。 Hereinafter, embodiments of the present invention will be described with reference to the drawings. In the following description, the same parts are denoted by the same reference numerals. Their names and functions are also the same. Therefore, detailed description thereof will not be repeated.
＜実施の形態１＞
図１は、トンネルや橋梁などの社会インフラを検知ロボット１０が定期的に撮影する場面を示す図である。検知ロボット１０は、トンネルや橋梁など、定期的な点検が必要となる社会インフラを維持管理するために使用される。検知ロボット１０は、社会インフラの老朽化を検知するために、予め定められたタイミングに従って、予め定められた移動範囲内を移動して、定期的に社会インフラを撮影する。検知ロボット１０が社会インフラを撮影する時刻は、予めインフラ管理事業者が設定することができるが、設定後も、任意の時間および撮影の頻度に変更することができる。<Embodiment 1>
FIG. 1 is a diagram illustrating a scene in which a
図１の場面Ａに示すように、検知ロボット１０は、トンネルの老朽化を検知するために、トンネルの内壁を撮影する。検知ロボット１０は、移動するための駆動機構を備えており、例えば、図１の場面Ａに示すように、敷設されたレールに沿って、車輪により移動する機構を備えている。検知ロボット１０は、例えばレールに設置されたセンサやマーカーなどを検出することで、トンネル内部における位置を取得することができる。検知ロボット１０は、カメラによるトンネル内壁の撮影画像（以下、「撮影画像」とは、静止画と動画とを含むものとして説明する）と、トンネル内部における撮影位置と、撮影日時とを対応付けてメモリに記憶する。検知ロボット１０は、通信機能を有しており、例えば無線ＬＡＮ（Local Area Network）、Ｂｌｕｅｔｏｏｔｈ（登録商標）などの近距離無線通信の規格に従って無線通信装置５０と通信接続する。検知ロボット１０が撮影する撮影画像は、後述する図２に示すサーバ２０によって管理されている。無線通信装置５０は、無線通信機能を備えるとともにネットワーク（インフラ管理事業者による独自のネットワーク、またはインターネットなどの各種ネットワーク）と接続しており、ネットワークを介してサーバ２０と通信する。検知ロボット１０は、メモリに蓄積される記憶内容を、無線通信装置５０を介してサーバ２０へ送信する。 As shown in the scene A in FIG. 1, the
図１の場面Ｂに示すように、検知ロボット１０は、橋梁の老朽化を検知するために、橋梁を撮影する。検知ロボット１０は、地面や橋梁の壁面に設置されたレールに沿って移動する機構を備えている。検知ロボット１０は、カメラによる橋梁の撮影画像と、橋梁の撮影位置と、撮影日時とを対応付けてメモリに記憶する。 As shown in the scene B of FIG. 1, the
なお、検知ロボット１０が移動するための機構は、敷設されたレールに沿って車輪により移動する機構の他にも様々なものがあり、例えば、コンクリート面などに吸着して移動する機構のもの、マルチロータを備えて飛行するもの（マルチローターヘリコプタ）、車輪を備えた自走式のものなどがある。 There are various mechanisms for moving the
図２は、実施の形態１の、社会インフラの維持管理システムの構成を示す図である。図２に示すように、維持管理システムは、検知ロボット１０と、インフラ管理事業者４０と、サーバ２０とを含み、これらの機器がネットワーク７０を介して接続される。また、無線通信装置５０と、無線基地局６０と、ロボット製造事業者８０とがネットワーク７０に接続している。検知ロボット１０は、無線通信装置５０と無線通信しており、無線通信装置５０を介してサーバ２０と通信する。また、検知ロボット１０は、無線端末３０と、例えば近距離無線通信の規格に従って無線通信する。 FIG. 2 is a diagram illustrating a configuration of the social infrastructure maintenance management system according to the first embodiment. As shown in FIG. 2, the maintenance management system includes a
サーバ２０は、検知ロボット１０が撮影した社会インフラの撮影画像を、ネットワーク７０を介して受信し、受信した撮影画像と、撮影されたタイミングと、撮影位置とを対応付けて記憶装置に蓄積する。サーバ２０は、撮影位置ごとに、検知ロボット１０から受信した撮影画像と、記憶装置に蓄積された過去の撮影画像とを比較して画像認識処理をすることにより、撮影時期の異なる２枚の撮影画像の差分を求める。サーバ２０は、比較対象となった撮影画像の差分に基づき、社会インフラに発生したクラックなどを抽出して、社会インフラに異常が発生したことを検知する。サーバ２０は、異常が発生したことを検知した場合に、異常が発生したことを示す検知の結果と、異常の発生を検知した撮影画像および撮影位置とをインフラ管理事業者４０へ送信する。また、サーバ２０は、撮影画像に対する画像認識処理により、社会インフラに異常が発生したことを検知しない場合は、検知の結果をインフラ管理事業者４０へ送信しないこととしているが、これに限らず、社会インフラに異常が発生したと検知されないことを示す通知をインフラ管理事業者４０へ送信してもよい。 The
また、サーバ２０は、例えば、社会インフラを管理するための事業に関わる者、例えば社会インフラの管理事業者に所属する点検者、社会インフラをモニタリングするための機器開発者などが互いにコミュニケーションを行うためのプラットフォームとして機能するために、メッセージ送受信機能を提供する。例えば、サーバ２０は、社会インフラの管理のノウハウを、社会インフラを管理する事業者同士で共有するためのプラットフォームとして機能する。 In addition, the
無線端末３０は、例えばトンネルや橋梁などの社会インフラが設置される現場で、社会インフラの点検をする点検者が操作する端末である。無線端末３０は、例えば点検者の携帯に適したタブレット、スマートフォンなどであり、移動体通信システムの通信方式に従って、無線基地局６０と無線通信する。無線端末３０を操作するユーザは、例えば、検知ロボット１０の保守点検なども担当する。無線端末３０は、社会インフラの現場において、ユーザの操作に応じて検知ロボット１０と通信し、検知ロボット１０に対し、社会インフラの撮影をするよう指示し、検知ロボット１０から撮影画像を受信することもできる。また、無線端末３０は、ユーザの操作に応じて無線基地局６０を介してサーバ２０と通信し、検知ロボット１０が撮影する社会インフラの撮影画像とともに、点検者のコメントをサーバ２０へ送信する。 The
インフラ管理事業者４０は、社会インフラの維持管理を行うインフラ管理事業者の情報処理システムである。インフラ管理事業者４０は、社会インフラに異常が発生したことをサーバ２０が検知した場合に、サーバ２０から、社会インフラに異常が発生したことを示す検知の結果と、異常の発生を検知した撮影画像および撮影位置を示す情報を受信する。このように、インフラ管理事業者４０の操作者は、検知ロボット１０によって定期的に撮影される撮影画像のうち、異常が発生したことがサーバ２０によって検知された撮影画像を確認し、社会インフラの維持管理のために、例えば点検員を現場へ派遣する等の何らかの対応が必要か否かを判断する。インフラ管理事業者４０は、操作者が撮影画像を視認して、対応が必要であるか、不要であるかを判断した結果の入力を受け付ける。インフラ管理事業者４０は、サーバ２０に対し、インフラ管理事業者４０の操作者の入力内容をフィードバック情報として通知する。 The infrastructure
ロボット製造事業者８０は、検知ロボット１０を製造する事業者の情報処理システムである。例えば、サーバ２０が社会インフラの管理事業者に向けたプラットフォームとして機能する場合に、ロボット製造事業者８０は、サーバ２０と通信し、サーバ２０に対して検知ロボット１０の広告情報などを配信する。 The
これにより、サーバ２０は、（１）検知ロボット１０が撮影する撮影画像を蓄積し、（２）インフラ管理事業者４０に対して社会インフラの異常の発生の検知結果を通知し、（３）社会インフラを管理する事業に関わる者同士のコミュニケーションを促すためのプラットフォームとして機能し、（４）プラットフォームの利用者に対して、ロボット製造事業者８０などが配信する広告情報を提供すること等ができる。 As a result, the server 20 (1) accumulates the captured images taken by the
＜構成＞
図３から図６を参照して、社会インフラを維持管理するための維持管理システムを構成する各装置について説明する。<Configuration>
With reference to FIG. 3 to FIG. 6, each device constituting the maintenance system for maintaining and managing social infrastructure will be described.
図３は、検知ロボット１０の構成を示すブロック図である。図３に示すように、検知ロボット１０は、アンテナ１０１と、無線通信部１０２と、カメラ１０３と、測位センサ１０４と、電源制御部１０５と、記憶部１０６と、制御部１０７と、駆動制御部１０８と、駆動部１０９とを含む。 FIG. 3 is a block diagram showing the configuration of the
アンテナ１０１は、検知ロボット１０が発する信号を電波として空間へ放射する。また、アンテナ１０１は、空間から電波を受信して受信信号を無線通信部１０２へ与える。 The
無線通信部１０２は、検知ロボット１０が他の通信機器と通信するため、アンテナ１０１を介して信号を送受信するための変復調処理などを行う。無線通信部１０２は、チューナー、高周波回路などを含む無線通信用の通信モジュールであり、検知ロボット１０が送受信する無線信号の変復調や周波数変換を行い、受信信号を制御部１０７へ与える。 The
カメラ１０３は、入射光を受光して電気信号に変換するカメラモジュールであり、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）センサ、ＡＤＣ（Analog to Digital Converter）等を含み、画像信号を制御部１０７へ出力する。 The
測位センサ１０４は、検知ロボット１０の位置を計測するためのセンサである。測位センサ１０４は、例えばＧＰＳ（Global Positioning System）モジュールである。また、例えば、検知ロボット１０が社会インフラを撮影する位置が予め定められている場合、各撮影地点にマーカーやセンサなどを配置しておき、検知ロボット１０がマーカー等を検出することにより、検知ロボット１０が自装置の位置を検出することができる。この場合、測位センサ１０４は、マーカー等を検出することで自装置の位置を検出するためのセンサとして機能する。 The
電源制御部１０５は、（図示しない）電源電圧の供給を受けて、検知ロボット１０の各回路への電源の供給を制御する。例えば、検知ロボット１０は、充電池を備えており、電圧の供給を受けて電源制御部１０５により充電する。 The
記憶部１０６は、ＲＯＭ(Read Only Memory）、ＲＡＭ（Random Access Memory）等により構成され、検知ロボット１０が使用するプログラムを記憶し、検知ロボット１０が使用する各種のデータを蓄積する。ある局面において、記憶部１０６は、機器識別情報１６１と、撮影画像データ１６２とを記憶する。機器識別情報１６１は、検知ロボット１０を識別するための情報であり、例えば検知ロボット１０それぞれに固有の情報が予めロボット製造事業者８０によって割り当てられている。撮影画像データ１６２は、検知ロボット１０がカメラ１０３の駆動により得られた撮影画像である。検知ロボット１０は、撮影日時と、撮影場所と、撮影画像とを対応付けて記憶部１０６に記憶している。 The
制御部１０７は記憶部１０６に記憶される制御プログラムを読み込んで実行することにより、検知ロボット１０の動作を制御する。制御部１０７は、例えばプロセッサにより実現される。制御部１０７は、プログラムに従って動作することにより、駆動処理部１７１と、撮影処理部１７２と、データ送信部１７３として機能する。 The
駆動処理部１７１は、検知ロボット１０の駆動を制御し、検知ロボット１０の移動量などの情報を駆動制御部１０８へ出力する。 The
撮影処理部１７２は、カメラ１０３に制御信号を出力することで、管理対象の社会インフラを撮影する処理を行う。撮影処理部１７２は、カメラ１０３から出力される画像信号を受け付けて、受け付けた画像信号と、撮影日時および撮影場所とを対応付けて、撮影画像データ１６２として記憶部１０６に記憶させる。 The photographing
データ送信部１７３は、検知ロボット１０が蓄積する撮影画像データ１６２（撮影画像と、撮影日時と、撮影場所とが対応付けられた情報）を、アンテナ１０１を介して外部の機器へ送信する処理を行う。例えば、検知ロボット１０は、プログラムに従って、定期的に、予め定められた撮影位置で社会インフラを撮影し、サーバ２０に対して定期的に撮影画像データ１６２を送信する。また、検知ロボット１０は、無線端末３０の撮影指示に従って、カメラ１０３により画像を撮影し、撮影画像を無線端末３０へ送信する。 The
駆動制御部１０８は、検知ロボット１０の駆動を制御する。例えば、検知ロボット１０は、車輪などの移動機構を有しており、駆動制御部１０８は、駆動部１０９に制御信号を出力することにより、車輪の回転速度、検知ロボット１０の移動方向などを制御する。 The
駆動部１０９は、例えば車輪などの検知ロボット１０の移動機構を駆動させる。駆動部１０９は、駆動制御部１０８から出力される制御信号を受け付けて、制御信号に従って車輪を回転させる等の処理を行う。 The
図４は、無線端末３０の機能的な構成を示すブロック図である。図４に示すように、無線端末３０は、アンテナ３０１Ａと、アンテナ３０１Ｂと、近距離無線通信部３０２Ａと、遠距離無線通信部３０２Ｂと、入力操作受付部３０３と、ディスプレイ３０４と、スピーカ３０５と、記憶部３０６と、制御部３０７とを含む。 FIG. 4 is a block diagram illustrating a functional configuration of the
アンテナ３０１Ａは、検知ロボット１０などの無線機器から信号を受信して、受信信号を近距離無線通信部３０２Ａへ与える。近距離無線通信部３０２Ａは、無線ＬＡＮ、Ｂｌｕｅｔｏｏｔｈ（登録商標）などの近距離無線通信の規格に従って他の無線機器と通信するためのモジュールであり、無線端末３０が送受信する信号の変復調等を行い、受信信号を制御部３０７へ与える。 The
アンテナ３０１Ｂは、無線端末３０が発する信号を電波として空間へ放射する。また、アンテナ３０１Ｂは、空間から電波を受信して受信信号を遠距離無線通信部３０２Ｂへ与える。遠距離無線通信部３０２Ｂは、ＬＴＥ（Long Term Evolution）、３Ｇなどの移動体通信システムの規格に従って、無線端末３０が無線基地局６０と通信するため、アンテナ３０１Ｂを介して信号を送受信するための変復調処理などを行う。遠距離無線通信部３０２Ｂは、高周波回路などを含む無線通信用の通信モジュールであり、無線端末３０が送受信する無線信号の変復調や周波数変換を行い、受信信号を制御部３０７へ与える。 The
入力操作受付部３０３は、ユーザの入力操作を受け付けるための部材であり、例えば静電容量型のタッチパネルなどにより実現される。 The input
ディスプレイ３０４は、例えばＬＣＤ（Liquid Crystal Display）等によって実現され、制御部３０７の制御に従って、映像信号に基づき映像を表示する。例えば、ディスプレイ３０４は、無線端末３０がアンテナ３０１Ａ等を介して受信する画像データを表示する。 The
スピーカ３０５は、音声信号に基づき音声を出力する。
記憶部３０６は、フラッシュメモリ、ＲＡＭ等により構成され、無線端末３０が使用するデータおよびプログラムを記憶する。ある局面において、記憶部３０６は、端末識別情報３６１と、ユーザ識別情報３６２と、撮影画像データ３６３とを記憶する。The
The
端末識別情報３６１は、無線端末３０のそれぞれを識別可能な固有の情報である。ユーザ識別情報３６２は、無線端末３０を操作するユーザを識別する。撮影画像データ３６３は、無線端末３０が検知ロボット１０から受信した撮影画像を示す。 The
制御部３０７は、記憶部３０６に記憶される制御プログラムを読み込んで実行することにより、無線端末３０の動作を制御する。制御部３０７は、例えばプロセッサにより実現される。制御部３０７は、プログラムに従って動作することにより、検知制御部３７１と、画像データ送信部３７２と、解析結果表示部３７３としての機能を発揮する。 The
検知制御部３７１は、検知ロボット１０と通信することにより検知ロボット１０の動作を制御する。検知制御部３７１は、アンテナ３０１Ａを介して検知ロボット１０と通信し、検知ロボット１０に対し、社会インフラを撮影するよう撮影指示を示す信号を送信する。例えば、無線端末３０が検知ロボット１０に対して移動の指示を示す信号および撮影の指示を示す信号を送信することにより、検知ロボット１０がこれらの信号を受信してカメラ１０３等により社会インフラの撮影画像を取得する。無線端末３０は、検知ロボット１０から撮影画像データを受信して記憶部３０６に撮影画像データ３６３として記憶する。 The
画像データ送信部３７２は、記憶部３０６に記憶される撮影画像データ３６３を、無線基地局６０を介してサーバ２０へ送信する。送信された撮影画像データ３６３は、サーバ２０によって画像認識処理がなされ、社会インフラに異常が発生していると、異常の発生が検知される。 The image
解析結果表示部３７３は、サーバ２０から、社会インフラに異常が発生したと検知されたか否かの検知結果を、解析結果データとして無線基地局６０を介して受信する。 The analysis
無線端末３０は、これらの構成を有しているため、例えば、社会インフラの現場で視認等により点検する点検員の操作を受け付けて、検知ロボット１０により社会インフラの撮影画像を得るとともに、撮影画像をサーバ２０へ転送して、異常の発生の有無の検知結果をサーバ２０から受信することができる。そのため、社会インフラの現場に派遣されて視認等により異常の発生を確認する点検員は、その場でサーバ２０による検知結果を確認することができ、点検に伴う作業負担を軽減することができる。 Since the
図５は、サーバ２０の機能的な構成を示すブロック図である。図５に示すように、サーバ２０は、通信部２０２と、記憶部２０６と、制御部２０７とを含む。 FIG. 5 is a block diagram illustrating a functional configuration of the
通信部２０２は、サーバ２０が他の通信機器と通信するための変復調処理などを行う通信インターフェースである。通信部２０２は、検知ロボット１０から、無線通信装置５０を介して社会インフラの撮影画像データを受信する。サーバ２０が受信した撮影画像データは、撮影画像データ２６１として記憶部２０６に記憶される。サーバ２０は、通信部２０２を介して検知ロボット１０に対し社会インフラを撮影するよう指示することもできる。 The
サーバ２０は、通信部２０２を介して無線端末３０と通信する。サーバ２０は、無線端末３０から、社会インフラの撮影画像データを受信する。サーバ２０は、受信した撮影画像データに対し、画像認識処理を行って、社会インフラに異常が発生していることを検知したか否かを示す解析結果データを無線端末３０へ送信する。また、サーバ２０は、社会インフラを管理する事業に関わる者同士のプラットフォームとして機能しており、無線端末３０に対し、例えば他の作業者のコメントなどを送信する。 The
サーバ２０は、通信部２０２を介してインフラ管理事業者４０と通信する。サーバ２０は、撮影画像データ２６１に基づいて、社会インフラの撮影画像データに対して画像認識処理を行うことにより、社会インフラに異常が発生したことを検知する。サーバ２０は、社会インフラに異常が発生したことを検知した場合に、異常が発生したことを示す検知の結果を異常判定データとしてインフラ管理事業者４０へ送信する。サーバ２０は、異常が発生したと検知された撮影画像をインフラ管理事業者４０へ送信する。サーバ２０は、インフラ管理事業者４０から、フィードバック情報を受信する。 The
サーバ２０は、通信部２０２を介してロボット製造事業者８０と通信する。サーバ２０は、社会インフラを管理する事業に関わる者のプラットフォームとして機能しており、例えば、社会インフラの現場へ派遣される点検員に対して配信する広告情報をロボット製造事業者８０から受信する。サーバ２０は、例えば、広告情報を作業者に対して配信したことによる効果（例えば、広告情報の閲覧時間、広告情報に含まれるアドレスへのアクセス数など）をロボット製造事業者８０へ送信する。また、サーバ２０は、例えば、社会インフラの現場へ派遣される作業者に関する情報（使用機器、派遣箇所など）を、予め定められた個人情報の管理の基準に従ってロボット製造事業者８０へ送信する。 The
記憶部２０６は、ＨＤＤ（Hard Disk Drive）、ＲＡＭ等により構成され、サーバ２０が使用するプログラムを記憶し、サーバ２０が使用する各種のデータを蓄積する。ある局面において、記憶部２０６は、撮影画像データ２６１と、解析結果データ２６２と、ユーザ管理情報２６３と、コメントデータ２６４と、広告情報２６５とを記憶する。 The
撮影画像データ２６１は、社会インフラの撮影画像、撮影タイミングおよび撮影場所を含む。サーバ２０は、無線通信装置５０を介して検知ロボット１０から受信した情報を、社会インフラの撮影画像データ２６１として記憶部２０６に記憶させる。 The captured
解析結果データ２６２は、撮影画像それぞれについて、社会インフラに異常が発生したと検知されたか否かの検知結果を示す。サーバ２０は、無線通信装置５０を介して検知ロボット１０から社会インフラの撮影画像を受信すると、過去の撮影画像を記憶部２０６から読み出して、検知ロボット１０から受信した撮影画像と、記憶部２０６から読み出した過去の撮影画像とを比較することにより、社会インフラに異常が発生したことを検知する。サーバ２０は、検知ロボット１０から受信した撮影画像と、社会インフラに異常が発生したと検知したか否かを示すデータとを対応付けて解析結果データ２６２として記憶する。 The
ユーザ管理情報２６３は、サーバ２０が社会インフラを管理する事業に関わる者のためのプラットフォームとして機能する場合に、プラットフォームを利用するユーザの情報を示す。ユーザ管理情報２６３は、例えば、社会インフラを現場で視認により点検する点検者の情報を示す。 The
コメントデータ２６４は、サーバ２０が社会インフラを管理する事業に関わる者のためのプラットフォームとして機能する場合に、プラットフォームを利用するユーザによって投稿される文字情報（例えば、テキストデータ、絵文字など）を示す。コメントデータ２６４は、例えば、無線端末３０を操作するユーザが、検知ロボット１０から取得した社会インフラの撮影画像をサーバ２０へ投稿し、投稿された撮影画像に対する他のユーザのテキストによる書き込みなどを含む。 The
広告情報２６５は、広告に関する情報であり、例えば、サーバ２０がロボット製造事業者８０から検知ロボット１０に関する広告情報を受信する。 The
制御部２０７は、記憶部２０６に記憶される制御プログラムを読み込んで実行することにより、サーバ２０の動作を制御する。制御部２０７は、例えば複数のプロセッサによって実現される。制御部２０７は、プログラムに従って動作することにより、撮影画像データ受信部２７１と、画像認識処理部２７２と、解析結果送信部２７３と、フィードバック処理部２７４と、コメント処理部２７５と、広告配信部２７６として機能する。 The
より具体的には、撮影画像データ受信部２７１は、通信部２０２により、無線通信装置５０および無線端末３０などの外部の通信装置から撮影画像を受信する処理、および、受信した撮影画像と撮影画像が撮影された撮影タイミングと撮影画像が撮影された撮影場所とを対応付けて撮影画像データ２６１として記憶部２０６に記憶させる処理を行う。実施の形態１では、サーバ２０が検知ロボット１０から受信する撮影画像データに、撮影タイミングの情報と撮影場所の情報とが含まれている。 More specifically, the captured image
画像認識処理部２７２は、外部の装置から受信する撮影画像の撮影タイミングよりも過去に撮影された撮影画像を記憶部２０６から読み出して、受信された撮影画像と、記憶部２０６から読み出した、過去に撮影された撮影画像とを比較し、差分を算出する等の画像認識処理を行う。画像認識処理部２７２は、画像認識処理を行うことにより、撮影画像に示される社会インフラに発生したクラックなどを抽出して、社会インフラに異常が発生したことを検知する。画像認識処理部２７２は、記憶部２０６において、撮影画像に対応付けられる撮影位置ごとに、検知ロボット１０などの外部の装置から受信された撮影画像と、記憶部２０６に記憶される過去の撮影画像とを比較することにより、社会インフラを撮影した位置と対応付けて、社会インフラに異常が発生したことを検知する。 The image
解析結果送信部２７３は、画像認識処理部２７２の処理により、社会インフラに異常が発生したことが検知された場合に、検知の結果を示す解析結果データ２６２をインフラ管理事業者４０へ送信する。また、解析結果送信部２７３は、検知ロボット１０から撮影画像を取得する無線端末３０から撮影画像を受信した場合、無線端末３０から受信した撮影画像に基づいて画像認識処理部２７２によって検知が行われた結果を無線端末３０へ送信する。また、解析結果送信部２７３は、社会インフラに異常が発生したことが検知された撮影タイミングの撮影画像（および、画像認識処理部２７２による比較の対象となった過去の撮影画像）をインフラ管理事業者４０に対して送信する。解析結果送信部２７３は、画像認識処理部２７２による検知の結果と、社会インフラを撮影した位置とを対応付けて、インフラ管理事業者４０へ送信する。また、解析結果送信部２７３は、社会インフラに異常が発生したことが画像認識処理部２７２により検知されない場合は、検知の結果を、インフラ管理事業者４０などの外部の装置へ送信しないこととしてもよい。 The analysis
フィードバック処理部２７４は、インフラ管理事業者４０からフィードバック情報を受信する。インフラ管理事業者４０は、サーバ２０から送信される撮影画像を受信し、受信した撮影画像が、社会インフラに異常が発生した状態であるか否かの入力をインフラ管理事業者４０の操作者から受け付ける。インフラ管理事業者４０は、操作者から受け付けた操作内容を、フィードバック情報としてサーバ２０へ送信する。フィードバック処理部２７４は、このようにしてインフラ管理事業者４０から送信されるフィードバック情報を受信して、フィードバックの結果を撮影画像の識別情報と対応付けて解析結果データ２６２に含めて記憶部２０６により記憶する。また、画像認識処理部２７２は、外部の装置から受信する撮影画像と、撮影画像データ２６１として記憶される過去の撮影画像との比較による画像認識処理の際に、過去に撮影された撮影画像と対応付けられるフィードバック情報を記憶部２０６から読み出して、外部の装置から受信する撮影画像と、過去の撮影画像と、読み出したフィードバック情報とに基づいて、社会インフラに異常が発生したことを検知する。例えば、画像認識処理部２７２は、インフラ管理事業者４０の操作者により、社会インフラに異常が発生した状態であると入力された過去の撮影画像を優先して、画像認識処理を行うこととしてもよい。 The
コメント処理部２７５は、サーバ２０が社会インフラを管理する事業に関わる者のためのプラットフォームとして機能する場合に、プラットフォームを利用するユーザによって投稿される文字情報などを外部の装置から受信する処理と、受信した文字情報をコメントデータ２６４として記憶部２０６に記憶させる処理など、コメントの送受信のための処理を行う。例えば、コメント処理部２７５は、社会インフラの維持管理についてのユーザのコメントや、検知ロボット１０によって撮影される撮影画像が、異常が発生しているか否かについてのユーザのコメントなどを外部の装置から受け付けてコメントデータ２６４として記憶する。 When the
広告配信部２７６は、ロボット製造事業者８０から提供される広告情報を外部の装置へ配信する。広告配信部２７６は、例えばユーザ管理情報２６３に示されるユーザに対して広告情報を配信する。 The
図６は、社会インフラの維持管理を行うインフラ管理事業者の情報処理システムであるインフラ管理事業者４０の構成を示すブロック図である。図６に示すように、インフラ管理事業者４０は、通信部４０２と、入力操作受付部４０３と、ディスプレイ４０４と、記憶部４０６と、制御部４０７とを含む。 FIG. 6 is a block diagram showing a configuration of an
通信部４０２は、サーバ２０が他の通信機器と通信するための変復調処理などを行う通信インターフェースである。通信部４０２は、サーバ２０から、社会インフラに異常が発生したことを示す検知の結果を異常判定データとして受信する。 The
入力操作受付部４０３は、ユーザの入力操作を受け付けるための部材であり、例えばキーボード、ポインティングデバイス、タッチパネルその他の機器により実現される。入力操作受付部４０３は、例えば、サーバ２０により、社会インフラに異常が発生したと検知された画像を視認した操作者から、対応が必要であるか、不要であるかを判断した結果の入力を受け付ける。インフラ管理事業者４０は、入力操作受付部４０３により受け付けた入力操作を、フィードバック情報として通信部４０２によりサーバ２０へ送信する。 The input
ディスプレイ４０４は、例えばＬＣＤ等によって実現され、制御部４０７の制御に従って、映像信号に基づき映像を表示する。例えば、ディスプレイ４０４は、インフラ管理事業者４０がサーバ２０から受信する異常判定データと、異常が発生したと検知された撮影画像とを表示する。 The
記憶部４０６は、フラッシュメモリ、ＲＡＭ等により構成され、インフラ管理事業者４０が使用するデータおよびプログラムを記憶する。ある局面において、記憶部４０６は、事業者識別情報４６１と、派遣ユーザ情報４６２とを記憶する。 The
事業者識別情報４６１は、インフラ管理事業者４０のそれぞれを識別可能な固有の情報である。派遣ユーザ情報４６２は、社会インフラに異常が発生している場合に派遣する対象となる点検員などを識別する情報である。 The business
制御部４０７は、記憶部４０６に記憶される制御プログラムを読み込んで実行することにより、インフラ管理事業者４０の動作を制御する。制御部４０７は、例えばプロセッサにより実現される。制御部４０７は、プログラムに従って動作することにより、異常判定データ受信部４７１と、フィードバック送信部４７２と、派遣指示送信部４７３としての機能を発揮する。 The
より具体的には、異常判定データ受信部４７１は、サーバ２０から、社会インフラに異常が発生したことを示す検知の結果を異常判定データとして受信する。 More specifically, the abnormality determination
フィードバック送信部４７２は、フィードバック情報をサーバ２０へ送信する。
派遣指示送信部４７３は、社会インフラの現場へ点検員を派遣するために、点検員と対応付けられた無線端末３０に対し、派遣の指示を示す信号を送信する。例えば、異常が発生したと検知された撮影画像の撮影位置（社会インフラの位置）に最も近い無線端末３０の点検者に対して派遣指示を送信する。The
The dispatch
＜データ構造＞
図７は、サーバ２０に記憶されるユーザ管理情報２６３および解析結果データ２６２のデータ構造を示す図である。図７を参照して、ユーザ管理情報２６３の各レコードは、事業者識別情報２６３Ａと、登録ユーザ識別情報２６３Ｂと、無線端末識別情報２６３Ｃとを対応付けたものである。<Data structure>
FIG. 7 is a diagram illustrating a data structure of the
事業者識別情報２６３Ａは、社会インフラの維持管理を行うインフラ管理事業者を識別す。登録ユーザ識別情報２６３Ｂは、サーバ２０に登録しているユーザを特定するための情報である。例えば、登録ユーザ識別情報２６３Ｂは、サーバ２０が提供するプラットフォームへの登録を受け付けたユーザそれぞれの名称を示す。無線端末識別情報２６３Ｃは、登録ユーザ識別情報２６３Ｂに示されるユーザと対応づけられている無線端末３０を示す。 The business
解析結果データ２６２の各レコードは、撮影画像識別情報２６２Ａと、異常検知結果２６２Ｂと、フィードバック結果２６２Ｃとを対応付けたものである。 Each record of the
撮影画像識別情報２６２Ａは、サーバ２０の画像認識処理部２７２による画像認識処理の対象となった撮影画像を識別する情報であり、例えば、撮影画像のファイル名である。 The photographed
異常検知結果２６２Ｂは、撮影画像に対し、画像認識処理部２７２によって画像認識処理がなされることにより、社会インフラに異常が発生したことを検知したか否かの検知の結果を示す。図７において、例えば、異常検知結果「ＯＫ」は、画像認識処理部２７２の処理により、社会インフラに異常が発生したと検知されない場合を示し、異常検知結果「ＮＧ」は、社会インフラに異常が発生したと検知された場合を示す。 The abnormality detection result 262B indicates the result of detection as to whether or not an abnormality has occurred in the social infrastructure due to the image recognition processing performed on the captured image by the image
フィードバック結果２６２Ｃは、サーバ２０がインフラ管理事業者４０から受信するフィードバック情報に示される、インフラ管理事業者４０の操作者からのフィードバックの結果である。図７において、例えば、フィードバック結果「ＯＫ」は、インフラ管理事業者４０の操作者が、社会インフラに異常が発生していない状態であると判断したことを示し、フィードバック結果「ＮＧ」は、社会インフラに異常が発生している状態であると判断したことを示す。 The
＜動作＞
図８を参照して、社会インフラの維持管理システムの動作を説明する。<Operation>
The operation of the social infrastructure maintenance management system will be described with reference to FIG.
図８は、社会インフラの維持管理システムを構成する各機器の動作を示すフローチャートである。 FIG. 8 is a flowchart showing the operation of each device constituting the social infrastructure maintenance management system.
ステップＳ１０１において、検知ロボット１０は、予め定められたタイミング（予め定められた撮影時刻）に従って、予め定められた移動範囲内を移動して、定期的に社会インフラを撮影する。検知ロボット１０は、社会インフラの異常を検知するために必要な画像解像度が得られるように、移動により撮影位置を変えながら社会インフラを撮影する。 In step S101, the
ステップＳ１０３において、検知ロボット１０は、無線通信装置５０を介して、撮影日時と、撮影画像と、撮影場所とを対応付けた撮影画像データをサーバ２０へ送信する。 In step S <b> 103, the
ステップＳ２０１において、サーバ２０は、検知ロボット１０から送信された撮影画像データを受信して、撮影画像データ２６１として記憶部２０６に記憶させる。 In step S <b> 201, the
ステップＳ２０３において、サーバ２０は、検知ロボット１０から受信した撮影画像データの撮影場所と撮影日時とに基づいて、過去に撮影された撮影画像を記憶部２０６から読み出す。例えば、サーバ２０は、撮影画像データの撮影日時の情報に基づいて、２週間前や一か月前など、過去に撮影された撮影画像を記憶部２０６から読み出す。サーバ２０は、検知ロボット１０から受信した撮影画像と、読み出した過去の撮影画像とを比較して、画像認識処理を行うことにより、社会インフラに異常が発生しているか否かを判定する。サーバ２０は、社会インフラに異常が発生していると検知した場合に、インフラ管理事業者４０に対し、異常が発生したことを示す検知の結果である異常判定データと、異常が発生していると判定された撮影画像とを送信する。 In step S <b> 203, the
ステップＳ４０１において、インフラ管理事業者４０は、サーバ２０から異常判定データと、異常が発生していると判定された撮影画像とを受信して、受信した撮影画像と、社会インフラに異常が発生したと検知されたことを示すメッセージをディスプレイ４０４に表示する。インフラ管理事業者４０は、操作者から、ディスプレイ４０４に表示された撮影画像が、点検者の派遣が必要である等の何らかの対応が必要であるか不要であるかの入力操作を受け付ける。インフラ管理事業者４０は、操作者から受け付けた操作内容をフィードバック情報としてサーバ２０へ送信する。 In step S401, the
ステップＳ２０５において、サーバ２０は、インフラ管理事業者４０からフィードバック情報を受信して、解析結果データ２６２のフィードバック結果２６２Ｃを更新する。 In step S205, the
＜実施の形態１のまとめ＞
本実施の形態で説明した、社会インフラの維持管理システムは、例えば、管理対象の社会インフラである橋梁やトンネルにレールを敷き、レール上を、カメラやセンサを搭載した移動体が走行することで、社会インフラの外観および内部の変化のデータを、刻一刻と取得して、取得されたデータを、無線通信装置５０を経由して検知ロボット１０からサーバ２０に送信する。サーバ２０は、検知ロボット１０によって取得されたデータを蓄積する。サーバ２０は、画像解析などのプログラムを実行することにより、検知ロボット１０から取得されるデータと、任意のタイミングにおける過去に取得されたデータとを比較することで、社会インフラの変化を検知する。<Summary of Embodiment 1>
The social infrastructure maintenance and management system described in the present embodiment is, for example, that a rail or a tunnel, which is a social infrastructure to be managed, is laid, and a mobile object equipped with a camera or sensor travels on the rail. The data of the external appearance and internal change of the social infrastructure are acquired every moment, and the acquired data is transmitted from the
サーバ２０は、画像認識処理により、社会インフラの変化の量が閾値を超える場合は、社会インフラに変化があり、異常が発生したものとして、検知ロボット１０が取得したデータをインフラ管理事業者４０へ送信する。 When the amount of change in the social infrastructure exceeds the threshold due to the image recognition processing, the
インフラ管理事業者４０の操作者は、検知ロボット１０が取得するデータのうち、サーバ２０において異常が検知されたデータを確認し、点検員を派遣するなどの何らかの対応が必要か不要であるかを判断し、判断結果をインフラ管理事業者４０に入力する。インフラ管理事業者４０は、フィードバック情報をサーバ２０へ送信する。サーバ２０は、インフラ管理事業者４０から受信したフィードバック情報を記憶部２０６に記憶させる。 The operator of the
これにより、サーバ２０は、インフラ管理事業者４０から受信するフィードバック情報を用いて画像認識処理を行うことにより、社会インフラの変化を抽出する精度を徐々に向上させることができる。 Thereby, the
また、インフラ管理事業者４０を操作する、社会インフラの維持管理をする事業者にとっては、社会インフラに点検員を派遣して点検をする機会を、サーバ２０において異常と検知された場合にすることができ、人件費など、社会インフラの維持管理に要する負担を省力化することができる。 In addition, for the operator who operates the
また、インフラ管理事業者４０において、サーバ２０から送信される撮影画像に対してフィードバック情報をサーバ２０へ送信することにより、例えば社会インフラの維持管理の熟練者による集中管理が可能となる。すなわち、社会インフラを維持管理する人材が不足している場合においても、比較的少ない人員で、熟練者の判断による管理をすることができる。 In addition, by sending feedback information to the
また、サーバ２０において、撮影画像データ２６１を蓄積していき、解析結果データ２６２においてインフラ管理事業者４０からのフィードバック情報を反映させることとしているため、ビッグデータの学習機能により、さらに社会インフラの異常の検知の精度を向上させることができる。これにより、社会インフラの維持管理システムの導入期には、管理者の判断などを要したとしても、データの蓄積量が増加するに従って、管理者の負担を省力化することができる。また、データの蓄積量が増加することにより、他の撮影地点の撮影画像を新たに管理対象として追加した場合に、追加分の撮影地点の撮影画像に対しても、精度が向上した画像認識処理を行うことが期待できるため、データの蓄積に伴って、管理対象となる社会インフラを容易に拡大することができる。 In addition, since the
＜実施の形態２＞
別の実施の形態にかかる、社会インフラの維持管理システムについて説明する。実施の形態１のサーバ２０は、社会インフラの維持管理の事業に関わる者のプラットフォームとして機能するものとして説明した。このように、社会インフラの撮影画像をサーバ２０に集積することに伴って、サーバ２０は、社会インフラの現場で作業をする作業者同士が、サーバ２０に蓄積される社会インフラの撮影画像を介してコミュニケーションする機能を提供することができる。そのため、サーバ２０は、撮影画像データ２６１、解析結果データ２６２、およびコメントデータ２６４の蓄積に伴って、以下のような機能を他の装置に対して提供することもできる。<
A social infrastructure maintenance management system according to another embodiment will be described. The
（１）クチコミ情報の解析をする機能
サーバ２０は、例えば、社会インフラの現場で点検をする点検者のコメントを解析することにより、検知ロボット１０に要望する機能、検知ロボット１０に対する不満など、検知ロボット１０に関する情報を分析することができる。このような検知ロボット１０に関する情報は、検知ロボット１０の製造業者であるロボット製造事業者８０にとっては有益なものも含まれるため、例えばロボット製造事業者８０に対し、コメントデータ２６４に基づくクチコミ情報の解析サービスを提供することができる。(1) Function for analyzing word-of-mouth information The
（２）端末からの撮影画像の投稿により社会インフラの老朽化の有無を判定する機能
サーバ２０は、撮影画像データ２６１および解析結果データ２６２を蓄積することにより、画像認識処理部２７２による画像認識処理の精度を向上させることが期待されるため、例えば、社会インフラの現場で点検をする点検者が無線端末３０によって撮影した画像を無線端末３０から受け付けて、社会インフラの異常の有無を判定するサービスを提供することができる。この場合、点検者は、無線端末３０によって社会インフラを撮影してサーバ２０へ送信することで、サーバ２０による画像認識処理を利用することができるため、点検者のトレーニングに伴うコストの増加を抑えることが期待できる。(2) Function for Determining Presence or Absence of Social Infrastructure by Posting Photographed Image from Terminal The
本実施の形態に係る社会インフラの維持管理システムの各機器は、プロセッサと、その上で実行されるプログラムにより実現される。本実施の形態を実現するプログラムは、通信インターフェースを介してネットワークを利用した送受信等により提供される。 Each device of the social infrastructure maintenance management system according to the present embodiment is realized by a processor and a program executed thereon. A program for realizing the present embodiment is provided by transmission / reception using a network via a communication interface.
今回開示された実施の形態はすべての点で例示であって制限的なものでないと考えられるべきである。この発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。 The embodiment disclosed this time should be considered as illustrative in all points and not restrictive. The scope of the present invention is defined by the terms of the claims, rather than the description above, and is intended to include any modifications within the scope and meaning equivalent to the terms of the claims.
１０ 検知ロボット、２０ サーバ、３０ 無線端末、４０ インフラ管理事業者、５０ 無線通信装置、６０ 無線基地局、７０ ネットワーク、８０ ロボット製造事業者。 10 detection robots, 20 servers, 30 wireless terminals, 40 infrastructure management operators, 50 wireless communication devices, 60 wireless base stations, 70 networks, 80 robot manufacturers.
Claims (5)
Translated fromJapanese外部の装置とデータを送受信するように構成された通信部と、
管理対象の社会インフラを定期的に撮影する検知用の装置により撮影された前記社会インフラの撮影画像を記憶するように構成された記憶部と、
前記サーバ装置の動作を制御するように構成された制御部とを備え、
前記制御部は、
前記通信部により、外部の通信装置から前記撮影画像を受信して、受信された前記撮影画像と、当該撮影画像の撮影タイミングとを対応付けて前記記憶部に記憶させるための画像受信部と、
前記受信された前記撮影画像の撮影タイミングよりも過去に撮影された前記撮影画像を前記記憶部から読み出して、前記受信された前記撮影画像と、読み出した前記過去に撮影された前記撮影画像とを比較することにより、前記社会インフラに異常が発生したことを検知する画像認識部と、
前記社会インフラに異常が発生したことが検知された場合に、前記検知の結果を、外部の情報処理装置へ送信する送信部とを含む、サーバ装置。A server device,
A communication unit configured to send and receive data to and from an external device;
A storage unit configured to store a photographed image of the social infrastructure photographed by a detection device that periodically photographs the social infrastructure to be managed;
A controller configured to control the operation of the server device,
The controller is
An image receiving unit for receiving the captured image from an external communication device by the communication unit, and storing the received captured image in association with a capturing timing of the captured image in the storage unit;
The captured image captured in the past from the capturing timing of the received captured image is read from the storage unit, and the received captured image and the read captured image captured in the past are read out. By comparing, an image recognition unit that detects that an abnormality has occurred in the social infrastructure,
A server device, comprising: a transmission unit that transmits a result of the detection to an external information processing device when it is detected that an abnormality has occurred in the social infrastructure.
前記制御部は、さらに、前記外部の情報処理装置から、前記送信された撮影画像が、前記社会インフラに異常が発生した状態であるか否かを示すフィードバック情報を受信して、受信した前記フィードバック情報と、前記外部の情報処理装置に送信した前記撮影画像とを対応付けて前記記憶部に記憶させるフィードバック処理部を含み、
前記画像認識部は、前記受信された前記撮影画像の撮影タイミングよりも過去に撮影された前記撮影画像と、前記フィードバック情報とを前記記憶部から読み出して、前記受信された前記撮影画像と、前記過去に撮影された撮影画像と、前記読み出したフィードバック情報とに基づいて、前記社会インフラに異常が発生したことを検知するように構成される、請求項１に記載のサーバ装置。The transmission unit is configured to transmit the captured image at the capturing timing at which the abnormality is detected to the external information processing apparatus,
The control unit further receives feedback information indicating whether or not the transmitted captured image is in a state where an abnormality has occurred in the social infrastructure from the external information processing apparatus, and the received feedback A feedback processing unit that associates the information with the captured image transmitted to the external information processing apparatus and stores the information in the storage unit;
The image recognition unit reads the captured image captured in the past from the capturing timing of the received captured image and the feedback information from the storage unit, and the received captured image, The server device according to claim 1, wherein the server device is configured to detect that an abnormality has occurred in the social infrastructure based on a captured image captured in the past and the read feedback information.
前記画像受信部は、前記検知用の装置が前記社会インフラを撮影した位置を示す撮影位置情報を受信し、前記撮影画像と、前記撮影画像の撮影タイミングと、前記撮影画像を撮影した撮影位置情報とを対応付けて前記記憶部に記憶させるよう構成されており、
前記画像認識部は、前記撮影位置情報に示される位置ごとに、前記受信された撮影画像と、前記過去に撮影された前記撮影画像とを比較することにより、前記社会インフラを撮影した位置と対応付けて前記社会インフラに異常が発生したことを検知するように構成されており、
前記送信部は、前記検知の結果と、前記社会インフラを撮影した位置とを前記外部の情報処理装置へ送信するように構成されている、請求項１から３のいずれか１項に記載のサーバ装置。The detection device is configured to move within a predetermined movement range and photograph the social infrastructure,
The image receiving unit receives shooting position information indicating a position where the detection device has shot the social infrastructure, and takes the shot image, shooting timing of the shot image, and shooting position information of the shot image. Are associated with each other and stored in the storage unit,
The image recognition unit corresponds to the position where the social infrastructure is captured by comparing the received captured image with the captured image captured in the past for each position indicated in the capturing position information. In addition, it is configured to detect the occurrence of anomalies in the social infrastructure,
The server according to any one of claims 1 to 3, wherein the transmission unit is configured to transmit a result of the detection and a position where the social infrastructure is captured to the external information processing apparatus. apparatus.
前記サーバ装置が、外部の通信装置から前記社会インフラの撮影画像を受信して、受信された前記撮影画像と、当該撮影画像の撮影タイミングとを対応付けて前記サーバ装置のメモリに記憶させるステップと、
前記受信された前記撮影画像の撮影タイミングよりも過去に撮影された前記撮影画像を前記メモリから読み出して、前記受信される前記撮影画像と、読み出した前記過去に撮影された前記撮影画像とを比較することにより、前記社会インフラに異常が発生したことを検知するステップと、
前記社会インフラに異常が発生したことが前記検知するステップにより検知された場合に、前記検知の結果を、外部の情報処理装置へ送信するステップとを含む、方法。A method for maintaining and managing a social infrastructure to be managed by a server device,
The server device receiving a photographed image of the social infrastructure from an external communication device, and storing the received photographed image and the photographing timing of the photographed image in association with each other in the memory of the server device; ,
The captured image captured in the past from the capturing timing of the received captured image is read from the memory, and the received captured image is compared with the read captured image captured in the past. Detecting that an abnormality has occurred in the social infrastructure,
And a step of transmitting the result of the detection to an external information processing apparatus when it is detected in the detecting step that an abnormality has occurred in the social infrastructure.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014216480AJP2016086237A (en) | 2014-10-23 | 2014-10-23 | Server device and method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014216480AJP2016086237A (en) | 2014-10-23 | 2014-10-23 | Server device and method |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2016086237Atrue JP2016086237A (en) | 2016-05-19 |
Family
ID=55971906
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2014216480APendingJP2016086237A (en) | 2014-10-23 | 2014-10-23 | Server device and method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2016086237A (en) |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110087036A (en)* | 2019-04-29 | 2019-08-02 | 国家电网有限公司 | A kind of method and system for electric power tunnel safety monitoring |
| JP2019208197A (en)* | 2017-11-30 | 2019-12-05 | 株式会社コンピュータシステム研究所 | Monitoring device, monitoring program, storage medium, and monitoring method |
| CN110722548A (en)* | 2018-07-17 | 2020-01-24 | 富士施乐株式会社 | Robot control system, robot device, and storage medium |
| JPWO2021130921A1 (en)* | 2019-12-25 | 2021-07-01 | ||
| JP2021158430A (en)* | 2020-03-25 | 2021-10-07 | 三菱電機株式会社 | Remote maintenance support system, remote maintenance support device, and remote maintenance support device operation machine |
| JP2022543993A (en)* | 2019-08-13 | 2022-10-17 | インターナショナル・ビジネス・マシーンズ・コーポレーション | Methods, systems, and programs for determining the condition of infrastructure within an area of interest |
| KR20220142865A (en)* | 2021-04-15 | 2022-10-24 | 주식회사 솔루더스 | System and method for monitoring unmanned-office using mobile robot |
| CN115509222A (en)* | 2021-06-03 | 2022-12-23 | 洼田望 | Information processing method, storage medium and information processing device |
| WO2024101046A1 (en)* | 2022-11-10 | 2024-05-16 | 富士フイルム株式会社 | Image display device, method for operating image display device, and program for operating image display device |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002162361A (en)* | 2000-11-22 | 2002-06-07 | Matsushita Electric Ind Co Ltd | Structural damage detection device |
| JP2003101995A (en)* | 2001-09-20 | 2003-04-04 | Fuji Xerox Co Ltd | Image distribution method, image distribution device, and system therefor |
| JP2004363937A (en)* | 2003-06-04 | 2004-12-24 | Toshiba Corp | Camera monitoring system and communication control method therefor |
| JP2006033009A (en)* | 2004-07-12 | 2006-02-02 | Mitsubishi Electric Corp | Video processing apparatus and video surveillance processing system using the same |
| JP2013164786A (en)* | 2012-02-13 | 2013-08-22 | Fujitsu Ltd | Structure photographing support method, structure photographing support program and structure photographing support device |
| JP2013174983A (en)* | 2012-02-24 | 2013-09-05 | Mitsubishi Electric Corp | Reservoir dynamic state monitoring system |
- 2014
- 2014-10-23JPJP2014216480Apatent/JP2016086237A/enactivePending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002162361A (en)* | 2000-11-22 | 2002-06-07 | Matsushita Electric Ind Co Ltd | Structural damage detection device |
| JP2003101995A (en)* | 2001-09-20 | 2003-04-04 | Fuji Xerox Co Ltd | Image distribution method, image distribution device, and system therefor |
| JP2004363937A (en)* | 2003-06-04 | 2004-12-24 | Toshiba Corp | Camera monitoring system and communication control method therefor |
| JP2006033009A (en)* | 2004-07-12 | 2006-02-02 | Mitsubishi Electric Corp | Video processing apparatus and video surveillance processing system using the same |
| JP2013164786A (en)* | 2012-02-13 | 2013-08-22 | Fujitsu Ltd | Structure photographing support method, structure photographing support program and structure photographing support device |
| JP2013174983A (en)* | 2012-02-24 | 2013-09-05 | Mitsubishi Electric Corp | Reservoir dynamic state monitoring system |
Cited By (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP7503258B2 (en) | 2017-11-30 | 2024-06-20 | 株式会社コンピュータシステム研究所 | Monitoring device, monitoring program, storage medium, and monitoring method |
| JP2019208197A (en)* | 2017-11-30 | 2019-12-05 | 株式会社コンピュータシステム研究所 | Monitoring device, monitoring program, storage medium, and monitoring method |
| CN110722548A (en)* | 2018-07-17 | 2020-01-24 | 富士施乐株式会社 | Robot control system, robot device, and storage medium |
| CN110087036A (en)* | 2019-04-29 | 2019-08-02 | 国家电网有限公司 | A kind of method and system for electric power tunnel safety monitoring |
| JP2022543993A (en)* | 2019-08-13 | 2022-10-17 | インターナショナル・ビジネス・マシーンズ・コーポレーション | Methods, systems, and programs for determining the condition of infrastructure within an area of interest |
| JP7688459B2 (en) | 2019-08-13 | 2025-06-04 | インターナショナル・ビジネス・マシーンズ・コーポレーション | Method, system and program for determining the condition of infrastructure within a target area |
| JPWO2021130921A1 (en)* | 2019-12-25 | 2021-07-01 | ||
| JP2021158430A (en)* | 2020-03-25 | 2021-10-07 | 三菱電機株式会社 | Remote maintenance support system, remote maintenance support device, and remote maintenance support device operation machine |
| KR20220142865A (en)* | 2021-04-15 | 2022-10-24 | 주식회사 솔루더스 | System and method for monitoring unmanned-office using mobile robot |
| KR102592291B1 (en)* | 2021-04-15 | 2023-10-20 | 주식회사 솔루더스 | System and method for monitoring unmanned-office using mobile robot |
| CN115509222B (en)* | 2021-06-03 | 2024-03-12 | 洼田望 | Information processing method, storage medium, and information processing apparatus |
| CN115509222A (en)* | 2021-06-03 | 2022-12-23 | 洼田望 | Information processing method, storage medium and information processing device |
| WO2024101046A1 (en)* | 2022-11-10 | 2024-05-16 | 富士フイルム株式会社 | Image display device, method for operating image display device, and program for operating image display device |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2016086237A (en) | Server device and method | |
| WO2020034931A1 (en) | Data management method for laser gas detector, and data management terminal | |
| CN104166780B (en) | For recording and handling the mobile device and computer implemented method of data | |
| JP7582799B2 (en) | On-site support device and on-site support device system | |
| JP2013140418A (en) | Patrol inspection system and management server for power facility apparatus | |
| KR20120111145A (en) | Method and system for plant management by augmentation reality | |
| US20150099531A1 (en) | Inspecting equipment of a power system | |
| CN102759687A (en) | Live-action acquisition and processing method for fault of power system | |
| AU2017225040B2 (en) | Lightning strike inconsistency aircraft dispatch mobile disposition tool | |
| CN111179461A (en) | BIM (building information modeling) -based routing inspection record generation method and equipment and storage medium | |
| KR101800297B1 (en) | Outside crack of concrete structures detection system utilizing flight | |
| JP6612685B2 (en) | Measurement support apparatus and measurement support method | |
| US11277591B2 (en) | Surveillance system, surveillance network construction method, and program | |
| CN108492396A (en) | The manual inspection system and 5G micro-base station equipment of 5G micro-base stations | |
| Nasimi et al. | Development and implementation of a laser–camera–UAV System to measure total dynamic transverse displacement | |
| CN107730652A (en) | A kind of cruising inspection system, method and device | |
| JP2019079303A (en) | Road facility inspection system, road facility inspection method, and server used therefor | |
| JP7688867B2 (en) | Remote Support System | |
| KR102372560B1 (en) | Method and Apparatus for Managing the Vehicle Image | |
| KR20140056674A (en) | Commnication service system, method and apparatus for supporting process of accident in the system | |
| JP2013220917A (en) | Technological support system of elevator | |
| KR102639250B1 (en) | Server, method and system for providing safety management monitoring services related to construction sites | |
| CN107705053A (en) | A kind of estate management operation automatic monitoring method and system | |
| JP7460031B2 (en) | Elevator system and report generation device | |
| JP2015031628A (en) | Telemetry system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal | Free format text:JAPANESE INTERMEDIATE CODE: A131 Effective date:20160216 | |
| A02 | Decision of refusal | Free format text:JAPANESE INTERMEDIATE CODE: A02 Effective date:20160920 |