WO2019207695A1 - Transfer device, transfer system, transfer method, and program - Google Patents

Abstract

According to the present invention, when data received from a transmission device is to be transferred to a reception device, if the received data does not meet the requirements of the reception device, data meeting these requirements is instead provided to the reception device. A reception unit (304) of a transfer device (130) receives time-series data from a transmission device. A determination unit (303) determines data transmission conditions by exchanging information with a reception device. A processing unit (306) processes the data in accordance with the determined transmission conditions. A transmission unit (307) transmits the processed data to the reception device if real-time data transfer is performed. If real-time data transfer is not performed, then a storage unit stores the data as time-series data.

Description

Translated fromJapanese

転送装置、転送システム、転送方法、及びプログラムTransfer device, transfer system, transfer method, and program

　本発明は、データを転送する技術に関する。The present invention relates to a technique for transferring data.

　データを転送する技術が知られている。例えば、特許文献１には、ネットワークから受信したストリームを外部機器にリアルタイムに伝送して記録する技術が記載されている。A technology for transferring data is known. For example,Patent Document 1 describes a technique for transmitting and recording a stream received from a network to an external device in real time.

特開２００６－２４６２４５号公報JP 2006-246245 A

　送信装置から受信したデータを受信装置に転送する場合、受信したデータをそのまま受信装置に送信すると、受信装置がそのデータ形式に対応していないときはデータを処理できない場合がある。また、送信装置から受信したデータのデータ量が、受信装置が所望するデータ量より大きい場合、受信したデータをそのまま受信装置に送信すると、受信装置との間の通信量が無駄に増加し、データの伝送が遅延してしまう。
　本発明は、送信装置から受信したデータを受信装置に転送する場合において、受信したデータが受信装置の要求に合わない場合でも、この要求に応じたデータを受信装置に提供することを目的とする。When transferring data received from a transmitting apparatus to the receiving apparatus, if the received data is transmitted to the receiving apparatus as it is, the data may not be processed when the receiving apparatus does not support the data format. In addition, when the amount of data received from the transmission device is larger than the amount of data desired by the reception device, if the received data is transmitted as it is to the reception device, the amount of communication with the reception device increases unnecessarily, and the data Will be delayed.
An object of the present invention is to provide data to a receiving apparatus in response to the request even when the data received from the transmitting apparatus is transferred to the receiving apparatus, even if the received data does not meet the request of the receiving apparatus. .

　本発明は、送信装置から時系列に沿ったデータを受信する受信部と、受信装置と情報をやり取りすることにより前記データの送信条件を決定する決定部と、前記決定部により決定された前記送信条件に応じて、前記データを加工する加工部と、前記データをリアルタイムで転送する場合には、前記加工部により加工された前記データを前記受信装置に送信する送信部と、前記データを前記リアルタイムで転送しない場合には、前記データを前記時系列に沿って記憶する記憶部とを備える転送装置を提供する。The present invention includes a receiving unit that receives data in time series from a transmitting device, a determining unit that determines a transmission condition of the data by exchanging information with the receiving device, and the transmission determined by the determining unit. A processing unit that processes the data according to conditions, a transmission unit that transmits the data processed by the processing unit to the receiving device when the data is transferred in real time, and the data in the real time In the case where the data is not transferred, a transfer device including a storage unit that stores the data along the time series is provided.

　前記記憶部は、前記データを前記リアルタイムで転送する場合には、前記データが前記受信装置に送信された後、前記データの複製を記憶してもよい。In the case where the data is transferred in real time, the storage unit may store a copy of the data after the data is transmitted to the receiving device.

　前記転送装置は、前記データの先頭には、前記データをリアルタイムで転送するか否かを示すリアルタイム情報が付加され、前記受信部により前記データの前記先頭が受信されると、前記リアルタイム情報に基づいて前記データを前記リアルタイムで転送するか否かを判定する判定部をさらに備え、前記加工部は、前記判定部により前記データを前記リアルタイムで転送すると判定された場合には、前記データの受信が完了する前に、前記受信されたデータの加工を開始し、前記受信されたデータを順次加工し、前記送信部は、前記判定部により前記データを前記リアルタイムで転送すると判定された場合には、前記データの受信が完了する前に、前記加工されたデータの送信を開始し、前記加工されたデータを順次送信してもよい。In the transfer device, real-time information indicating whether or not to transfer the data in real time is added to the head of the data, and when the head of the data is received by the receiving unit, based on the real-time information A determination unit that determines whether to transfer the data in real time, and the processing unit receives the data when the determination unit determines to transfer the data in real time. Before completion, start processing the received data, sequentially process the received data, and when the transmission unit determines to transfer the data in real time by the determination unit, Before the reception of the data is completed, transmission of the processed data may be started and the processed data may be transmitted sequentially.

　前記記憶部は、前記リアルタイム情報と、前記データの識別子とを対応付けて記憶し、前記データの前記先頭には、前記リアルタイム情報に代えて前記識別子が付加され、前記判定部は、前記データの前記先頭に付加された前記識別子と対応付けて前記記憶部に記憶された前記リアルタイム情報に基づいて、前記データを前記リアルタイムで転送するか否かを判定してもよい。The storage unit stores the real-time information and the identifier of the data in association with each other, the identifier is added to the head of the data instead of the real-time information, and the determination unit Whether or not to transfer the data in real time may be determined based on the real-time information stored in the storage unit in association with the identifier added to the head.

　前記データは、動画を示す動画データであり、前記受信装置は、前記動画データにより示される前記動画を表示する表示装置を有し、前記情報は、前記表示装置が対応する解像度又はフレームレートを含み、前記加工部は、前記解像度又は前記フレームレートに応じて、前記動画データの解像度又はフレームレートを変更してもよい。The data is moving image data indicating a moving image, and the receiving device includes a display device that displays the moving image indicated by the moving image data, and the information includes a resolution or a frame rate corresponding to the display device. The processing unit may change the resolution or frame rate of the moving image data according to the resolution or the frame rate.

　前記受信装置は、前記データを指定された時間スケールで表示する表示装置を有し、前記情報は、前記時間スケールを含み、前記加工部は、前記時間スケールに応じて、前記データを間引いてもよい。The receiving device includes a display device that displays the data on a designated time scale, the information includes the time scale, and the processing unit may thin the data according to the time scale. Good.

　前記情報は、前記受信装置との間の通信の状況を含み、前記加工部は、前記通信の状況に応じて、前記データを間引いてもよい。The information may include a status of communication with the receiving device, and the processing unit may thin out the data according to the status of the communication.

　前記送信装置から送信された前記データの最後には、前記最後であることを示す最後情報が付加され、前記転送装置は、前記最後情報が受信されると、前記データの受信が完了したと判定する判定部をさらに備え、前記送信部は、前記判定部により前記データの受信が完了したと判定されると、前記記憶部に記憶された前記データを所定の処理部に送信してもよい。Last information indicating the end is added to the end of the data transmitted from the transmission device, and when the last information is received, the transfer device determines that reception of the data is completed. The transmission unit may further transmit the data stored in the storage unit to a predetermined processing unit when the determination unit determines that the reception of the data is completed.

　前記送信装置により送信された前記データは、センサにより検出された複数の検出量のうち少なくとも１つをそれぞれ含む複数のデータブロックにより構成され、前記複数のデータブロックの各々には、当該データブロックに含まれる前記少なくとも１つの検出量の数を示す数情報が付加され、前記転送装置は、前記データブロックに含まれる前記少なくとも１つの検出量の数と、前記データブロックに付加された前記数情報により示される前記数との差に応じて、前記データブロックが欠損しているか否かを判定する判定部と、前記判定部により前記データブロックが欠損していると判定された場合には、前記送信装置に、前記欠損したデータブロックの再送を要求する再送要求部と、前記再送要求部の要求に応じて前記送信装置から再送された前記データブロックを用いて、前記欠損したデータブロックを補完する補完部とをさらに備えてもよい。The data transmitted by the transmission device includes a plurality of data blocks each including at least one of a plurality of detection amounts detected by a sensor, and each of the plurality of data blocks includes a data block. Number information indicating the number of the at least one detection amount included is added, and the transfer device uses the number information of the at least one detection amount included in the data block and the number information added to the data block. A determination unit that determines whether or not the data block is missing according to a difference from the number shown; and when the determination unit determines that the data block is missing, the transmission A retransmission request unit requesting retransmission of the lost data block to the apparatus; and retransmitting from the transmission apparatus in response to a request from the retransmission request unit. Using said data blocks may further include a completion unit which complements the missing data blocks.

　また、本発明は、転送装置と送信装置と受信装置とを備え、前記転送装置は、前記送信装置から時系列に沿ったデータを受信する第１受信部と、前記受信装置と情報をやり取りすることにより前記データの送信条件を決定する決定部と、前記決定部により決定された前記送信条件に応じて、前記データを加工する加工部と、前記データをリアルタイムで転送する場合には、前記加工部により加工された前記データを前記受信装置に送信する第１送信部と、前記データを前記リアルタイムで転送しない場合には、前記データを前記時系列に沿って記憶する記憶部とを有し、前記送信装置は、前記データを取得する取得部と、前記取得部により取得された前記データを前記転送装置に送信する第２送信部とを有し、前記受信装置は、前記情報を前記転送装置に送信する第３送信部と、前記転送装置から送信された前記データを受信する第２受信部と、前記第２受信部により受信された前記データを用いて処理を行う処理部とを有する転送システムを提供する。In addition, the present invention includes a transfer device, a transmission device, and a reception device, and the transfer device exchanges information with the reception device and a first reception unit that receives data in time series from the transmission device. And a processing unit that processes the data according to the transmission condition determined by the determination unit, and the processing unit when transferring the data in real time. A first transmission unit that transmits the data processed by the unit to the reception device, and a storage unit that stores the data along the time series when the data is not transferred in real time, The transmission device includes an acquisition unit that acquires the data, and a second transmission unit that transmits the data acquired by the acquisition unit to the transfer device, and the reception device receives the information A third transmission unit that transmits to the transfer device, a second reception unit that receives the data transmitted from the transfer device, and a processing unit that performs processing using the data received by the second reception unit; A transfer system is provided.

　前記データは、撮像装置により撮影された動画を示す動画データと、計測装置から出力された計測データとを含み、前記処理部は、前記動画データと前記計測データとを、同一の時間軸に沿って出力してもよい。The data includes moving image data indicating a moving image taken by the imaging device and measurement data output from the measuring device, and the processing unit sets the moving image data and the measured data along the same time axis. May be output.

　さらに、本発明は、送信装置から時系列に沿ったデータを受信するステップと、受信装置と情報をやり取りすることにより前記データの送信条件を決定するステップと、前記決定された送信条件に応じて、前記データを加工するステップと、前記データをリアルタイムで転送する場合には、前記加工されたデータを前記受信装置に送信するステップと、前記データを前記リアルタイムで転送しない場合には、前記データを前記時系列に沿って記憶するステップとを備える転送方法を提供する。Furthermore, the present invention includes a step of receiving data in time series from a transmission device, a step of determining a transmission condition of the data by exchanging information with the reception device, and a response to the determined transmission condition. A step of processing the data; a step of transmitting the data in real time; a step of transmitting the processed data to the receiving device; and a case of not transferring the data in real time. And a step of storing along the time series.

　さらに、本発明は、コンピュータに、送信装置から時系列に沿ったデータを受信するステップと、受信装置と情報をやり取りすることにより前記データの送信条件を決定するステップと、前記決定された送信条件に応じて、前記データを加工するステップと、前記データをリアルタイムで転送する場合には、前記加工されたデータを前記受信装置に送信するステップと、前記データを前記リアルタイムで転送しない場合には、前記データを前記時系列に沿って記憶するステップとを実行させるためのプログラムを提供する。Furthermore, the present invention includes a step of receiving data in time series from a transmission device to a computer, a step of determining a transmission condition of the data by exchanging information with the reception device, and the determined transmission condition And processing the data, and transferring the data in real time, transmitting the processed data to the receiving device, and not transferring the data in real time, A program for executing the step of storing the data along the time series is provided.

　本発明によれば、送信装置から受信したデータを受信装置に転送する場合において、受信したデータが受信装置の要求に合わない場合でも、この要求に応じたデータを受信装置に提供することができる。According to the present invention, when data received from a transmission device is transferred to the reception device, even if the received data does not meet the request of the reception device, the data corresponding to the request can be provided to the reception device. .

実施形態に係る転送システム１００の一例を示す図である。1 is a diagram illustrating an example of atransfer system 100 according to an embodiment.端末装置１２０のハードウェア構成の一例を示す図である。It is a figure which shows an example of the hardware constitutions of the terminal device.端末装置１２０の機能構成の一例を示す図である。It is a figure which shows an example of a function structure of the terminal device.作成要求メッセージ２２０のフォーマットの一例を示す図である。6 is a diagram illustrating an example of a format of acreation request message 220. FIG.作成要求メッセージ２３０のフォーマットの一例を示す図である。6 is a diagram illustrating an example of a format of acreation request message 230. FIG.セクションのフォーマットの一例を示す図である。It is a figure which shows an example of the format of a section.転送装置１３０のハードウェア構成の一例を示す図である。3 is a diagram illustrating an example of a hardware configuration of atransfer device 130. FIG.転送装置１３０の機能構成の一例を示す図である。3 is a diagram illustrating an example of a functional configuration of atransfer device 130. FIG.応答メッセージ３１０のフォーマットの一例を示す図である。It is a figure which shows an example of the format of the response message.ストリームテーブル３２０の一例を示す図である。6 is a diagram illustrating an example of a stream table 320. FIG.データベース３３０の一例を示す図である。It is a figure which shows an example of the database.送信処理の一例を示すシーケンスチャートである。It is a sequence chart which shows an example of a transmission process.転送処理の一例を示すシーケンスチャートである。It is a sequence chart which shows an example of a transfer process.再送処理の一例を示すシーケンスチャートである。It is a sequence chart which shows an example of a resending process.動画データと計測データの出力例を示す図である。It is a figure which shows the example of an output of moving image data and measurement data.

１．構成
　図１は、実施形態に係る転送システム１００の一例を示す図である。転送システム１００は、端末装置１２０から受信したデータを他の端末装置１２０に転送するシステムである。転送システム１００は、撮像装置１１０と、複数の端末装置１２０と、転送装置１３０とを備える。図１に示す例では、複数の端末装置１２０には、端末装置１２０Ａと端末装置１２０Ｂとが含まれる。なお、図１に示す撮像装置１１０、端末装置１２０、及び転送装置１３０の数は例示であり、これに限定されない。撮像装置１１０は、通信回線１５０を介して端末装置１２０Ａに接続される。端末装置１２０Ａ及び１２０Ｂは、通信回線１６０を介して転送装置１３０に接続される。通信回線１６０には、例えばモバイル回線等の無線ネットワークとインターネットとが含まれてもよい。無線ネットワークの通信規格としては、例えば３Ｇ、ＬＴＥ（Long　Term　Evolution）、Ｗｉ－Ｆｉ（登録商標）、ＷｉＭＡＸ（登録商標）、又はＢｌｕｅｔｏｏｔｈ（登録商標）が用いられてもよい。1. Configuration FIG. 1 is a diagram illustrating an example of atransfer system 100 according to an embodiment. Thetransfer system 100 is a system that transfers data received from theterminal device 120 to anotherterminal device 120. Thetransfer system 100 includes animaging device 110, a plurality ofterminal devices 120, and atransfer device 130. In the example illustrated in FIG. 1, the plurality ofterminal devices 120 include aterminal device 120A and aterminal device 120B. Note that the numbers of theimaging device 110, theterminal device 120, and thetransfer device 130 illustrated in FIG. 1 are examples, and are not limited thereto. Theimaging device 110 is connected to theterminal device 120A via thecommunication line 150. Theterminal devices 120A and 120B are connected to thetransfer device 130 via thecommunication line 160. Thecommunication line 160 may include a wireless network such as a mobile line and the Internet, for example. For example, 3G, LTE (Long Term Evolution), Wi-Fi (registered trademark), WiMAX (registered trademark), or Bluetooth (registered trademark) may be used as a communication standard of the wireless network.

　撮像装置１１０は、画像を撮影する装置である。撮像装置１１０は、例えばデジタルビデオカメラであり、光学系を用いて撮像素子上に像を結ばせることにより、動画を撮影して動画データに変換して出力する。この動画データは、時系列に沿って並べられた複数のフレームにより構成される。また、撮像装置１１０は、マイクロフォンを有していてもよい。この場合、動画データには、音声を示す音声データが含まれてもよい。Theimaging device 110 is a device that captures an image. Theimaging device 110 is, for example, a digital video camera, and captures a moving image by converting an image onto an imaging element using an optical system, and converts the moving image data to output. This moving image data is composed of a plurality of frames arranged in time series. In addition, theimaging device 110 may include a microphone. In this case, the moving image data may include audio data indicating audio.

　図２は、端末装置１２０のハードウェア構成の一例を示す図である。端末装置１２０は、エッジとも呼ばれ、データの送受信を行う装置である。端末装置１２０は、プロセッサ１２１と、メモリ１２２と、ストレージ１２３と、通信装置１２４と、表示装置１２５とを備えるコンピュータである。これらの装置は、バス１２６を介して接続されている。FIG. 2 is a diagram illustrating an example of a hardware configuration of theterminal device 120. Theterminal device 120 is also called an edge, and is a device that transmits and receives data. Theterminal device 120 is a computer that includes aprocessor 121, amemory 122, astorage 123, acommunication device 124, and adisplay device 125. These devices are connected via abus 126.

　プロセッサ１２１は、プログラムをメモリ１２２に読み出して実行することにより、各種の処理を実行する。例えばプロセッサ１２１は、ＣＰＵ（Central Processing Unit）により構成されてもよい。メモリ１２２は、プロセッサ１２１により実行されるプログラムを記憶する。例えばメモリ１２２は、ＲＯＭ（Read Only Memory）又はＲＡＭ（Random Access Memory）により構成されてもよい。ストレージ１２３は、各種のデータ及びプログラムを記憶する。例えばストレージ１２３は、ハードディスクドライブ又はフラッシュメモリにより構成されてもよい。通信装置１２４は、通信回線１５０及び１６０に接続された通信インタフェースである。通信装置１２４は、通信回線１５０又は１６０を介してデータを送受信する。表示装置１２５は、各種の情報を表示する。例えば表示装置１２５は、液晶ディスプレイにより構成されてもよい。Theprocessor 121 executes various processes by reading the program into thememory 122 and executing it. For example, theprocessor 121 may be configured by a CPU (Central Processing Unit). Thememory 122 stores a program executed by theprocessor 121. For example, thememory 122 may be configured by a ROM (Read Only Memory) or a RAM (Random Access Memory). Thestorage 123 stores various data and programs. For example, thestorage 123 may be configured by a hard disk drive or a flash memory. Thecommunication device 124 is a communication interface connected to thecommunication lines 150 and 160. Thecommunication device 124 transmits and receives data via thecommunication line 150 or 160. Thedisplay device 125 displays various information. For example, thedisplay device 125 may be configured by a liquid crystal display.

　図３は、端末装置１２０の機能構成の一例を示す図である。この例では、端末装置１２０は、転送装置１３０にデータを送信する送信装置としての機能と、転送装置１３０からデータを受信する受信装置としての機能とを両方とも備える。端末装置１２０は、コネクション制御部２０１と、メッセージ送信部２０２（第３送信部の一例）と、メッセージ受信部２０３と、取得部２０４と、生成部２０５と、付加部２０６と、データ送信部２０７（第２送信部の一例）と、データ再送部２０８と、データ受信部２０９（第２受信部の一例）と、処理部２１０とを備える。これらの機能は、メモリ１２２に記憶されたプログラムと、このプログラムを実行するプロセッサ１２１との協働により、プロセッサ１２１が演算を行い又は通信装置１２４による通信を制御することにより実現される。FIG. 3 is a diagram illustrating an example of a functional configuration of theterminal device 120. In this example, theterminal device 120 has both a function as a transmission device that transmits data to thetransfer device 130 and a function as a reception device that receives data from thetransfer device 130. Theterminal device 120 includes aconnection control unit 201, a message transmission unit 202 (an example of a third transmission unit), amessage reception unit 203, anacquisition unit 204, ageneration unit 205, anaddition unit 206, and adata transmission unit 207. (An example of a second transmission unit), adata retransmission unit 208, a data reception unit 209 (an example of a second reception unit), and aprocessing unit 210. These functions are realized when theprocessor 121 performs an operation or controls communication by thecommunication device 124 in cooperation with the program stored in thememory 122 and theprocessor 121 that executes the program.

　コネクション制御部２０１は、端末装置１２０と転送装置１３０との間のコネクションを制御する。このコネクションとは、コネクション型の通信において確立される仮想的な専用通信路をいう。例えばコネクションを確立する場合には、コネクション制御部２０１から転送装置１３０にコネクションの確立を要求するメッセージが送信される。このメッセージに応じて転送装置１３０から端末装置１２０に応答メッセージが送信されると、端末装置１２０と転送装置１３０との間でコネクションが確立される。コネクションを切断する場合には、コネクション制御部２０１から転送装置１３０にコネクションの切断を要求するメッセージが送信される。このメッセージに応じて転送装置１３０から端末装置１２０に応答メッセージが送信されると、端末装置１２０と転送装置１３０との間でコネクションが切断される。Theconnection control unit 201 controls the connection between theterminal device 120 and thetransfer device 130. This connection refers to a virtual dedicated communication path established in connection-type communication. For example, when establishing a connection, a message requesting establishment of a connection is transmitted from theconnection control unit 201 to thetransfer apparatus 130. When a response message is transmitted from thetransfer device 130 to theterminal device 120 in response to this message, a connection is established between theterminal device 120 and thetransfer device 130. When disconnecting the connection, a message requesting disconnection of the connection is transmitted from theconnection control unit 201 to thetransfer apparatus 130. When a response message is transmitted from thetransfer device 130 to theterminal device 120 in response to this message, the connection is disconnected between theterminal device 120 and thetransfer device 130.

　メッセージ送信部２０２は、端末装置１２０と転送装置１３０との間で行われるネゴシエーションに用いられる各種のメッセージを送信する。例えば各種のメッセージには、情報送信メッセージと、作成要求メッセージ２２０又は２３０とが含まれる。情報送信メッセージには、データの送信条件を決定するための情報が含まれる。この情報には、例えば端末装置１２０のリソースの性能を示す性能情報が含まれてもよい。このリソースは、ハードウェアであってもよいし、ソフトウェアであってもよい。例えばブラウザによりデータが表示される場合、ソフトウェアにはブラウザが含まれてもよい。また、この情報は、送信条件そのものであってもよい。作成要求メッセージ２２０又は２３０は、データの処理条件を決定するための情報が含まれる。Themessage transmission unit 202 transmits various messages used for negotiation performed between theterminal device 120 and thetransfer device 130. For example, various messages include an information transmission message and acreation request message 220 or 230. The information transmission message includes information for determining data transmission conditions. This information may include performance information indicating the resource performance of theterminal device 120, for example. This resource may be hardware or software. For example, when data is displayed by a browser, the software may include a browser. Further, this information may be the transmission condition itself. Thecreation request message 220 or 230 includes information for determining data processing conditions.

　図４は、送信側の端末装置１２０から送信される作成要求メッセージ２２０のフォーマットの一例を示す図である。この例では、作成要求メッセージ２２０には、要求ＩＤと、ストリーム数と、ストリームＩＤと、フラグと、計測ＩＤと、送信元ＩＤと、転送先ＩＤとが含まれる。FIG. 4 is a diagram illustrating an example of a format of thecreation request message 220 transmitted from theterminal device 120 on the transmission side. In this example, thecreation request message 220 includes a request ID, the number of streams, a stream ID, a flag, a measurement ID, a transmission source ID, and a transfer destination ID.

　要求ＩＤは、作成要求メッセージ２２０を一意に識別する情報である。ストリーム数は、この作成要求メッセージ２２０に含まれるストリームの属性情報の数を示す。この属性情報は、ストリームＩＤ、フラグ、計測ＩＤ、送信元ＩＤ、及び転送先ＩＤの組により構成される。この属性情報は、一般に、ストリームＩＤよりもデータ量が多い。作成要求メッセージ２２０には、ストリーム数により示される数だけストリームの属性情報が含まれる。すなわち、作成要求メッセージ２２０には、複数のストリームの属性情報が含まれてもよい。The request ID is information that uniquely identifies thecreation request message 220. The number of streams indicates the number of stream attribute information included in thecreation request message 220. This attribute information is composed of a set of a stream ID, a flag, a measurement ID, a transmission source ID, and a transfer destination ID. This attribute information generally has a larger data amount than the stream ID. Thecreation request message 220 includes stream attribute information as many as indicated by the number of streams. That is, thecreation request message 220 may include attribute information of a plurality of streams.

　ストリームＩＤは、ストリームを一意に識別する情報である。ストリームＩＤは、接続中のコネクションに対応付けられている。すなわち、ストリームＩＤは、接続中のコネクションにおいてストリームを一意に識別する識別子として用いられてもよい。ストリームＩＤは、端末装置１２０において決定されてもよいし、転送装置１３０において決定されてもよい。Stream ID is information that uniquely identifies a stream. The stream ID is associated with the connection being connected. That is, the stream ID may be used as an identifier for uniquely identifying the stream in the connection being connected. The stream ID may be determined by theterminal device 120 or thetransfer device 130.

　フラグには、再送フラグと、保存フラグとが含まれる。再送フラグは、データが再送されたものか否かを示す情報である。再送フラグが「０」である場合、データが再送されたものではない、すなわち最初に送信されたものであることを示す。データが再送されたものではない場合、そのデータはリアルタイムで転送される。一方、再送フラグが「１」である場合、データが再送されたものであることを示す。データが再送されたものである場合、そのデータはリアルタイムで転送されない。このように、再送フラグは、データをリアルタイムで送信するか否かを示すリアルタイム情報として用いられてもよい。保存フラグは、データを保存するか否かを示す情報である。保存フラグが「０」である場合、データを保存しないことを示す。一方、保存フラグが「１」である場合、データを保存することを示す。The flag includes a retransmission flag and a storage flag. The retransmission flag is information indicating whether data has been retransmitted. When the retransmission flag is “0”, it indicates that the data is not retransmitted, that is, transmitted first. If the data is not retransmitted, the data is transferred in real time. On the other hand, when the retransmission flag is “1”, this indicates that the data has been retransmitted. If the data is retransmitted, it is not transferred in real time. As described above, the retransmission flag may be used as real-time information indicating whether to transmit data in real time. The save flag is information indicating whether to save data. When the save flag is “0”, it indicates that data is not saved. On the other hand, when the save flag is “1”, it indicates that the data is to be saved.

　計測ＩＤは、データを生成した計測を一意に識別する情報である。例えばデータが撮像装置１１０から出力された動画データである場合、撮像装置１１０が動画の撮影を開始してから終了するまでが一つの計測単位になる。したがって、この間に生成された動画データには、同一の計測ＩＤが付与される。送信元ＩＤは、ストリームの送信元となる端末装置１２０を一意に識別する情報である。転送先ＩＤは、データの転送先となる端末装置１２０を一意に識別する情報である。なお、転送先ＩＤが「－」である場合、転送装置１３０からデータが転送されないことを示す。Measurement ID is information that uniquely identifies the measurement that generated the data. For example, when the data is moving image data output from theimaging device 110, one unit of measurement is from when theimaging device 110 starts shooting a moving image to when it ends. Therefore, the same measurement ID is assigned to the moving image data generated during this time. The transmission source ID is information that uniquely identifies theterminal device 120 that is the transmission source of the stream. The transfer destination ID is information that uniquely identifies theterminal device 120 that is a data transfer destination. When the transfer destination ID is “−”, it indicates that data is not transferred from thetransfer device 130.

　図５は、受信側の端末装置１２０から送信される作成要求メッセージ２３０のフォーマットの一例を示す図である。この例では、作成要求メッセージ２３０には、上述した作成要求メッセージ２２０と同様に、要求ＩＤ、ストリーム数と、ストリームＩＤと、送信元ＩＤとが含まれる。また、作成要求メッセージ２３０には、転送元ＩＤが含まれる。転送元ＩＤは、ストリームの転送元の端末装置１２０を識別する情報である。なお、作成要求メッセージ２３０には、作成要求メッセージ２２０に含まれるフラグ、計測ＩＤ、及び転送先ＩＤは含まれなくてもよい。FIG. 5 is a diagram showing an example of the format of thecreation request message 230 transmitted from theterminal device 120 on the receiving side. In this example, thecreation request message 230 includes a request ID, the number of streams, a stream ID, and a transmission source ID, similar to thecreation request message 220 described above. Thecreation request message 230 includes a transfer source ID. The transfer source ID is information for identifying theterminal device 120 that is the transfer source of the stream. Thecreation request message 230 may not include the flag, measurement ID, and transfer destination ID included in thecreation request message 220.

　取得部２０４は、外部装置からデータを取得する。このデータは、例えば撮像装置１１０から出力された動画データであってもよい。生成部２０５は、取得部２０４により取得されたデータに基づいてストリームを生成する。このストリームとは、ストリーミングで扱われるデータ列をいう。ストリーミングとは、データ全体の入力が完了する前に出力を開始し、データが入力されている間に入力されたデータを順次出力する方式をいう。例えばストリームは、複数のセクションにより構成される。このセクションは、データを構成するデータブロックとして用いられてもよい。Theacquisition unit 204 acquires data from an external device. This data may be moving image data output from theimaging device 110, for example. Thegeneration unit 205 generates a stream based on the data acquired by theacquisition unit 204. This stream refers to a data string handled by streaming. Streaming refers to a system in which output is started before input of the entire data is completed, and the input data is sequentially output while the data is being input. For example, a stream is composed of a plurality of sections. This section may be used as a data block constituting data.

　図６は、セクションのフォーマットの一例を示す図である。この例では、セクションには、ＳＯＳ（Start of Section）と、複数のユニットと、ＥＯＳ（End of Section）とが含まれる。ＳＯＳは、セクションの先頭に含まれる。ＥＯＳは、セクションの後尾に含まれる。ＳＯＳは、セクションの開始を示す情報である。複数のユニットには、動画データに含まれるフレームが１つずつ含まれる。各フレームには、センサＩＤ及びタイムスタンプが付加される。このセンサＩＤは、データを取得したセンサを一意に識別する情報である。タイムスタンプは、データが取得された時間を示す情報である。この時間は、例えば計測を開始した時刻を起点とした、データが取得された時刻までの経過時間、すなわち計測が開始された時刻を基準とした相対的な時間であってもよい。ＥＯＳは、セクションの終了を示す情報である。ＥＯＳには、ユニットカウントと、シリアルナンバーとが含まれる。ユニットカウントは、セクションに含まれるユニットの数を示す数情報である。シリアルナンバーは、同一の計測単位に係るセクションを一意に識別する情報である。なお、以下の説明では、ＳＯＳ、ユニット、ＥＯＳを総称して「エレメント」とも言う。FIG. 6 is a diagram showing an example of a section format. In this example, the section includes SOS (Start of Section), a plurality of units, and EOS (End of Section). The SOS is included at the beginning of the section. EOS is included at the end of the section. SOS is information indicating the start of a section. Each of the plurality of units includes one frame included in the moving image data. A sensor ID and a time stamp are added to each frame. This sensor ID is information for uniquely identifying the sensor from which data is acquired. The time stamp is information indicating the time when the data is acquired. This time may be, for example, an elapsed time from the time when the measurement is started to the time when the data is acquired, that is, a relative time based on the time when the measurement is started. EOS is information indicating the end of a section. The EOS includes a unit count and a serial number. The unit count is number information indicating the number of units included in the section. The serial number is information for uniquely identifying sections related to the same measurement unit. In the following description, SOS, unit, and EOS are also collectively referred to as “element”.

　付加部２０６は、生成部２０５により生成されたストリームを一意に識別するストリームＩＤを、そのストリームの各セクションに含まれるＳＯＳ、複数のユニット、及びＥＯＳにそれぞれ付加する。The addingunit 206 adds a stream ID for uniquely identifying the stream generated by the generatingunit 205 to the SOS, the plurality of units, and the EOS included in each section of the stream.

　データ送信部２０７は、ストリームＩＤが付加されたストリームを転送装置１３０に送信する。このストリームは、ストリーミングにより送信される。このストリームの送信は、セクション単位で行われてもよいし、エレメント単位で行われてもよい。Thedata transmission unit 207 transmits the stream to which the stream ID is added to thetransfer device 130. This stream is transmitted by streaming. Transmission of this stream may be performed in section units or in element units.

　データ再送部２０８は、転送装置１３０に送信されたセクションに欠損があった場合、転送装置１３０からの要求に応じて、そのセクションを転送装置１３０に再送する。If the section transmitted to thetransfer device 130 is missing, thedata retransmission unit 208 retransmits the section to thetransfer device 130 in response to a request from thetransfer device 130.

　データ受信部２０９は、転送装置１３０からストリームを受信する。処理部２１０は、データ受信部２０９により受信されたストリームに含まれるデータを用いて処理を行う。Thedata receiving unit 209 receives a stream from thetransfer device 130. Theprocessing unit 210 performs processing using data included in the stream received by thedata receiving unit 209.

　図７は、転送装置１３０のハードウェア構成の一例を示す図である。転送装置１３０は、ハブとも呼ばれ、複数の端末装置１２０の間のデータのやり取りを中継する装置である。転送装置１３０は、非リアルタイムの処理とリアルタイムの処理とを行う。非リアルタイムの処理は、例えば端末装置１２０から受信したデータを蓄積する処理である。これにより、端末装置１２０から受信したデータがまとめて管理される。このデータは、例えばセンシング対象の状況についての各種の分析に用いられる。そのため、非リアルタイムの処理では、データの正確性が要求される。一方、リアルタイムの処理は、例えば端末装置１２０から受信したデータをリアルタイムで他の端末装置１２０に送信する処理である。なお、このリアルタイムとは、完全に同時である必要はなく、多少の時間の遅延があってもよい。このデータは、例えばセンシング対象の現在の状況をユーザが把握するのに用いられる。そのため、リアルタイムの処理では、即時性が要求される。FIG. 7 is a diagram illustrating an example of a hardware configuration of thetransfer device 130. Thetransfer device 130 is also called a hub, and is a device that relays data exchange between the plurality ofterminal devices 120. Thetransfer device 130 performs non-real time processing and real time processing. The non-real time processing is processing for accumulating data received from theterminal device 120, for example. Thereby, the data received from theterminal device 120 are managed collectively. This data is used, for example, for various types of analysis on the status of the sensing target. Therefore, data accuracy is required in non-real time processing. On the other hand, the real-time processing is processing for transmitting data received from theterminal device 120 to anotherterminal device 120 in real time, for example. Note that this real time does not have to be completely simultaneous, and there may be a slight delay. This data is used, for example, for the user to grasp the current status of the sensing target. Therefore, immediacy is required in real-time processing.

　転送装置１３０は、プロセッサ１３１と、メモリ１３２と、ストレージ１３３（記憶部の一例）と、通信装置１３４とを備えるコンピュータである。これらの装置は、バス１３５を介して接続されている。プロセッサ１３１、メモリ１３２、ストレージ１３３、通信装置１３４、及びバス１３５は、上述したプロセッサ１２１、メモリ１２２、ストレージ１２３、通信装置１２４、及びバス１２６と同様であるため、その説明を省略する。Thetransfer device 130 is a computer that includes aprocessor 131, amemory 132, a storage 133 (an example of a storage unit), and acommunication device 134. These devices are connected via abus 135. Since theprocessor 131, thememory 132, thestorage 133, thecommunication device 134, and thebus 135 are the same as theprocessor 121, thememory 122, thestorage 123, thecommunication device 124, and thebus 126 described above, description thereof is omitted.

　図８は、転送装置１３０の機能構成の一例を示す図である。転送装置１３０は、メッセージ受信部３０１と、メッセージ送信部３０２と、決定部３０３と、データ受信部３０４（受信部又は第１受信部の一例）と、判定部３０５と、加工部３０６と、データ送信部３０７（送信部又は第１送信部の一例）と、再送要求部３０８と、補完部３０９とを備える。これらの機能は、メモリ１３２に記憶されたプログラムと、このプログラムを実行するプロセッサ１３１との協働により、プロセッサ１３１が演算を行い又は通信装置１３４による通信を制御することにより実現される。FIG. 8 is a diagram illustrating an example of a functional configuration of thetransfer device 130. Thetransfer device 130 includes amessage reception unit 301, amessage transmission unit 302, adetermination unit 303, a data reception unit 304 (an example of a reception unit or a first reception unit), adetermination unit 305, aprocessing unit 306, data A transmission unit 307 (an example of a transmission unit or a first transmission unit), aretransmission request unit 308, and acomplement unit 309 are provided. These functions are realized when theprocessor 131 performs an operation or controls communication by thecommunication device 134 in cooperation with the program stored in thememory 132 and theprocessor 131 that executes the program.

　メッセージ受信部３０１は、端末装置１２０から各種のメッセージを受信する。例えば各種のメッセージには、上述した情報送信メッセージ及び作成要求メッセージ２２０が含まれる。メッセージ送信部３０２は、端末装置１２０に各種のメッセージを送信する。例えば各種のメッセージには、端末装置１２０から受信した作成要求メッセージ２２０に対する応答メッセージ３１０が含まれる。Themessage receiving unit 301 receives various messages from theterminal device 120. For example, the various messages include the information transmission message and thecreation request message 220 described above. Themessage transmission unit 302 transmits various messages to theterminal device 120. For example, various messages include aresponse message 310 to thecreation request message 220 received from theterminal device 120.

　図９は、応答メッセージ３１０のフォーマットの一例を示す図である。この例では、応答メッセージ３１０には、作成要求メッセージ２２０又は２３０に含まれる要求ＩＤと、結果情報とが含まれる。結果情報は、ストリームの属性情報の作成が成功したか否かを示す情報である。例えば、結果情報が「０」である場合、ストリームの属性情報の作成が成功したことを示す。一方、結果情報が「１」である場合、ストリームの属性情報の作成が失敗したことを示す。例えば、作成要求メッセージ２２０又は２３０に必要な項目が含まれていない場合や、作成要求メッセージ２２０又は２３０に含まれる項目が有効な値を有していない場合には、ストリームの属性情報の作成が失敗する場合がある。なお、作成要求メッセージ２２０又は２３０に複数のストリームＩＤが含まれる場合には、ストリームＩＤ毎に結果情報が含まれてもよい。FIG. 9 is a diagram illustrating an example of the format of theresponse message 310. In this example, theresponse message 310 includes a request ID included in thecreation request message 220 or 230 and result information. The result information is information indicating whether or not the creation of the stream attribute information is successful. For example, when the result information is “0”, it indicates that the creation of the attribute information of the stream is successful. On the other hand, when the result information is “1”, it indicates that the creation of the stream attribute information has failed. For example, when a necessary item is not included in thecreation request message 220 or 230, or when an item included in thecreation request message 220 or 230 does not have a valid value, creation of stream attribute information is performed. May fail. When a plurality of stream IDs are included in thecreation request message 220 or 230, result information may be included for each stream ID.

　決定部３０３は、端末装置１２０と情報をやり取りすることにより、データの送信条件を決定する。例えば送信条件には、データの形式に関する条件が含まれる。例えばデータが撮像装置１１０から出力された動画データである場合、データの形式には、動画データの圧縮方法、解像度、及びフレームレートのうち少なくとも１つが含まれてもよい。作成要求メッセージ２２０に含まれる属性情報と決定部３０３により決定された送信条件とは、例えばストリームテーブル３２０により管理される。Thedetermination unit 303 determines the data transmission condition by exchanging information with theterminal device 120. For example, the transmission condition includes a condition regarding the data format. For example, when the data is moving image data output from theimaging device 110, the data format may include at least one of the compression method, resolution, and frame rate of the moving image data. The attribute information included in thecreation request message 220 and the transmission conditions determined by thedetermination unit 303 are managed by the stream table 320, for example.

　図１０は、ストリームテーブル３２０の一例を示す図である。ストリームテーブル３２０は、例えばストレージ１３３に記憶される。この例では、ストリームテーブル３２０には、作成要求メッセージ２２０又は２３０に含まれるストリームＩＤ、再送フラグ、保存フラグ、計測ＩＤ、送信元ＩＤ、転送先ＩＤ又は転送元ＩＤと、決定部３０３により決定された送信条件とが対応付けて格納される。FIG. 10 is a diagram illustrating an example of the stream table 320. The stream table 320 is stored in thestorage 133, for example. In this example, the stream table 320 is determined by thedetermination unit 303 with the stream ID, retransmission flag, storage flag, measurement ID, transmission source ID, transfer destination ID, or transfer source ID included in thecreation request message 220 or 230. The transmission conditions are stored in association with each other.

　データ受信部３０４は、送信側の端末装置１２０からストリームを受信する。判定部３０５は、データ受信部３０４により受信されたストリームを、リアルタイムで転送するか否かを判定する。加工部３０６は、判定部３０５によりリアルタイムで転送すると判定された場合、ストリームテーブル３２０に格納された送信条件に応じて、ストリームに含まれるデータを加工する。この加工とは、例えばデータの中身は変更しないものの、データの形式を変更することをいう。例えば送信条件にデータの形式が含まれる場合、送信条件に含まれる形式に沿ってデータの形式が変更されてもよい。データ送信部２０７は、加工されたデータを含むストリームを受信側の端末装置１２０に送信する。このストリームは、ストリーミングにより送信される。Thedata receiving unit 304 receives a stream from theterminal device 120 on the transmission side. Thedetermination unit 305 determines whether or not to transfer the stream received by thedata reception unit 304 in real time. Theprocessing unit 306 processes the data included in the stream according to the transmission conditions stored in the stream table 320 when thedetermination unit 305 determines to transfer in real time. This processing means, for example, changing the data format, although the data contents are not changed. For example, when the data format is included in the transmission condition, the data format may be changed according to the format included in the transmission condition. Thedata transmission unit 207 transmits a stream including the processed data to theterminal device 120 on the reception side. This stream is transmitted by streaming.

　判定部３０５によりリアルタイムで転送しないと判定された場合、ストリームに含まれるデータは時系列に沿ってストレージ１３３に記憶される。また、判定部３０５によりリアルタイムで転送すると判定された場合、データ送信部２０７によりストリームが送信された後、そのストリームに含まれるデータの複製が時系列に沿ってストレージ１３３に記憶される。このデータは、例えばデータベース３３０により管理される。If thedetermination unit 305 determines not to transfer in real time, the data included in the stream is stored in thestorage 133 in time series. If thedetermination unit 305 determines to transfer in real time, thedata transmission unit 207 transmits a stream, and then a copy of the data included in the stream is stored in thestorage 133 in time series. This data is managed by thedatabase 330, for example.

　図１１は、データベース３３０の一例を示す図である。データベース３３０は、例えばストレージ１３３に記憶される。例えばデータが撮像装置１１０から出力された動画データである場合、データベース３３０には、動画データに含まれる各フレームが取得された時刻を示す情報と、動画データに含まれるフレームと、完了フラグとが対応付けて格納される。時刻は、例えばフレームに付加されたタイムスタンプに基づいて求められる。完了フラグは、ストリームの受信が完了したか否かを示す情報である。例えば完了フラグが「０」である場合には、ストリームの受信が完了していないことを示す。完了フラグが「１」である場合には、ストリームの受信が完了したことを示す。FIG. 11 is a diagram illustrating an example of thedatabase 330. Thedatabase 330 is stored in thestorage 133, for example. For example, when the data is moving image data output from theimaging device 110, thedatabase 330 includes information indicating the time when each frame included in the moving image data is acquired, a frame included in the moving image data, and a completion flag. Stored in association. The time is obtained based on, for example, a time stamp added to the frame. The completion flag is information indicating whether or not reception of the stream is completed. For example, when the completion flag is “0”, it indicates that the reception of the stream has not been completed. When the completion flag is “1”, it indicates that the reception of the stream has been completed.

　再送要求部３０８は、データ受信部３０４により受信されたセクションが欠損していると判定された場合には、送信側の端末装置１２０に、欠損したセクションの再送を要求する。補完部３０９は、再送要求部３０８の要求に応じて、送信側の端末装置１２０から再送されたセクションを用いて、欠損したセクションを補完する。When it is determined that the section received by thedata receiving unit 304 is missing, theretransmission request unit 308 requests theterminal device 120 on the transmission side to retransmit the missing section. Thecomplementing unit 309 supplements the missing section using the section retransmitted from theterminal device 120 on the transmission side in response to the request from theretransmission requesting unit 308.

２．動作
２‐１．送信処理
　まず、端末装置１２０が転送装置１３０に動画データを送信する処理について説明する。ここでは、撮像装置１１０で撮影された動画を示す動画データが端末装置１２０Ａから転送装置１３０に送信される例を想定する。なお、以下の説明では、端末装置１２０Ａの構成には符号の末尾に「Ａ」を付して説明する。2. Operation 2-1. Transmission Process First, a process in which theterminal apparatus 120 transmits moving image data to thetransfer apparatus 130 will be described. Here, it is assumed that moving image data indicating a moving image shot by theimaging device 110 is transmitted from theterminal device 120 </ b> A to thetransfer device 130. In the following description, the configuration of theterminal device 120A will be described with “A” added to the end of the reference numeral.

　図１２は、送信処理の一例を示すシーケンスチャートである。端末装置１２０Ａは、動画データを送信する前に、転送装置１３０とネゴシエーションを行う。FIG. 12 is a sequence chart showing an example of transmission processing. Theterminal device 120A negotiates with thetransfer device 130 before transmitting the moving image data.

　ステップ４０１において、端末装置１２０Ａでは、コネクション制御部２０１Ａにより、転送装置１３０とコネクションが確立される。ステップ４０２において、端末装置１２０Ａと転送装置１３０との間でネゴシエーションが行われる。具体的には、メッセージ送信部２０２Ａにより、接続中のコネクションを介して、図４に示すような作成要求メッセージ２２０が転送装置１３０に送信される。Instep 401, in theterminal device 120A, the connection control unit 201A establishes a connection with thetransfer device 130. Instep 402, negotiation is performed between theterminal device 120A and thetransfer device 130. Specifically, the message transmission unit 202A transmits acreation request message 220 as illustrated in FIG. 4 to thetransfer apparatus 130 via the connection being connected.

　例えば、作成要求メッセージ２２０には、要求ＩＤ「１」と、ストリーム数「２」とが含まれる。これは、要求ＩＤが「１」の作成要求メッセージ２２０には、２つのストリームの属性情報が含まれることを示す。また、作成要求メッセージ２２０には、ストリームＩＤ「１」と、再送フラグ「０」と、保存フラグ「１」と、計測ＩＤ「Ｍ００１」と、端末装置１２０Ａを識別する送信元ＩＤ「ＥＡＡＡ」と、端末装置１２０Ｂを識別する転送先ＩＤ「ＥＢＢＢ」との組が含まれる。これは、ストリームＩＤが「１」のストリームは、計測ＩＤが「Ｍ００１」の計測により生成された動画データを含み、この動画データは、再送されたものではなく、転送装置１３０に保存する必要があり、さらに、転送装置１３０から端末装置１２０Ｂに転送する必要があることを示す。さらに、作成要求メッセージ２２０には、ストリームＩＤ「２」と、再送フラグ「１」と、保存フラグ「１」と、計測ＩＤ「Ｍ００１」と、送信元ＩＤ「ＥＡＡＡ」と、転送先ＩＤ「－」との組が含まれる。これは、ストリームＩＤが「２」のストリームは、計測ＩＤが「Ｍ００１」の計測により生成された動画データを含み、この動画データは、再送されたものであり、転送装置１３０に保存する必要があり、さらに、転送装置１３０からは転送する必要がないことを示す。For example, thecreation request message 220 includes a request ID “1” and the number of streams “2”. This indicates that thecreation request message 220 having the request ID “1” includes attribute information of two streams. Thecreation request message 220 includes a stream ID “1”, a retransmission flag “0”, a storage flag “1”, a measurement ID “M001”, and a transmission source ID “EAAA” that identifies theterminal device 120A. , A pair with a transfer destination ID “EBBB” for identifying theterminal device 120B is included. This is because the stream with the stream ID “1” includes the moving image data generated by the measurement with the measurement ID “M001”, and this moving image data is not retransmitted and needs to be stored in thetransfer device 130. Furthermore, it indicates that it is necessary to transfer from thetransfer device 130 to theterminal device 120B. Further, thecreation request message 220 includes a stream ID “2”, a retransmission flag “1”, a storage flag “1”, a measurement ID “M001”, a transmission source ID “EAAA”, and a transfer destination ID “−”. Is included. This is because the stream with the stream ID “2” includes the moving image data generated by the measurement with the measurement ID “M001”, and this moving image data has been retransmitted and needs to be stored in thetransfer device 130. Furthermore, it indicates that there is no need to transfer from thetransfer device 130.

　また、作成要求メッセージ２２０が送信された後、メッセージ送信部２０２Ａにより、接続中のコネクションを介して、ストリームＩＤが「１」のストリームの送信条件を含む情報送信メッセージが転送装置１３０に送信される。例えば、送信条件には、撮像装置１１０の解像度が含まれる。After thecreation request message 220 is transmitted, the message transmission unit 202A transmits an information transmission message including the transmission condition of the stream with the stream ID “1” to thetransfer apparatus 130 via the connection being connected. . For example, the transmission condition includes the resolution of theimaging device 110.

　ステップ４０３において、転送装置１３０では、メッセージ受信部３０１にて作成要求メッセージ２２０及び情報送信メッセージが受信されると、作成要求メッセージ２２０に含まれる属性情報と情報送信メッセージに含まれる送信条件とがストリームテーブル３２０に格納される。例えばストリームテーブル３２０の最初のレコードには、図１０に示すように、ストリームＩＤ「１」と、再送フラグ「０」と、保存フラグ「１」と、計測ＩＤ「Ｍ００１」と、送信元ＩＤ「ＥＡＡＡ」と、転送先ＩＤ「ＥＢＢＢ」と、情報送信メッセージに含まれる送信条件とが格納される。また、ストリームテーブル３２０の２番目のレコードには、ストリームＩＤ「２」と、再送フラグ「１」と、保存フラグ「１」と、計測ＩＤ「Ｍ００１」と、送信元ＩＤ「ＥＡＡＡ」と、転送先ＩＤ「－」と、情報送信メッセージに含まれる送信条件とが格納される。In step 403, when themessage receiving unit 301 receives thecreation request message 220 and the information transmission message in thetransfer device 130, the attribute information included in thecreation request message 220 and the transmission conditions included in the information transmission message are streamed. Stored in table 320. For example, in the first record of the stream table 320, as shown in FIG. 10, the stream ID “1”, the retransmission flag “0”, the storage flag “1”, the measurement ID “M001”, and the transmission source ID “ “EAAA”, the transfer destination ID “EBBB”, and the transmission condition included in the information transmission message are stored. The second record of the stream table 320 includes a stream ID “2”, a retransmission flag “1”, a storage flag “1”, a measurement ID “M001”, a transmission source ID “EAAA”, and a transfer. The destination ID “−” and the transmission condition included in the information transmission message are stored.

　ステップ４０４において、属性情報と送信条件の格納が完了すると、メッセージ送信部３０２により、接続中のコネクションを介して端末装置１２０Ａに図９に示すような応答メッセージが送信される。例えば、応答メッセージ３１０には、要求ＩＤ「１」と、結果情報「０」とが含まれる。端末装置１２０Ａがこの応答メッセージを受信すると、端末装置１２０Ａと転送装置１３０との間のネゴシエーションが終了する。ネゴシエーションが終了すると、端末装置１２０Ａの処理は、ステップ４０５に進む。In step 404, when the storage of the attribute information and the transmission conditions is completed, themessage transmission unit 302 transmits a response message as shown in FIG. 9 to theterminal device 120A via the connection being connected. For example, theresponse message 310 includes a request ID “1” and result information “0”. When theterminal device 120A receives this response message, the negotiation between theterminal device 120A and thetransfer device 130 ends. When the negotiation is completed, the process of theterminal device 120A proceeds to step 405.

　ステップ４０５において、端末装置１２０Ａでは、取得部２０４Ａにより撮像装置１１０から出力された動画データが受信されると、生成部２０５により、この動画データを用いてストリームが生成される。このストリームの生成は、動画データ全体の受信が完了する前に開始され、動画データが受信されている間に順次行われる。ストリームは、図６に示す複数のセクションにより構成される。そのストリームの各セクションに含まれるＳＯＳ、複数のユニット、及びＥＯＳには、付加部１０９Ａにより、このストリームに対応するストリームＩＤ「１」がそれぞれ付加される。さらに、ストリームを構成する最後のセクションには、付加部１０９Ａにより、ストリームの最後であることを示すエンドフラグが付加される。このエンドフラグは、データの最後であることを示す最後情報として用いられてもよい。Instep 405, when the moving image data output from theimaging device 110 is received by the acquisition unit 204A in theterminal device 120A, thegeneration unit 205 generates a stream using the moving image data. The generation of the stream is started before the reception of the entire moving image data is completed, and is sequentially performed while the moving image data is being received. The stream is composed of a plurality of sections shown in FIG. A stream ID “1” corresponding to this stream is added to the SOS, the plurality of units, and the EOS included in each section of the stream by the adding unit 109A. Furthermore, an end flag indicating the end of the stream is added to the last section constituting the stream by the adding unit 109A. This end flag may be used as last information indicating the end of data.

　ステップ４０６において、データ送信部２０７Ａにより、ストリーミングＩＤが付加されたストリームが接続中のコネクションを介して転送装置１３０に順次送信される。このストリームの送信は、動画データ全体の受信が完了する前に開始され、動画データが受信されている間に順次行われる。転送装置１３０では、データ受信部３０４にて、端末装置１２０Ａから送信されたストリームが順次受信される。このストリームの送信が終了すると、端末装置１２０Ａはステップ４０７に進む。Instep 406, the data transmission unit 207A sequentially transmits the stream to which the streaming ID is added to thetransfer apparatus 130 via the connected connection. Transmission of this stream is started before the reception of the entire moving image data is completed, and is sequentially performed while the moving image data is being received. In thetransfer device 130, thedata reception unit 304 sequentially receives the streams transmitted from theterminal device 120A. When the transmission of this stream ends, theterminal device 120A proceeds to step 407.

　ステップ４０７において、コネクション制御部２０１Ａにより、転送装置１３０とのコネクションが切断される。ステップ４０８において、転送装置１３０では、コネクションの切断に応じて、ストリームテーブル３２０から、ストリームＩＤ「１」及び「２」に対応付けて格納された属性情報及び送信条件が全て削除される。これにより、ストリームテーブル３２０に格納されたストリームＩＤ「１」及び「２」とコネクションとの対応付けが解除され、ストリームテーブル３２０に格納されたストリームＩＤ「１」及び「２」が解放される。この場合、他のコネクションが確立されると、これらのストリームＩＤは、他のストリームの識別子として使用可能となる。なお、端末装置１２０によらずにコネクションが切断された場合にも、ステップ４０８と同様の処理が行われてもよい。Instep 407, the connection control unit 201A disconnects the connection with thetransfer apparatus 130. In step 408, thetransfer device 130 deletes all the attribute information and transmission conditions stored in association with the stream IDs “1” and “2” from the stream table 320 in response to the disconnection of the connection. As a result, the association between the stream IDs “1” and “2” stored in the stream table 320 and the connection is released, and the stream IDs “1” and “2” stored in the stream table 320 are released. In this case, when other connections are established, these stream IDs can be used as identifiers of other streams. Note that the same processing as in step 408 may be performed even when the connection is disconnected without depending on theterminal device 120.

　なお、ストリームテーブル３２０に格納された属性情報は、コネクションの接続中に変更されてもよい。この場合、端末装置１２０Ａでは、メッセージ送信部２０２Ａにより、変更対象のストリームＩＤと変更後の属性情報を含む変更要求メッセージが転送装置１３０に送信される。ストリームテーブル３２０は、この変更要求メッセージに応じて更新される。例えばストリームＩＤ「１」と変更後の属性情報との組を含む変更要求メッセージが送信された場合、ストリームテーブル３２０においてストリームＩＤ「１」に対応付けられた属性情報が、変更要求に含まれる属性情報に書き換えられる。Note that the attribute information stored in the stream table 320 may be changed during connection. In this case, in theterminal device 120A, the message transmission unit 202A transmits a change request message including the change target stream ID and the changed attribute information to thetransfer device 130. The stream table 320 is updated according to the change request message. For example, when a change request message including a combination of the stream ID “1” and the changed attribute information is transmitted, the attribute information associated with the stream ID “1” in the stream table 320 includes the attribute included in the change request. Rewritten with information.

　また、ストリームテーブル３２０に格納されたストリームＩＤは、コネクションの接続中に解放されてもよい。この場合、端末装置１２０Ａでは、メッセージ送信部２０２Ａにより、このストリームＩＤの解放要求メッセージが転送装置１３０に送信される。この解放要求メッセージには、図４に示す作成要求メッセージ２２０と同じフォーマットが用いられてもよい。例えば、ストリームＩＤ「１」の解放を要求する場合、このストリームＩＤ「１」と送信元ＩＤ「０」とを含む解放要求メッセージが送信される。端末装置１２０から解放要求メッセージが受信されると、ストリームテーブル３２０からストリームＩＤ「１」を含むレコードが削除される。これにより、ストリームＩＤ「１」と、再送フラグ「０」、保存フラグ「１」、計測ＩＤ「Ｍ００１」、送信元ＩＤ「ＥＡＡＡ」、及び転送先ＩＤ「ＥＢＢＢ」との対応付けが解除される。この場合、ストリームＩＤ「１」が解放され、他のストリームの識別子として使用可能となる。これにより、多数のストリームが送信される場合であっても、使用可能なストリームＩＤが尽きるのが防止される。Further, the stream ID stored in the stream table 320 may be released during connection. In this case, in theterminal device 120A, the message transmitting unit 202A transmits this stream ID release request message to thetransfer device 130. The release request message may use the same format as thecreation request message 220 shown in FIG. For example, when requesting the release of the stream ID “1”, a release request message including the stream ID “1” and the transmission source ID “0” is transmitted. When the release request message is received from theterminal device 120, the record including the stream ID “1” is deleted from the stream table 320. As a result, the association between the stream ID “1”, the retransmission flag “0”, the storage flag “1”, the measurement ID “M001”, the transmission source ID “EAAA”, and the transfer destination ID “EBBB” is released. . In this case, the stream ID “1” is released and can be used as an identifier of another stream. Thereby, even when a large number of streams are transmitted, it is possible to prevent the available stream IDs from being exhausted.

２‐２．転送処理
　次に、転送装置１３０が他の端末装置１２０に動画データを転送する処理について説明する。ここでは、端末装置１２０Ａから送信された動画データが転送装置１３０から端末装置１２０Ｂに転送される例を想定する。なお、以下の説明では、端末装置１２０Ｂの構成には符号の末尾に「Ｂ」を付して説明する。2-2. Transfer Process Next, a process in which thetransfer device 130 transfers moving image data to anotherterminal device 120 will be described. Here, it is assumed that the moving image data transmitted from theterminal device 120A is transferred from thetransfer device 130 to theterminal device 120B. In the following description, the configuration of theterminal device 120B will be described with “B” appended to the end of the reference numeral.

　図１３は、転送処理の一例を示すシーケンスチャートである。端末装置１２０Ｂは、動画データを受信する前に、転送装置１３０とネゴシエーションを行う。FIG. 13 is a sequence chart showing an example of the transfer process. Theterminal device 120B negotiates with thetransfer device 130 before receiving the moving image data.

　ステップ５０１において、端末装置１２０Ｂでは、コネクション制御部２０１Ｂにより、転送装置１３０とコネクションが確立される。ステップ５０２において、端末装置１２０Ｂと転送装置１３０との間でネゴシエーションが行われる。具体的には、メッセージ送信部２０２Ｂにより、接続中のコネクションを介して、図５に示すような作成要求メッセージ２３０が転送装置１３０に送信される。Instep 501, in theterminal device 120B, the connection control unit 201B establishes a connection with thetransfer device 130. Instep 502, negotiation is performed between theterminal device 120 </ b> B and thetransfer device 130. Specifically, the message transmission unit 202B transmits acreation request message 230 as illustrated in FIG. 5 to thetransfer apparatus 130 via the connection being connected.

　例えば、作成要求メッセージ２３０には、要求ＩＤ「２」と、ストリーム数「１」と、ストリームＩＤ「３」と、送信元ＩＤ「ＥＢＢＢ」と、転送元ＩＤ「ＥＡＡＡ」とが含まれる。これは、要求ＩＤが「２」の作成要求メッセージ２３０には、ストリームＩＤが「３」の１つのストリームの属性情報が含まれ、このストリームに含まれる動画データの転送元は、端末装置１２０Ａであることを示す。For example, thecreation request message 230 includes a request ID “2”, the number of streams “1”, a stream ID “3”, a transmission source ID “EBBB”, and a transfer source ID “EAAA”. This is because thecreation request message 230 with the request ID “2” includes the attribute information of one stream with the stream ID “3”, and the transfer source of the moving image data included in this stream is theterminal device 120A. It shows that there is.

　また、作成要求メッセージ２３０が送信された後、メッセージ送信部２０２Ｂにより、接続中のコネクションを介して、ストリームＩＤが「３」のストリームに関する情報送信メッセージが転送装置１３０に送信される。例えば端末装置１２０ＢがＭＰＥＧ－４に対応する場合、情報送信メッセージには、ＭＰＥＧ－４を示す情報が含まれてもよい。例えば表示装置１２５Ｂの解像度がＲ１である場合、情報送信メッセージには解像度Ｒ１が含まれてもよい。例えば表示装置１２５Ｂが表示可能な最大のフレームレートがＦ１である場合、情報送信メッセージにはフレームレートＦ１が含まれてもよい。In addition, after thecreation request message 230 is transmitted, the message transmission unit 202B transmits an information transmission message regarding the stream with the stream ID “3” to thetransfer apparatus 130 via the connected connection. For example, when theterminal device 120B supports MPEG-4, the information transmission message may include information indicating MPEG-4. For example, when the resolution of the display device 125B is R1, the information transmission message may include the resolution R1. For example, when the maximum frame rate that can be displayed by the display device 125B is F1, the frame rate F1 may be included in the information transmission message.

　メッセージ受信部３０１にて情報送信メッセージが受信されると、転送装置１３０では、決定部３０３により、情報送信メッセージに含まれる情報に基づいて、ストリームの送信条件が決定される。例えば情報送信メッセージにＭＰＥＧ－４を示す情報が含まれる場合、ＭＰＥＧ－４という圧縮方式が決定されてもよい。例えば情報送信メッセージに解像度Ｒ１が含まれる場合、解像度Ｒ１が決定されてもよい。例えば情報送信メッセージにフレームレートＦ１が含まれる場合、フレームレートＦ１が決定されてもよい。When the information transmission message is received by themessage reception unit 301, in thetransfer device 130, thedetermination unit 303 determines the transmission condition of the stream based on the information included in the information transmission message. For example, when information indicating MPEG-4 is included in the information transmission message, a compression method called MPEG-4 may be determined. For example, when the information transmission message includes the resolution R1, the resolution R1 may be determined. For example, when the frame rate F1 is included in the information transmission message, the frame rate F1 may be determined.

　ステップ５０３において、転送装置１３０では、作成要求メッセージ２３０に含まれる属性情報及び決定部３０３により決定された送信条件が、ストリームテーブル３２０に格納される。例えば、ストリームテーブル３２０には、図１０に示すように、ストリームＩＤ「３」と、送信元ＩＤ「ＥＢＢＢ」と、転送元ＩＤ「ＥＡＡＡ」と、決定部３０３により決定された送信条件とが対応付けて格納される。なお、再送フラグ、保存フラグ、及び計測ＩＤは、作成要求メッセージ２３０には含まれないため、格納されない。Instep 503, thetransfer apparatus 130 stores the attribute information included in thecreation request message 230 and the transmission condition determined by thedetermination unit 303 in the stream table 320. For example, the stream table 320 corresponds to the stream ID “3”, the transmission source ID “EBBB”, the transfer source ID “EAAA”, and the transmission conditions determined by thedetermination unit 303, as shown in FIG. Stored with. Note that the retransmission flag, the storage flag, and the measurement ID are not stored because they are not included in thecreation request message 230.

　ステップ５０４において、メッセージ送信部３０２により、接続中のコネクションを介して端末装置１２０Ｂに図９に示す応答メッセージ３１０が送信される。の例では、応答メッセージ３１０には、要求ＩＤ「２」と、結果情報「０」とが含まれる。端末装置１２０Ｂが応答メッセージを受信すると、端末装置１２０Ｂと転送装置１３０との間のネゴシエーションが終了する。ネゴシエーションが終了すると、転送装置１３０の処理は、図１３に示すステップ５０５に進む。In step 504, themessage transmission unit 302 transmits theresponse message 310 shown in FIG. 9 to theterminal device 120B via the connection being connected. In the example, theresponse message 310 includes a request ID “2” and result information “0”. When theterminal device 120B receives the response message, the negotiation between theterminal device 120B and thetransfer device 130 ends. When the negotiation is completed, the processing of thetransfer device 130 proceeds to step 505 shown in FIG.

　ステップ５０５において、転送装置１３０では、データ受信部３０４にて端末装置１２０Ａからストリームの受信が開始されると、判定部３０５により、このストリームをリアルタイムで転送するか否かが判定される。具体的には、セクションの先頭に配置されたＳＯＳを受信すると、ＳＯＳからストリームＩＤ「１」が抽出される。図１０に示すように、ストリームテーブル３２０には、ストリームＩＤ「１」と再送フラグ「０」とが対応付けて格納されている。これは、ストリームＩＤが「１」のストリームをリアルタイムで転送することを示す。したがって、この場合には、ストリームをリアルタイムで転送すると判定される。ストリームをリアルタイムで転送すると判定された場合（ステップ５０５の判定がＹＥＳ）、転送装置１３０の処理は、図１３に示すステップ５０６に進む。Instep 505, in thetransfer device 130, when thedata reception unit 304 starts receiving the stream from theterminal device 120A, thedetermination unit 305 determines whether or not to transfer the stream in real time. Specifically, when the SOS placed at the head of the section is received, the stream ID “1” is extracted from the SOS. As shown in FIG. 10, the stream table 320 stores a stream ID “1” and a retransmission flag “0” in association with each other. This indicates that the stream with the stream ID “1” is transferred in real time. Therefore, in this case, it is determined that the stream is transferred in real time. If it is determined that the stream is transferred in real time (YES in step 505), the processing of thetransfer device 130 proceeds to step 506 shown in FIG.

　ステップ５０６において、加工部３０６により、ストリームテーブル３２０においてストリームＩＤ「３」と対応付けて格納された送信条件に基づいて、受信されたストリームに含まれる動画データが加工される。この動画データの加工は、セクションのＥＯＳが受信される前に開始され、セクションが受信されている間に順次行われる。例えば送信条件にＭＰＥＧ－４が含まれる場合、動画データはＭＰＥＧ－４に従って圧縮されてもよい。例えば送信条件に解像度Ｒ１が含まれる場合において、動画データの解像度がＲ１より高いときは、動画データの解像度がＲ１に変更されてもよい。例えば送信条件にフレームレートＦ１が含まれる場合において、動画データのフレームレートがＦ１より高いときは、例えば動画データを間引くことにより、動画データのフレームレートがＦ１に変更されてもよい。Instep 506, theprocessing unit 306 processes the moving image data included in the received stream based on the transmission condition stored in the stream table 320 in association with the stream ID “3”. The processing of the moving image data is started before the section EOS is received, and sequentially performed while the section is received. For example, when MPEG-4 is included in the transmission condition, the moving image data may be compressed according to MPEG-4. For example, when the resolution R1 is included in the transmission condition, when the resolution of the moving image data is higher than R1, the resolution of the moving image data may be changed to R1. For example, when the frame rate F1 is included in the transmission condition and the frame rate of the moving image data is higher than F1, the frame rate of the moving image data may be changed to F1, for example, by thinning out the moving image data.

　ステップ５０７において、データ送信部３０７により、加工した動画データを含むストリームが端末装置１２０Ｂに順次送信される。このストリームの送信は、セクションのＥＯＳが受信される前に開始され、セクションが受信されている間に順次行われる。Instep 507, thedata transmission unit 307 sequentially transmits the stream including the processed moving image data to theterminal device 120B. Transmission of this stream is started before the section's EOS is received, and is performed sequentially while the section is being received.

　ステップ５０８において、転送装置１３０では、データ受信部３０４にてセクションのＥＯＳが受信されると、そのセクションに含まれるフレームが複製され、図１１に示すデータベース３３０に格納される。この例では、データベース３３０には、セクションに含まれる第１フレームから第ｎフレーム（ｎは自然数）と、それらのフレームが取得された時刻Ｔ１～Ｔｎ（ｎは自然数）とが対応付けて格納される。この時刻Ｔ１～Ｔｎは、各フレームに付加されたタイムスタンプにより示される相対的な時間から求められる絶対的な時刻であってもよい。例えば動画の撮影が開始された時刻が１２時００分である場合において、第１フレームに付加されたタイムスタンプが１２分という経過時間を示すときは、時刻Ｔ１は１２時１２分であってもよい。ステップ５０８の処理は、セクションの受信が完了する度に行われる。そして、ストリームに含まれる最後のセクションに付加されたエンドフラグが受信されると、判定部３０５により、ストリームの受信が完了したと判定される。この場合、データベース３３０には、図１１に示すように、完了フラグとして「１」が格納される。In step 508, when thedata receiving unit 304 receives the EOS of the section in thetransfer device 130, the frame included in the section is duplicated and stored in thedatabase 330 shown in FIG. In this example, thedatabase 330 stores the first to nth frames (n is a natural number) included in a section and the times T1 to Tn (n is a natural number) at which these frames are acquired in association with each other. The These times T1 to Tn may be absolute times obtained from the relative time indicated by the time stamp added to each frame. For example, in the case where the video recording start time is 12:00, when the time stamp added to the first frame indicates an elapsed time of 12 minutes, the time T1 is 12:12 Good. The processing in step 508 is performed every time reception of the section is completed. When the end flag added to the last section included in the stream is received, thedetermination unit 305 determines that reception of the stream is completed. In this case, “1” is stored in thedatabase 330 as a completion flag as shown in FIG.

　図１３に戻り、ステップ５０９において、端末装置１２０Ｂでは、データ受信部２０９Ｂにてストリームが受信されると、処理部２１０Ｂにより、このストリームに含まれる動画データに応じた動画が表示装置１２５Ｂに表示される。この動画の表示は、ストリーム全体の受信が完了する前に開始され、ストリームが受信されている間に順次行われる。なお、動画データがＭＰＥＧ－４に従って圧縮されている場合、動画データはＭＰＥＧ－４に従って復号された後に用いられる。これにより、端末装置１２０Ｂのユーザは、動画を閲覧することができる。なお、ストリームの受信が完了すると、端末装置１２０Ｂにおいても、上述したステップ４０７及び４０８と同様の処理が行われてもよい。Returning to FIG. 13, instep 509, when the terminal 120B receives the stream at the data receiving unit 209B, the processing unit 210B displays the moving image according to the moving image data included in the stream on the display device 125B. The This moving image display is started before reception of the entire stream is completed, and is sequentially performed while the stream is being received. When the moving image data is compressed according to MPEG-4, the moving image data is used after being decoded according to MPEG-4. Thereby, the user of theterminal device 120B can browse the moving image. When the reception of the stream is completed, theterminal device 120B may perform the same processing as insteps 407 and 408 described above.

　一方、上述したステップ５０５において、例えばセクションの先頭に配置されたＳＯＳに含まれるストリームＩＤが、ストリームテーブル３２０において再送フラグ「１」と対応付けられている場合、判定部３０５により、ストリームをリアルタイムで転送しないと判定される（ステップ５０５の判定がＮＯ）。この場合、転送装置１３０の処理は、上述したステップ５０６及び５０７の処理を行わずに、ステップ５０８に進む。すなわち、この場合には、動画データはリアルタイムで転送されない。ただし、動画データがデータベース３３０に格納された後、端末装置１２０Ｂから動画データの送信が要求された場合には、この要求に応じて、上述したステップ５０６及び５０７の処理が行われてもよい。この場合、動画データは非リアルタイムで端末装置１２０Ｂに転送される。On the other hand, when the stream ID included in the SOS placed at the head of the section is associated with the retransmission flag “1” in the stream table 320 instep 505 described above, for example, thedetermination unit 305 causes the stream to be transmitted in real time. It is determined not to transfer (NO in step 505). In this case, the processing of thetransfer device 130 proceeds to step 508 without performing the processing ofsteps 506 and 507 described above. That is, in this case, the moving image data is not transferred in real time. However, when theterminal device 120B requests transmission of moving image data after the moving image data is stored in thedatabase 330, the above-described processing insteps 506 and 507 may be performed in response to this request. In this case, the moving image data is transferred to theterminal device 120B in non-real time.

２‐３．再送処理
　上述した送信処理において、セクションに欠損がある場合、再送処理が行われてもよい。2-3. Retransmission process In the transmission process described above, if there is a missing section, a retransmission process may be performed.

　図１４は、再送処理の一例を示すシーケンスチャートである。この再送処理は、例えば転送装置１３０において端末装置１２０Ａから送信されたセクションの受信が完了する度に行われてもよい。FIG. 14 is a sequence chart showing an example of retransmission processing. This retransmission processing may be performed every time reception of the section transmitted from theterminal device 120A is completed in thetransfer device 130, for example.

　ステップ６０１において、転送装置１３０では、再送要求部３０８により、データ受信部３０４にて受信されたセクションに含まれるユニットの数が計数される。ステップ６０２において、再送要求部３０８により、計数されたユニットの数と、受信されたセクションのＥＯＳに含まれるユニットカウントにより示されるユニットの数との差に基づいて、セクションに欠損があるか否かが判定される。これらのユニットの数が一致する場合、セクションに欠損がないと判定される（ステップ６０２の判定がＮＯ）。この場合、転送装置１３０から端末装置１２０Ａに例えばＡＣＫ（acknowledgement）メッセージが送信された後、この処理が終了する。このＡＣＫメッセージには、受信したセクションに含まれるＳＯＳとＥＯＳとが含まれてもよい。一方、これらのユニットの数が異なる場合、セクションに欠損があると判定される（ステップ６０２の判定がＹＥＳ）。この場合、転送装置１３０の処理はステップ６０３に進む。
Instep 601, in thetransfer apparatus 130, the number of units included in the section received by thedata reception unit 304 is counted by theretransmission request unit 308. Instep 602, based on the difference between the number of units counted by theretransmission request unit 308 and the number of units indicated by the unit count included in the EOS of the received section, whether or not there is a missing section. Is determined. If the numbers of these units match, it is determined that there is no missing section (NO in step 602). In this case, for example, an ACK (acknowledgement) message is transmitted from thetransfer apparatus 130 to theterminal apparatus 120A, and then this process ends. This ACK message may include SOS and EOS included in the received section. On the other hand, if the number of these units is different, it is determined that there is a section defect (YES in step 602). In this case, the processing of thetransfer device 130 proceeds to step 603.

　ステップ６０３において、メッセージ送信部３０２により、欠損したセクションの再送を要求するメッセージ（以下、「再送要求メッセージ」という。）が端末装置１２０Ａに送信される。この再送要求メッセージには、例えば欠損したセクションを識別する情報が含まれてもよい。ステップ６０４において、端末装置１２０Ａでは、再送要求メッセージが受信されると、データ再送部２０８Ａにより、要求されたセクションを含むストリームが転送装置１３０に送信される。このセクションは、再送されたものであるため、このセクションに含まれるＳＯＳ、複数のユニット、ＥＯＳには、例えばストリームＩＤ「２」がそれぞれ付加される。Instep 603, themessage transmission unit 302 transmits a message requesting retransmission of the missing section (hereinafter referred to as “retransmission request message”) to theterminal device 120A. The retransmission request message may include information for identifying a missing section, for example. Instep 604, when theterminal apparatus 120A receives the retransmission request message, the data retransmission unit 208A transmits a stream including the requested section to thetransfer apparatus 130. Since this section is retransmitted, for example, a stream ID “2” is added to the SOS, the plurality of units, and the EOS included in this section, respectively.

　端末装置１２０Ａからストリームを受信すると、転送装置１３０の処理は、図１３に示すステップ５０５に進む。この場合、ストリームに含まれる再送されたセクションのＳＯＳには、例えばストリームＩＤ「２」が含まれる。図１０に示すように、ストリームテーブル３２０には、ストリームＩＤ「２」と再送フラグ「１」とが対応付けて格納されている。これは、ストリームＩＤが「２」のストリームは、リアルタイムで転送されないことを示す。したがって、この場合には、判定部３０５により、ストリームをリアルタイムで転送しないと判定される（ステップ５０５の判定がＮＯ）。この場合、転送装置１３０の処理は、上述したステップ５０８に進む。ステップ５０８において、補完部３０９により、再送されたセクションに含まれるフレームがデータベース３３０に格納される。例えば再送されたセクションに第１フレームが含まれる場合、データベース３３０に格納された第１フレームが新たに受信された第１フレームにより上書き保存されてもよい。これにより、欠損したセクションが補完される。When the stream is received from theterminal device 120A, the processing of thetransfer device 130 proceeds to step 505 shown in FIG. In this case, for example, the stream ID “2” is included in the SOS of the retransmitted section included in the stream. As illustrated in FIG. 10, the stream table 320 stores a stream ID “2” and a retransmission flag “1” in association with each other. This indicates that the stream with the stream ID “2” is not transferred in real time. Therefore, in this case, thedetermination unit 305 determines not to transfer the stream in real time (NO in step 505). In this case, the processing of thetransfer device 130 proceeds to step 508 described above. In step 508, the frame included in the retransmitted section is stored in thedatabase 330 by thecomplementing unit 309. For example, when the first frame is included in the retransmitted section, the first frame stored in thedatabase 330 may be overwritten by the newly received first frame. This complements the missing section.

　以上説明した実施形態によれば、端末装置１２０Ａから転送装置１３０に送信された動画データが、転送装置１３０と端末装置１２０Ｂとのネゴシエーションにより決定された送信条件に応じて加工されてから、端末装置１２０Ｂに送信される。そのため、転送装置１３０が受信した動画データが端末装置１２０Ｂの要求に合わない場合でも、この要求に応じた動画データを端末装置１２０Ｂに提供することができる。また、転送装置１３０では、端末装置１２０ＡからセクションのＳＯＳを受信したことに応じて動画データの転送が開始されるため、セクション全体の受信が完了した後に動画データの転送が開始される場合に比べて、動画データの転送の遅延が少なくなる。According to the embodiment described above, the moving image data transmitted from theterminal device 120A to thetransfer device 130 is processed according to the transmission condition determined by the negotiation between thetransfer device 130 and theterminal device 120B, and then the terminal device. 120B. Therefore, even when the moving image data received by thetransfer device 130 does not meet the request of theterminal device 120B, the moving image data according to the request can be provided to theterminal device 120B. In addition, since thetransfer device 130 starts to transfer the moving image data in response to receiving the SOS of the section from theterminal device 120A, compared to the case where the transfer of the moving image data is started after reception of the entire section is completed. Thus, the transfer delay of moving image data is reduced.

３．変形例
　本発明は、上述した実施形態に限定されない。上述した実施形態を以下のように変形してもよい。また、以下の２つ以上の変形例を組み合わせて実施してもよい。3. The present invention is not limited to the above-described embodiment. The embodiment described above may be modified as follows. Moreover, you may implement combining the following two or more modifications.

　上述した実施形態において、端末装置１２０Ａには複数の撮像装置１１０が接続されていてもよい。この場合において、端末装置１２０Ｂを転送先とする複数の動画データがあるときは、送信条件には、端末装置１２０Ｂが要求する動画データを識別する情報が含まれてもよい。例えば端末装置１２０Ｂを転送先とする第１動画データから第１０動画データがある場合において、端末装置１２０Ｂが第１動画データ及び第３動画データだけを使用するときは、送信条件には、第１動画データ及び第３動画データを識別する情報が含まれてもよい。この場合、データ送信部３０７は、第１動画データから第１０動画データのうち、第１動画データ及び第３動画データだけを端末装置１２０Ｂに送信してもよい。In the embodiment described above, a plurality ofimaging devices 110 may be connected to theterminal device 120A. In this case, when there are a plurality of moving image data having theterminal device 120B as a transfer destination, the transmission condition may include information for identifying the moving image data requested by theterminal device 120B. For example, when there is first to tenth moving image data from the first moving image data with theterminal device 120B as the transfer destination, when theterminal device 120B uses only the first moving image data and the third moving image data, the transmission condition includes the first Information for identifying the moving image data and the third moving image data may be included. In this case, thedata transmission unit 307 may transmit only the first moving image data and the third moving image data among the first moving image data to the tenth moving image data to theterminal device 120B.

　上述した実施形態において、複数のデータが並行して転送されてもよい。例えば端末装置１２０Ａに撮像装置１１０と計測装置とが接続されている場合、撮像装置１１０から出力された動画データと計測装置から出力された計測データとが並行して転送されてもよい。この計測データには、時系列に沿って計測された複数の計測値が含まれる。この場合、端末装置１２０Ｂは動画データ及び計測データを受信すると、これらのデータを同一の時間軸に沿って出力してもよい。In the embodiment described above, a plurality of data may be transferred in parallel. For example, when theimaging device 110 and the measurement device are connected to theterminal device 120A, the moving image data output from theimaging device 110 and the measurement data output from the measurement device may be transferred in parallel. The measurement data includes a plurality of measurement values measured along the time series. In this case, when receiving the moving image data and the measurement data, theterminal device 120B may output these data along the same time axis.

　図１５は、動画データと計測データの出力例を示す図である。この例では、端末装置１２０Ｂの表示装置１２５Ｂ上に、動画データに応じた動画と、計測データに応じた計測値とが、同一の時間軸に沿って並べて表示される。このとき、同一の時刻に対応する動画と計測値とが同時に表示される。例えば時刻Ｔ１０に撮影された動画と、時刻Ｔ１０に計測された計測値とが同時に表示される。これにより、端末装置１２０Ｂのユーザは、或る時刻に撮影された動画とその時刻に計測された計測値とを合わせて閲覧することができる。FIG. 15 is a diagram showing an output example of moving image data and measurement data. In this example, a moving image corresponding to moving image data and a measured value corresponding to measurement data are displayed side by side along the same time axis on the display device 125B of theterminal device 120B. At this time, a moving image and a measured value corresponding to the same time are displayed simultaneously. For example, a moving image shot at time T10 and a measured value measured at time T10 are displayed simultaneously. Thereby, the user of theterminal device 120 </ b> B can browse the moving image shot at a certain time and the measured value measured at the time.

　上述した実施形態において、表示装置１２５は、例えばユーザの操作により指定された時間スケールでデータを表示してもよい。ここでは、データには、時系列に沿って計測された複数の計測値が含まれるものとする。例えば１秒間隔の時間スケールが指定された場合、表示装置１２５には、１秒間隔で計測値が表示されてもよい。また、この場合、送信条件には、指定された時間スケールが含まれてもよい。この場合、加工部３０６は、指定された時間スケールに応じてデータを間引いてもよい。例えば時間スケールが１秒間隔である場合には、１秒間に１つの計測値だけが含まれるように、データが間引かれてもよい。これにより、受信側の端末装置１２０において不要なデータが送信されるのを防ぐことができる。In the above-described embodiment, thedisplay device 125 may display data on a time scale specified by a user operation, for example. Here, it is assumed that the data includes a plurality of measurement values measured along the time series. For example, when a time scale of 1 second intervals is designated, the measurement values may be displayed on thedisplay device 125 at 1 second intervals. In this case, the transmission condition may include a designated time scale. In this case, theprocessing unit 306 may thin out data according to a designated time scale. For example, when the time scale is 1 second, data may be thinned out so that only one measurement value is included in one second. Thereby, it is possible to prevent unnecessary data from being transmitted in theterminal device 120 on the receiving side.

　上述した実施形態では、処理部２１０はデータを表示する処理を行っていたが、処理部２１０が行う処理はデータの表示に限定されない。例えば処理部２１０は、データを用いて他の装置を制御又は操作する処理を行ってもよい。In the above-described embodiment, theprocessing unit 210 performs processing for displaying data, but the processing performed by theprocessing unit 210 is not limited to data display. For example, theprocessing unit 210 may perform processing for controlling or operating another device using data.

　上述した実施形態において、加工部３０６は、データがデータベース３３０に格納される前に、データを加工してもよい。この場合、データベース３３０には、加工されたデータが格納される。In the embodiment described above, theprocessing unit 306 may process the data before the data is stored in thedatabase 330. In this case, thedatabase 330 stores processed data.

　上述した実施形態において、送信条件に含まれる情報は、端末装置１２０が対応する圧縮方式、表示装置１２５が対応する解像度、表示装置１２５が対応するフレームレートに限定されない。例えば送信条件には、端末装置１２０が対応するビットレートや表示装置１２５が対応する画像サイズが含まれてもよい。In the above-described embodiment, the information included in the transmission condition is not limited to the compression method supported by theterminal device 120, the resolution supported by thedisplay device 125, and the frame rate supported by thedisplay device 125. For example, the transmission condition may include a bit rate supported by theterminal device 120 and an image size supported by thedisplay device 125.

　上述した実施形態において、情報送信メッセージには、転送装置１３０と端末装置１２０Ｂとの間の通信の状況を示す情報が含まれてもよい。この通信の状況には、通信の種別、通信方式、通信帯域、又は通信速度が含まれてもよい。この場合、加工部３０６は、この通信の状況に応じて、データを間引いてもよい。例えば現状の通信帯域が所定の帯域よりも小さい場合には、現状の通信帯域に応じてデータが間引かれてもよい。これにより、通信帯域が小さい場合でも、データの転送の遅延が少なくなる。In the above-described embodiment, the information transmission message may include information indicating the status of communication between thetransfer device 130 and theterminal device 120B. The communication status may include a communication type, a communication method, a communication band, or a communication speed. In this case, theprocessing unit 306 may thin out the data according to the communication status. For example, when the current communication band is smaller than a predetermined band, data may be thinned out according to the current communication band. Thereby, even when the communication band is small, the data transfer delay is reduced.

　上述した実施形態において、転送装置１３０は、端末装置１２０Ａから受信した送信条件が、決定部３０３により決定された送信条件と合わない場合には、端末装置１２０Ｂにエラーメッセージを送信してもよい。例えば撮像装置１１０の解像度が、端末装置１２０Ｂの表示装置１２５Ｂの解像度より低い場合には、決定部３０３により決定された送信条件を満たすことができないため、端末装置１２０Ｂにエラーメッセージが送信されてもよい。In the above-described embodiment, thetransfer device 130 may transmit an error message to theterminal device 120B when the transmission condition received from theterminal device 120A does not match the transmission condition determined by thedetermination unit 303. For example, when the resolution of theimaging device 110 is lower than the resolution of the display device 125B of theterminal device 120B, the transmission condition determined by thedetermination unit 303 cannot be satisfied, and therefore an error message is transmitted to theterminal device 120B. Good.

　上述した実施形態において、転送システム１００において用いられるデータは、動画データに限定されない。例えばセンサから出力されたセンサデータが用いられてもよい。このセンサは、センシング対象から検出量を検出し、検出した検出量を示すセンサデータを出力する。このセンサには、上述した撮像装置１１０の他、例えばセンシング対象が車である場合、センサには、エンジンの回転数を計測する回転計、車の速度を計測する速度計、ステアリングの角度を計測する角度計、燃料噴射量計、温度計、及び車の位置を測定するＧＰＳ（Global Positioning System）等の車に設けられた各種の計測機器が用いられてもよい。In the above-described embodiment, data used in thetransfer system 100 is not limited to moving image data. For example, sensor data output from the sensor may be used. This sensor detects a detection amount from the sensing target, and outputs sensor data indicating the detected detection amount. In this sensor, in addition to theimaging device 110 described above, for example, when the sensing target is a car, the sensor includes a tachometer that measures the number of revolutions of the engine, a speedometer that measures the speed of the car, and a steering angle. Various measuring devices provided in the vehicle such as an angle meter, a fuel injection amount meter, a thermometer, and a GPS (Global Positioning System) that measures the position of the vehicle may be used.

　上述した実施形態において、図１１に示すように、データベース３３０の完了フラグが「１」になった場合、データ送信部３０７は、データベース３３０に格納されている全てのデータを所定の処理部に送信してもよい。この所定の処理部は、例えばデータを用いて解析処理やバッチ処理等の予め定められた後段階の処理を行ってもよい。In the above-described embodiment, as illustrated in FIG. 11, when the completion flag of thedatabase 330 is “1”, thedata transmission unit 307 transmits all the data stored in thedatabase 330 to a predetermined processing unit. May be. The predetermined processing unit may perform predetermined later-stage processing such as analysis processing and batch processing using data, for example.

　上述した実施形態において、各セクションに時系列に沿った通し番号が付されている場合、データベース３３０には、時刻を示す情報に代えて、この番号が格納されてもよい。In the above-described embodiment, when serial numbers are assigned to each section in chronological order, this number may be stored in thedatabase 330 instead of the information indicating the time.

　上述した実施形態では、ＳＯＳにストリームＩＤが含まれていたが、ＳＯＳに再送フラグそのものが含まれてもよい。In the above-described embodiment, the stream ID is included in the SOS, but the retransmission flag itself may be included in the SOS.

　上述した実施形態において、各セクションの長さは、任意の長さであってもよい。さらに、各セクションに含まれるユニットの数は必ずしも同じである必要はない。一つのセクションに含まれるユニットの数は、セクション毎に変化してもよい。In the embodiment described above, the length of each section may be an arbitrary length. Furthermore, the number of units included in each section need not necessarily be the same. The number of units included in one section may vary from section to section.

　上述した実施形態において、ストリームＩＤは、ストリームの各セクションに含まれるＳＯＳ、複数のユニット、及びＥＯＳの一部だけに付加されてもよい。例えばストリームＩＤは、ＳＯＳだけに付加されてもよいし、ＥＯＳだけに付加されてもよい。これにより、データの属性に関するデータ量をさらに削減することができる。In the embodiment described above, the stream ID may be added to only a part of the SOS, the plurality of units, and the EOS included in each section of the stream. For example, the stream ID may be added only to the SOS, or may be added only to the EOS. Thereby, the data amount regarding the attribute of data can further be reduced.

　上述した実施形態において、ストリームは必ずしも複数のセクションにより構成される必要はない。例えばストリームには、複数のユニットだけが含まれてもよい。また、この場合、ストリームには、ＳＯＳ及びＥＯＳが含まれる必要はない。In the embodiment described above, the stream does not necessarily have to be composed of a plurality of sections. For example, a stream may include only a plurality of units. In this case, the stream does not need to include SOS and EOS.

　上述した実施形態において、端末装置１２０が転送装置１３０に送信するデータは、必ずしも外部装置から出力されたデータに限定されない。例えば、このデータは、端末装置１２０により生成されたデータであってもよい。In the embodiment described above, the data transmitted from theterminal device 120 to thetransfer device 130 is not necessarily limited to data output from an external device. For example, this data may be data generated by theterminal device 120.

　転送システム１００において行われる処理のステップは、上述した実施形態で説明した例に限定されない。この処理のステップは、矛盾のない限り、入れ替えられてもよい。本発明は、転送システム１００又は転送装置１３０において行われる処理のステップを備える転送方法として提供されてもよい。The steps of processing performed in thetransfer system 100 are not limited to the example described in the above-described embodiment. The steps of this process may be interchanged as long as there is no contradiction. The present invention may be provided as a transfer method including steps of processing performed in thetransfer system 100 or thetransfer apparatus 130.

　本発明は、端末装置１２０又は転送装置１３０において実行されるプログラムとして提供されてもよい。このプログラムは、インターネットなどの通信回線を介してダウンロードされてもよい。また、これらのプログラムは、磁気記録媒体（磁気テープ、磁気ディスクなど）、光記録媒体（光ディスクなど）、光磁気記録媒体、半導体メモリなどの、コンピュータが読取可能な記録媒体に記録した状態で提供されてもよい。The present invention may be provided as a program executed in theterminal device 120 or thetransfer device 130. This program may be downloaded via a communication line such as the Internet. These programs are provided in a state where they are recorded on a computer-readable recording medium such as a magnetic recording medium (magnetic tape, magnetic disk, etc.), an optical recording medium (optical disk, etc.), a magneto-optical recording medium, or a semiconductor memory. May be.

　本明細書において使用される「第１」、「第２」という用語は、ある要素を別の要素と区別するためにのみ使用されるものであり、要素の量または順序を限定するものではない。したがって、これらの用語は、例えば数字を入れ替えて用いられてもよい。As used herein, the terms “first” and “second” are used only to distinguish one element from another, and do not limit the amount or order of the elements. . Therefore, these terms may be used, for example, by exchanging numbers.

１００：転送システム、１１０：撮像装置、１２０：端末装置、１３０：転送装置、２０１：コネクション制御部、２０２：メッセージ送信部、２０３：メッセージ受信部、２０４：取得部、２０５：生成部、２０６：付加部、２０７：データ送信部、２０８：データ再送部、２０９：データ受信部、２１０：処理部、３０１：メッセージ受信部、３０２：メッセージ送信部、３０３：決定部、３０４：データ受信部、３０５：判定部、３０６：加工部、３０７：データ送信部、３０８：再送要求部、３０９：補完部100: transfer system 110: imaging device 120: terminal device 130: transfer device 201: connection control unit 202: message transmission unit 203: message reception unit 204: acquisition unit 205: generation unit 206: Addition unit, 207: Data transmission unit, 208: Data retransmission unit, 209: Data reception unit, 210: Processing unit, 301: Message reception unit, 302: Message transmission unit, 303: Determination unit, 304: Data reception unit, 305 : Determination unit, 306: processing unit, 307: data transmission unit, 308: retransmission request unit, 309: complementing unit

Claims (13)

Translated fromJapanese

　送信装置から時系列に沿ったデータを受信する受信部と、
　受信装置と情報をやり取りすることにより前記データの送信条件を決定する決定部と、
　前記決定部により決定された前記送信条件に応じて、前記データを加工する加工部と、
　前記データをリアルタイムで転送する場合には、前記加工部により加工された前記データを前記受信装置に送信する送信部と、
　前記データを前記リアルタイムで転送しない場合には、前記データを前記時系列に沿って記憶する記憶部と
　を備える転送装置。A receiving unit for receiving data in time series from the transmitting device;
A determination unit that determines a transmission condition of the data by exchanging information with a receiving device;
A processing unit that processes the data according to the transmission condition determined by the determination unit;
When transferring the data in real time, a transmission unit that transmits the data processed by the processing unit to the receiving device;
And a storage unit that stores the data along the time series when the data is not transferred in real time.　前記記憶部は、前記データを前記リアルタイムで転送する場合には、前記データが前記受信装置に送信された後、前記データの複製を記憶する
　請求項１に記載の転送装置。The transfer device according to claim 1, wherein when the data is transferred in real time, the storage unit stores a copy of the data after the data is transmitted to the receiving device.　前記データの先頭には、前記データをリアルタイムで転送するか否かを示すリアルタイム情報が付加され、
　前記受信部により前記データの前記先頭が受信されると、前記リアルタイム情報に基づいて前記データを前記リアルタイムで転送するか否かを判定する判定部をさらに備え、
　前記加工部は、前記判定部により前記データを前記リアルタイムで転送すると判定された場合には、前記データの受信が完了する前に、前記受信されたデータの加工を開始し、前記受信されたデータを順次加工し、
　前記送信部は、前記判定部により前記データを前記リアルタイムで転送すると判定された場合には、前記データの受信が完了する前に、前記加工されたデータの送信を開始し、前記加工されたデータを順次送信する
　請求項１又は２に記載の転送装置。Real time information indicating whether or not to transfer the data in real time is added to the top of the data,
When the head of the data is received by the receiving unit, further comprising a determination unit for determining whether to transfer the data in real time based on the real time information,
When the determination unit determines that the data is to be transferred in real time, the processing unit starts processing the received data before the reception of the data is completed, and the received data Are processed sequentially,
The transmission unit starts transmission of the processed data before the reception of the data is completed when the determination unit determines to transfer the data in real time, and the processed data The transfer device according to claim 1 or 2, wherein　前記記憶部は、前記リアルタイム情報と、前記データの識別子とを対応付けて記憶し、
　前記データの前記先頭には、前記リアルタイム情報に代えて前記識別子が付加され、
　前記判定部は、前記データの前記先頭に付加された前記識別子と対応付けて前記記憶部に記憶された前記リアルタイム情報に基づいて、前記データを前記リアルタイムで転送するか否かを判定する
　請求項３に記載の転送装置。The storage unit stores the real-time information and the data identifier in association with each other,
The identifier is added to the head of the data instead of the real-time information,
The determination unit determines whether or not to transfer the data in real time based on the real-time information stored in the storage unit in association with the identifier added to the head of the data. 4. The transfer device according to 3.　前記データは、動画を示す動画データであり、
　前記受信装置は、前記動画データにより示される前記動画を表示する表示装置を有し、
　前記情報は、前記表示装置が対応する解像度又はフレームレートを含み、
　前記加工部は、前記解像度又は前記フレームレートに応じて、前記動画データの解像度又はフレームレートを変更する
　請求項１から４のいずれか１項に記載の転送装置。The data is video data indicating a video,
The receiving device has a display device that displays the moving image indicated by the moving image data,
The information includes a resolution or a frame rate corresponding to the display device,
The transfer device according to claim 1, wherein the processing unit changes a resolution or a frame rate of the moving image data according to the resolution or the frame rate.　前記受信装置は、前記データを指定された時間スケールで表示する表示装置を有し、
　前記情報は、前記時間スケールを含み、
　前記加工部は、前記時間スケールに応じて、前記データを間引く
　請求項１から５のいずれか１項に記載の転送装置。The receiving device has a display device that displays the data on a specified time scale,
The information includes the time scale;
The transfer device according to claim 1, wherein the processing unit thins out the data according to the time scale.　前記情報は、前記受信装置との間の通信の状況を含み、
　前記加工部は、前記通信の状況に応じて、前記データを間引く
　請求項１から６のいずれか１項に記載の転送装置。The information includes a status of communication with the receiving device,
The transfer device according to claim 1, wherein the processing unit thins out the data in accordance with the communication status.　前記送信装置から送信された前記データの最後には、前記最後であることを示す最後情報が付加され、
　前記最後情報が受信されると、前記データの受信が完了したと判定する判定部をさらに備え、
　前記送信部は、前記判定部により前記データの受信が完了したと判定されると、前記記憶部に記憶された前記データを所定の処理部に送信する
　請求項１から７のいずれか１項に記載の転送装置。At the end of the data transmitted from the transmission device, last information indicating the end is added,
When the last information is received, further comprising a determination unit that determines that the reception of the data is completed,
The transmission unit transmits the data stored in the storage unit to a predetermined processing unit when the determination unit determines that the reception of the data is completed. The transfer device described.　前記送信装置により送信された前記データは、センサにより検出された複数の検出量のうち少なくとも１つをそれぞれ含む複数のデータブロックにより構成され、前記複数のデータブロックの各々には、当該データブロックに含まれる前記少なくとも１つの検出量の数を示す数情報が付加され、
　前記データブロックに含まれる前記少なくとも１つの検出量の数と、前記データブロックに付加された前記数情報により示される前記数との差に応じて、前記データブロックが欠損しているか否かを判定する判定部と、
　前記判定部により前記データブロックが欠損していると判定された場合には、前記送信装置に、前記欠損したデータブロックの再送を要求する再送要求部と、
　前記再送要求部の要求に応じて前記送信装置から再送された前記データブロックを用いて、前記欠損したデータブロックを補完する補完部とをさらに備える
　請求項１から８のいずれか１項に記載の転送装置。The data transmitted by the transmission device includes a plurality of data blocks each including at least one of a plurality of detection amounts detected by a sensor, and each of the plurality of data blocks includes a data block. Number information indicating the number of the at least one detection amount included is added,
It is determined whether or not the data block is missing according to a difference between the number of the at least one detection amount included in the data block and the number indicated by the number information added to the data block. A determination unit to perform,
When the determination unit determines that the data block is missing, a retransmission request unit that requests the transmission device to retransmit the missing data block;
The supplementary part which complements the said missing data block using the said data block retransmitted from the said transmission apparatus according to the request | requirement of the said resending request part is further provided. Transfer device.　転送装置と送信装置と受信装置とを備え、
　前記転送装置は、
　前記送信装置から時系列に沿ったデータを受信する第１受信部と、
　前記受信装置と情報をやり取りすることにより前記データの送信条件を決定する決定部と、
　前記決定部により決定された前記送信条件に応じて、前記データを加工する加工部と、
　前記データをリアルタイムで転送する場合には、前記加工部により加工された前記データを前記受信装置に送信する第１送信部と、
　前記データを前記リアルタイムで転送しない場合には、前記データを前記時系列に沿って記憶する記憶部とを有し、
　前記送信装置は、
　前記データを取得する取得部と、
　前記取得部により取得された前記データを前記転送装置に送信する第２送信部とを有し、
　前記受信装置は、
　前記情報を前記転送装置に送信する第３送信部と、
　前記転送装置から送信された前記データを受信する第２受信部と、
　前記第２受信部により受信された前記データを用いて処理を行う処理部とを有する
　転送システム。A transfer device, a transmission device, and a reception device;
The transfer device is
A first receiver for receiving data in time series from the transmitter;
A determining unit that determines a transmission condition of the data by exchanging information with the receiving device;
A processing unit that processes the data according to the transmission condition determined by the determination unit;
When transferring the data in real time, a first transmission unit that transmits the data processed by the processing unit to the receiving device;
In the case where the data is not transferred in real time, the storage unit stores the data along the time series,
The transmitter is
An acquisition unit for acquiring the data;
A second transmission unit that transmits the data acquired by the acquisition unit to the transfer device;
The receiving device is:
A third transmitter for transmitting the information to the transfer device;
A second receiver for receiving the data transmitted from the transfer device;
And a processing unit that performs processing using the data received by the second receiving unit.　前記データは、撮像装置により撮影された動画を示す動画データと、計測装置から出力された計測データとを含み、
　前記処理部は、前記動画データと前記計測データとを、同一の時間軸に沿って出力する
　請求項１０に記載の転送システム。The data includes moving image data indicating a moving image taken by the imaging device, and measurement data output from the measurement device,
The transfer system according to claim 10, wherein the processing unit outputs the moving image data and the measurement data along the same time axis.　送信装置から時系列に沿ったデータを受信するステップと、
　受信装置と情報をやり取りすることにより前記データの送信条件を決定するステップと、
　前記決定された送信条件に応じて、前記データを加工するステップと、
　前記データをリアルタイムで転送する場合には、前記加工されたデータを前記受信装置に送信するステップと、
　前記データを前記リアルタイムで転送しない場合には、前記データを前記時系列に沿って記憶するステップと
　を備える転送方法。Receiving data in time series from the transmitting device;
Determining transmission conditions for the data by exchanging information with a receiving device;
Processing the data according to the determined transmission conditions;
When transferring the data in real time, transmitting the processed data to the receiving device;
And a step of storing the data along the time series when the data is not transferred in real time.　コンピュータに、
　送信装置から時系列に沿ったデータを受信するステップと、
　受信装置と情報をやり取りすることにより前記データの送信条件を決定するステップと、
　前記決定された送信条件に応じて、前記データを加工するステップと、
　前記データをリアルタイムで転送する場合には、前記加工されたデータを前記受信装置に送信するステップと、
　前記データを前記リアルタイムで転送しない場合には、前記データを前記時系列に沿って記憶するステップと
　を実行させるためのプログラム。On the computer,
Receiving data in time series from the transmitting device;
Determining transmission conditions for the data by exchanging information with a receiving device;
Processing the data according to the determined transmission conditions;
When transferring the data in real time, transmitting the processed data to the receiving device;
A program for executing the step of storing the data along the time series when the data is not transferred in real time.

Images