本発明は、制御プログラム、制御装置および制御方法、ならびに、視聴質出力プログラム、視聴質出力装置および視聴質出力方法に関する。The present invention relates to a control program, a control device, and a control method, as well as a viewing quality output program, a viewing quality output device, and a viewing quality output method.
特許文献１には、テレビの視聴エリアを撮像するようにカメラを配置し、得られた画像データから視聴エリア中に存在する人々の数と、視聴エリア中のビデオにエンゲージしている人々の数とを定量化する技術が開示されている。Patent document 1 discloses a technology in which a camera is positioned to capture an image of a television viewing area, and the number of people present in the viewing area and the number of people engaged with the video in the viewing area are quantified from the obtained image data.
本発明の課題は、テレビの視聴エリアを撮影し、種々の処理を行う制御プログラム、制御装置および制御方法、ならびに、視聴質出力プログラム、視聴質出力装置および視聴質出力方法を提供することである。The objective of the present invention is to provide a control program, a control device, and a control method for capturing an image of a television viewing area and performing various processes, as well as a viewing quality output program, a viewing quality output device, and a viewing quality output method.
本発明の一態様によれば、ディスプレイの視聴エリアを撮影するように配置されたカメラからの映像に基づいて、前記視聴エリア内にいる視聴者の状態を検知する視聴者検知部と、前記視聴者の状態に基づいて、制御対象機器を制御する機器制御部と、を備える制御装置が提供される。According to one aspect of the present invention, a control device is provided that includes a viewer detection unit that detects the state of a viewer in a viewing area of a display based on an image from a camera positioned to capture the viewing area, and a device control unit that controls a control target device based on the state of the viewer.
前記ディスプレイからの音声情報に基づいて、前記ディスプレイの状態を検知するディスプレイ状態検知部を備え、前記機器制御部は、前記視聴者の状態および前記ディスプレイの状態に基づいて、前記制御対象機器を制御してもよい。The device may include a display state detection unit that detects the state of the display based on audio information from the display, and the device control unit may control the control target device based on the state of the viewer and the state of the display.
前記ディスプレイ状態検知部は、前記ディスプレイの状態として、前記ディスプレイで再生されているコンテンツを検知し、前記機器制御部は、前記ディスプレイで再生されているコンテンツに基づいて、前記制御対象機器を制御してもよい。The display state detection unit may detect the content being played on the display as the state of the display, and the device control unit may control the control target device based on the content being played on the display.
前記制御対象機器は、前記視聴者の携帯端末であり、前記機器制御部は、前記ディスプレイで再生されているコンテンツに関する情報が前記視聴者の携帯端末に表示されるよう制御を行ってもよい。The controlled device may be a mobile terminal of the viewer, and the device control unit may perform control so that information about the content being played on the display is displayed on the viewer's mobile terminal.
前記制御対象機器は、対話型スピーカであり、前記機器制御部は、前記ディスプレイで再生されているコンテンツに関する情報が前記対話型スピーカから出力されるよう制御を行ってもよい。The controlled device may be an interactive speaker, and the device control unit may control the interactive speaker to output information about the content being played on the display.
前記視聴者検知部は、前記視聴者の状態として、前記視聴者が前記ディスプレイを注視しているか否かを検知し、前記機器制御部は、前記視聴者が前記ディスプレイを注視しているか否かに基づいて、前記制御対象機器を制御してもよい。The viewer detection unit may detect, as the state of the viewer, whether the viewer is gazing at the display, and the device control unit may control the control target device based on whether the viewer is gazing at the display.
前記制御対象機器は、前記視聴者の携帯端末であり、前記視聴者検知部は、前記視聴者
の状態として、前記視聴者が携帯端末を見ているか否かを検知し、前記機器制御部は、前記視聴者が携帯端末を見ている場合、前記携帯端末を制御してもよい。 The device to be controlled may be a mobile terminal of the viewer, the viewer detection unit may detect, as the state of the viewer, whether or not the viewer is looking at the mobile terminal, and the device control unit may control the mobile terminal if the viewer is looking at the mobile terminal.
本発明の一態様によれば、コンピュータを、ディスプレイの視聴エリアを撮影するように配置されたカメラからの映像に基づいて、前記視聴エリア内にいる視聴者の状態を検知する視聴者検知部と、前記視聴者の状態に基づいて、制御対象機器を制御する機器制御部と、として機能させる制御プログラムが提供される。According to one aspect of the present invention, a control program is provided that causes a computer to function as a viewer detection unit that detects the state of a viewer in a viewing area of a display based on an image from a camera positioned to capture the viewing area, and as a device control unit that controls a device to be controlled based on the state of the viewer.
本発明の一態様によれば、ディスプレイの視聴エリアを撮影するように配置されたカメラからの映像に基づいて、前記視聴エリア内にいる視聴者の状態を検知し、前記視聴者の状態に基づいて、制御対象機器を制御する、制御方法が提供される。According to one aspect of the present invention, a control method is provided that detects the state of a viewer in a viewing area of a display based on an image from a camera positioned to capture the viewing area, and controls a device to be controlled based on the state of the viewer.
本発明の一態様によれば、コンピュータを、放送局、期間、コンテンツ、および、視聴者の属性のうちの少なくとも１つの設定を受け付ける設定受付手段と、放送局および日時毎、または、コンテンツ毎に、視聴者の属性と関連付けて視聴質値を記憶した記憶手段から、前記受け付けた設定に応じた視聴質値を取得する取得手段と、前記受け付けた設定に応じて、視聴質値に関する情報を出力させる出力制御手段と、として機能させる視聴質出力プログラムが提供される。According to one aspect of the present invention, a viewing quality output program is provided that causes a computer to function as: a setting receiving means for receiving at least one setting of a broadcast station, a period, content, and viewer attributes; an acquisition means for acquiring a viewing quality value corresponding to the accepted setting from a storage means that stores viewing quality values in association with viewer attributes for each broadcast station and date and time, or for each content; and an output control means for outputting information related to the viewing quality value according to the accepted setting.
前記出力制御手段は、前記視聴質値に関する情報をディスプレイに表示させてもよい。The output control means may cause information relating to the audience quality value to be displayed on a display.
前記出力制御手段は、所定方向に曜日が設定され、前記所定方向と直交する方向に時間軸が設定され、各曜日および各時間帯に対応する位置の表示態様が視聴質値に関する情報に対応する視聴質情報を前記ディスプレイに表示させてもよい。The output control means may cause the display to display viewing quality information in which days of the week are set in a predetermined direction, a time axis is set in a direction perpendicular to the predetermined direction, and the display mode of positions corresponding to each day of the week and each time period corresponds to information about viewing quality values.
前記設定受付手段は、集計時間の設定を受け付け、前記時間軸の単位は、前記集計時間に対応してもよい。The setting reception means may receive a setting for the aggregation time, and the unit of the time axis may correspond to the aggregation time.
前記受け付けた設定が放送局の選択を含む場合、前記出力制御手段は、選択された放送局のそれぞれについて前記視聴質情報をディスプレイに表示させてもよい。If the received settings include a selection of broadcast stations, the output control means may cause the viewing quality information for each selected broadcast station to be displayed on a display.
本発明の一態様によれば、コンピュータを、放送局および日時毎、または、コンテンツ毎に、視聴者の視聴質値を記憶した記憶手段から視聴質値を取得する取得手段と、所定方向に曜日が設定され、前記所定方向と直交する方向に時間軸が設定され、各曜日および各時間帯に対応する位置の表示態様が視聴質値に関する情報に対応する視聴質情報を出力させる出力制御手段と、として機能させる視聴質出力プログラムが提供される。According to one aspect of the present invention, a viewing quality output program is provided that causes a computer to function as: acquisition means for acquiring viewing quality values from storage means that stores viewer viewing quality values for each broadcast station and date and time, or for each piece of content; and output control means for outputting viewing quality information in which days of the week are set in a predetermined direction, a time axis is set in a direction perpendicular to the predetermined direction, and the display mode of positions corresponding to each day of the week and each time period corresponds to information related to the viewing quality value.
前記出力制御手段は、前記視聴質情報をディスプレイに表示させてもよい。The output control means may cause the audience quality information to be displayed on a display.
各曜日および各時間帯に対応する位置は、前記視聴質値が高いほど色が濃い、あるいは、視聴質値に関する情報に応じた色であってもよい。The positions corresponding to each day of the week and each time slot may be darker in color as the viewing quality value increases, or may be colored in accordance with information related to the viewing quality value.
前記出力制御手段は、各曜日および各時間帯に対応する位置に、視聴質値に関する情報を表示させてもよい。The output control means may display information about the viewing quality value at a position corresponding to each day of the week and each time slot.
前記出力制御手段は、全放送局のそれぞれについて前記視聴質情報をディスプレイに表示させてもよい。The output control means may cause the audience quality information for each of all broadcasting stations to be displayed on a display.
本発明の一態様によれば、コンピュータを、複数回再生されるコンテンツのそれぞれについて、視聴者の視聴質値を記憶した記憶手段から視聴質値を取得する取得手段と、前記
複数回再生されるコンテンツのそれぞれの視聴質値に関する情報の変化をグラフで出力させる出力制御手段と、として機能させる、視聴質出力プログラムが提供される。 According to one aspect of the present invention, there is provided a viewing quality output program that causes a computer to function as: an acquisition means for acquiring a viewing quality value from a storage means that stores a viewer's viewing quality value for each piece of content that is played a number of times; and an output control means for outputting, in a graph, changes in information relating to the viewing quality value for each piece of content that is played a number of times.
前記グラフの第１軸は、時間を示し、前記グラフの第２軸は、前記第１軸が示す時間に再生されたコンテンツの前記視聴質値に関する値を示してもよい。The first axis of the graph may indicate time, and the second axis of the graph may indicate a value related to the viewing quality value of the content played at the time indicated by the first axis.
前記グラフの第１軸は、特定のコンテンツが表示された時の視聴率を積算した値であり、前記グラフの第２軸は、前記第１軸が示す値に対する、視聴質値に関する値であってもよい。The first axis of the graph may represent a value obtained by accumulating the viewer ratings when a particular piece of content is displayed, and the second axis of the graph may represent a value related to the viewer quality value relative to the value indicated by the first axis.
本発明の一態様によれば、放送局、期間、コンテンツ、および、視聴者の属性のうちの少なくとも１つの設定を受け付ける設定受付手段と、放送局および日時毎、または、コンテンツ毎に、視聴者の属性と関連付けて視聴質値を記憶した記憶手段から、前記受け付けた設定に応じた視聴質値を取得する取得手段と、前記受け付けた設定に応じて、視聴質値に関する情報を出力させる出力制御手段と、を備える視聴質出力装置が提供される。According to one aspect of the present invention, a viewing quality output device is provided that includes a setting receiving means for receiving at least one setting of a broadcast station, a period, a content, and a viewer attribute, an acquisition means for acquiring a viewing quality value corresponding to the accepted setting from a storage means that stores viewing quality values in association with viewer attributes for each broadcast station and date and time, or for each content, and an output control means for outputting information related to the viewing quality value according to the accepted setting.
本発明の一態様によれば、放送局、期間、コンテンツ、および、視聴者の属性のうちの少なくとも１つの設定を受け付け、放送局および日時毎、または、コンテンツ毎に、視聴者の属性と関連付けて視聴質値を記憶した記憶手段から、前記受け付けた設定に応じた視聴質値を取得し、前記受け付けた設定に応じて、視聴質値に関する情報を出力させる、視聴質出力方法が提供される。According to one aspect of the present invention, a viewing quality output method is provided that accepts at least one setting of a broadcast station, a period, content, and viewer attributes, acquires a viewing quality value corresponding to the accepted setting from a storage means that stores viewing quality values in association with viewer attributes for each broadcast station and date and time, or for each content, and outputs information related to the viewing quality value according to the accepted setting.
本発明の一態様によれば、放送局および日時毎、または、コンテンツ毎に、視聴者の視聴質値を記憶した記憶手段から視聴質値を取得する取得手段と、所定方向に曜日が設定され、前記所定方向と直交する方向に時間軸が設定され、各曜日および各時間帯に対応する位置の表示態様が視聴質値に関する情報に対応する視聴質情報を出力させる出力制御手段と、を備える視聴質出力装置が提供される。According to one aspect of the present invention, there is provided a viewing quality output device that includes: acquisition means for acquiring viewing quality values from storage means that stores the viewing quality values of viewers for each broadcast station and date and time, or for each content; and output control means for outputting viewing quality information in which days of the week are set in a predetermined direction, a time axis is set in a direction perpendicular to the predetermined direction, and the display mode of positions corresponding to each day of the week and each time period corresponds to information related to the viewing quality value.
本発明の一態様によれば、放送局および日時毎、または、コンテンツ毎に、視聴者の視聴質値を記憶した記憶手段から視聴質値を取得し、所定方向に曜日が設定され、前記所定方向と直交する方向に時間軸が設定され、各曜日および各時間帯に対応する位置の表示態様が視聴質値に関する情報に対応する視聴質情報を出力させる、視聴質出力方法が提供される。According to one aspect of the present invention, a viewing quality output method is provided, which obtains viewing quality values from a storage means that stores the viewing quality values of viewers for each broadcast station and date and time, or for each content, sets the days of the week in a predetermined direction, sets a time axis in a direction perpendicular to the predetermined direction, and outputs viewing quality information in which the display mode of a position corresponding to each day of the week and each time period corresponds to information on the viewing quality value.
本発明の一態様によれば、複数回再生されるコンテンツのそれぞれについて、視聴者の視聴質値を記憶した記憶手段から視聴質値を取得する取得手段と、前記複数回再生されるコンテンツのそれぞれの視聴質値に関する情報の変化をグラフで出力させる出力制御手段と、を備える視聴質出力装置が提供される。According to one aspect of the present invention, there is provided a viewing quality output device that includes: an acquisition means for acquiring a viewing quality value from a storage means that stores a viewer's viewing quality value for each piece of content that is played multiple times; and an output control means for outputting, in a graph, changes in information related to the viewing quality value for each piece of content that is played multiple times.
本発明の一態様によれば、複数回再生されるコンテンツのそれぞれについて、視聴者の視聴質値を記憶した記憶手段から視聴質値を取得するステップと、前記複数回再生されるコンテンツのそれぞれの視聴質値に関する情報の変化をグラフで出力させるステップと、を備える視聴質出力方法が提供される。According to one aspect of the present invention, a viewing quality output method is provided that includes the steps of: acquiring a viewing quality value from a storage means that stores a viewer's viewing quality value for each piece of content that is played multiple times; and outputting, in a graph, changes in information related to the viewing quality value for each piece of content that is played multiple times.
テレビの視聴エリアを撮影し、種々の処理を行うことができる。The television viewing area can be photographed and various processing can be performed.
以下、本発明に係る実施形態について、図面を参照しながら具体的に説明する。The following describes in detail an embodiment of the present invention with reference to the drawings.
（第１の実施形態）
第１の実施形態は、テレビの視聴エリアをカメラで撮影し、得られた映像に基づいて任意の機器を制御するものである。
図１は、第１の実施形態に係る制御システムを模式的に示す図である。本制御システムは、カメラ２１と、マイク２２と、制御装置２３とを備える。図１は、リビングに設置されたテレビ１００と、その前方の視聴エリアも示している。(First embodiment)
In the first embodiment, a television viewing area is photographed by a camera, and an arbitrary device is controlled based on the obtained image.
Fig. 1 is a diagram showing a schematic diagram of a control system according to a first embodiment. The control system includes a camera 21, a microphone 22, and a control device 23. Fig. 1 also shows a television 100 installed in a living room and a viewing area in front of the television 100.
カメラ２１は、テレビ１００の枠やリビングの天井など、テレビ１００の視聴エリアを撮影するように配置される。マイク２２は、テレビ１００のスピーカの近傍など、テレビ１００からの音声を取得するように配置される。制御装置２３は、カメラ２１で撮影された映像および／またはマイク２２で取得された音声に基づき、任意の制御対象機器２４を制御する。なお、制御装置２３がテレビ１００からの音声情報をテレビ１００から直接取得できる場合（例えばテレビ１００のイヤフォンジャックや音声出力端子と制御装置２３とを接続できる場合）には、マイク２２を設けなくてもよい。The camera 21 is positioned to capture the viewing area of the television 100, such as the frame of the television 100 or the ceiling of the living room. The microphone 22 is positioned to capture audio from the television 100, such as near the speaker of the television 100. The control device 23 controls any control target device 24 based on the image captured by the camera 21 and/or the audio captured by the microphone 22. Note that if the control device 23 can directly capture audio information from the television 100 (for example, if the earphone jack or audio output terminal of the television 100 can be connected to the control device 23), the microphone 22 does not need to be provided.
図２は、第１の実施形態に係る制御システムの概略構成を示すブロック図である。本制御システムにおける制御装置２３は、通信部２３１と、視聴者検知部２３２と、テレビ状態検知部２３３と、機器制御部２３４とを備える。制御装置２３はプロセッサおよびメモリを有するコンピュータであってよく、これら各部の機能の一部または全部は、メモリに記憶された所定のプログラムをプロセッサが実行することによって実現されてもよい。Figure 2 is a block diagram showing a schematic configuration of a control system according to the first embodiment. The control device 23 in this control system includes a communication unit 231, a viewer detection unit 232, a television state detection unit 233, and a device control unit 234. The control device 23 may be a computer having a processor and memory, and some or all of the functions of these units may be realized by the processor executing a predetermined program stored in the memory.
通信部２３１は、カメラ２１、マイク２２および制御対象機器２４との通信を行う。通信の種類に特に制限はなく、有線通信でもよいし、近距離無線通信や無線ＬＡＮなどの無線通信でもよい。具体的には、通信部２３１はカメラ２１やマイク２２からの情報を受信する。また、通信部２３１は、カメラ２１、マイク２２および制御対象機器２４を制御するための情報を送信する。The communication unit 231 communicates with the camera 21, the microphone 22, and the controlled device 24. There are no particular limitations on the type of communication, and it may be wired communication or wireless communication such as short-range wireless communication or wireless LAN. Specifically, the communication unit 231 receives information from the camera 21 and the microphone 22. In addition, the communication unit 231 transmits information for controlling the camera 21, the microphone 22, and the controlled device 24.
視聴者検知部２３２は、カメラ２１からの映像に基づき、視聴エリア内にいる視聴者の状態を検知する。具体的な処理例として、視聴者検知部２３２は、カメラ２１からの映像から顔認識を行うなどにより、視聴エリア内にいる視聴者（あるいは、視聴エリア内に視聴者がいないこと）を特定する。視聴者検知部２３２は、物体認識の一部の機能である人体認識を行い、検知された人体に含まれる顔を取り出して、予め登録された顔写真との照合を行ってもよい。そして、視聴者検知部２３２は、各視聴者がテレビ１００を注視しているか否か、あるいは、各視聴者が自身の携帯端末（スマートフォンやタブレットなど）を見ているか否かなどを検知する。なお、本明細書では、テレビの視聴エリアにいる人を（実際に視聴しているか否かにかかわらず）「視聴者」と呼ぶことがある。The viewer detection unit 232 detects the state of the viewer in the viewing area based on the image from the camera 21. As a specific processing example, the viewer detection unit 232 identifies the viewer in the viewing area (or that there is no viewer in the viewing area) by performing face recognition from the image from the camera 21. The viewer detection unit 232 may perform human body recognition, which is a part of the object recognition function, extract the face contained in the detected human body, and compare it with a pre-registered face photo. The viewer detection unit 232 then detects whether each viewer is gazing at the television 100, or whether each viewer is looking at their own mobile device (such as a smartphone or tablet). In this specification, people in the viewing area of the television (regardless of whether they are actually watching) may be called "viewers".
また、視聴者検知部２３２は特定された各視聴者の属性（性別、年齢など）や喜怒哀楽といった表情を検知してもよい。その他、視聴者検知部２３２は、視聴エリア内にいる視聴者の数、各視聴者がテレビ１００を注視している時間、テレビ１００と視聴者との距離などを視聴者の状態として検知してもよい。視聴者検知部２３２は人工知能を活用して検知処理を行ってもよいし、公知の手法で検知処理を行ってもよい。The viewer detection unit 232 may also detect the attributes (gender, age, etc.) and facial expressions such as joy, anger, sadness, and happiness of each identified viewer. In addition, the viewer detection unit 232 may detect the number of viewers in the viewing area, the time each viewer spends gazing at the television 100, the distance between the television 100 and the viewer, and the like as the state of the viewer. The viewer detection unit 232 may perform the detection process using artificial intelligence, or may perform the detection process using a known method.
テレビ状態検知部２３３は、テレビ１００からの音声情報に基づき、テレビ１００の状態を検知する。テレビ１００の状態とは、テレビ１００がオンしているかオフしているか、どのコンテンツが再生されているか、などである。コンテンツは、番組であってもよいし、ＣＭであってもよいし、特定のシーン（一定の事件や事故など）であってもよく、コンテンツの単位は任意である。また、ここでのコンテンツは、現在放送中（リアルタイム）のものでもよいし、録画したものでもよい。また、コンテンツとして、コンテンツを特定してもよいし、コンテンツのジャンル（スポーツ、映画、ニュースなど）を検知してもよい。また、コンテンツは放送波によるものに限られず、インターネット経由で提供されるコンテンツも含む（この場合、テレビ１００でなく単なるディスプレイであってよい）。テレビ１００で再生されているコンテンツを特定する手法の例は第２の実施形態で述べる。The television status detection unit 233 detects the status of the television 100 based on audio information from the television 100. The status of the television 100 includes whether the television 100 is on or off, which content is being played, and the like. The content may be a program, a commercial, or a specific scene (such as a certain incident or accident), and the unit of content is arbitrary. The content here may be something currently being broadcast (real time) or something that has been recorded. The content may be specified, or the genre of the content (sports, movies, news, etc.) may be detected. The content is not limited to content provided by broadcast waves, and may also include content provided via the Internet (in this case, it may be a simple display, not the television 100). An example of a method for specifying the content being played on the television 100 will be described in the second embodiment.
機器制御部２３４は、視聴者検知部２３２および／またはテレビ状態検知部２３３による検知結果に基づき、制御対象機器２４を制御する。より詳しくは、機器制御部２３４は制御対象機器２４を制御するための制御情報を生成し、通信部２３１を介して制御情報を送信することによって制御対象機器２４を制御する。制御対象機器２４は、例えばテレビ１００そのものでもよいし、テレビ以外のスピーカ、（テレビが設置されたリビングあるいは他の部屋の）照明、視聴者の携帯端末、対話型スピーカ（ＡＩアシスタント機能を有する、いわゆる「スマートスピーカ」と呼ばれるもの）などであってよい。The device control unit 234 controls the controlled device 24 based on the detection results by the viewer detection unit 232 and/or the television state detection unit 233. More specifically, the device control unit 234 generates control information for controlling the controlled device 24 and controls the controlled device 24 by transmitting the control information via the communication unit 231. The controlled device 24 may be, for example, the television 100 itself, a speaker other than the television, a light (in the living room where the television is installed or in another room), a viewer's mobile terminal, an interactive speaker (a so-called "smart speaker" having an AI assistant function), etc.
ここで、機器制御部２３４は、外部機器とネットワーク接続されない制御対象機器２４（家庭内に設置されるテレビ、スピーカ、照明など）に対して、近距離無線通信や家庭内ＬＡＮを介して制御信号を送信することにより、制御対象機器２４を直接的に制御してもよい。また、サーバなどの外部機器とネットワーク接続される制御対象機器２４（携帯端末、対話型スピーカなど）に対しては、インターネット回線を介してサーバなどの外部機器に制御信号を送信することにより、制御対象機器２４を間接的に制御（すなわち、機器制御部２３４からの制御信号に応じて、外部機器が制御対象機器２４を制御）してもよい。Here, the device control unit 234 may directly control the control target device 24 (such as a television, speaker, or light installed in the home) that is not networked with an external device by transmitting a control signal via short-range wireless communication or a home LAN. Also, for the control target device 24 (such as a mobile terminal or an interactive speaker) that is networked with an external device such as a server, the device control unit 234 may indirectly control the control target device 24 by transmitting a control signal to the external device such as the server via an Internet line (i.e., the external device controls the control target device 24 in response to a control signal from the device control unit 234).
なお、機器制御部２３４は、特定された視聴者個人の携帯端末を制御すべく、視聴者検知部２３２によって特定され得る視聴者（テレビが設置された家庭内における父であるか、母であるか、など）と、その視聴者が用いる携帯端末との対応関係を予め把握しておくのが望ましい。In order to control the mobile device of an identified viewer, it is desirable for the device control unit 234 to grasp in advance the correspondence between the viewer who can be identified by the viewer detection unit 232 (e.g., the father or mother in a household where a television is installed) and the mobile device used by that viewer.
上述したように、カメラ２１を利用することで視聴エリア内にいる視聴者を検知でき、かつ、マイク２２を利用することでテレビ１００の状態を検知できる。そこで、その両者を用いて機器制御部２３４は制御対象機器２４を制御してもよい。あるいは、その一方のみを用いて機器制御部２３４は制御対象機器２４を制御してもよい。以下、機器制御部２３４による制御の具体例を挙げる。As described above, the camera 21 can be used to detect viewers in the viewing area, and the microphone 22 can be used to detect the state of the television 100. Therefore, the device control unit 234 may use both of them to control the control target device 24. Alternatively, the device control unit 234 may use only one of them to control the control target device 24. Specific examples of control by the device control unit 234 are given below.
例えば、視聴エリア内に視聴者がいないにも拘らずテレビ１００がオンしている場合、機器制御部２３４はテレビ１００をオフしたり、テレビ１００が設置された部屋の照明をオフしたりしてもよい。あるいは、視聴エリア内に視聴者がいない状態からいる状態になった場合に、機器制御部２３４はテレビ１００をオンしてもよい。また、視聴エリア内に視聴者がいない状態からいる状態になり、かつ、その視聴者がテレビ１００を注視した場合、機器制御部２３４はテレビ１００をオンしてもよい。For example, if the television 100 is on even though there is no viewer in the viewing area, the device control unit 234 may turn off the television 100 or turn off the lights in the room where the television 100 is installed. Alternatively, if there is a viewer in the viewing area, the device control unit 234 may turn on the television 100. Also, if there is a viewer in the viewing area, the device control unit 234 may turn on the television 100 when there is a viewer in the viewing area, and the viewer is looking at the television 100.
また、機器制御部２３４はテレビ１００のコンテンツを制御してもよい。例えば、視聴者がテレビ１００を注視していない場合、視聴者の気を惹くための画像をテレビ１００のディスプレイの少なくとも一部に表示させたり、音声をテレビ１００のスピーカから出力させたりしてもよい。このような画像や音声は、予め定めたものでもよいし、視聴者の属性や好みに合わせたものでもよい。The device control unit 234 may also control the content of the television 100. For example, when the viewer is not watching the television 100, an image to attract the viewer's attention may be displayed on at least a part of the display of the television 100, or sound may be output from the speaker of the television 100. Such images and sounds may be predetermined, or may be tailored to the attributes and preferences of the viewer.
また、機器制御部２３４はテレビ１００で再生されているコンテンツに基づいて制御対象機器２４を制御してもよい。具体例として、機器制御部２３４は、コンテンツに関する情報を対話型スピーカから出力させたり、視聴者の携帯端末に表示させたりしてもよい。より詳細には、機器制御部２３４は再生されているコンテンツを示す情報を、携帯端末や対話型スピーカに接続される外部サーバに送信する。これにより、外部サーバからの制御を受けて、対話型スピーカから当該コンテンツに関する情報がレコメンドされたり、当該コンテンツに関する広告が視聴者の携帯端末に表示されたりする。The device control unit 234 may also control the controlled device 24 based on the content being played on the television 100. As a specific example, the device control unit 234 may cause information about the content to be output from the interactive speaker or displayed on the viewer's mobile terminal. More specifically, the device control unit 234 transmits information indicating the content being played to an external server connected to the mobile terminal or the interactive speaker. As a result, under control of the external server, information about the content is recommended from the interactive speaker or an advertisement related to the content is displayed on the viewer's mobile terminal.
また、機器制御部２３４は、視聴者が携帯端末を見ている場合に、その携帯端末を制御してもよい。あるいは、機器制御部２３４は、視聴者がテレビを注視していない場合、視聴者が携帯端末を見ている可能性があるとして、その携帯端末を制御してもよい。具体例として、機器制御部２３４はテレビで再生されているＣＭに関する情報が携帯端末にリアルタイムに表示されるようにしてもよい。これにより、テレビで再生されているＣＭを視聴者が注視していないとしても、このＣＭと同内容あるいは関連する内容の広告を視聴者に見てもらうことができる。Furthermore, the device control unit 234 may control a mobile terminal when the viewer is looking at the mobile terminal. Alternatively, when the viewer is not watching the television, the device control unit 234 may control the mobile terminal, assuming that the viewer is likely looking at the mobile terminal. As a specific example, the device control unit 234 may cause information about a commercial being played on the television to be displayed in real time on the mobile terminal. This allows the viewer to view an advertisement with the same content as or related content to a commercial being played on the television, even if the viewer is not watching the commercial.
以上述べたように、第１の実施形態では、テレビ１００の視聴エリアをカメラ２１で撮影し、得られた映像に基づいて制御対象機器２４を制御する。そのため、視聴エリアに視聴者がいるか否か、いる場合に、どのような視聴者がいるか、テレビを見ているか否か、といった視聴エリアの様々な状況に応じて、制御対象機器２４を適切に制御できる。さらに、第１の実施形態では、テレビ１００の音声から取得されるテレビ１００の状態を考慮して制御対象機器２４を制御することによって、より多様な制御が可能となる。As described above, in the first embodiment, the viewing area of the television 100 is photographed by the camera 21, and the controlled device 24 is controlled based on the obtained image. Therefore, the controlled device 24 can be appropriately controlled according to various conditions of the viewing area, such as whether or not there are viewers in the viewing area, and if so, what type of viewers there are, and whether or not they are watching television. Furthermore, in the first embodiment, more diverse control is possible by controlling the controlled device 24 in consideration of the state of the television 100 obtained from the sound of the television 100.
（第２の実施形態）
従来から、特定のテレビ番組を視聴した世帯の割合を示す目安として「世帯視聴率」が広く用いられてきた。しかしながら、世帯視聴率は、そのテレビ番組が選局されている世帯の割合に対応するにすぎず、必ずしもそのテレビ番組を視聴している世帯の割合と相関するとは限らない。Second Embodiment
Traditionally, the "household viewership rating" has been widely used as a measure of the percentage of households that watch a particular television program. However, the household viewership rating only corresponds to the percentage of households that have the television program tuned in, and does not necessarily correlate with the percentage of households that watch the television program.
また、近年では、世帯の割合単位ではなく、個人単位で視聴率を取得することも行われている。個人単位の視聴率は、所定の装置に家族の構成員それぞれに対応付けたボタンを
設け、テレビを見る人が自身に対応付けられたボタンを選択することで、番組を視聴したものとして記録している。しかしながら、個人単位の視聴率に関しても、必ずしもその人が実際にテレビを視聴しているとは限らず、何となくテレビをつけっぱなしにしているだけである可能性もある。 In recent years, viewer ratings are also obtained on an individual basis, rather than on a household ratio basis. For individual viewer ratings, a specific device is provided with buttons corresponding to each member of a family, and when a person watching television selects the button corresponding to himself or herself, it is recorded as having watched a program. However, even with regard to individual viewer ratings, it is not necessarily the case that the person is actually watching television, and there is a possibility that they just leave the television on for some reason.
これに対し、上述した特許文献１は、視聴の「質」に着目し、ディスプレイの前の視聴エリア中に存在する人々の数と、視聴エリア中のビデオにエンゲージしている人々の数とを定量化する技術を開示している。しかし、特許文献１は、単にこれらの数を定量化することを開示するのみで、どのようにユーザに提示すればよいか何ら考慮がなされていない。In response to this, the above-mentioned Patent Document 1 focuses on the "quality" of viewing and discloses technology to quantify the number of people present in the viewing area in front of the display and the number of people engaged with the video in the viewing area. However, Patent Document 1 simply discloses quantifying these numbers, and does not give any consideration to how to present them to the user.
次に述べる第２の実施形態は、視聴質をより分かりやすく提示できるようにするものである。The second embodiment described below makes it possible to present viewing quality in a more understandable way.
第２の実施形態では、視聴質を視聴質値として定量化する。視聴質の例として、どれほどの視聴者がテレビを視聴可能であったかの指標（Viewability Index、以下「ＶＩ値」
という）と、どれほどの視聴者がテレビを注視したかの指標（Attention Index、「以下
「ＡＩ値」という）を用いる。ＶＩ値は視聴者の滞在度合いを示しており、高ければ高いほど、１台のテレビにつき、より多くの視聴者がテレビの前に位置したことを示す。一方、ＡＩ値は、視聴者の注視度合いを示しており、高ければ高いほど、その視聴率において、より多くの視聴者がテレビのコンテンツに注視したことを示す。 In the second embodiment, the viewing quality is quantified as a viewing quality value. An example of the viewing quality is an index of how many viewers were able to watch television (Viewability Index, hereinafter referred to as the "VI value").
The VI value indicates the degree to which viewers stayed in front of the television, and the higher the VI value, the more viewers sat in front of each television. On the other hand, the AI value indicates the degree to which viewers paid attention, and the higher the AI value, the more viewers paid attention to the television content at that viewership rating.
まずは、ＶＩ値およびＡＩ値取得法の一例を説明する。
図３Ａは、視聴質取得システムの概略構成を示すブロック図である。視聴質取得システムは、視聴情報取得装置１と、チャンネル・放送時間データベース２と、視聴質管理装置３とを備えている。視聴情報取得装置１は世帯ごとに設置され、各世帯の視聴情報取得装置１からの情報を視聴質管理装置３が集約することを想定している。 First, an example of a method for obtaining the VI value and the AI value will be described.
3A is a block diagram showing a schematic configuration of a viewing quality acquisition system. The viewing quality acquisition system includes a viewing information acquisition device 1, a channel and broadcast time database 2, and a viewing quality management device 3. It is assumed that a viewing information acquisition device 1 is installed in each household, and information from the viewing information acquisition device 1 of each household is aggregated by the viewing quality management device 3.
視聴情報取得装置１は世帯ごとに設置される。また、各世帯に属する者（世帯構成員）は予め定まっている。以下では、視聴情報取得装置１が設置された世帯に世帯構成員Ａ，Ｂ，Ｃの３人が含まれるものとして説明する。The viewing information acquisition device 1 is installed in each household. In addition, the people who belong to each household (household members) are determined in advance. In the following explanation, it is assumed that the household in which the viewing information acquisition device 1 is installed includes three household members A, B, and C.
視聴情報取得装置１は、カメラ１１と、ＩＲセンサ１２と、視聴者検知部１３と、マイク１４と、テレビ状態検知部１５と、送信部１６とを有する。The viewing information acquisition device 1 has a camera 11, an IR sensor 12, a viewer detection unit 13, a microphone 14, a television state detection unit 15, and a transmission unit 16.
カメラ１１は、テレビの視聴エリア（テレビの前方）を撮影し、カメラ画像を視聴者検知部１３に供給する。Camera 11 captures the television viewing area (in front of the television) and supplies the camera image to the viewer detection unit 13.
ＩＲセンサ１２は、視聴エリアに赤外線を照射する発光部と、物体（特に、視聴者）から反射された赤外線を検出する受光部とを有する。そして、ＩＲセンサ１２は、受光部によって検出された赤外線に基づき、発光部と物体との距離を示す深度画像を生成して視聴者検知部１３に供給する。The IR sensor 12 has a light-emitting unit that irradiates the viewing area with infrared rays, and a light-receiving unit that detects infrared rays reflected from an object (particularly, a viewer). Based on the infrared rays detected by the light-receiving unit, the IR sensor 12 generates a depth image indicating the distance between the light-emitting unit and the object, and supplies the image to the viewer detection unit 13.
視聴者検知部１３は、滞在者検知部１３１と、注視者検知部１３２とを有する。The viewer detection unit 13 has a visitor detection unit 131 and a gazing person detection unit 132.
滞在者検知部１３１は、カメラ画像および深度画像から顔認識を行うなどにより、あるいは、歩き方や体型などに基づいて、視聴エリアにいる滞在者を検知する。より具体的には、滞在者検知部１３１は滞在者が世帯構成員Ａ～Ｃのいずれであるかを特定する。そして、滞在者検知部１３１は各時刻にどの視聴者が滞在していたかを示す滞在者情報を生成する。The visitor detection unit 131 detects visitors in the viewing area by performing facial recognition from camera images and depth images, or based on the way the visitor walks or their body type. More specifically, the visitor detection unit 131 identifies which of household members A to C the visitor is. The visitor detection unit 131 then generates visitor information indicating which viewer was present at each time.
図３Ｂに滞在者情報を模式的に示す。同図に示すように、滞在者情報は各時刻に世帯構成員Ａ～Ｃのそれぞれが視聴エリアに滞在していたか否かを示す。同図の丸印は滞在していたことを示し、バツ印は滞在していなかったことを示している。例えば、世帯構成員Ａは、２０２０年１月３日の１９時００分００秒、同日１９時００分０５秒、同日１９時００分１０秒のいずれも視聴エリアに滞在している。Figure 3B shows a schematic diagram of visitor information. As shown in the figure, the visitor information indicates whether or not each of household members A to C was in the viewing area at each time. A circle in the figure indicates that they were present, and a cross indicates that they were not present. For example, household member A was in the viewing area at 19:00:00 on January 3, 2020, at 19:00:05 on the same day, and at 19:00:10 on the same day.
滞在者情報は各時刻における滞在者数を示すとも言える。なお、図３Ｂでは５秒単位で滞在者を検知しているが、単位に特に制限はない。The visitor information can be said to indicate the number of visitors at each time. Note that in Figure 3B, visitors are detected every 5 seconds, but there are no particular limitations on the unit.
注視者検知部１３２は、カメラ画像および深度画像から視聴者のジェスチャ、動き、顔の向き、視線の動きを分析するなどにより、テレビを注視している滞在者を検知する。より具体的には、注視者検知部１３２は注視者が世帯構成員Ａ～Ｃのいずれであるかを特定する。そして、注視者検知部１３２は各時刻にどの視聴者がテレビを注視していたかを示す注視者情報を生成する。The gazing person detection unit 132 detects people gazing at the television by analyzing the viewer's gestures, movements, facial direction, and gaze movements from the camera image and depth image. More specifically, the gazing person detection unit 132 identifies which of household members A to C the person gazing at is. The gazing person detection unit 132 then generates gazing person information indicating which viewer was gazing at the television at each time.
図３Ｃに注視者情報を模式的に示す。同図に示すように、注視者情報は各時刻に世帯構成員Ａ～Ｃのそれぞれがテレビを注視していたか否かを示す。同図の丸印は注視していたことを示し、バツ印は注視していなかったことを示している。例えば、世帯構成員Ａは、２０２０年１月３日の１９時００分００秒および同日１９時００分１０秒にはテレビを注視していたが、同日１９時００分０５秒ではテレビを注視していない。Figure 3C shows a schematic diagram of the gazer information. As shown in the figure, the gazer information indicates whether each of household members A to C was gazing at the television at each time. A circle in the figure indicates that they were gazing, and a cross indicates that they were not gazing. For example, household member A was gazing at the television at 19:00:00 and 19:00:10 on January 3, 2020, but was not gazing at the television at 19:00:05 on the same day.
注視者情報は各時刻における注視者数を示すとも言える。なお、図３Ｂでは５秒単位で注視者を検知しているが、単位に特に制限はない。The gazer information can be said to indicate the number of gazers at each time. Note that in Figure 3B, gazers are detected every 5 seconds, but there are no particular limitations on the unit.
図３Ａに戻り、マイク１４は、テレビから再生される音声を集音し、テレビ状態検知部１５に供給する。Returning to FIG. 3A, the microphone 14 collects the audio being played from the television and supplies it to the television state detection unit 15.
テレビ状態検知部１５は、テレビからの音声情報に基づいて、テレビの状態を取得する。具体的には、テレビ状態検知部１５は、フィンガープリント生成部１５１と、チャンネル・放送時間情報取得部１５２とを有する。The television status detection unit 15 acquires the status of the television based on audio information from the television. Specifically, the television status detection unit 15 has a fingerprint generation unit 151 and a channel/broadcast time information acquisition unit 152.
フィンガープリント生成部１５１はマイク１４からの音声を処理して、オーディオフィンガープリント（以下、単に「フィガープリント」という）Ｆを生成する。The fingerprint generation unit 151 processes the audio from the microphone 14 and generates an audio fingerprint (hereinafter simply called "fingerprint") F.
チャンネル・放送時間情報取得部１５２は、フィンガープリントＦと、チャンネル（放送局）および放送時間との対応関係を記憶したチャンネル・放送時間データベース２に基づいて、各時刻におけるテレビの状態を取得し、テレビ状態情報を生成する。テレビ状態情報は、各時刻にテレビに表示されていたコンテンツの放送局および放送日時を示す。The channel and broadcast time information acquisition unit 152 acquires the state of the television at each time based on the channel and broadcast time database 2, which stores the correspondence between the fingerprint F and the channel (broadcast station) and broadcast time, and generates television state information. The television state information indicates the broadcast station and broadcast date and time of the content displayed on the television at each time.
具体的な処理の例として、チャンネル・放送時間情報取得部１５２は、チャンネル・放送時間データベース２を有するサービスに、生成されたフィンガープリントＦを送信する。そして、フィンガープリントＦに基づいて同サービスによって特定されるチャンネルおよび放送時間を示す情報をチャンネル・放送時間情報取得部１５２は受信する。As a specific example of processing, the channel/broadcast time information acquisition unit 152 transmits the generated fingerprint F to a service having a channel/broadcast time database 2. Then, the channel/broadcast time information acquisition unit 152 receives information indicating the channel and broadcast time identified by the service based on the fingerprint F.
図４Ａは、チャンネル・放送時間データベース２の構造の一例を示す図である。図示のように、フィンガープリントが放送局および放送日時と視聴日時を関連づけて記憶される。例えば、特定の時刻において、図３Ａのフィンガープリント生成部１５１によって生成されたのがフィンガープリントＦ２であった場合、テレビで再生されていたのは２０２０年１月３日１９時００分００秒～同日１９時００分０５秒に放送局Ｑによって放送されて
いた番組であることが分かる。 Fig. 4A is a diagram showing an example of the structure of channel/broadcast time database 2. As shown in the figure, fingerprints are stored in association with broadcast stations, broadcast dates and times, and viewing dates and times. For example, if fingerprint F2 was generated by fingerprint generation unit 151 in Fig. 3A at a specific time, it can be seen that the program being played on the television was a program broadcast by broadcast station Q from 19:00:00 to 19:00:05 on Jan. 3, 2020.
図３Ｄにテレビ状態情報を模式的に示す。例えば、２０２０年１月３日の１９時００分００秒および同日１９時００分０５秒には、放送局Ｘで２０２０年１月３日の１９時００分００秒および同日１９時００分０５秒にそれぞれ放送されていたコンテンツがテレビに表示されている。なお、図３Ｄでは５秒単位でテレビ状態を検知しているが、単位に特に制限はない。Figure 3D shows a schematic diagram of television status information. For example, at 19:00:00 on Jan. 3, 2020 and 19:00:05 on the same day, the content that was broadcast by broadcasting station X at 19:00:00 on Jan. 3, 2020 and 19:00:05 on the same day, respectively, is displayed on the television. Note that while Figure 3D detects the television status in 5-second intervals, there are no particular limitations on the units.
図３Ａに戻り、視聴情報取得装置１の送信部１６は、滞在者情報（図３Ｂ）、注視者情報（図３Ｃ）およびテレビ状態情報（図３Ｄ）を視聴質管理装置３に送信する。視聴質管理装置３には、各視聴情報取得装置１から同様の情報が送信される。Returning to FIG. 3A, the transmission unit 16 of the viewing information acquisition device 1 transmits visitor information (FIG. 3B), gazer information (FIG. 3C), and television status information (FIG. 3D) to the viewing quality management device 3. Similar information is transmitted to the viewing quality management device 3 from each viewing information acquisition device 1.
なお、図３Ａの視聴情報取得装置１は、図示するすべての構成を必須とするものではない。例えば、ＩＲセンサ１２を省略し、注視者検知部１３２はカメラ画像のみから注視者の検知を行ってもよい。Note that the viewing information acquisition device 1 in FIG. 3A does not necessarily require all of the components shown in the figure. For example, the IR sensor 12 may be omitted, and the gazing person detection unit 132 may detect gazing people only from the camera image.
続いて、視聴質管理装置３について述べる。視聴質管理装置３は、属性検出部３１と、番組情報取得部３２と、ＶＩ値算出部３３と、ＡＩ値算出部３４と、データベース書き込み部３５と、番組データベース３６と、視聴質データベース３７とを有する。Next, the audience quality management device 3 will be described. The audience quality management device 3 has an attribute detection unit 31, a program information acquisition unit 32, a VI value calculation unit 33, an AI value calculation unit 34, a database writing unit 35, a program database 36, and an audience quality database 37.
属性検出部３１は視聴者の属性を検出する。具体的には、属性検出部３１は、各視聴情報取得装置１と関連付けて、その視聴情報取得装置１が設置される世帯の世帯構成員の属性（性別、年齢、年収など）が設定されている。例えば、上述した世帯構成員Ａ～Ｃの３人の属性が設定されている。そして、属性検出部３１は、視聴情報取得装置１からの滞在者情報および注視者情報に基づき、各時刻に視聴エリアに滞在していた視聴者および各時刻にテレビを注視していた視聴者の属性をそれぞれ特定する。年齢および性別として、例えばマーケティングで用いられる区分（Ｃ、Ｔ、Ｍ１～Ｍ３、Ｆ１～Ｆ３）のいずれであるかを特定してもよい。The attribute detection unit 31 detects the attributes of the viewers. Specifically, the attribute detection unit 31 associates with each viewing information acquisition device 1 the attributes (gender, age, annual income, etc.) of the household members of the household in which the viewing information acquisition device 1 is installed, and sets them. For example, the attributes of the three household members A to C described above are set. Then, the attribute detection unit 31 identifies the attributes of the viewers who stayed in the viewing area at each time and the viewers who were gazing at the television at each time, based on the visitor information and gazing person information from the viewing information acquisition device 1. For example, the age and gender may be identified as belonging to one of the categories (C, T, M1-M3, F1-F3) used in marketing.
番組情報取得部３２は、チャンネル（放送局）および放送時間と、番組との対応関係を記憶した番組データベース３６を参照して、テレビ状態情報が示すチャンネル（放送局）および放送時間に放送されていた番組を特定する。The program information acquisition unit 32 refers to a program database 36 that stores the correspondence between channels (broadcast stations), broadcast times, and programs, and identifies the program that was broadcast on the channel (broadcast station) and at the broadcast time indicated by the television status information.
図４Ｂは、番組データベース３６の構造の一例を示す図である。図示のように、放送局および放送時間と、各放送局で各放送時間に放送されていた番組とが関連付けて記憶される。例えば、２０２０年１月３日１９時～２１時に放送局Ｑによって放送されていた番組はプロ野球Ｂである。Figure 4B is a diagram showing an example of the structure of the program database 36. As shown in the figure, broadcasting stations and broadcast times are stored in association with the programs broadcast by each broadcasting station at each broadcast time. For example, the program broadcast by broadcasting station Q from 7:00 pm to 9:00 pm on January 3, 2020 was Professional Baseball B.
以上のようにして、テレビ状態検知部１５と番組情報取得部３２が協働して、テレビで再生されているコンテンツを取得できる。なお、データベースの構造によっては、チャンネルおよび放送時間を特定することなく、フィンガープリントＦから番組を直接特定してもよい。あるいは、チャンネルおよび放送時間を特定するだけであってもよい。In this way, the television state detection unit 15 and the program information acquisition unit 32 work together to acquire the content being played on the television. Depending on the structure of the database, the program may be identified directly from the fingerprint F without identifying the channel and broadcast time. Alternatively, the channel and broadcast time may be identified.
フィンガープリントＦを利用して番組を特定する手法によれば、リアルタイムに放送されている番組のみならず、録画されタイムシフト視聴されている番組を特定することもできる。By using the fingerprint F to identify programs, it is possible to identify not only programs that are being broadcast in real time, but also programs that have been recorded and are being viewed in a time-shifted format.
なお、図４Ｂは、コンテンツ単位で番組データベース３６に記憶される例を示したが、コンテンツ（いわゆる番組、狭義のコンテンツ））より細かい単位（例えば、ＣＭや、コンテンツにおける特定のシーン（広義のコンテンツ））で番組データベース３６に記憶さ
れていてもよい。 Note that, although FIG. 4B shows an example in which content is stored in the program database 36 on a content-by-content basis, content may also be stored in the program database 36 on a finer scale than content (so-called programs, content in the narrow sense) (for example, commercials or specific scenes in the content (content in the broad sense)).
図３Ａに戻り、ＶＩ値算出部３３は、各視聴情報取得装置１からの滞在者情報に基づいて滞在者数を集計し、放送局および日時ごと（あるいはコンテンツごと、以下同じ）に、視聴者の属性と関連付けてＶＩ値を算出する。ＡＩ値算出部３４は、各視聴情報取得装置１からの注視者情報に基づいて注視者数を集計し、放送局および日時ごとに、視聴者の属性と関連付けてＡＩ値を算出する。データベース書き込み部３５は、放送局および日時ごとに、視聴者の属性と関連付けてＶＩ値およびＡＩ値を視聴質データベース３７に書き込む。Returning to FIG. 3A, the VI value calculation unit 33 counts the number of visitors based on the visitor information from each viewing information acquisition device 1, and calculates a VI value by broadcast station and date and time (or by content, the same below) in association with viewer attributes. The AI value calculation unit 34 counts the number of viewers based on the gazing person information from each viewing information acquisition device 1, and calculates an AI value by associating it with viewer attributes by broadcast station and date and time. The database writing unit 35 writes the VI value and AI value by associating it with viewer attributes by broadcast station and date and time into the viewing quality database 37.
図５は、視聴質データベース３７の構造の一例を示す図である。図示の例では、番組（放送日時および放送局）ごとに、ＶＩ値およびＡＩ値が視聴者の属性（ここでは、性別、年齢および収入）と関連付けて記憶される。例えば、２０２０年１月３日の１９時～１９時３０分に放送局Ｐで放送された「ニュースＡ」の、Ｍ１層の収入３００万円以下の視聴者におけるＡＩ値は０．２であり、ＶＩ値は０．１５である。Figure 5 is a diagram showing an example of the structure of audience quality database 37. In the example shown, for each program (broadcast date and time and broadcast station), the VI value and AI value are stored in association with viewer attributes (here, gender, age, and income). For example, for "News A," broadcast by broadcast station P from 7:00 p.m. to 7:30 p.m. on January 3, 2020, the AI value for viewers in the M1 demographic with an income of 3 million yen or less is 0.2, and the VI value is 0.15.
以上のようにして、視聴質データベース３７に視聴質値の情報が記憶される。なお、以上述べたのは一例にすぎず、放送局および日時毎に視聴質値を記憶できればよく、適宜の変更が可能である。例えば、属性として、性別、年齢および年収のうちの１または２つを用いてもよいし、他の要素を含めてもよいし、属性を省略してもよい。また視聴質値として、ＶＩ値およびＡＩ値以外の指標を適用してもよい。In this manner, audience quality value information is stored in audience quality database 37. Note that the above is merely one example, and any appropriate modification is possible as long as audience quality values can be stored for each broadcast station and date and time. For example, one or two of gender, age, and annual income may be used as attributes, other elements may be included, or attributes may be omitted. Indices other than VI and AI values may also be applied as audience quality values.
続いて、視聴質の表示について説明する。
図６は、第２の実施形態に係る視聴質表示システムの概略構成を示すブロック図である。視聴質表示システムは、視聴質表示装置５と、図１の視聴質データベース３７とを備えている。 Next, the display of audiovisual quality will be described.
6 is a block diagram showing a schematic configuration of an audience quality display system according to the second embodiment. The audience quality display system comprises an audience quality display device 5 and the audience quality database 37 of FIG.
視聴質表示装置５は、パーソナルコンピュータ、スマートフォン、タブレットなど任意のコンピュータであってよく、入力インターフェース５１と、ディスプレイ５２と、設定受付部５３と、視聴質取得部５４と、出力制御部５５とを有する。設定受付部５３、視聴質取得部５４および出力制御部５５の機能の少なくとも一部は、視聴質表示装置５のプロセッサが所定のプログラムを実行することによって実現されてもよい。The audience quality display device 5 may be any computer, such as a personal computer, a smartphone, or a tablet, and has an input interface 51, a display 52, a setting acceptance unit 53, an audience quality acquisition unit 54, and an output control unit 55. At least some of the functions of the setting acceptance unit 53, the audience quality acquisition unit 54, and the output control unit 55 may be realized by the processor of the audience quality display device 5 executing a predetermined program.
設定受付部５３は、どのような視聴質を表示させるか（すなわち、表示させる視聴質の対象）の設定を、入力インターフェース５１を介してユーザから受け付ける。この設定は、例えば、放送局、期間、番組、視聴者の属性、集計時間の少なくとも１つを含み得る。視聴質取得部５４は、視聴質データベース３７にアクセスし、設定受付部５３が受け付けた設定に応じた視聴質値を取得する。出力制御部５５は、上記の設定を受け付けるための画面や、視聴質取得部５４が取得した視聴質値を示す情報を出力する。The setting reception unit 53 receives a setting for what kind of viewing quality is to be displayed (i.e., the target of the viewing quality to be displayed) from the user via the input interface 51. This setting may include, for example, at least one of the broadcast station, period, program, viewer attributes, and aggregation time. The viewing quality acquisition unit 54 accesses the viewing quality database 37 and acquires a viewing quality value according to the setting received by the setting reception unit 53. The output control unit 55 outputs a screen for receiving the above settings and information indicating the viewing quality value acquired by the viewing quality acquisition unit 54.
出力制御部５５は、視聴質値を示す情報をディスプレイ５２に表示させてもよいし、不図示のプリンタで印刷してもよいし、ＣＳＶ等の電子ファイルを生成して出力してもよいし、電子データとしてＡＰＩで外部に出力してもよい。以下では、出力制御部５５が視聴質値を示す情報をディスプレイ５２に表示させる例を主に述べるが、同様の印刷を行ってもよいし、同様の画面を表示させるための電子ファイルや電子データを出力してもよい。The output control unit 55 may display information indicating the viewing quality value on the display 52, may print it on a printer (not shown), may generate and output an electronic file such as CSV, or may output it externally as electronic data via an API. The following mainly describes an example in which the output control unit 55 displays information indicating the viewing quality value on the display 52, but similar printing may be performed, or an electronic file or electronic data for displaying a similar screen may be output.
図７Ａは、放送局の設定を受け付けるためにディスプレイ５２に表示される画面例である。図示のように、放送局毎にチェックボックスが設けられ、１以上のチェックボックスにチェックを入れることできる。入力インターフェース５１を介して、ユーザは視聴質値を表示させたい放送局のチェックボックスにチェックを入れることで、放送局を選択する
。視聴質取得部５４は選択された放送局の番組についての視聴質値を取得する。 7A is an example of a screen displayed on display 52 to accept broadcast station settings. As shown in the figure, a check box is provided for each broadcast station, and one or more check boxes can be checked. Via input interface 51, the user selects a broadcast station by checking the check box of the broadcast station for which the user wants to display the audience quality value. Audience quality acquisition unit 54 acquires audience quality values for programs of the selected broadcast station.
なお、放送局の設定は任意であり、視聴質表示装置５は放送局の設定を行うことなく、特定の地域で放送可能な全放送局の視聴質値を表示させることとしてもよい。Note that the broadcast station setting is optional, and the audience quality display device 5 may display the audience quality values of all broadcast stations available in a particular area without setting the broadcast station.
図７Ｂは、期間の設定を受け付けるためにディスプレイ５２に表示される画面例である。図７Ｂは１週間単位で期間を指定する例であり、何年何月何週目の視聴質値を表示させるかを入力する欄が設けられる。入力インターフェース５１を介して、ユーザは視聴質を表示させたい期間を入力することで、期間を指定する。視聴質取得部５４は指定された期間内の視聴質値を取得する。Fig. 7B is an example of a screen displayed on display 52 to accept the setting of a period. Fig. 7B is an example of specifying a period in one-week units, and provides a field for inputting the year, month, and week for which viewing quality values are to be displayed. Via input interface 51, the user specifies the period by inputting the period for which viewing quality is to be displayed. Viewing quality acquisition unit 54 acquires viewing quality values within the specified period.
なお、期間の設定法に制限はなくは、日付あるいは日時で始期および終期を指定できてもよいし、期間の単位は１週間に限られず、特定の１日や１か月であってもよい。カレンダーや時計を表示させて、期間の始期および終期を選択できてもよい。また、期間の設定は任意であり、視聴質表示装置５は期間の設定を行うことなく、直近１週間など予め定めた期間の視聴質値を表示させることとしてもよい。There are no limitations on how the period can be set, and the start and end periods may be specified by date or time, and the unit of the period is not limited to one week, but may be a specific day or month. A calendar or clock may be displayed to allow the start and end periods of the period to be selected. Furthermore, the period may be set arbitrarily, and the audience quality display device 5 may display the audience quality value for a predetermined period, such as the most recent week, without setting the period.
また、設定受付部５３は、放送局と期間を指定する代わりに、番組単位で選択を受け付けてもよい。また、個別の番組単位のみならず、ニュースやスポーツといったジャンルの単位で選択を受け付けてもよい。In addition, the setting reception unit 53 may receive selections on a program-by-program basis instead of specifying a broadcast station and a period. Also, the setting reception unit 53 may receive selections not only on an individual program basis, but also on a genre basis, such as news or sports.
図７Ｃは、属性の設定を受け付けるためにディスプレイ５２に表示される画面例である。Figure 7C is an example of a screen that is displayed on the display 52 to accept attribute settings.
図７Ｃ（ａ）に示すように、視聴者の性別の設定に関して、「男性」、「女性」および「両方」のそれぞれにラジオボタンが設けられ、排他的に１つのみのラジオボタンを選択できる。入力インターフェース５１を介して、ユーザは視聴質値を表示させたい性別を選択する。視聴質取得部５４は、選択された性別（「両方」が選択された場合は性別問わず）についての視聴質値を取得する。As shown in FIG. 7C(a), radio buttons are provided for each of "Male," "Female," and "Both" in relation to the setting of the viewer's gender, and only one radio button can be selected exclusively. Via input interface 51, the user selects the gender for which they wish to display the viewing quality value. Viewing quality acquisition unit 54 acquires the viewing quality value for the selected gender (or for any gender if "Both" is selected).
図７Ｃ（ｂ）に示すように、視聴者の年齢の選択に関して、年齢層のそれぞれにチェックボックスが設けられ、１以上のチェックボックスにチェックを入れることできる。入力インターフェース５１を介して、ユーザは視聴質値を表示させたい年齢層のチェックボックスにチェックを入れることで、年齢層を指定する。視聴質取得部５４は指定された年齢層についての視聴質値を取得する。なお、年齢の選択は１歳刻みで任意にユーザが指定できてもよい。As shown in FIG. 7C(b), for selection of the viewer's age, a check box is provided for each age group, and one or more check boxes can be checked. Via input interface 51, the user specifies the age group by checking the check box for the age group for which the viewing quality value is to be displayed. Viewing quality acquisition unit 54 acquires the viewing quality value for the specified age group. Note that the user may be able to select the age arbitrarily in increments of one year.
なお、Ｃ、Ｔ、Ｍ１～Ｍ３、Ｆ１～Ｆ３といった区分で性別および年齢層を同時に設定できるようにしてもよい。It may also be possible to set gender and age group simultaneously for categories such as C, T, M1-M3, and F1-F3.
図７Ｃ（ｃ）に示すように、視聴者の収入の設定に関して、収入層のそれぞれにチェックボックスが設けられ、１以上のチェックボックスにチェックを入れることできる。入力インターフェース５１を介して、ユーザは視聴質値を表示させたい収入層のチェックボックスにチェックを入れることで、収入層を指定する。視聴質取得部５４は指定された収入層についての視聴質値を取得する。As shown in FIG. 7C (c), a check box is provided for each income tier with respect to the setting of the viewer's income, and one or more check boxes can be checked. Via input interface 51, the user specifies the income tier by checking the check box for the income tier for which the user wants to display the viewing quality value. Viewing quality acquisition unit 54 acquires the viewing quality value for the specified income tier.
なお、属性の設定は任意であり、視聴質表示装置５は属性の設定を行うことなく全視聴者の視聴質値を表示させることとしてもよい。また、性別、年齢および収入の１または２つの設定が可能でもよいし、視聴質データベース３７の構成に応じて他の属性を設定可能でもよい。The setting of attributes is optional, and the audience quality display device 5 may display the audience quality values of all viewers without setting attributes. Also, one or two of gender, age, and income may be set, and other attributes may be set depending on the configuration of the audience quality database 37.
図７Ｄは、集計時間の設定を受け付けるためにディスプレイ５２に表示される画面例である。図示のように、集計時間を入力する欄が設けられる。入力インターフェース５１を介して、ユーザは視聴質値を集計する単位となる時間を入力する。視聴質取得部５４は視聴質値を取得し、設定された集計時間の単位で視聴質値を集計する。例えば、集計時間が１時間であれば、視聴質取得部５４は視聴質値を１時間単位で集計するし、集計時間が１日であれば、視聴質取得部５４は視聴質値を１日単位で集計する。集計の単位は任意であり、１分単位、１０分単位、１時間単位、１日単位であってもよい。FIG. 7D is an example of a screen displayed on display 52 to accept the setting of the tally time. As shown, a field for inputting the tally time is provided. Via input interface 51, the user inputs the time that is the unit for tallying audience quality values. Viewing quality acquisition unit 54 acquires the viewing quality values and tallys the viewing quality values in the set tally time unit. For example, if the tally time is one hour, viewing quality acquisition unit 54 tallys the viewing quality values in one hour units, and if the tally time is one day, viewing quality acquisition unit 54 tallys the viewing quality values in one day units. The unit of tally is arbitrary, and may be one minute, ten minutes, one hour, or one day.
なお、集計時間の設定は任意であり、視聴質表示装置５は集計時間の設定を行うことなく、２時間など予め定めた集計時間で視聴質値を集計してもよい。The aggregation time can be set arbitrarily, and the audience quality display device 5 may aggregate audience quality values for a predetermined aggregation time, such as two hours, without setting the aggregation time.
図８Ａは、視聴質値を示す情報を表示する画面例である。同図では、設定受付部５３により、放送局Ｐ、２０２０年３月１週目、集計時間として１時間が設定されたことを想定している。また、属性としてＭ２（３５～４９才の男性）が指定されたものとし、便宜上、一部の日時についてのみ視聴質値（ここではＶＩ値とする）を示している。Fig. 8A is an example of a screen displaying information indicating audience quality values. In this figure, it is assumed that the settings reception unit 53 has set broadcast station P, the first week of March 2020, and one hour as the tally time. In addition, M2 (males aged 35-49) is specified as the attribute, and for convenience, audience quality values (here, VI values) are shown for only some dates and times.
視聴質情報６として、水平方向に曜日が設定され、鉛直方向に時間軸が設定される。時間軸は集計時間に対応した単位となる（本例では、集計時間が１時間であるため、１時間単位）。そして、各曜日および各時間帯に対応する位置の表示態様が、その曜日および時間帯での視聴質値と対応する。As the audience quality information 6, the days of the week are set horizontally, and the time axis is set vertically. The time axis is in units corresponding to the aggregation time (in this example, the aggregation time is one hour, so the time axis is in units of one hour). The display mode of the position corresponding to each day of the week and each time period corresponds to the audience quality value for that day of the week and time period.
表示態様として、各曜日および各時間帯に対応する位置に、視聴質値そのものが表示されてもよい。例えば、図８Ａにおいて、月曜日５時台の視聴質値は０．３であり、火曜日５時台の視聴質値は０．３５である（他の曜日および他の時間帯は図示を省略している）。As a display format, the viewing quality value itself may be displayed at a position corresponding to each day of the week and each time slot. For example, in FIG. 8A, the viewing quality value for Monday at 5:00 is 0.3, and the viewing quality value for Tuesday at 5:00 is 0.35 (other days of the week and other time slots are not shown).
また、表示態様として、各曜日および各時間帯に対応する位置（セル）の色や色の濃さが、視聴質値と対応していてもよい。具体例として、視聴質値が高いほど色が濃くてもよい。視聴質値と表示態様が１対１に対応してもよいし、視聴質値がある範囲にある場合に特定の表示態様であってもよい（例えば、視聴質値が０．１増えるごとに、１段階色が濃くなる）。In addition, as a display mode, the color or color intensity of the position (cell) corresponding to each day of the week and each time slot may correspond to the viewing quality value. As a specific example, the higher the viewing quality value, the darker the color. There may be a one-to-one correspondence between the viewing quality value and the display mode, or a specific display mode may be used when the viewing quality value is within a certain range (for example, the color becomes one level darker for every 0.1 increase in the viewing quality value).
図８Ａでは、便宜上、視聴質値が高いほど密度が濃いスポットを付している。このような表示によれば、各曜日および各時間帯における視聴質値の概要を直感的に把握できる。図８Ａによれば、概して、勤務先から帰宅する１９時以降で視聴質が高く、次いで、土日や出勤前である７～８時の視聴質が高いことが分かる。For the sake of convenience, in FIG. 8A, the higher the viewing quality value, the denser the spots are. This type of display allows an intuitive overview of the viewing quality values for each day of the week and each time slot. From FIG. 8A, it can be seen that viewing quality is generally high from 7 p.m. onwards when people return home from work, followed by 7 to 8 a.m. on weekends and before people go to work.
図８Ｂは、視聴質値を示す情報を表示する別の画面例である。図８Ａとの違いは、属性としてＦ２（３５～４９才の女性）が指定されたものとしている。属性としてＭ２を指定した図８Ａと異なり、昼間の時間帯に視聴質が高いことが分かる。Figure 8B is another example screen displaying information indicating viewing quality values. The difference with Figure 8A is that F2 (females aged 35-49) is specified as the attribute. Unlike Figure 8A where M2 is specified as the attribute, it can be seen that viewing quality is higher during the daytime.
このように、ユーザが属性を設定することで、属性に応じた視聴質の傾向を把握できる。例えば、中年男性向け商品のテレビ広告出稿を検討する際には、図８Ａの視聴質情報６を表示させるのがよい。一方、中年女性向け商品のテレビ広告出稿を検討する際には、図８Ｂの視聴質情報６を表示させるのがよい。In this way, by setting attributes, the user can grasp the trends in audience quality according to the attributes. For example, when considering placing a television advertisement for a product targeted at middle-aged men, it is advisable to display the audience quality information 6 in FIG. 8A. On the other hand, when considering placing a television advertisement for a product targeted at middle-aged women, it is advisable to display the audience quality information 6 in FIG. 8B.
なお、放送局が複数選択された場合、そのそれぞれについて出力制御部５５は図８に示す視聴質情報６を表示する。また、放送局の数がそれほど多くない場合、出力制御部５５は全て（特定の地域で放送可能な）全ての放送局について視聴質情報６を表示してもよい
。 When multiple broadcast stations are selected, the output control unit 55 displays the audience quality information 6 for each of them as shown in Fig. 8. When there are not many broadcast stations, the output control unit 55 may display the audience quality information 6 for all broadcast stations (that can broadcast in a specific area).
図９は、視聴質値を示す情報を表示する別の画面例である。図８の視聴質情報６との違いとして、水平方向に設定される曜日は、平日および土日の２区分となっている。すなわち、月曜日～金曜日の視聴質値をまとめた値（例えば平均値）を平日の視聴質値とし、土曜日および日曜日の視聴質値をまとめた値（例えば平均値）を土日の視聴質値としている。また、鉛直方向に設定される時間軸は等間隔でなくてもよい。Figure 9 is another example of a screen displaying information indicating viewing quality values. It differs from viewing quality information 6 in Figure 8 in that the days of the week set in the horizontal direction are divided into two sections: weekdays and Saturday and Sunday. In other words, the viewing quality value for weekdays is a value obtained by summarizing the viewing quality values for Monday to Friday (for example, the average value), and the viewing quality value for Saturday and Sunday is a value obtained by summarizing the viewing quality values for Saturday and Sunday (for example, the average value). Also, the time axis set in the vertical direction does not have to be at equal intervals.
以上説明したように、視聴質値を表示させる対象をユーザが設定し、その設定に応じて出力制御部５５が視聴質情報６を表示させる。そのため、ユーザが所望する視聴質値を表示させることができる。また、本実施形態では、出力制御部５５が曜日および時間帯ごとにマトリクス状に視聴質値を示すため、ユーザは各曜日および各時間帯の視聴質値を把握しやすい。As described above, the user sets the target for which the viewing quality value is to be displayed, and the output control unit 55 displays the viewing quality information 6 according to that setting. This allows the user to display the viewing quality value that he or she desires. In addition, in this embodiment, the output control unit 55 displays the viewing quality value in a matrix for each day of the week and time period, making it easy for the user to grasp the viewing quality value for each day of the week and each time period.
なお、複数の放送局や期間における視聴質値をまとめて集計して表示するようにしてもよい。例えば、朝の特定の情報番組について、指定した所定期間で集計した視聴質値を表示してもよい。あるいは、特定のジャンルの番組について、放送局を跨いで集計した視聴質値を表示してもよい。どのような集計を行うかの設定をユーザから受け付けることができる。It is also possible to compile and display audience quality values for multiple broadcasting stations or time periods. For example, audience quality values compiled for a specific morning information program over a specified period may be displayed. Or, audience quality values compiled across broadcasting stations for programs of a specific genre may be displayed. Settings for the type of compilation to be performed can be accepted from the user.
続いて、複数回再生されるコンテンツにおいて、コンテンツの視聴質の遷移を線グラフで表示させる態様を説明する。ここで、複数回再生されるコンテンツとは、例えば繰り返し放送されるＣＭ、連続ドラマ、再放送される番組などであり得るが、以下ではＣＭであるとする。Next, we will explain how to display the transition of the audience quality of content that is played multiple times in a line graph. Here, content that is played multiple times can be, for example, repeatedly broadcast commercials, serial dramas, rebroadcast programs, etc., but in the following, it is assumed to be commercials.
図１０Ａは、視聴質を線グラフで表示する画面例である。実線は飲料Ａに関するＣＭ、破線は飲料Ｂに関するＣＭ、点線はこれらの平均である。線グラフの横軸は時間（図１０Ａでは、１か月単位）を示しており、図１０Ａでは１か月を時間の単位としている。線グラフの縦軸は対応する横軸が示す時間に再生されたコンテンツの視聴質値（図１０Ａでは、ＶＩ値とＡＩ値との積）に関する値を示している。Figure 10A is an example of a screen displaying viewing quality as a line graph. The solid line indicates commercials for drink A, the dashed line indicates commercials for drink B, and the dotted line indicates the average of these. The horizontal axis of the line graph indicates time (in units of one month in Figure 10A), and one month is the unit of time in Figure 10A. The vertical axis of the line graph indicates values related to the viewing quality value (in Figure 10A, the product of the VI value and the AI value) of the content played at the time indicated by the corresponding horizontal axis.
例えば、図１０Ａの矢印Ｆは、６月に再生された飲料Ａに関するＣＭのＶＩ値とＡＩ値との積である。同月に飲料Ａに関するＣＭが複数回再生された場合、各回の平均値でもよいし、累積値でもよい。For example, arrow F in FIG. 10A is the product of the VI value and AI value of a commercial for drink A played in June. If a commercial for drink A was played multiple times in the same month, the average value for each time may be used, or the cumulative value may be used.
このような線グラフは、複数回再生されるコンテンツのそれぞれについて、テレビ視聴者の視聴質値を視聴質データベース３７（図６）に記憶しておき、必要な視聴質の情報を視聴質取得部５４が取得することにより、出力制御部５５によって表示される。なお、ここでの「コンテンツのそれぞれについて」とは、１回の再生ごとでもよいし、特定の期間（例えば１日、１週間、１か月など）で集計したものでもよい。Such line graphs are displayed by the output control unit 55 after the viewing quality values of television viewers for each piece of content that is played multiple times are stored in the viewing quality database 37 (Fig. 6) and the viewing quality acquisition unit 54 acquires the necessary viewing quality information. Note that "for each piece of content" here may refer to each playback, or may be a compilation over a specific period (e.g., one day, one week, one month, etc.).
なお、横軸の時間単位は１か月に限られず、１週間や１年であってもよい。また、入力インターフェース５１を介して設定受付部５３がユーザから時間単位の設定を受け付け、受け付けた時間単位に応じて出力制御部５５が横軸を設定してもよい。また、縦軸の視聴質値は複数の放送局や期間をまとめて集計したものであってもよい。The time unit of the horizontal axis is not limited to one month, but may be one week or one year. Furthermore, the setting reception unit 53 may receive a time unit setting from the user via the input interface 51, and the output control unit 55 may set the horizontal axis according to the received time unit. Furthermore, the audience quality value on the vertical axis may be a total value obtained by collectively a number of broadcasting stations or time periods.
また、入力インターフェース５１を介して設定受付部５３が線グラフにおけるいずれかの部分の指定をユーザから受け付け、指定された部分に応じた詳細な情報を出力制御部５５が表示させてもよい。In addition, the setting reception unit 53 may receive a designation of any part of the line graph from the user via the input interface 51, and the output control unit 55 may display detailed information corresponding to the designated part.
例えば、図１０Ｂに示すように、ユーザが４月を指定した場合（例えば、ディスプレイ５２における４月に対応する領域にユーザがカーソルを移動させた場合）、出力制御部５５は飲料Ａおよび飲料Ｂの視聴質値を数値で表示させてもよい。また、図１０Ｃに示すように、ユーザが飲料Ａを指定した場合（例えば、ディスプレイ５２における飲料Ａに対応する領域にユーザがカーソルを移動させた場合）、出力制御部５５は飲料Ａの各月の視聴質値を数値で表示させてもよい。For example, as shown in FIG. 10B, when the user specifies April (for example, when the user moves the cursor to an area on display 52 corresponding to April), output control unit 55 may display the viewing quality values of beverages A and B as numerical values. Also, as shown in FIG. 10C, when the user specifies beverage A (for example, when the user moves the cursor to an area on display 52 corresponding to beverage A), output control unit 55 may display the viewing quality values of beverage A for each month as numerical values.
その他、出力制御部５５は、ＣＭと、そのＣＭが再生された番組や、そのＣＭが再生された時間を表示させてもよい。例えば、ユーザが飲料Ａの９月を指定した場合、飲料Ａに関するＣＭが再生された番組や時間を表示させてもよい。このような表示により、視聴質値が高かった理由や低かった理由を推測できる。Additionally, the output control unit 55 may display the commercial, the program in which the commercial was played, and the time at which the commercial was played. For example, if the user specifies September for beverage A, the program and time at which the commercial for beverage A was played may be displayed. Such a display allows the user to infer the reason why the viewing quality value was high or low.
このように、視聴質値を線グラフで表示させることにより、視聴質値の遷移を把握可能となる。In this way, by displaying the viewing quality value as a line graph, it is possible to grasp the transition of the viewing quality value.
その他、図５に示すように、属性と関連付けて視聴質を記憶する場合、特定の属性を有する視聴者の視聴動向を追跡することもできる。例えば、Ｍ１層に対して視聴質値が高いコンテンツを追跡することで、Ｍ１層に指示されるコンテンツを把握できる。In addition, as shown in FIG. 5, when the viewing quality is stored in association with an attribute, it is also possible to track the viewing trends of viewers with specific attributes. For example, by tracking content with a high viewing quality value for the M1 demographic, it is possible to understand the content that is recommended to the M1 demographic.
また、属性として、各視聴者に事前にアンケート行うことで、各視聴者の趣味や嗜好を取得することもできる。この場合、特定の趣味や嗜好を有する視聴者の視聴動向を追跡することもできる。例えば、喫煙者に対して視聴質値が高いＣＭを追跡することで、喫煙者がどのような銘柄に着目しているかを把握できる。In addition, as attributes, the hobbies and preferences of each viewer can be obtained by conducting a questionnaire survey of each viewer in advance. In this case, it is also possible to track the viewing trends of viewers with specific hobbies and preferences. For example, by tracking commercials with high viewing quality values for smokers, it is possible to understand what brands smokers are paying attention to.
上述した第２の実施形態は、主に視聴質としてＶＩ値およびＡＩ値を例示したが、他の指標を用いてもよい。例えば、次に述べる注視者数（ユニークリーチ数）、注視率（ユニークリーチ率）、累積注視（Gross Attention）数、累積注視率、注視含有率、注視回数
についての指標の少なくとも１つを視聴質として用いてもよい。また、テレビでなく、インターネット経由で提供されるディスプレイであってもよいのは第１の実施形態と同様である。 In the above-mentioned second embodiment, the VI value and the AI value are mainly exemplified as the audience quality, but other indices may be used. For example, at least one of the indices of the number of viewers (unique reach number), the attention rate (unique reach rate), the cumulative number of attentions (Gross Attention), the cumulative attention rate, the attention content rate, and the number of attentions may be used as the audience quality. Also, as in the first embodiment, instead of a television, a display provided via the Internet may be used.
注視者数は特定のコンテンツを注視した人の総数である。また、例えば、注視率は基準値（例えば、全パネル数や、特定の属性である者の数）に対する注視者の数の割合である。ここで、特定のコンテンツをごく短時間でも注視した人を注視者数に含めてもよいが、所定時間以上注視した人のみを注視者数に含めるようにするのが望ましい。所定時間として、例えばコンテンツが１５秒程度のＣＭである場合に、３秒とすることができる。本願発明者らの知見によれば、注視した時間が３秒以上となるとＣＭの認知が進むためである。この所定時間は、固定値でもよいし、コンテンツの長さに応じた値でもよいし、ユーザが任意に設定できてもよい。また、特定のコンテンツを所定回数以上注視した場合に注視者数に含めるようにしてもよく、この所定回数をユーザが任意に設定できてもよい。The number of viewers is the total number of people who watched a particular piece of content. For example, the viewing rate is the ratio of the number of viewers to a reference value (for example, the total number of panels or the number of people with a particular attribute). Here, although people who watched a particular piece of content for even a very short time may be included in the number of viewers, it is preferable to include only people who watched for a predetermined time or more in the number of viewers. For example, the predetermined time may be set to 3 seconds when the content is a 15-second commercial. This is because, according to the findings of the inventors of the present application, recognition of the commercial increases when the viewing time is 3 seconds or more. This predetermined time may be a fixed value, a value according to the length of the content, or may be set arbitrarily by the user. Also, a person may be included in the number of viewers when he or she has watched a particular piece of content a predetermined number of times or more, and this predetermined number may be set arbitrarily by the user.
例えば、上記所定時間が３秒であり、基準値が２，０００人であるうち、１００人が特定のコンテンツを３秒以上注視したとする。この場合、注視者数は１００人であり、注視率は５％（１００／２，００００）である。For example, assume that the above-mentioned predetermined time is 3 seconds, and that 100 people out of the 2,000 people who had a reference value of 2,000 gazed at a particular piece of content for 3 seconds or more. In this case, the number of people gazing is 100, and the gaze rate is 5% (100/2,0000).
また、累積注視率は、複数回再生されるコンテンツにおいて、各コンテンツの注視率を累積した値である。注視含有率は、複数回再生されるコンテンツにおいて、各コンテンツの視聴率を累積した値に対する累積注視率である。複数回再生されるコンテンツとは、例えば繰り返し放送されるＣＭ、連続ドラマ、再放送される番組などである。The cumulative attention rate is the cumulative value of the attention rate of each piece of content that is played multiple times. The attention content rate is the cumulative attention rate relative to the cumulative value of the viewer ratings of each piece of content that is played multiple times. Examples of content that is played multiple times include repeatedly broadcast commercials, serial dramas, and rebroadcast programs.
例えば、あるＣＭが３回放送され、その視聴率がそれぞれ１０％、１５％および２０％であり、その注視率がそれぞれ５％、６％および７％であったとする。この場合、累積注視率は１８（＝５＋６＋７）％である。また、注視含有率は６０（＝（５＋６＋７）／（１０＋１５＋２０））％である。For example, suppose a certain commercial is broadcast three times, with viewer ratings of 10%, 15%, and 20%, respectively, and attention rates of 5%, 6%, and 7%, respectively. In this case, the cumulative attention rate is 18 (= 5 + 6 + 7)%. Also, the attention content rate is 60 (= (5 + 6 + 7) / (10 + 15 + 20))%.
注視回数についての指標は「フリクエンシー」とも呼ばれる指標である。フリクエンシーは、特定のコンテンツ（典型的にはＣＭ）を所定時間（例えば３秒間）注視したことを１回の注視とし、注視回数が所定回数（例えば３回）以上の人の数あるいは割合を指す。ＣＭは一定回数以上見ないと認知に結びつかないとの見解があるが、フリクエンシーはどの程度ＣＭが認知されたのかを測定する指標となり得る。The index for the number of fixations is also known as "frequency." Frequency refers to the number or percentage of people who have fixed a certain number of times (e.g., three times) or more, with one fixation being defined as looking at specific content (typically a commercial) for a certain period of time (e.g., three seconds). There is a view that commercials do not lead to recognition unless they are viewed a certain number of times, but frequency can be an index to measure the extent to which a commercial is recognized.
注視率、累積注視率、注視含有率、フリクエンシーを取得するためには、例えば図３Ａの視聴者検知部１３における注視者カウント部１３２が、各視聴者がテレビを注視してる時間も計測し、各視聴者の注視時間が視聴情報管理装置３に送信されるようにする。そして、図３Ａの視聴情報管理装置３内に注視情報算出部を設け、各視聴者の注視時間に基づいて注視率、累積注視率、注視含有率を算出すればよい。To obtain the gaze rate, cumulative gaze rate, gaze content rate, and frequency, for example, the gazer counting unit 132 in the viewer detection unit 13 in FIG. 3A measures the time each viewer spends gazing at the television and transmits the gaze time of each viewer to the viewing information management device 3. Then, a gaze information calculation unit can be provided in the viewing information management device 3 in FIG. 3A to calculate the gaze rate, cumulative gaze rate, and gaze content rate based on the gaze time of each viewer.
注視率、累積注視率、注視含有率、フリクエンシーは、コンテンツを所定時間以上注視した視聴質の数に関する視聴質と言える。このような視聴質も、図７Ａ～図７Ｄと同様のインターフェースを介して、図８Ａ、図８Ｂおよび図９と同様にユーザに提示することができる。The gaze rate, cumulative gaze rate, gaze content rate, and frequency can be said to be viewing qualities related to the number of viewing qualities in which content was gazed at for a predetermined period of time or more. Such viewing qualities can also be presented to the user in the same manner as in Figs. 8A, 8B, and 9, via an interface similar to Figs. 7A to 7D.
その他、視聴質値として、ＡＩ値とＶＩ値の積、ＡＩ値あるいはＶＩ値の基準値に対する比率、世帯視聴率を合算した値などであってもよい。Other possible values for the viewing quality value include the product of the AI value and the VI value, the ratio of the AI value or the VI value to a reference value, and the sum of household viewing rates.
また、図１０Ａおよび図１０Ｂにおける横軸は時間であるが、他のパラメータを横軸としてもよい。In addition, the horizontal axis in Figures 10A and 10B is time, but other parameters may be used as the horizontal axis.
例えば、出力制御部５５は、横軸をＧＲＰ（特定のコンテンツ等が表示された時の視聴率を積算した値（累積視聴率））とし、縦軸を視聴質値（例えばＡＩ値）とする線グラフを表示させてもよい。また、出力制御部５５は、横軸を接触数（特定のコンテンツに接した回数）とし、縦軸を視聴質値とする線グラフを表示させてもよい。あるいは、出力制御部５５は、横軸を経過時間（特定のコンテンツが始まったときからの経過時間）とし、縦軸を視聴質値とする線グラフを表示させてもよい。このように、横軸を任意に設定して、視聴質値に関する情報の変化をグラフで表示させることができる。For example, the output control unit 55 may display a line graph with the horizontal axis representing GRP (a value obtained by accumulating the viewing ratings when specific content, etc. is displayed (cumulative viewing rating)) and the vertical axis representing a viewing quality value (e.g., AI value). The output control unit 55 may also display a line graph with the horizontal axis representing the number of encounters (the number of times a specific piece of content was encountered) and the vertical axis representing the viewing quality value. Alternatively, the output control unit 55 may display a line graph with the horizontal axis representing elapsed time (the amount of time elapsed since a specific piece of content began) and the vertical axis representing the viewing quality value. In this way, the horizontal axis can be set arbitrarily and changes in information relating to the viewing quality value can be displayed in a graph.
なお、上述した第１の実施形態の一部または全部を第２の実施形態に組み込んでもよいし、第２の実施形態の一部または全部を第１の実施形態に組み込んでもよい。また、上述した実施形態では番組毎の処理を主に説明したが、ＣＭ毎や特定のシーン毎など、コンテンツとして任意の単位で処理をしてもよい。Note that a part or all of the first embodiment described above may be incorporated into the second embodiment, and a part or all of the second embodiment may be incorporated into the first embodiment. In addition, while the above-mentioned embodiments have mainly described processing for each program, processing may be performed in any unit of content, such as for each commercial or for each specific scene.
上述した実施形態は、本発明が属する技術分野における通常の知識を有する者が本発明を実施できることを目的として記載されたものである。上記実施形態の種々の変形例は、当業者であれば当然になしうることであり、本発明の技術的思想は他の実施形態にも適用しうることである。したがって、本発明は、記載された実施形態に限定されることはなく、特許請求の範囲によって定義される技術的思想に従った最も広い範囲とすべきである。The above-described embodiments have been described with the aim of enabling a person having ordinary knowledge in the technical field to which the present invention pertains to practice the present invention. Various modifications of the above-described embodiments would naturally be possible for a person skilled in the art, and the technical concept of the present invention can be applied to other embodiments. Therefore, the present invention is not limited to the described embodiments, but should be in the broadest scope in accordance with the technical concept defined by the scope of the claims.
２１ カメラ
２２ マイク
２３ 制御装置
２３１ 通信部
２３２ 視聴者検知部
２３３ テレビ状態検知部
２３４ 機器制御部
２４ 制御対象機器
１ 視聴情報取得装置
１１ カメラ
１２ ＩＲセンサ
１３ 視聴者検知部
１３１ 滞在者検知部
１３２ 注視者検知部
１４ マイク
１５ テレビ状態検知部
１５１ フィンガープリント生成部
１５２ チャンネル・放送時間情報取得部
１６ 送信部
２ チャンネル・放送時間データベース
３ 視聴質管理装置
３１ 属性検出部
３２ 番組情報取得部
３３ ＶＩ値算出部
３４ ＡＩ値算出部
３５ データベース書き込み部
３６ 番組データベース
３７ 視聴質データベース
５ 視聴質表示装置
５１ 入力インターフェース
５２ ディスプレイ
５３ 設定受付部
５４ 視聴質取得部
５５ 出力制御部
６ 視聴質情報21 Camera 22 Microphone 23 Control device 231 Communication unit 232 Viewer detection unit 233 Television state detection unit 234 Device control unit 24 Control target device 1 Viewing information acquisition device 11 Camera 12 IR sensor 13 Viewer detection unit 131 Visitor detection unit 132 Viewer detection unit 14 Microphone 15 Television state detection unit 151 Fingerprint generation unit 152 Channel and broadcast time information acquisition unit 16 Transmission unit 2 Channel and broadcast time database 3 Viewing quality management device 31 Attribute detection unit 32 Program information acquisition unit 33 VI value calculation unit 34 AI value calculation unit 35 Database writing unit 36 Program database 37 Viewing quality database 5 Viewing quality display device 51 Input interface 52 Display 53 Setting acceptance unit 54 Viewing quality acquisition unit 55 Output control unit 6 Viewing quality information
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2025074919AJP2025105865A (en) | 2020-12-08 | 2025-04-28 | Control program, control device, and control method, as well as audio-visual quality output program, audio-visual quality output device, and audio-visual quality output method |
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2020203142AJP7680000B2 (en) | 2020-12-08 | 2020-12-08 | Control program, control device, and control method, as well as audio-visual quality output program, audio-visual quality output device, and audio-visual quality output method |
| JP2025074919AJP2025105865A (en) | 2020-12-08 | 2025-04-28 | Control program, control device, and control method, as well as audio-visual quality output program, audio-visual quality output device, and audio-visual quality output method |
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020203142ADivisionJP7680000B2 (en) | 2020-12-08 | 2020-12-08 | Control program, control device, and control method, as well as audio-visual quality output program, audio-visual quality output device, and audio-visual quality output method |
| Publication Number | Publication Date |
|---|---|
| JP2025105865Atrue JP2025105865A (en) | 2025-07-10 |
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020203142AActiveJP7680000B2 (en) | 2020-12-08 | 2020-12-08 | Control program, control device, and control method, as well as audio-visual quality output program, audio-visual quality output device, and audio-visual quality output method |
| JP2025074919APendingJP2025105865A (en) | 2020-12-08 | 2025-04-28 | Control program, control device, and control method, as well as audio-visual quality output program, audio-visual quality output device, and audio-visual quality output method |
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020203142AActiveJP7680000B2 (en) | 2020-12-08 | 2020-12-08 | Control program, control device, and control method, as well as audio-visual quality output program, audio-visual quality output device, and audio-visual quality output method |
| Country | Link |
|---|---|
| JP (2) | JP7680000B2 (en) |
| KR (1) | KR20230117733A (en) |
| CN (1) | CN116601964A (en) |
| WO (1) | WO2022124289A1 (en) |
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2024135034A1 (en)* | 2022-12-19 | 2024-06-27 | 株式会社Ｊｖｃケンウッド | Playback device and playback method |
| JP7593680B1 (en)* | 2023-06-16 | 2024-12-03 | Revisio株式会社 | Display information acquisition program, communication device, display information acquisition method, and display information acquisition system |
| CN119568107A (en) | 2023-09-05 | 2025-03-07 | 汉拿万都株式会社 | Brake motor abnormality detection apparatus, method, and computer-readable storage medium |
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008257216A (en) | 2007-03-12 | 2008-10-23 | Akira Tomono | Information presentation device for general public |
| JP5674300B2 (en) | 2009-09-30 | 2015-02-25 | 一般財団法人Ｎｈｋサービスセンター | Information transmission processing device, information transmission processing system, and computer program used therefor |
| US9473795B2 (en) | 2011-12-19 | 2016-10-18 | The Nielsen Company (Us), Llc | Methods and apparatus for crediting a media presentation device |
| JP6028202B2 (en) | 2013-02-28 | 2016-11-16 | 株式会社博報堂Ｄｙホールディングス | Viewing operation log data generation device |
| JP6176968B2 (en) | 2013-03-29 | 2017-08-09 | 株式会社ビデオリサーチ | Investigation device, system, method and program |
| JP2016005083A (en) | 2014-06-16 | 2016-01-12 | ソニー株式会社 | Information processing device, information processing method, and terminal device |
| WO2017120469A1 (en) | 2016-01-06 | 2017-07-13 | Tvision Insights, Inc. | Systems and methods for assessing viewer engagement |
| JP7135335B2 (en) | 2018-02-23 | 2022-09-13 | 日本電気株式会社 | VIEWING HISTORY RECORDING SYSTEM, VIEWING HISTORY RECORDING DEVICE, RECORDING METHOD AND PROGRAM |
| JP2019192991A (en) | 2018-04-19 | 2019-10-31 | 日本放送協会 | Viewing distance guidance device and program |
| JP2020150349A (en) | 2019-03-12 | 2020-09-17 | シャープ株式会社 | Video playback system and programs |
| Publication number | Publication date |
|---|---|
| KR20230117733A (en) | 2023-08-09 |
| JP2022090692A (en) | 2022-06-20 |
| WO2022124289A1 (en) | 2022-06-16 |
| JP7680000B2 (en) | 2025-05-20 |
| CN116601964A (en) | 2023-08-15 |
| Publication | Publication Date | Title |
|---|---|---|
| US12244891B2 (en) | Systems and methods for assessing viewer engagement | |
| JP2025105865A (en) | Control program, control device, and control method, as well as audio-visual quality output program, audio-visual quality output device, and audio-visual quality output method | |
| US10798438B2 (en) | Determining audience state or interest using passive sensor data | |
| JP4335642B2 (en) | Viewer reaction information collecting method, user terminal and viewer reaction information providing device used in the viewer reaction information collecting system, and program for creating viewer reaction information used for realizing the user terminal / viewer reaction information providing device | |
| US7085747B2 (en) | Real-time event recommender for media programming using “Fuzzy-Now” and “Personal Scheduler” | |
| US9270918B2 (en) | Method of recommending broadcasting contents and recommending apparatus therefor | |
| US8510156B2 (en) | Viewing terminal apparatus, viewing statistics-gathering apparatus, viewing statistics-processing system, and viewing statistics-processing method | |
| US8887186B2 (en) | Analysis method and system for audience rating and advertisement effects based on viewing behavior recognition | |
| WO2015167915A1 (en) | Systems and methods for determining a likelihood of user termination of services | |
| US20140130075A1 (en) | Information processing apparatus and method, computer program thereof, and recording medium | |
| EP2997533A2 (en) | Audience-aware advertising | |
| US20180295420A1 (en) | Methods, systems and apparatus for media content control based on attention detection | |
| US20140089954A1 (en) | System and method for correlating audio and/or images presented to a user with facial characteristics and expressions of the user | |
| WO2011031932A1 (en) | Media control and analysis based on audience actions and reactions | |
| KR20130091131A (en) | Apparatus and method for inferring preference using watching data and meta data | |
| KR20140064412A (en) | Apparatus and method for providing advertisements based on real-time viewer information | |
| JP6624837B2 (en) | Program analysis device and program analysis method | |
| JP2007501581A (en) | Conversion of recommendation scores depending on viewing status of TV programs | |
| JP2018032252A (en) | Viewing user log accumulation system, viewing user log accumulation server, and viewing user log accumulation method | |
| WO2019069831A1 (en) | Video/audio management device and screening system for screening video and audio | |
| JP2020167669A (en) | Video voice management device for screening video and voice and screening system | |
| JP7042543B1 (en) | Control programs, control devices and control methods, as well as viewing quality output programs, viewing quality output devices and viewing quality output methods. | |
| JP2014060642A (en) | Display device and display system | |
| US20190045245A1 (en) | Video display system | |
| US11949965B1 (en) | Media system with presentation area data analysis and segment insertion feature |
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination | Free format text:JAPANESE INTERMEDIATE CODE: A621 Effective date:20250527 |