JP2015049836A - Portable terminal - Google Patents
Portable terminalDownload PDFInfo
- Publication number
- JP2015049836A JP2015049836AJP2013183074AJP2013183074AJP2015049836AJP 2015049836 AJP2015049836 AJP 2015049836AJP 2013183074 AJP2013183074 AJP 2013183074AJP 2013183074 AJP2013183074 AJP 2013183074AJP 2015049836 AJP2015049836 AJP 2015049836A
- Authority
- JP
- Japan
- Prior art keywords
- image
- terminal
- display device
- external display
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
Translated fromJapaneseDescription
Translated fromJapanese本発明は、映像の表示に関し、より特定的には、映像を表示可能な携帯端末における制御に関する。 The present invention relates to video display, and more particularly to control in a mobile terminal capable of displaying video.
ユーザインターフェイスとしてタッチパネルを有する電子機器が増えており、操作性を向上させるための技術も提案されている。 Electronic devices having a touch panel as a user interface are increasing, and a technique for improving operability has also been proposed.
たとえば、特開２０１２−１６４２７２号公報（特許文献１）は、「タッチパネル機器の操作性を向上させることができる操作情報取得装置」を開示している。当該操作情報取得手段（操作情報取得装置１００）は、「タッチパネルディスプレイ２００の出力信号に基づいて操作情報を取得する装置であって、出力信号に基づいて操作種別を取得する操作種別判定部１２０と、出力信号に基づいてタッチパネルにおけるタッチ面積を取得するタッチ面積算出部１３０と、取得されたタッチ面積に対応する量を、取得された操作種別の操作量として決定する操作量決定部１４０と」を備える（［要約］参照）。 For example, Japanese Patent Laying-Open No. 2012-164272 (Patent Document 1) discloses “an operation information acquisition device capable of improving the operability of a touch panel device”. The operation information acquisition means (operation information acquisition device 100) is “a device that acquires operation information based on an output signal of the touch panel display 200, and an operation type determination unit 120 that acquires an operation type based on the output signal; A touch area calculation unit 130 that acquires the touch area on the touch panel based on the output signal, and an operation amount determination unit 140 that determines the amount corresponding to the acquired touch area as the operation amount of the acquired operation type. Prepare (see [Summary]).
ところで、携帯端末（たとえばスマートフォン、タブレット端末その他の携帯型の情報通信端末）が有する映像コンテンツを外部表示機器（たとえばテレビ）に表示するために携帯端末を外部表示機器に接続して、外部表示機器の画面で当該映像コンテンツを視聴したいという要請がある。そのとき、外部表示機器がタッチパネルを有する場合、外部表示機器に表示されている画像へのタッチ操作に基づいて画面を切り換えようとする操作が想定される。外部表示機器は、通常、携帯端末よりも大きな画面を有する。したがって、外部表示機器において上記操作が行われる場合、携帯端末の画面のサイズと外部表示機器の画面のサイズとが異なることによる、たとえば外部表示機器に表示されたボタンにユーザの手が届かない等の不都合が想定される。このことから、外部表示機器における操作性を向上させるための技術が必要とされている。 By the way, in order to display video content of a mobile terminal (for example, a smartphone, a tablet terminal or other portable information communication terminal) on an external display device (for example, a television), the mobile terminal is connected to the external display device, There is a request to view the video content on the screen. At that time, when the external display device has a touch panel, an operation for switching the screen based on a touch operation on an image displayed on the external display device is assumed. The external display device usually has a larger screen than the mobile terminal. Therefore, when the above operation is performed on the external display device, the size of the screen of the mobile terminal and the size of the screen of the external display device are different, for example, the user cannot reach the button displayed on the external display device, etc. Inconvenience is assumed. For this reason, a technique for improving the operability in the external display device is required.
この開示は、上述のような問題点を解決するためになされたものであって、ある局面における目的は、外部表示機器における操作性が向上するように当該外部表示機器から受信する情報を取り扱うことができる携帯端末を提供することである。 This disclosure has been made to solve the above-described problems, and an object in one aspect is to handle information received from the external display device so that operability in the external display device is improved. It is to provide a portable terminal that can be used.
ある実施の形態に従うと、外部の表示機器に映像を表示するための携帯端末が提供される。携帯端末は、表示機器に映像信号を送信するための送信手段と、画像を表示するための端末表示部と、端末表示部の画像表示領域に対する操作を受け付けるための端末パネル制御部と、携帯端末の動作を制御するための端末制御部とを備える。表示機器は、携帯端末から送信される信号を受信するための受信手段と、画像を表示するための外部表示部と、外部表示部の画像表示領域に対するタッチ操作を受け付けるための外部パネル制御部とを含む。端末制御部は、表示機器から、外部表示部に対するタッチ操作を表す情報を受け付け、端末表示部に表示される第１の画像と、第１の画像を縮小された画像である第２の画像とを表示するための第１の映像信号を生成する。第１の映像信号は、第２の画像が、外部表示部において、外部表示部に対するタッチ操作に基づいて特定される位置に表示されるように生成される。送信手段は、表示機器に、第１の映像信号を送信し、端末制御部は、表示機器から、第２の画像が表示されている領域内のタッチ操作を表す情報を受信した場合には、第２の画像全体に対する当該タッチ操作の位置を、端末表示部全体に対して相対する位置に変換し、端末パネル制御部が当該変換後の位置に対するタッチ操作を受け付けたときの処理を実行するように構成されている。 According to an embodiment, a mobile terminal for displaying video on an external display device is provided. The portable terminal includes a transmission means for transmitting a video signal to a display device, a terminal display unit for displaying an image, a terminal panel control unit for receiving an operation on an image display area of the terminal display unit, and a portable terminal And a terminal control unit for controlling the operation. The display device includes a receiving unit for receiving a signal transmitted from the mobile terminal, an external display unit for displaying an image, and an external panel control unit for receiving a touch operation on the image display area of the external display unit. including. The terminal control unit receives information representing a touch operation on the external display unit from the display device, and a first image displayed on the terminal display unit, a second image that is a reduced image of the first image, and A first video signal for displaying is generated. The first video signal is generated so that the second image is displayed on the external display unit at a position specified based on a touch operation on the external display unit. The transmission unit transmits the first video signal to the display device, and the terminal control unit receives information representing the touch operation in the area where the second image is displayed from the display device. The position of the touch operation with respect to the entire second image is converted into a position facing the entire terminal display unit, and the process when the terminal panel control unit receives the touch operation with respect to the converted position is executed. It is configured.
好ましくは、端末制御部は、第２の画像が表示される大きさが外部表示部に対するタッチ操作の内容に対応するように、第１の映像信号を生成する。 Preferably, the terminal control unit generates the first video signal so that the size at which the second image is displayed corresponds to the content of the touch operation on the external display unit.
好ましくは、端末制御部は、表示機器から、第２の画像が表示されている領域外を含むタッチ操作を表す情報を受信した場合に、外部表示部に対するタッチ操作に基づいて、第１の映像信号が外部表示部における第２の画像の表示位置を変更するように変更された第２の映像信号を生成する。送信手段は、表示機器に、第２の映像信号を送信する。 Preferably, the terminal control unit receives the first video based on the touch operation on the external display unit when receiving information representing a touch operation including the outside of the region where the second image is displayed from the display device. A second video signal that is changed so that the signal changes the display position of the second image on the external display unit is generated. The transmission means transmits the second video signal to the display device.
好ましくは、端末制御部は、端末表示部の画像表示領域に対して特定の操作がなされた場合に、表示機器に、第１の画像を含み第２の画像を含まない表示を行うことを指示する。 Preferably, when a specific operation is performed on the image display area of the terminal display unit, the terminal control unit instructs the display device to perform a display including the first image but not the second image. To do.
好ましくは、端末制御部は、外部表示部の画像表示領域に対して特定のタッチ操作がなされた場合に、表示機器に、第１の画像を含み第２の画像を含まない表示を行うことを指示する。 Preferably, when a specific touch operation is performed on the image display area of the external display unit, the terminal control unit performs a display including the first image and not including the second image on the display device. Instruct.
他の実施の形態に従うと、端末制御部は、外部表示部の画像表示領域に対して特定の時間タッチ操作がなされなかった場合に、第１の画像を含み、第２の画像を含まない、第３の映像信号を生成することがあり得る。送信手段は、表示機器に、当該第３の映像信号を送信する場合があり得る。 According to another embodiment, the terminal control unit includes the first image and does not include the second image when the touch operation is not performed for a specific time on the image display area of the external display unit. A third video signal may be generated. The transmitting unit may transmit the third video signal to the display device.
本開示によれば、外部表示機器における操作性が向上するように当該外部表示機器から受信する情報を取り扱うことができる携帯端末を提供することである。 According to the present disclosure, it is to provide a mobile terminal that can handle information received from an external display device so that operability in the external display device is improved.
以下、図面を参照しつつ、本発明の実施の形態について説明する。以下の説明では、同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがって、それらについての詳細な説明は繰り返さない。 Hereinafter, embodiments of the present invention will be described with reference to the drawings. In the following description, the same parts are denoted by the same reference numerals. Their names and functions are also the same. Therefore, detailed description thereof will not be repeated.
＜通信システムの概略構成＞
以下の説明では、携帯端末の一実施の形態を含む通信システムが示される。図１は、通信システムの構成の一例を概略的に示す図である。図１に示されるように、通信システム１００は、携帯端末１と外部表示機器２とを含む。<Schematic configuration of communication system>
In the following description, a communication system including an embodiment of a mobile terminal is shown. FIG. 1 is a diagram schematically illustrating an example of a configuration of a communication system. As shown in FIG. 1, the
携帯端末１は、タッチパネル１０を備える。タッチパネル１０における表示は、操作の対象となるボタン１１１（図１中の星型のアイコン）を含む。通信システム１００では、携帯端末１は、タッチパネル１０に表示される画像のデータ（第１の映像信号）を外部表示機器２に送信する。第１の映像信号は、携帯端末１から外部表示機器２に直接送信されても良いし、携帯端末１からサーバ等の機器を介して外部表示機器２に送信されても良い。 The
外部表示機器２は、タッチパネル２４を備える。そして、外部表示機器２は、上記第１の映像信号を受信すると、タッチパネル２４に当該第１の映像信号の画像を表示する。本実施の形態では、タッチパネル２４の画像表示領域は、タッチパネル１０の画像表示領域よりも大きい。このため、タッチパネル２４に表示された画像は、タッチパネル１０に表示される画像を拡大されたものに相当する。タッチパネル２４に表示された画像におけるボタン２４１は、タッチパネル１０中のボタン１１１に対応する。 The
携帯端末１は、外部表示機器２においてボタン２４１が操作されると、ボタン１１１が操作されたときの処理を実行する。より具体的には、携帯端末１では、少なくとも第１の映像信号が生成される際に、ボタン２４１は、ボタン１１１に関連付けられる。外部表示機器２は、ボタン２４１を操作されると、携帯端末１に、ボタン２４１が操作されたことを示す情報を送信する。当該情報を受信すると、携帯端末１は、ボタン２４１が関連付けられているボタンとして、ボタン１１１を特定する。そして、携帯端末１は、ボタン１１１が操作されたときの処理を実行する。 When the
なお、タッチパネル２４の画像表示領域がタッチパネル１０の画像表示領域よりも小さい場合であっても、タッチパネル２４に表示される画像がタッチパネル１０に表示される画像を拡大したものである場合があり得る。 Even when the image display area of the
外部表示機器２において、予め定められたジェスチャが行なわれると、タッチパネル２４には、さらに上記画像の縮小版が表示される。図２は、外部表示機器２における予め定められたジェスチャを説明するための図である。 When a predetermined gesture is performed on the
図２では、上記ジェスチャの一例として、タッチパネル２４に対する、破線２Ａで示されるような長方形の軌道に沿ったムーブ操作が示されている。当該ムーブ操作によって、タッチパネル２４に対して、位置とサイズが指定される。位置は、たとえば、タッチパネル２４における上記長方形の左上の座標である。サイズは、たとえば、上記長方形の上下方向の寸法である。外部表示機器２は、携帯端末１に、当該ジェスチャが行なわれたことを示す情報を送信する。なお、ムーブ操作とは、ユーザが、指を、タッチパネルに触れたままの状態で、当該タッチパネル上で動かす操作を意味する。 In FIG. 2, as an example of the gesture, a move operation along a rectangular trajectory as shown by a
上記情報を受信すると、携帯端末１は、外部表示機器２に、新たなデータ（第２の映像信号）を送信する。当該第２の映像信号とは、タッチパネル２４において、上記ムーブ操作によって指定される位置に、当該操作によって指定されるサイズの、図１の画像の縮小版を表示させるためのデータである。 When the information is received, the
図３は、外部表示機器２において、上記縮小版の画像が表示された状態の一例を示す図である。図３では、タッチパネル２４に表示される画像２１０が、上記縮小版の画像として示されている。図３に示されたタッチパネル２４では、画像２１０は、図１に示された元の画像に重ねられている。画像２１０は、ボタン１１１およびボタン２４１に対応する、ボタン２１１を含む。 FIG. 3 is a diagram illustrating an example of a state in which the reduced image is displayed on the
携帯端末１は、外部表示機器２においてボタン２１１が操作されると、ボタン１１１が操作されたときの処理を実行する。より具体的には、携帯端末１では、少なくとも第２の映像信号が生成される際に、ボタン２１１は、ボタン１１１に関連付けられる。外部表示機器２は、ボタン２１１を操作されると、携帯端末１に、ボタン２１１が操作されたことを示す情報を送信する。当該情報を受信すると、携帯端末１は、ボタン２１１が関連付けられているボタンとして、ボタン１１１を特定する。そして、携帯端末１は、ボタン１１１が操作されたときの処理を実行する。 When the button 211 is operated on the
＜携帯端末１と外部表示機器２の構成＞
図４は、携帯端末１と外部表示機器２の構成を概略的に示す図である。携帯端末１は、たとえば、スマートフォン、タブレット端末その他の通信機能と画像表示機能とを備える携帯型の通信端末として実現される。外部表示機器２は、テレビ、モニタ装置その他の機器であって、上記通信端末との通信機能を有する映像表示装置として実現される。図４を参照して、携帯端末１と外部表示機器２の構成を説明する。<Configuration of
FIG. 4 is a diagram schematically showing the configuration of the
（携帯端末１）
図４に示されるように、携帯端末１は、演算部１４と、タッチセンサ１０Ａと、タッチセンサ制御部１１と、表示制御部１２と、表示部１３と、メモリ１５と、外部出力映像管理部１６と、外部インタフェース（Ｉ／Ｆ）１７と、外部出力制御情報通信部１８と、外部タッチイベント制御部１９とを備える。(Mobile terminal 1)
As illustrated in FIG. 4, the
演算部１４は、携帯端末１に対して予め規定された処理を実現するための命令を実行する。 The
タッチセンサ１０Ａは、タッチパネル１０に対する操作を検出する。
タッチセンサ制御部１１は、演算部１４によって出力される命令に基づいて、タッチセンサ１０Ａの動作を制御する。当該動作は、たとえば、タッチ操作の検出部のオンやオフ等を含む。
The touch
表示部１３は、表示制御部１２から出力される信号に基づいて、画像を表示する。表示される画像は、メモリ１５に保存されている動画像、静止画像、写真その他のコンテンツ、携帯端末１の外部から与えられる同様のコンテンツ等を含む。表示部１３は、液晶モニタ、有機ＥＬ（Electro Luminescence）モニタその他の表示装置として実現される。表示制御部１２は、演算部１４から出力される命令に基づいて、表示部１３における画面の表示を制御する。たとえば、携帯端末１と外部表示機器２との通信が確立されている場合において、携帯端末１が外部表示機器２に映像信号を送信しているとき、表示制御部１２は、表示部１３における画像（動画像であっても良いし、静止画像であっても良い）の表示または非表示を切り換える。 The
携帯端末１では、タッチセンサ１０Ａと表示部１３とによって、タッチパネル１０が構成される。 In the
メモリ１５は、携帯端末１に対して予め規定された動作を実行させるためのデータおよびプログラムを含むシステム情報、ならびに、前述のコンテンツその他のユーザデータを格納する。メモリ１５は、フラッシュメモリ、ハードディスク、ＳＳＤ（Solid State Drive）その他の不揮発記憶装置、あるいは、ＲＡＭ（Random Access Memory）その他の揮発記憶装置として実現される。また、メモリ１５は、着脱可能なメモリカードによっても実現され得る。 The
外部出力映像管理部１６は、演算部１４の制御に基づいて、携帯端末１の外部に対する映像信号の出力（送信）を制御する。たとえば、外部出力映像管理部１６は、メモリ１５に保存されている映像データをストリーム信号として無線送信する。 The external output
外部Ｉ／Ｆ１７は、携帯端末１が他の装置と通信する際のインタフェースである。演算部１４は、外部Ｉ／Ｆ１７を介して、外部表示機器２と通信する。 The external I /
外部出力制御情報通信部１８は、外部表示機器２によって送信された信号の入力を受け付ける。当該信号は、外部表示機器２において検出されたタッチパネル２４に対するタッチ操作（タッチイベントともいう。）の種別、当該タッチ操作を特定する座標値情報等を含む。タッチ操作は、たとえば、タッチパネル２４におけるタッチダウン操作、ムーブ操作、タッチアップ操作であるが、これらに限られない。座標値情報は、たとえば、タッチダウン操作またはタッチアップ操作が検出された点または領域を表す座標値、または、ムーブ操作が行われた移動量を表す座標値を含む。 The external output control
外部タッチイベント制御部１９は、外部出力制御情報通信部１８からの出力を受け、外部表示機器２において検出されたタッチイベントに基づいて表示部１３における画像の表示を制御する。たとえば、携帯端末１が、表示部２７におけるタッチダウン操作が行なわれた旨および当該タッチダウン操作を表す情報（タッチダウンされた点の座標値）を外部表示機器２から受信すると、外部タッチイベント制御部１９は、当該情報に基づいて、当該タッチダウン操作が行なわれた点に相当する点の座標値を、表示部１３に表示されている画像の中で特定する。その後の処理は、この点の座標値が起点となる。 The external touch
別の局面において、携帯端末１が、表示部２７におけるムーブ操作が行なわれた旨および当該ムーブ操作を表す情報（たとえば、画面上の軌跡を表す座標値）を外部表示機器２から受信すると、外部タッチイベント制御部１９は、当該情報に基づいて、当該ムーブ操作が行なわれた軌跡に相当する各点の座標値を、表示部１３に表示されている画像の中で特定する。 In another aspect, when the
さらに別の局面において、携帯端末１が、表示部２７におけるタッチアップ操作が行なわれた旨および当該タッチアップ操作を表す情報（タッチアップされた点の座標値）を外部表示機器２から受信すると、外部タッチイベント制御部１９は、当該情報に基づいて、当該タッチアップ操作が行なわれた点に相当する点の座標値を、表示部１３に表示されている画像の中で特定する。 In yet another aspect, when the
演算部１４とタッチセンサ制御部１１と表示制御部１２と外部タッチイベント制御部１９とは、たとえば、ＣＰＵ（Central Processing Unit）その他のプロセッサとして実現される。 The
（外部表示機器２）
図４に示されるように、外部表示機器２は、入力映像管理部２１と、外部入力制御情報通信部２２と、演算部２３と、タッチセンサ２４Ａと、タッチセンサ制御部２５と、表示制御部２６と、表示部２７と、外部Ｉ／Ｆ２８とを備える。(External display device 2)
As shown in FIG. 4, the
演算部２３は、外部表示機器２に対して予め規定された処理を実現するための命令を実行する。 The
外部表示機器２では、タッチセンサ２４Ａと表示部２７によって、タッチパネル２４が構成される。タッチセンサ２４Ａは、タッチパネル２４の表示部２７における画像表示領域に対するタッチ操作を受け付ける。 In the
タッチセンサ制御部２５は、演算部２３によって出力される命令に基づいて、タッチセンサ２４Ａの動作を制御する。当該動作は、たとえば、タッチ操作の検出部のオンやオフ等を含む。 The touch
表示制御部２６は、演算部２３から出力される命令に基づいて、表示部２７における画面の表示を制御する。たとえば、携帯端末１と外部表示機器２との通信が確立されている場合において、外部表示機器２が、携帯端末１から映像信号を受信すると、表示制御部２６は、その映像信号に基づく映像を表示部２７に表示する。外部表示機器２がテレビである場合には、表示制御部２６は、チューナによる選局結果に応じてテレビ放送番組を表示部２７に表示する。 The
表示部２７は、表示制御部２６から出力される信号に基づいて、画像を表示する。表示される画像は、携帯端末１から送信された映像信号に基づく動画像、静止画像、写真その他のコンテンツ、テレビ放送信号に基づく番組等である。表示部２７は、液晶モニタ、有機ＥＬモニタその他の表示装置として実現される。 The
入力映像管理部２１は、演算部２３の制御に基づいて、外部表示機器２の外部に対する映像信号の受信を制御する。たとえば、入力映像管理部２１は、携帯端末１との通信を確立し、携帯端末１から送信される映像信号の受信を受け付ける。 The input
外部入力制御情報通信部２２は、外部表示機器２において検出されたタッチ操作に応じた信号を携帯端末１に送信する。当該信号は、検出されたタッチパネル２４に対するタッチ操作（タッチイベントともいう。）の種別、当該タッチ操作を特定する座標値情報等を含む。 The external input control
タッチ操作は、たとえば、表示部２７におけるタッチダウン操作、ムーブ操作、タッチアップ操作であるが、これらに限られない。座標値情報は、たとえば、タッチダウン操作またはタッチアップ操作が検出された点または領域を表す座標値、または、ムーブ操作が行われた移動量を表す座標値を含む。 The touch operation is, for example, a touch-down operation, a move operation, or a touch-up operation on the
なお、演算部２３とタッチセンサ制御部２５と表示制御部２６は、たとえば、ＣＰＵその他のプロセッサとして実現される。 In addition, the calculating
外部Ｉ／Ｆ２８は、外部表示機器２が他の装置と通信する際のインタフェースである。演算部２３は、外部Ｉ／Ｆ２８を介して、携帯端末１と通信する。 The external I /
＜処理の流れ＞
通信システム１００では、外部表示機器２において、携帯端末１において表示される画像が表示され、さらに、当該画像の縮小版が表示される。外部表示機器２におけるこのような表示を実現するために携帯端末１において実行される処理の内容を、図５を参照して説明する。図５は、携帯端末１において実行される処理のフローチャートである。<Process flow>
In the
ステップＳ１０では、演算部１４は、外部表示機器２に、図１においてタッチパネル１０に表示されている画像の映像信号（第１の映像信号）を出力する。これにより、外部表示機器２のタッチパネル２４では、図４に示されたように上記画像の拡大されたものが表示される。そして、制御は、ステップＳ２０へ進められる。 In step S <b> 10, the
ステップＳ２０では、演算部１４は、外部表示機器２から、タッチパネル２４におけるタッチイベントを取得する。そして、制御は、ステップＳ３０へ進められる。 In step S <b> 20, the
ステップＳ３０では、演算部１４は、ステップＳ２０で取得したタッチイベントによって特定される操作が、上記した「予め定められたジェスチャ」の操作であるか否かを判定する。そして、演算部１４が、上記タッチイベントによって特定される操作を上記したジェスチャの操作であると判定すると（ステップＳ３０における「ジェスチャ」）、制御は、ステップＳ４０へ進められる。また、演算部１４が、上記タッチイベントによって特定される操作を上記したジェスチャの操作ではないと判定すると（ステップＳ３０における「通常タッチ」）、制御は、ステップＳ７０へ進められる。 In step S <b> 30, the
ステップＳ７０では、演算部１４は、ステップＳ２０で取得したタッチイベントに従った制御を実行する。そして、制御は、ステップＳ１００へ進められる。 In step S70, the
ステップＳ４０では、演算部１４は、ジェスチャによって指定されるサイズを特定する。そして、制御は、ステップＳ５０へ進められる。 In step S40, the
ステップＳ５０では、演算部１４は、元の画像（第１の映像信号の画像）に、当該元の画像の小型操作画面（第１の映像信号の画像の縮小版）を表示するための画像を合成することにより、第２の映像信号を生成する。これにより、外部表示機器２のタッチパネル２４では、図５に示されたように、元の画像とその縮小版とが表示される。携帯端末１が外部表示機器２から新たなタッチイベントを受信すると、演算部１４は、外部表示機器２に、第２の映像信号を送信する。そして、制御は、ステップＳ６０へ進められる。 In step S50, the
ステップＳ６０では、演算部１４は、上記新たなタッチイベントの座標が、第２の映像信号によって表示される縮小版が表示されている領域の範囲内であるか否かを判断する。演算部１４が、上記座標が上記範囲内であると判断すると（ステップＳ６０における「範囲内」）、制御は、ステップＳ８０へ進められる。演算部１４が、上記座標が上記範囲内ではないと判断すると（ステップＳ６０における「範囲外」）、制御は、ステップＳ７０へ進められる。 In step S60, the
ステップＳ８０では、演算部１４は、ステップＳ６０で取得したタッチイベントに基づいてタッチパネル２４（タッチセンサ２４Ａ）における操作位置を特定し、そして、当該操作位置に対応するタッチパネル１０（タッチセンサ１０Ａ）の中の位置を特定する。そして、制御は、ステップＳ９０へ進められる。 In step S80, the
ステップＳ９０では、演算部１４は、タッチセンサ制御部１１の、ステップＳ８０で特定した操作位置に、外部表示機器２から受信したイベントを送出する。そして、制御は、ステップＳ１００へ進められる。 In step S90, the
ステップＳ１００では、演算部１４は、外部表示機器２から受信したイベントに従った動作（処理）を実行する。そして、制御は、ステップＳ１１０へ進められる。 In step S <b> 100, the
ステップＳ１１０では、演算部１４は、外部表示機器２から受信したイベントが、小型操作画面を非表示とするものであるか否かを判断する。タッチパネル２４に対して、特定の操作（たとえば、タッチパネル２４に対するダブルタップ）がなされると、外部表示機器２は、携帯端末１に、小型操作画面を非表示にするためのイベントを送信する。演算部１４が、上記イベントが小型操作画面を非表示とするものであると判断すると（ステップＳ１１０の「終了」）、制御は、ステップＳ１２０へ進められる。演算部１４が、上記イベントが小型操作画面を非表示とするものであると判断すると（ステップＳ１１０の「継続」）、制御は、ステップＳ６０へ戻される。 In step S110, the
ステップＳ１２０では、演算部１４は、外部表示機器２に対して、上記した縮小版の表示を終了する指示を送信して、制御を終了させる。これに応じて、外部表示機器２の演算部２３は、タッチパネル２４における小型操作画面の表示を終了する。これにより、タッチパネル２４における表示は、図３に示されたものから、図１に示されたものへと変更される。 In step S120, the
＜実施の形態のまとめ＞
以上説明された実施の形態では、外部表示機器２のタッチパネル２４には、携帯端末１のタッチパネル１０に表示される画像を拡大された画像（第１の画像）が表示される。さらに、タッチパネル２４において予め定められたジェスチャが行なわれると、タッチパネル２４には、図３に示されるように、タッチパネル１０に表示される画像を拡大された画像（第１の画像）と、当該第１の画像の縮小版の画像２１０（第２の画像）が表示される。携帯端末１は、第１の画像と第２の画像のいずれに対する操作も、携帯端末１に対してなされた操作と同様に扱う。つまり、通信システム１００では、ユーザは、携帯端末１のタッチパネル１０に表示された画像、外部表示機器２のタッチパネル２４に表示された画像、および、外部表示機器２のタッチパネル２４内の画像２１０のいずれに対して操作を行っても、携帯端末１の動作を制御できる。<Summary of Embodiment>
In the embodiment described above, the image (first image) obtained by enlarging the image displayed on the
なお、タッチパネル２４では、画像２１０が操作されている場合には、タッチパネル２４の画像２１０の表示領域以外の領域に対するタッチ操作が無効にされても良い。 In the
図５のステップＳ７０は、タッチパネル２４（タッチセンサ２４Ａ）において検出されたタッチイベントの座標が縮小版の画像（図３の画像２１０）の領域外の座標を含む場合の制御を示す。このような制御は、たとえば、上記縮小版の画像のタッチパネル２４における表示位置を変更する操作である。図６および図７は、縮小版の画像の表示位置の変更を説明するための図である。 Step S70 in FIG. 5 shows control when the coordinates of the touch event detected on the touch panel 24 (
図６には、タッチパネル２４において実行された、あるムーブ操作の軌跡が、矢印Ａ１で示されている。当該軌跡は、画像２１０の内部から外部に延びている。 In FIG. 6, the locus of a certain move operation executed on the
矢印Ａ１のムーブ操作が行なわれると、演算部１４は、ステップＳ７０およびステップＳ１００において、当該ムーブ操作に従った制御を実行する。より具体的には、矢印Ａ１の始点は、画像２１０内にある。よって、演算部１４は、当該画像２１０の表示位置を、矢印Ａ１の終点によって指定される位置まで移動させる。これにより、画像２１０の表示は、図７において示される位置まで移動する。 When the move operation indicated by the arrow A1 is performed, the
図３等において画像２１０で示された画像の縮小版の表示は、ステップＳ１２０（図５参照）の制御によって終了する。図５を参照して説明された処理では、縮小版の表示は、タッチパネル２４に対する操作が特定の操作であったことを条件として、終了した。なお、縮小版の表示を終了させるための条件は、これに限定されない。縮小版の表示は、たとえば、携帯端末１のタッチパネル１０において表示されている画像に対して特定の操作（タッチパネル１０に対する特定のジェスチャ、または、特定のボタンに対する操作）がなされたこと、または、タッチパネル２４に対して一定の時間操作がなされなかった状態が継続したことによって、終了されても良い。 The display of the reduced version of the image indicated by the
以上説明された実施の形態では、ジェスチャの一例として、図２において、破線２Ａで示されるような長方形の軌道に沿ったムーブ操作が示された。なお、ジェスチャでは、必ずしも位置とサイズが指定される必要は無い。したがって、ジェスチャは、タッチパネル２４に対する操作に限られず、たとえば、外部表示機器２に設けられた特定のボタンに対する操作であっても良い。当該特定のボタンは、タッチパネル２４上に表示されたボタンであっても良いし、外部表示機器２上に設けられたハードウェアボタンであっても良い。 In the embodiment described above, as an example of the gesture, the move operation along the rectangular trajectory as shown by the
ジェスチャによって位置とサイズが指定されなかった場合、画像の縮小版は、以下のように表示される。外部表示機器２において当該ジェスチャが実行されると、そのことを示す信号が外部表示機器２から携帯端末１に送信される。当該信号を受信すると、携帯端末１は、外部表示機器２に、タッチパネル２４の予め定められた位置に、予め定められたサイズの縮小版を表示されるための第２の映像信号を送信する。これに応じて、外部表示機器２では、携帯端末１のタッチパネル１０に表示される画像の縮小版であって、予め定められたサイズの画像が、タッチパネル２４の予め定められた位置に表示される。 If the position and size are not specified by the gesture, a reduced version of the image is displayed as follows. When the gesture is executed in the
以上説明された本実施の形態の通信システムでは、携帯端末は、表示機器に第１の画像を表示させながら、表示機器における当該第１の画像の縮小版である第２の画像の表示領域内のタッチ操作を受け付ける。これにより、外部表示機器に表示された第１の画面中のボタンにユーザの手が届かない等の、携帯端末の画面のサイズと外部表示機器の画面のサイズとが異なることによる不都合を回避できる。 In the communication system according to the present embodiment described above, the mobile terminal displays the first image on the display device while the second image is in the display area of the second image that is a reduced version of the first image on the display device. The touch operation is accepted. Thereby, it is possible to avoid inconvenience due to the difference between the screen size of the mobile terminal and the screen size of the external display device, such as the user's hand not reaching the button in the first screen displayed on the external display device. .
今回開示された実施の形態およびその変形例はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。 It should be thought that embodiment disclosed this time and its modification are illustrations in all the points, and are not restrictive. The scope of the present invention is defined by the terms of the claims, rather than the description above, and is intended to include any modifications within the scope and meaning equivalent to the terms of the claims.
１ 携帯端末、２ 外部表示機器、１０，２４ タッチパネル、１０Ａ，２４Ａ タッチセンサ、１１，２５ タッチセンサ制御部、１３，２７ 表示部、１００ 通信システム。 DESCRIPTION OF
Claims (5)
Translated fromJapanese前記表示機器に映像信号を送信するための送信手段と、
画像を表示するための端末表示部と、
前記端末表示部の画像表示領域に対する操作を受け付けるための端末パネル制御部と、
前記携帯端末の動作を制御するための端末制御部とを備え、
前記表示機器は、
前記携帯端末から送信される信号を受信するための受信手段と、
画像を表示するための外部表示部と、
前記外部表示部の画像表示領域に対するタッチ操作を受け付けるための外部パネル制御部とを含み、
前記端末制御部は、
前記表示機器から、前記外部表示部に対するタッチ操作を表す情報を受け付け、
前記端末表示部に表示される第１の画像と、前記第１の画像を縮小された画像である第２の画像とを表示するための第１の映像信号を生成し、
前記第１の映像信号は、前記第２の画像が、前記外部表示部において、前記外部表示部に対するタッチ操作に基づいて特定される位置に表示されるように生成され、
前記送信手段は、
前記表示機器に、前記第１の映像信号を送信し、
前記端末制御部は、前記表示機器から、前記第２の画像が表示されている領域内のタッチ操作を表す情報を受信した場合には、前記第２の画像全体に対する当該タッチ操作の位置を、前記端末表示部全体に対して相対する位置に変換し、前記端末パネル制御部が当該変換後の位置に対するタッチ操作を受け付けたときの処理を実行するように構成されている、携帯端末。A portable terminal for displaying video on an external display device,
Transmitting means for transmitting a video signal to the display device;
A terminal display for displaying images;
A terminal panel control unit for accepting an operation on the image display area of the terminal display unit;
A terminal control unit for controlling the operation of the mobile terminal,
The display device
Receiving means for receiving a signal transmitted from the portable terminal;
An external display for displaying images;
An external panel control unit for receiving a touch operation on the image display area of the external display unit,
The terminal control unit
Receiving information representing a touch operation on the external display unit from the display device;
Generating a first video signal for displaying a first image displayed on the terminal display unit and a second image that is a reduced image of the first image;
The first video signal is generated so that the second image is displayed at a position specified on the external display unit based on a touch operation on the external display unit,
The transmission means includes
Transmitting the first video signal to the display device;
When the terminal control unit receives information representing a touch operation in a region where the second image is displayed from the display device, the terminal control unit determines the position of the touch operation with respect to the entire second image, A mobile terminal configured to convert to a position facing the entire terminal display unit, and to execute processing when the terminal panel control unit receives a touch operation on the converted position.
前記送信手段は、前記表示機器に、前記第２の映像信号を送信する、請求項１または請求項２に記載の携帯端末。When the terminal control unit receives information representing a touch operation including an area outside the area where the second image is displayed from the display device, the terminal control unit performs the first control based on the touch operation on the external display unit. Generating a second video signal that is changed so that the display position of the second image on the external display unit is changed,
The portable terminal according to claim 1, wherein the transmission unit transmits the second video signal to the display device.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013183074AJP2015049836A (en) | 2013-09-04 | 2013-09-04 | Portable terminal |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013183074AJP2015049836A (en) | 2013-09-04 | 2013-09-04 | Portable terminal |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2015049836Atrue JP2015049836A (en) | 2015-03-16 |
Family
ID=52699759
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2013183074APendingJP2015049836A (en) | 2013-09-04 | 2013-09-04 | Portable terminal |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2015049836A (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2020052966A (en)* | 2018-09-28 | 2020-04-02 | 能美防災株式会社 | Disaster prevention system |
- 2013
- 2013-09-04JPJP2013183074Apatent/JP2015049836A/enactivePending
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2020052966A (en)* | 2018-09-28 | 2020-04-02 | 能美防災株式会社 | Disaster prevention system |
| JP7207925B2 (en) | 2018-09-28 | 2023-01-18 | 能美防災株式会社 | disaster prevention system |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102571369B1 (en) | Display control method, storage medium and electronic device for controlling the display | |
| JP5906984B2 (en) | Display terminal device and program | |
| KR20130080179A (en) | Method and apparatus for managing icon in portable terminal | |
| EP2887648A1 (en) | Method of performing previewing and electronic device for implementing the same | |
| US20160139797A1 (en) | Display apparatus and contol method thereof | |
| US10095384B2 (en) | Method of receiving user input by detecting movement of user and apparatus therefor | |
| CN108469940B (en) | A screenshot method and terminal | |
| JP6412778B2 (en) | Video apparatus, method, and program | |
| US20140292694A1 (en) | Display control apparatus and display control method | |
| CN111026480A (en) | A content display method and electronic device | |
| JP5783610B2 (en) | INPUT DISPLAY CONTROL DEVICE, THIN CLIENT SYSTEM, INPUT DISPLAY CONTROL METHOD, AND PROGRAM | |
| JP5384706B2 (en) | Multi-touch operation method and system | |
| US20140215347A1 (en) | Portable device and control method thereof | |
| CN114217754A (en) | Screen projection control method, device, electronic device and storage medium | |
| US10645144B2 (en) | Computer-implemented method for controlling a remote device with a local device | |
| JP2016038619A (en) | Portable terminal device and operation method thereof | |
| JP2015049836A (en) | Portable terminal | |
| US10728487B2 (en) | Image display apparatus, external device, image display method, and image display system | |
| JP6716519B2 (en) | Display device and display method | |
| KR102160105B1 (en) | A method and apparatus for providing a user interface | |
| JP6603383B2 (en) | Video apparatus, method, and program | |
| JP6794520B2 (en) | Video equipment, methods, and programs | |
| JP2014174808A (en) | Portable terminal and system for displaying video | |
| JP5511023B2 (en) | Video display system and method | |
| JP6213597B2 (en) | Display control apparatus, display control method, and program |