JP2019175114A - Menu display control device for vehicle, on-board device operation system, and gui program - Google Patents
Menu display control device for vehicle, on-board device operation system, and gui programDownload PDFInfo
- Publication number
- JP2019175114A JP2019175114AJP2018062313AJP2018062313AJP2019175114AJP 2019175114 AJP2019175114 AJP 2019175114AJP 2018062313 AJP2018062313 AJP 2018062313AJP 2018062313 AJP2018062313 AJP 2018062313AJP 2019175114 AJP2019175114 AJP 2019175114A
- Authority
- JP
- Japan
- Prior art keywords
- menu
- item
- image
- vehicle
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545processingMethods0.000claimsabstractdescription47
- 238000000034methodMethods0.000claimsdescription22
- 238000001514detection methodMethods0.000description22
- 238000010586diagramMethods0.000description19
- 210000003811fingerAnatomy0.000description15
- 238000004378air conditioningMethods0.000description9
- 238000012790confirmationMethods0.000description8
- 238000004891communicationMethods0.000description7
- 230000006870functionEffects0.000description6
- 239000011521glassSubstances0.000description5
- 210000003813thumbAnatomy0.000description5
- 239000000446fuelSubstances0.000description4
- XLYOFNOQVPJJNP-UHFFFAOYSA-NwaterSubstancesOXLYOFNOQVPJJNP-UHFFFAOYSA-N0.000description4
- 238000003825pressingMethods0.000description3
- 230000004397blinkingEffects0.000description2
- 125000006850spacer groupChemical group0.000description2
- 238000012546transferMethods0.000description2
- 230000007704transitionEffects0.000description2
- 230000000007visual effectEffects0.000description2
- 238000004040coloringMethods0.000description1
- 230000001419dependent effectEffects0.000description1
- 230000000881depressing effectEffects0.000description1
- 230000000694effectsEffects0.000description1
- 238000005516engineering processMethods0.000description1
- 239000011810insulating materialSubstances0.000description1
- 239000000203mixtureSubstances0.000description1
- 230000003287optical effectEffects0.000description1
- 238000000059patterningMethods0.000description1
- 238000009877renderingMethods0.000description1
- 230000035807sensationEffects0.000description1
- 238000009751slip formingMethods0.000description1
- 230000005236sound signalEffects0.000description1
- 229920003002synthetic resinPolymers0.000description1
- 239000000057synthetic resinSubstances0.000description1
- 230000002123temporal effectEffects0.000description1
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
Description
Translated fromJapanese本発明は、例えば自動車等の車両に搭載される車両用メニュー表示制御装置、車載機器操作システム、及びＧＵＩプログラム等に関する。 The present invention relates to a vehicle menu display control device, an in-vehicle device operation system, a GUI program, and the like mounted on a vehicle such as an automobile.
ＧＵＩ（グラフィカルユーザーインターフェース)は、マウスなどのポインティングデバイスを使用して、直感的にコンピュータを操作できるようにしたヒューマンインターフェース技術の一種であり、従来、ＧＵＩを用いて表示装置にメニューを表示し、所望の項目を選択できるようにすることが知られている。 GUI (Graphical User Interface) is a type of human interface technology that allows a computer to be operated intuitively using a pointing device such as a mouse. Conventionally, a GUI is used to display a menu on a display device. It is known to be able to select a desired item.
車両用ポインティングデバイス（選択装置）を用いて、ユーザーが、ブラインド操作で、メニューの項目を選択できるようにした車載機器操作システムについては、例えば、特許文献１に記載されている。 For example,
車両用ポインティングデバイス（選択装置）は、ユーザーが、車両を運転しながら操作するものであることから、コンピュータシステムにおけるマウス等によるカーソルの操作（あるいは、携帯機器における指によるカーソル操作）のような、縦横に素早く動かすことができる特性を得ることが難しく、メニューの選択の効率が、ある程度、低下するのはやむを得ないことである。よって、車載機器操作システムにおけるメニュー選択では、冗長性を極力減らして、ユーザー（運転者等）の、メニュー選択の際の負担を軽減することが求められる。 Since the pointing device (selection device) for a vehicle is operated by a user while driving the vehicle, such as a cursor operation with a mouse or the like in a computer system (or a cursor operation with a finger in a portable device), It is difficult to obtain characteristics that can be moved quickly in the vertical and horizontal directions, and it is unavoidable that the efficiency of menu selection is reduced to some extent. Therefore, in the menu selection in the in-vehicle device operation system, it is required to reduce the redundancy as much as possible and reduce the burden on the menu selection of the user (driver or the like).
この点を考慮して、車載機器操作システムにおけるメニュー画面では、使用頻度が高いと想定される項目を、選択し易い位置に配置したり、異なる種類の情報を一画面に集約することで、メニューの表示階層を減らしたり、あるいは、選択に失敗したときに、迅速な再選択を可能としたりする、といった工夫が必要となる。 Considering this point, on the menu screen in the in-vehicle device operation system, items that are expected to be used frequently are placed at easy-to-select positions, or different types of information are aggregated on one screen. Therefore, it is necessary to devise a method for reducing the display hierarchy or enabling quick reselection when selection fails.
このような工夫によって、情報の多様性が増すと、その反面、メニューの全体の構成が複雑化して、全体の内容把握に、やや時間を要する場合が生じ得る。特に、１つの項目が選択されて次の階層のメニュー画像に移行した際に、ユーザーが、移行後のメニュー画像の全体の内容の把握等のために時間を要する場合があり、このことは、ユーザーに、冗長な感覚を与える一因（言い換えれば、項目選択の非効率性の一因）となる。 When the diversity of information is increased by such a device, on the other hand, the overall structure of the menu becomes complicated, and it may take a little time to grasp the entire contents. In particular, when one item is selected and the menu image is shifted to the next menu image, the user may take time to grasp the entire contents of the menu image after the transfer. This contributes to giving the user a redundant feeling (in other words, an inefficient item selection).
上記の特許文献１では、この問題については何ら言及されておらず、その対策についての示唆もない。 In the above-mentioned
本発明は、次階層のメニューを表示したときに、ユーザーが、全体の内容の把握等のために時間を要することによる、項目選択の非効率性を改善することを目的とする。 An object of the present invention is to improve the inefficiency of item selection due to the time required for the user to grasp the entire contents when displaying the menu of the next layer.
本発明の他の目的は、以下に例示する態様及び最良の実施形態、並びに添付の図面を参照することによって、当業者に明らかになるであろう。 Other objects of the present invention will become apparent to those skilled in the art by referring to the aspects and best embodiments exemplified below and the accompanying drawings.
以下に、本発明の概要を容易に理解するために、本発明に従う態様を例示する。 In the following, in order to easily understand the outline of the present invention, embodiments according to the present invention will be exemplified.
第１の態様において、車両用メニュー表示制御装置は、
階層構造を有するメニューの表示を制御する車両用メニュー表示制御装置と、前記メニューを表示する表示装置と、ポインタの位置を示す位置信号及び前記メニューに含まれる項目を選択するための選択信号を、ユーザーのポインタ移動動作及び選択動作に応じて発生させる選択装置と、前記ユーザーによって最終的に選択された項目に対応する、車載機器の操作処理を実行する処理実行装置と、を有する車載機器操作システムに用いられる前記車両用メニュー表示制御装置であって、
前記メニューの画像の生成を制御する制御処理部と、前記制御処理部の制御の下で前記メニューの画像を生成する画像生成処理部と、を有するメニュー画像生成部と、
生成されたメニュー画像の表示処理を行う表示処理部と、
を有し、
前記メニュー画像生成部における前記制御処理部は、
前記ポインタが、第ｍ階層（ｍは１以上の自然数）のメニュー画像に含まれる１つの項目に合わされた状態で所定時間が経過したことが、前記位置信号に基づいて検出された場合、前記１つの項目が選択されたならば表示される第（ｍ＋１）階層のメニューの内容を案内する内容案内画像が、前記１つの項目の表示領域、又は、前記１つの項目の表示領域に基づく拡張された表示領域に配置されてなる内容案内付のメニュー画像を生成させる。In the first aspect, the vehicle menu display control device comprises:
A vehicle menu display control device for controlling display of a menu having a hierarchical structure, a display device for displaying the menu, a position signal indicating the position of a pointer, and a selection signal for selecting an item included in the menu, A vehicle-mounted device operation system comprising: a selection device that is generated according to a user pointer movement operation and a selection operation; and a process execution device that executes an operation process of the vehicle-mounted device corresponding to an item that is finally selected by the user The vehicle menu display control device used for the vehicle,
A menu image generation unit comprising: a control processing unit that controls generation of the menu image; and an image generation processing unit that generates the menu image under the control of the control processing unit;
A display processing unit that performs display processing of the generated menu image;
Have
The control processor in the menu image generator is
When it is detected based on the position signal that the predetermined time has passed in a state where the pointer is set to one item included in the menu image of the m-th hierarchy (m is a natural number of 1 or more), the 1 The content guidance image for guiding the contents of the (m + 1) -th layer menu displayed when one item is selected is expanded based on the display area of the one item or the display area of the one item A menu image with content guidance arranged in the display area is generated.
第１の態様では、ユーザーは、第ｍ階層のメニュー画像に含まれる１つの項目にポインタ（指針やカーソル等）を合わせ、その状態で所定時間を経過させる（言い換えれば、所定時間以上、１つの項目をポインティングする）ことで、その項目が選択されたならば表示される第（ｍ＋１）階層（次階層）のメニューの内容を案内する「内容案内画像」（単に「項目案内画像」、「項目ガイド画像」等と称する場合もある）を表示させることができる。 In the first aspect, the user places a pointer (a pointer, a cursor, or the like) on one item included in the menu image of the m-th layer and allows a predetermined time to elapse in that state (in other words, more than a predetermined time, By pointing an item, a “content guidance image” (simply “item guidance image”, “item” that guides the contents of the menu of the (m + 1) hierarchy (next hierarchy) displayed if the item is selected In some cases, it may be referred to as a “guide image” or the like.
従って、その項目を選択する前に、次階層で表示される内容（内容の全部、内容の一部、内容の概要、内容の概略等）を確認（事前確認）することができる。よって、その項目を選択して、次階層のメニューの画像が表示されると、ユーザーは、事前確認の記憶に基づいて、迅速に所望の項目（言い換えれば、所望の選択キー、あるいは所望の選択用表示）にポインタを合せることができる。従って、次階層のメニューを表示したときに、ユーザーが、全体の内容の把握等のために時間を要することによる、項目選択の非効率性（冗長性）が改善される。また、誤った項目選択の可能性も低減される。 Therefore, before selecting the item, it is possible to confirm (preliminary confirmation) the contents displayed on the next layer (the whole contents, a part of the contents, the outline of the contents, the outline of the contents, etc.). Thus, when the item is selected and the menu image of the next layer is displayed, the user can quickly select the desired item (in other words, the desired selection key or the desired selection) based on the memory of the prior confirmation. You can place the pointer on the display. Therefore, when the menu of the next layer is displayed, the inefficiency (redundancy) of item selection due to the time required for the user to grasp the entire contents is improved. Also, the possibility of erroneous item selection is reduced.
内容案内画像（項目案内画像、項目ガイド画像）は、ポインティングしている項目の表示領域上、あるいは、その項目の表示領域に基づく拡張された表示領域（好ましくは、ポインティングしている項目以外の他の項目を欠損させないように拡張された表示領域）上に表示されることから、ユーザーは、視点を移動させることなく、内容案内画像を視認して、効率的に事前確認を行うことができる。 The content guide image (item guide image, item guide image) is displayed on the display area of the item being pointed or an expanded display area based on the display area of the item (preferably, other than the item being pointed to Therefore, the user can visually confirm the content guide image and efficiently perform prior confirmation without moving the viewpoint.
第１の態様に従属する第２の態様において、
前記制御処理部は、
前記内容案内付のメニュー画像を表示中に、前記ポインタが、前記内容案内画像を外れて、前記第ｍ階層のメニュー画像における、前記１つの項目以外の項目に合わされたことが、前記位置信号に基づいて検出された場合、前記内容案内付のメニュー画像に代えて、前記第ｍ階層のメニュー画像を生成させてもよい。In a second aspect dependent on the first aspect,
The control processing unit
While the menu image with content guidance is being displayed, the position signal indicates that the pointer has moved off the content guidance image and has been adjusted to an item other than the one item in the m-th layer menu image. If detected based on the above, the menu image of the m-th layer may be generated instead of the menu image with content guidance.
第２の態様では、ユーザーが、ポインタを、内容案内画像に合わせることをやめて、他の項目にポインタを移動させた場合（言い換えれば、ポインタが、内容案内画像を外れて、第ｍ階層のメニュー画像における、直前にポインティングした項目以外の項目に合わされた場合）には、内容案内画像は自動的に終了されて、元のメニュー画像の表示（第ｍ階層のメニューの表示）に戻る。よって、内容案内を終了させるための特別な操作が不要であり、ユーザーに負担を与えることがない。 In the second mode, when the user stops moving the pointer to the content guidance image and moves the pointer to another item (in other words, the pointer moves out of the content guidance image and the menu of the m-th layer When the image is adjusted to an item other than the item pointed to immediately before in the image), the content guidance image is automatically ended and the display returns to the display of the original menu image (display of the menu on the m-th layer). Therefore, a special operation for ending the content guidance is unnecessary, and there is no burden on the user.
第１又は第２の態様に従属する第３の態様において、
前記制御処理部は、
前記内容案内画像にポインタが合わされた状態で、前記ユーザーによって選択操作が行われたことが前記選択信号に基づいて検出されると、第（ｍ＋１）階層のメニュー画像を生成させてもよい。In a third aspect subordinate to the first or second aspect,
The control processing unit
When it is detected based on the selection signal that a selection operation has been performed by the user in a state where the pointer is set on the content guidance image, a menu image of the (m + 1) th layer may be generated.
第３の態様では、ユーザーが、内容案内画像にポインタを合わせたままで、選択装置を用いて選択操作を行うと、内容案内は終了されて、次階層のメニュー画像が表示される。例えば、事前確認の結果として、ポインティングしている項目が所望の項目であることを確認したユーザーが例えばクリック操作を行うことで、次階層のメニューへと移行させることができ、操作上の煩わしさが生じない。なお、この機能を設けない場合は、ポインタを他の項目に移動させて、内容案内表示を終了させた後、再度、その項目をポインティングして選択することになる。 In the third aspect, when the user performs a selection operation using the selection device while keeping the pointer on the content guidance image, the content guidance is terminated and the menu image of the next layer is displayed. For example, as a result of prior confirmation, a user who has confirmed that the item being pointed to is the desired item, for example, can perform a click operation to move to the next-level menu, which is troublesome in operation. Does not occur. If this function is not provided, the pointer is moved to another item to end the content guidance display, and then the item is pointed and selected again.
第１乃至第３の何れか１つの態様に従属する第４の態様において、
前記内容案内画像に含まれる項目には、
前記第（ｍ＋１）階層のメニューに含まれる項目の全部又は一部、
又は、前記第（ｍ＋１）階層のメニューに含まれる複数の項目の内の、種別毎の代表項目、
又は、前記第（ｍ＋１）階層のメニューに含まれる複数の項目についての説明の項目、
又は、種別毎の区分の項目、
が含まれるようにしてもよい。In a fourth aspect subordinate to any one of the first to third aspects,
Items included in the content guidance image include:
All or part of the items included in the menu of the (m + 1) th layer,
Or, a representative item for each type among a plurality of items included in the menu of the (m + 1) th layer,
Or, items for explanation of a plurality of items included in the menu of the (m + 1) th layer,
Or item of classification for each type,
May be included.
第４の態様では、内容案内画像に、次階層で表示される複数の項目の全部を含ませることができ、また、例えば、表示面積の制限によって全部を表示できない場合は、その一部を含まることで内容の概要（概略）を示すことができる。 In the fourth aspect, the content guidance image can include all of a plurality of items displayed in the next hierarchy, and for example, if all cannot be displayed due to a display area limitation, include a part thereof It is possible to show the outline (summary) of the contents.
また、一部の項目を含ませる場合に、次階層のメニューに含まれる複数の項目の内の、種別毎の代表項目（種別（種類）を判別できる少なくとも１つの項目）を含ませることで、概要（概略）の効率的な把握を可能とすることができる。 In addition, when including some items, by including a representative item for each type (at least one item that can determine the type (type)) among a plurality of items included in the menu of the next layer, It is possible to efficiently grasp the outline (outline).
また、項目という概念は広義に解釈するものとし、項目の内容を直接的に示す文字、記号、図形等の他、概要（概略）を示す説明（説明文や説明用図形等）を、内容案内用の項目として採用することもできる。 In addition, the concept of item shall be interpreted in a broad sense, and in addition to characters, symbols, figures, etc. that directly indicate the contents of the item, explanations (descriptive text, explanatory graphics, etc.) that give an outline (outline) It can also be adopted as an item.
また、複数の項目を、予め、その種別（種類、特性、属性等）に応じて分類しておき、その分類（種別毎の区分）を示す表示を内容案内用の項目として採用することもできる。 In addition, a plurality of items can be classified in advance according to their types (types, characteristics, attributes, etc.), and a display indicating the classification (category for each type) can be adopted as an item for content guidance. .
本態様によれば、第ｍ階層のメニューにおいて１つの項目を選択したならば、次に表示される項目群の内容、項目群の概要（概略）について、ユーザーの視覚的な負担を軽減しつつ、わかり易く示すことができ、使い勝手が良い車両用メニューを実現することができる。 According to this aspect, if one item is selected in the menu of the m-th layer, the contents of the item group to be displayed next, and the outline (summary) of the item group are reduced while reducing the visual burden on the user. Therefore, it is possible to realize an easy-to-understand and easy-to-use vehicle menu.
第１乃至第４の何れか１つの態様に従属する第５の態様において、
前記第（ｍ＋１）階層のメニューの画像には、ショートカット用項目としての、前記第ｍ階層において、前記１つの項目に隣接して配置されていた項目が含まれるようにしてもよい。In a fifth aspect subordinate to any one of the first to fourth aspects,
The menu image of the (m + 1) th layer may include an item arranged adjacent to the one item in the mth layer as a shortcut item.
第５の態様では、次階層のメニューに、ショートカット用項目（誤った選択をした場合に、前階層のメニューに戻ることなく、前階層にて正しい項目を選択した場合の状態に直接的に遷移させるための項目であり、ここでは、直前の階層にて選択された項目に隣接していた項目である）が含まれる。ショートカット用項目を用いると、誤った項目選択からの回復を迅速に行えるが、その一方、ショートカット用項目は、次階層のメニューに含まれる本来の項目とは種類の異なる項目であり、ショートカット用項目が含まれる分、メニューの構成が複雑化する点は否めない。 In the fifth aspect, the menu for the next layer is directly shifted to the state in which the correct item is selected in the previous layer without returning to the previous layer menu if an incorrect selection is made. In this example, which is an item adjacent to the item selected in the immediately preceding hierarchy). By using the shortcut item, you can quickly recover from an incorrect item selection. On the other hand, the shortcut item is an item of a different type from the original item included in the next level menu. It is undeniable that the menu structure becomes complicated as much as is included.
本態様では、ユーザーは、内容案内画像によって、次階層のメニューの項目（本来の項目のみの内容であってもよく、ショートカット用項目を含めた内容であってもよい）を事前に確認することができることから、ショートカット用項目が存在する場合でも、特に問題はなくなり、効率的な項目の選択が可能となる。 In this mode, the user confirms in advance the menu item of the next layer (the content of the original item alone or the content including the shortcut item) by the content guidance image. Therefore, even when shortcut items exist, there is no particular problem, and efficient item selection is possible.
第３の態様に従属する第６の態様において、
前記制御処理部は、
前記選択信号によって、前記内容案内画像に含まれる項目が選択されて、前記第（ｍ＋１）階層のメニュー画像を生成させる際、
前記第（ｍ＋１）階層のメニュー画像に含まれる本来の項目の数がｎ個（ｎは２以上の自然数）である場合、前記ｎ個の項目を、前記内容案内画像にて選択された項目に関連するｊ個の項目（ｊは、ｊ＜ｎを満たす自然数）に絞り込み、その絞り込まれた項目を前記第（ｍ＋１）階層のメニュー画像に含ませるようにしてもよい。In a sixth aspect subordinate to the third aspect,
The control processing unit
When an item included in the content guidance image is selected by the selection signal to generate the menu image of the (m + 1) th layer,
When the number of original items included in the menu image of the (m + 1) -th layer is n (n is a natural number of 2 or more), the n items are selected as items selected in the content guidance image. N items related to each other (j is a natural number satisfying j <n) may be narrowed down, and the narrowed items may be included in the menu image of the (m + 1) th layer.
第６の態様では、内容案内画像に、次階層のメニューに含まれる項目の絞り込みの機能をもたせることによって、項目選択の効率をさらに向上させる。 In the sixth aspect, the content guide image has a function of narrowing down items included in the menu of the next layer, thereby further improving the efficiency of item selection.
例えば、内容案内画像にＡ、Ｂの２つの項目が含まれる場合、項目Ａにポインタが合わされた状態で選択操作がなされると、第（ｍ＋１）階層の画像では、項目Ａに関連する項目のみの表示（あるいは、項目Ａに関連する項目を主体とする表示）がなされ、項目Ｂにポインタが合わされた状態で選択操作がなされると、項目Ｂに関連する項目のみの表示（あるいは、項目Ｂに関連する項目を主体とする表示）がなされる、というように、内容案内画像におけるポインティング位置に応じて、次階層のメニューで表示する項目の絞り込みが行われる。 For example, when two items A and B are included in the content guidance image, if the selection operation is performed with the pointer set to the item A, only the item related to the item A is displayed in the (m + 1) -th layer image. When the selection operation is performed with the pointer set to the item B (or the item B only) (or the item B). The items to be displayed in the menu of the next layer are narrowed down according to the pointing position in the content guidance image.
これによって、ユーザーが必要としない項目が表示されなくなり、項目数が絞り込まれて項目数が減ることから、１つの項目の表示領域を大きくとることができ、したがって、例えば、本来の項目の内容に加えて、項目の内容の理解に役立つ情報（例えば、アイコンの意味等を示す文字による説明）を付加することも可能となり、メニュー選択における利便性を、さらに向上させることができる。 As a result, the items that the user does not need are not displayed, and the number of items is reduced and the number of items is reduced, so that the display area of one item can be increased. In addition, it is possible to add information (for example, explanation using characters indicating the meaning of the icon) useful for understanding the content of the item, and the convenience in menu selection can be further improved.
第１乃至第６の何れか１つの態様に従属する第７の態様において、
前記メニュー画像生成部における前記画像生成処理部が生成する前記メニューの画像は、原点を有し、前記原点から外側に向かう複数の放射状の直線によって、前記メニューの表示領域が区画されてなるラジアルメニューの画像としてもよい。In a seventh aspect subordinate to any one of the first to sixth aspects,
The menu image generated by the image generation processing unit in the menu image generation unit has an origin, and a radial menu in which a display area of the menu is partitioned by a plurality of radial straight lines extending outward from the origin. It is good also as an image of.
第７の態様では、メニュー（操作メニュー）の表示形式として、ラジアルメニュー形式を採用する。ラジアルメニューは、円を細分化する（例えば、扇形や楔（くさび）形の領域に分割する）ことで、多数の項目を、コンパクトにバランスよく配置することができる。近年、ＩＯＴ（物のインターネット）の活用によって、例えば、車両の運転者（ユーザー）が、車両を運転しながら、例えば、自宅の電気製品や給湯機器等の動作を制御することも可能となってきており、今後、メニューに表示する項目の数は、ますます増えるものと予測される。ラジアルメニューを利用した表示形式は、今後、活用の場が広がるものと考えられる。 In the seventh aspect, a radial menu format is adopted as the display format of the menu (operation menu). In the radial menu, a large number of items can be arranged in a compact and well-balanced manner by subdividing a circle (for example, dividing it into fan-shaped or wedge-shaped regions). In recent years, by using IOT (Internet of Things), for example, it has become possible for a vehicle driver (user) to control the operation of, for example, home appliances and hot water supply devices while driving the vehicle. In the future, the number of items displayed on the menu is expected to increase. The display format using the radial menu is expected to be used in the future.
第８の態様において、車載機器操作システムは、
第１乃至第７の何れか１つの態様に記載の車両用メニュー表示制御装置と、
メニューを表示する表示装置と、
ポインタの位置を示す位置信号及び前記メニューに含まれる項目を選択するための選択信号を、ユーザーのポインタ移動動作及び選択動作に応じて発生させる選択装置と、
前記ユーザーによって最終的に選択された項目に対応する、車載機器の操作処理を実行する処理実行装置と、
を有する。In an eighth aspect, the in-vehicle device operation system includes:
A vehicle menu display control device according to any one of the first to seventh aspects;
A display device for displaying a menu;
A selection device for generating a position signal indicating the position of the pointer and a selection signal for selecting an item included in the menu according to the pointer movement operation and the selection operation of the user;
A process execution device that executes an operation process of the in-vehicle device corresponding to the item finally selected by the user;
Have
第８の態様によれば、例えば、車両を運転中の運転者等が、ブラインド操作で、快適に車載機器を操作可能な、車載機器操作システムを実現することができる。 According to the eighth aspect, for example, it is possible to realize an in-vehicle device operating system in which a driver or the like driving a vehicle can comfortably operate the in-vehicle device by a blind operation.
第９の態様において、ＧＵＩ（グラフィカルユーザーインターフェース）プログラムは、コンピュータを、第１乃至第７の何れか１つの態様に記載の車両用メニュー表示制御装置として動作させる。 In a ninth aspect, a GUI (graphical user interface) program causes a computer to operate as the vehicle menu display control device according to any one of the first to seventh aspects.
第９の態様によれば、車両用表示に適した操作メニューの表示制御を、ソフトプログラムを用いて、簡易な構成にて実現することができる。 According to the ninth aspect, display control of an operation menu suitable for vehicle display can be realized with a simple configuration using a software program.
当業者は、例示した本発明に従う態様が、本発明の精神を逸脱することなく、さらに変更され得ることを容易に理解できるであろう。 Those skilled in the art will readily understand that the illustrated embodiments according to the present invention can be further modified without departing from the spirit of the present invention.
以下に説明する最良の実施形態は、本発明を容易に理解するために用いられている。従って、当業者は、本発明が、以下に説明される実施形態によって不当に限定されないことを留意すべきである。 The best mode described below is used to easily understand the present invention. Accordingly, those skilled in the art should note that the present invention is not unduly limited by the embodiments described below.
図１を参照する。図１は、車載機器操作システムの全体の構成例を示す図である。 Please refer to FIG. FIG. 1 is a diagram illustrating an example of the overall configuration of an in-vehicle device operation system.
車載機器操作システムは、表示装置１０と、入出力Ｉ／Ｆ３０（入出力インターフェース）と、制御装置２０（後述するが、表示制御装置（図３の符号２１）と、処理実行装置（図３の符号２６）と、を含んでいる）と、信号インターフェース（信号Ｉ／Ｆ）４０、５０と、ハンドル（例えばステアリングホイール）３に設けられ、ユーザー（ここでは運転者とする）が指（手）で操作可能な選択装置（入力装置）２００と、ユーザーの視線を検出する視線検出部３０１及び音声検出部３０２（これらは、例えば、選択装置２００を使用せずにメニューの項目を選択する場合に用いられる）と、制御装置２０の外部機器（車載機器）４００としての、各種のＥＣＵ（車載ＥＣＵ４０１、ナビ（ナビゲーション）ＥＣＵ４０２、オーディオＥＣＵ４０３、空調ＥＣＵ４０４、外部通信部（通信機器）４０５を含み、これらはバスＢＵＳを介して入出力Ｉ／Ｆ３０に接続されている）と、を有する。 The in-vehicle device operation system includes a
表示装置１０は、実像及び虚像の画像の少なくとも一方を表示可能であり、ここでは、例えば、虚像を表示するＨＵＤ（ヘッドアップディスプレイ）装置を搭載するものとし、このＨＵＤ装置によって、ウインドシールド（フロントガラス等）２の虚像表示領域１０１（図中、破線の四角で示される虚像表示可能領域）内に虚像を表示する。 The
図１では、虚像としてのラジアルメニュー（ラジアル操作メニュー）５００（Ｖ）が表示されている。なお、符号５００（Ｖ）の「（Ｖ）」は、虚像であることを示している。 In FIG. 1, a radial menu (radial operation menu) 500 (V) as a virtual image is displayed. Note that “(V)” of reference numeral 500 (V) indicates a virtual image.
また、符号５０２は、ユーザーの指（手）の動き（選択装置２００が検出する）に応じて位置が変化するポインタ（ここでは、時計の針のように、時計回りあるいは反時計回りに移動する）である。このポインタは、ラジアルメニュー（ラジアル操作メニュー）５００（Ｖ）に含まれる複数の項目（操作項目）のうちの１つをポイント（指定）する機能をもつ。
なお、表示装置１０は、インストルパネル内又はインストルパネル上に設けられる表示パネル等の表示器であってもよく、ＨＵＤ装置と表示器とが併用されるものであってもよい。 The
ラジアルメニュー５００（Ｖ）の表示処理において、必要に応じて、外部機器（車載機器）４００から入力される各種の情報を用いることができる。 In the display process of the radial menu 500 (V), various information input from the external device (on-vehicle device) 400 can be used as necessary.
なお、外部機器（車載機器）４００（車載ＥＣＵ４０１、ナビＥＣＵ４０２、オーディオＥＣＵ４０３、空調ＥＣＵ４０４、外部通信部（通信機器）４０５）は、外部機器情報を、バスＢＵＳを介して入出力Ｉ／Ｆ３０に送る。 The external device (in-vehicle device) 400 (in-
ここで、車載（車両）ＥＣＵ４０１は、車両１の走行モード（ＥＣＯモード、ＳＰＯＲＴモード）、平均燃費、走行可能距離（航続可能距離）、水温、油温などを出力可能である。 Here, the vehicle-mounted (vehicle)
制御装置２０に含まれる表示制御装置（図３の符号２１）は、上記の情報に基づき、車両１の走行モードを示したり、選択されることで走行モードを変更可能とする画像（選択画像）を表示したり、平均燃費、走行可能距離（航続可能距離）、水温、油温等を表示したりする。１つの項目が選択された場合には、さらに、車両１に関する詳細情報に関する項目をラジアルメニュー５００内に表示してもよい。 The display control device (
ナビＥＣＵ４０２は、次の分岐路の方向及び分岐路までの距離に関する情報や、車両１の経路付近に位置するオススメの経由地に関する施設情報や、これを経由した場合にロスする時間などの情報を出力可能である。制御装置２０に含まれる表示制御装置（図３の符号２１）は、上記の情報に基づき、例えば、次の分岐路の方向及び分岐路までの距離、経路案内のオン／オフを切り替える画像、オススメの経由地に関する施設情報、及び経由地を設定する画像等の少なくとも１つをメニューとして表示することができる。 The
オーディオＥＣＵ４０３は、オススメの音楽に関する情報などを出力可能である。制御装置２０に含まれる表示制御装置（図３の符号２１）は、上記の情報に基づき、オススメの音楽（オーディオ）に関する情報や、楽曲を選択するための画像をメニューとして表示することができる。 The
空調ＥＣＵ４０４は、現在の空調状態に関する情報等を出力可能である。制御装置２０に含まれる表示制御装置（図３の符号２１）は、上記の情報に基づき、現在の空調状態に関する情報や、空調状態を変更可能とする画像を表示することができる。 The
外部通信部４０５は、着信状態やメール受信情報など、車両１の外部からの情報を出力可能である。制御装置２０に含まれる表示制御装置（図３の符号２１）は、上記の情報に基づき、着信があること、メール受信があることを示す情報、電話を受話する又はメールを音声で読ませることが可能な画像等をメニューとして表示することができる。 The
次に、図２を参照する。図２（Ａ）は、選択装置（車載機器操作システムに用いられるポインティングデバイス）の外観を示す図、図２（Ｂ）は、図２（Ａ）におけるＡ−Ａ線に沿う断面構造を示す図である。 Reference is now made to FIG. FIG. 2A is a diagram illustrating an appearance of a selection device (a pointing device used in an in-vehicle device operation system), and FIG. 2B is a diagram illustrating a cross-sectional structure taken along line AA in FIG. It is.
ここでは、選択装置（入力装置、あるいは操作装置と称することもある）２００が、図１において示したラジアルメニュー５００における項目を選択することに用いられることを想定して説明する。 Here, description will be made assuming that the selection device (also referred to as an input device or an operation device) 200 is used to select an item in the
図２（Ａ）に示されるように、選択装置（ポインティングデバイス）２００は、ステアリングホイール３に配設され、ユーザーの指（ここでは、例えば親指とする）の位置（言い換えれば、操作位置Ｃ）を検出する円環状の操作位置検出部２１０と、この操作位置検出部２１０と一体となって設けられ、操作位置検出部２１０が親指で押されることで、ユーザーによって選択（決定）がなされたことを検出する決定操作検出部２２０と、リターン処理を行うときに使用されるリターンスイッチ２３０と、を有する。 As shown in FIG. 2A, the selection device (pointing device) 200 is disposed on the
なお、上記の例では、選択装置２００の操作を指（手）で行っているが、ユーザーの、その他の身体部位を用いてもよい。 In the above example, the
選択装置２００は、ユーザーの親指等が操作面に触れた位置（操作位置Ｃ）を検出するタッチセンサであり、図２（Ｂ）に示すように、表面カバー２１１と、センサシート２１２と、スペーサ２１３と、を備える。選択装置２００は、ユーザーが、親指等でその操作面上を触れる操作（以下、タッチ操作という）あるいは所定の軌跡を描くようになぞる操作（以下、ジェスチャ操作という）を行った際に、ユーザーの親指等が操作面に触れている位置（操作位置Ｃ）を検出して、ポインタ（指針等）の位置を示す「位置信号」を生成し、また、ユーザーによる選択（決定）がなされると、その選択（決定）を検出して、選択（決定）がなされたことを示す「選択信号（言い換えれば、選択（決定）検出信号）」を出力する。 The
選択装置２００における表面カバー２１１は、合成樹脂等の遮光性の絶縁材料によってシート状に形成され、凸状断面の立体形状が、中心点Ｑを中心とする円の円周に沿って連続的に形成された凸部（凸領域）２１１ａ（図２（Ａ）において、放射状の模様が付された領域）と、凸部（凸領域）２１１ａに連接する比較的平坦な平坦部（平坦領域）２１１ｂと、を有する。凸部（凸領域）２１１ａは、山状の断面（凸状断面）を有し、その山（凸形状）は、中心点Ｑに向かう方向（内側）に長く、その反対方向である外側に短い輪郭線（稜線）を有する。その山（凸形状）が、中心点Ｑを中心とする円の円周に沿って、連続的に設けられることで凸部（凸領域）２１１ａが構成される。 The
また、図２（Ｂ）に記載されるように、表面カバー２１１における凸部（凸領域）２１１ａの下には、センサシート２１２が設けられており、これらを含む部分によって、上記の操作位置検出部２１０が構成される。ユーザーは、例えば、上記の凸部（凸領域）２１１ａの、長手方向（中心点Ｑに向かう方向であり、言い換えれば内側方向）の斜面を指の触感で認識することにより、操作位置検出部２１０上における指のおおよその位置を認識することができ、選択装置２００を見なくても、選択装置２００を操作することができる。言い換えれば、ブラインド操作が可能となる。なお、上記の凸部（凸領域）２１１ａが設けられない場合も想定され得るが、この場合でも、ユーザーが、中心点Ｑを中心とした円の円周に沿って手（指）の位置を移動させた場合、ユーザーは、自身が移動させた手（指）の軌跡（指等がタッチセンサの操作面に接触した位置の時間的変遷の跡）を知覚できることから、ユーザーは、自身の手の位置が、円の円周上のおおよそどの位置にあるかの見当をつけることができる。したがって、この場合でも、ブラインド操作が可能である。 As shown in FIG. 2B, a
センサシート２１２は、少なくとも凸部（凸領域）２１１ａに対応する表面カバー２１１の裏面側において、中心点Ｑを中心とする円の円周に沿って配設され、ユーザーの指の操作位置Ｃを検出して、制御装置２０（表示制御装置２１）に、ユーザーの指等の操作位置Ｃに関する情報（操作位置の情報、あるいは操作位置を示す信号）を出力する。センサシート２１２は、例えば、絞り加工により表面カバー２１１と一体成形されることで、表面カバー２１１と同様の形状に加工される（図２（Ｂ）参照）。このように一体成形されることで、表面カバー２１１とセンサシート２１２は、一枚のシートのようになり、上記の凸部（凸領域）２１１ａの段差形状は、その一枚のシートの曲がった部分（盛り上がった部分）で構成されることになる。また、このように一体成形されることで、表面カバー２１１の裏面とセンサシート２１２の表面とが当接する。これにより、表面カバー２１１の段差形状に対応して、センサシート２１２の検出部が配置されることになる。このように表面カバー２１１の段差形状に対応してセンサシート２１２の検出部が配置されているため、ユーザーの指等の移動が、凸部（凸領域）２１１ａ等の段差形状を有した操作面上で行われるものであっても、例えば表示制御装置２１が、ユーザーの指の位置を検出することが可能である。 The
スペーサ２１３は、センサシート２１２の裏面側に位置し、一体成形された表面カバー２１１とセンサシート２１２の形状に合わせて形成され、ユーザーの指等によって、表面カバー２１１が表側から押圧された際に、上記の形状を保持する部材である。 The
決定操作検出部２２０は、操作位置検出部２１０の裏面側に複数（図２（Ｂ）の例では５個）設けられる。決定操作検出部２２０は、制御装置２０（表示制御装置２１を含む）と電気的に接続されており、ユーザーが、操作位置検出部２１０の操作面（表面カバー２１１の凸部（凸領域））２１１ａを押下する操作（以下、押下操作という）を行うと、決定操作検出部２２０が押され、これによって、ユーザーによって選択（決定）がなされたことが検出され、選択（決定）がなされたことを示す信号（選択信号、言い換えれば選択（決定）検出信号）が出力される。出力された位置信号や選択信号は、制御装置２０（表示制御装置２１を含む）に送られる。表示制御装置２１は、送られてきた位置信号に基づいて、ポインタ（指針５０２等）がポインティングする（指す）項目を判定（検出）し、また、送られてきた選択信号に基づき、ラジアルメニュー５００に含まれる複数の項目のうちのどの項目が選択されたかを判定し、その選択に応じた操作メニュー画像を生成し、表示装置１０に表示する。これによって、選択された項目の内容に応じて、操作メニューの表示が切り替えられる。 A plurality of determination operation detection units 220 (five in the example of FIG. 2B) are provided on the back side of the operation
リターンスイッチ２３０は、操作位置検出部２１０及び決定操作検出部２２０とは離れた位置にあるスイッチである。ユーザーが、リターンスイッチ２３０の操作面を押下する（言い換えれば、押下操作がなされる）と、制御装置２０内の表示制御装置２１にリターン信号が送信される。表示制御装置２１は、リターンスイッチ２３０からのリターン信号に基づき、ラジアルメニュー５００の表示を、直近の過去の操作メニュー画像に戻す。言い換えれば、直前の表示への切り替えが行われる。 The
次に、図３を参照する。図３（Ａ）〜図３（Ｄ）は、本発明の実施形態におけるメニュー選択（次階層の内容案内表示を利用した選択）の一例を示す図である。 Reference is now made to FIG. FIG. 3A to FIG. 3D are diagrams illustrating an example of menu selection (selection using content guidance display of the next hierarchy) in the embodiment of the present invention.
図３（Ａ）に示されるように、第１階層のメニューでは、上から下に向かって、項目Ａ〜Ｄが順に配置されている。ここでは、ユーザーは、ポインタ（指針等）を、上から下に向かって操作しているものとする。 As shown in FIG. 3A, in the menu of the first hierarchy, items A to D are arranged in order from the top to the bottom. Here, it is assumed that the user is operating a pointer (pointer or the like) from top to bottom.
図３（Ａ）では、項目Ｃにポインタ（指針）が合わせられている。なお、図中、ＺＮ１は、項目Ｃの表示領域を示す。この状態で、ユーザー（運転者等）が、選択装置２００を用いて選択操作（クリック等）を行うと、項目Ｃが選択されて、図３（Ｄ）のメニュー画像（第２階層のメニュー画像）へと、直接的に遷移する。 In FIG. 3A, a pointer (pointer) is aligned with item C. In the figure, ZN1 indicates the display area of item C. In this state, when a user (driver or the like) performs a selection operation (click or the like) using the
図３（Ｄ）の第２階層のメニュー画像（メニュー画面）では、使用頻度が高いと想定される項目を、選択し易い位置に配置したり、異なる種類の情報を一画面に集約することで、メニューの表示階層を減らしたり、あるいは、選択に失敗したときに、迅速な再選択を可能としたりする、といった工夫が施されている。 In the menu image (menu screen) of the second hierarchy in FIG. 3D, items that are assumed to be frequently used are arranged at easy-to-select positions, or different types of information are collected on one screen. Measures such as reducing the menu display hierarchy, or enabling quick reselection when selection fails, are provided.
選択に失敗した場合の対策としては、具体的には、ショートカット用項目（項目Ｂ、Ｄ）が設けられている。ショートカット用項目は、誤った選択をした場合に、前階層のメニューに戻ることなく、前階層にて正しい項目を選択した場合の状態に直接的に遷移させるための項目であり、ここでは、直前の階層にて選択された項目に隣接していた項目である項目Ｂ、Ｄである。 As a countermeasure when the selection fails, specifically, items for shortcuts (items B and D) are provided. The shortcut item is an item for making a transition directly to the state when the correct item is selected in the previous layer without returning to the previous layer menu if an incorrect selection is made. Items B and D, which are items adjacent to the item selected in the hierarchy.
図３（Ｄ）の第２階層のメニュー画像では、図３（Ａ）における項目Ｃの表示領域ＺＮ１に対応する、表示領域ＺＮ２において、選択履歴を示す項目Ｃと、使用頻度が最も高いと想定される、種類（特性、属性）Ｓ１の項目Ｗ、Ｘと、が配置され、領域ＺＮ２の上下に、ショートカット用項目としての項目Ｂ、Ｄが配置され、項目Ｄの下には、次に使用頻度が中程度と想定される種類（特性、属性）Ｓ２の項目Ｙが配置され、その下にリターンキーが配置され、項目Ｂの上側には、使用頻度が比較的低いと想定される、種類（特性、属性）Ｓ３の項目Ｕ、Ｖが配置されている。 In the menu image of the second hierarchy in FIG. 3D, it is assumed that the item C indicating the selection history is the highest in the display area ZN2 corresponding to the display area ZN1 of the item C in FIG. Items W and X of type (characteristics and attributes) S1 are arranged, items B and D as shortcut items are arranged above and below the area ZN2, and the items used next under item D are Item Y of type (characteristic, attribute) S2 that is assumed to be medium frequency is arranged, a return key is arranged below it, and type that is assumed to be relatively low in use frequency above item B (Characteristics, attributes) Items U and V of S3 are arranged.
このような工夫によって、情報の多様性が増すと、その反面、メニューの全体の構成が複雑化して、全体の内容把握に、やや時間を要する場合が生じ得るのはやむを得ない。特に、図３（Ａ）において、１つの項目（項目Ｃ）が選択されて次の階層のメニュー画像（図３（Ｂ）のメニュー画像）に移行した際に、ユーザーが、移行後のメニュー画像の全体の内容の把握等のために時間を要する場合があり、このことは、ユーザーに、冗長な感覚を与える一因（言い換えれば、項目選択の非効率性の一因）となると考えられる。 If the diversity of information is increased by such a device, on the other hand, the overall structure of the menu becomes complicated, and it may be unavoidable that it may take some time to grasp the entire contents. In particular, in FIG. 3A, when one item (item C) is selected and the menu image of the next hierarchy is transferred (the menu image of FIG. 3B), the user can change the menu image after the transfer. It may take time to grasp the entire contents of the user, and this is considered to be one factor that gives the user a redundant feeling (in other words, one factor of inefficiency in item selection).
そこで、図３（Ｂ）、図３（Ｃ）に示されるように、内容案内画像を表示可能とし、次階層で表示される項目に関して、事前に情報を得ることができるようにする。 Therefore, as shown in FIGS. 3B and 3C, a content guidance image can be displayed, and information regarding items displayed in the next hierarchy can be obtained in advance.
言い換えれば、図３（Ａ）において、ユーザーが、項目Ｃにポインタ（指針等）を合わせ、その状態で所定時間を経過させる（言い換えれば、所定時間（例えば１秒）以上、項目Ｃをポインティングする）と、その項目Ｃが選択されたならば表示されるメニュー（図３（Ｄ））の内容を案内する「内容案内画像」（単に「項目案内画像」、「項目ガイド画像」等と称する場合もある）ＧＤ、ＧＤ’を表示させることができる。 In other words, in FIG. 3A, the user moves the pointer (pointer or the like) to the item C and causes the predetermined time to elapse in that state (in other words, the user points the item C for a predetermined time (for example, 1 second) or longer. ), And a menu displayed when the item C is selected (FIG. 3D), which is referred to as a “content guide image” (simply “item guide image”, “item guide image”, etc.) GD and GD 'can be displayed.
ここでは、内容案内画像が表示されている図３（Ｂ）、図３（Ｃ）のメニュー（メニュー画像）を、「内容案内付のメニュー（メニュー画像）」と称する。 Here, the menu (menu image) of FIGS. 3B and 3C on which the content guidance image is displayed is referred to as “menu with content guidance (menu image)”.
図３（Ｂ）の例では、内容案内画像ＧＤには、図３（Ｄ）における、本来の項目Ｕ〜Ｙの全部が含まれている。図３（Ｃ）の例では、内容案内画像ＧＤ’には、図３（Ｄ）における、種類毎の区分を示す表示（ここでは、種類を示す表記）Ｓ３、Ｓ１及びＳ２が含まれている。ここで、内容案内画像ＧＤ、ＧＤ’における項目の配置は、図３（Ｄ）の全体における、項目の、上から下へと向かう配置順のとおりとなっており、図３（Ｄ）に移行した場合における項目の配置がわかり易いようになっている。 In the example of FIG. 3B, the content guidance image GD includes all of the original items U to Y in FIG. In the example of FIG. 3C, the content guidance image GD ′ includes displays (here, notations indicating the types) S3, S1, and S2 that indicate divisions for each type in FIG. . Here, the arrangement of the items in the content guidance images GD and GD ′ is as shown in the arrangement order from the top to the bottom of the items in the whole of FIG. 3D, and the process proceeds to FIG. In this case, the arrangement of items is easy to understand.
内容案内画像ＧＤ、ＧＤ’は、図３（Ａ）においてポインティングしている項目Ｃの表示領域ＺＮ１と同じ位置、かつ同じ面積の表示領域上に配置してもよく、また、図３（Ｂ）、図３（Ｃ）の例のように、その項目Ｃの表示領域ＺＮ１に基づく拡張された表示領域（好ましくは、ポインティングしている項目以外の他の項目を欠損させないように拡張された表示領域）ＺＮ１’上に表示してもよい。特に、表示領域を拡張すると、内容案内画像ＧＤ、ＧＤ’が強調されて示され、内容の理解が容易化されるという効果を得ることができる。内容案内画像ＧＤ、ＧＤ’が、図３（Ａ）の領域ＺＮ１に対応した領域に表示されることから、ユーザーは、視点を移動させることなく、内容案内画像ＧＤ、ＧＤ’を視認して、効率的に事前確認を行うことができる。 The content guidance images GD and GD ′ may be arranged on the display area having the same position and the same area as the display area ZN1 of the item C pointing in FIG. 3A. Also, FIG. 3C, an expanded display area based on the display area ZN1 of the item C (preferably an expanded display area so as not to lose other items other than the pointing item) ) It may be displayed on ZN1 ′. In particular, when the display area is expanded, the content guidance images GD and GD ′ are highlighted and shown, and the effect of facilitating understanding of the content can be obtained. Since the content guidance images GD and GD ′ are displayed in the area corresponding to the area ZN1 in FIG. 3A, the user visually recognizes the content guidance images GD and GD ′ without moving the viewpoint, Efficient prior confirmation can be performed.
従って、図３（Ａ）において、項目Ｃを選択する前に、次階層で表示される内容（内容の全部、内容の一部、内容の概要、内容の概略等）を確認（事前確認）することができる。よって、次階層のメニューの画像（図３（Ｄ））が表示されると、ユーザーは、事前確認の記憶に基づいて、迅速に所望の項目（言い換えれば、所望の選択キー、あるいは所望の選択用表示）にポインタ（指針５０２）を合せることができる。従って、次階層のメニューを表示したときに、ユーザーが、全体の内容の把握等のために時間を要することによる、項目選択の非効率性（冗長性）が改善される。また、誤った項目選択の可能性も低減される。 Accordingly, in FIG. 3 (A), before selecting item C, the contents (all contents, part of contents, outline of contents, outline of contents, etc.) displayed in the next hierarchy are confirmed (preliminary confirmation). be able to. Therefore, when the menu image of the next layer (FIG. 3D) is displayed, the user can quickly select a desired item (in other words, a desired selection key or a desired selection) based on the memory of the prior confirmation. The pointer (pointer 502) can be aligned with the display. Therefore, when the menu of the next layer is displayed, the inefficiency (redundancy) of item selection due to the time required for the user to grasp the entire contents is improved. Also, the possibility of erroneous item selection is reduced.
また、図３（Ｂ）、図３（Ｃ）の、内容案内付のメニュー画像Ｗ、Ｗ’が表示されている状態で、ユーザーが、内容案内画像ＧＤ、ＧＤ’（言い換えれば、それらに含まれる項目の何れか１つ）にポインタ（指針５０２）を合わせたままで、選択装置２００を用いて選択操作を行うと、内容案内は終了されて、次階層のメニュー画像（図３（Ｄ）が表示されるのが好ましい。この場合、例えば、事前確認の結果として、ポインティングしている項目が所望の項目であることを確認したユーザーがクリック操作を行うことで、次階層のメニュー（図３（Ｄ）へと移行させることができ、操作上の煩わしさが生じない。 In addition, in the state where the menu images W and W ′ with content guidance shown in FIGS. 3B and 3C are displayed, the user can display the content guidance images GD and GD ′ (in other words, included in them). When the selection operation is performed using the
また、ユーザーが、ポインタ（指針５０２）を、内容案内画像ＧＤ、ＧＤ’に合わせることをやめて、他の項目（図３（Ｂ）、図３（Ｃ）における項目Ａ、Ｂ、Ｄの何れか１つ）にポインタを移動させた場合（言い換えれば、ポインタが、内容案内画像を外れて、図３（Ａ）のメニュー画像における、直前にポインティングした項目（項目Ｃ）以外の項目に合わされた場合）には、内容案内画像ＧＤ、ＧＤ’は自動的に終了されて、元のメニュー画像の表示（図３（Ａ）のメニューの表示）に戻るようにするのが好ましい。この場合は、内容案内を終了させるための特別な操作が不要であり、ユーザーに負担を与えることがない。 In addition, the user stops moving the pointer (pointer 502) to the content guidance images GD and GD ′, and any one of the other items (items A, B, and D in FIGS. 3B and 3C). 1) When the pointer is moved (in other words, when the pointer moves out of the content guidance image and is set to an item other than the item (item C) pointed at immediately before in the menu image of FIG. 3A) ), It is preferable that the content guidance images GD and GD ′ are automatically terminated to return to the display of the original menu image (display of the menu in FIG. 3A). In this case, a special operation for ending the content guidance is unnecessary, and there is no burden on the user.
次に、上記のような処理を実行する、車両用メニュー表示制御装置等の構成例について説明する。ここで、図４を参照する。図４（Ａ）は、図１の車載機器操作システムにおける、制御装置及び車両用メニュー表示制御装置（表示制御装置）の、より具体的な構成例を示す図、図４（Ｂ）は、メニュー画像生成部の構成例を示す図、図４（Ｃ）は、表示装置の構成例を示す図である。図４において、図１、図２と共通する部分には同じ符号が付されている（この点は以下の図面でも同様である）。 Next, a configuration example of a vehicle menu display control device or the like that executes the above processing will be described. Reference is now made to FIG. 4A is a diagram showing a more specific configuration example of the control device and the vehicle menu display control device (display control device) in the in-vehicle device operation system of FIG. 1, and FIG. FIG. 4C is a diagram illustrating a configuration example of the image generation unit, and FIG. 4C is a diagram illustrating a configuration example of the display device. 4, parts that are the same as those in FIGS. 1 and 2 are given the same reference numerals (this is the same in the following drawings).
図４（Ａ）において、制御装置２０は、表示制御装置（車両用メニュー表示制御装置）２１と、処理実行装置２６と、を有し、必要に応じて、記憶装置（不図示）に、動作ルーチンファイル２７が記憶される。 4A, the
表示制御装置（車両用メニュー表示制御装置）２１は、メニュー画像生成部２２と、メニュー表示処理部２４と、を有しており、必要に応じて、記憶装置（不図示）内にメニューファイル２５が記憶される。 The display control device (vehicle menu display control device) 21 includes a menu
上記の制御装置２０の各構成は、例えば、記憶装置（不図示）に格納されているＯＳ（オペレーティングシステム）等に搭載されるＧＵＩ（グラフィカルユーザーインターフェース）プログラムに従ってＣＰＵやＭＰＵ（コンピュータ：不図示）が動作することで実現することができる。 Each configuration of the
表示制御装置（車両用メニュー表示制御装置）２１におけるメニュー画像生成部２２は、メニュー画像（操作メニュー画像）を生成する。例えば、予め用意されている複数のメニューファイル２５の中から使用可能なものを取り出し（読み出し）、必要な情報を画像合成で組み込むことで、複数の操作項目を含むメニュー（操作メニュー）の画像を生成する。但し、これに限定されるものではなく、記憶部（不図示）に予め記憶された配列、又は記憶部（不図示）に記憶されたプログラムにより定められた配列に従って、複数の項目を配置する（項目を画像合成する）ことで、メニュー（操作メニュー）の画像を生成してもよく、あるいは、レンダリングにより画像を生成してもよい。生成された画像は、画像ＲＡＭ（不図示）等に、一旦、蓄積される。 The menu
なお、表示制御装置（車両用メニュー表示制御装置）２１は、外部機器４００（車載ＥＣＵ４０１、ナビＥＣＵ４０２、オーディオＥＣＵ４０３、空調ＥＣＵ４０４、外部通信部（通信機器）４０５等）からの情報を使用して画像を生成することができ、あるいは、その情報を使用せずに、記憶部（不図示）に予め記憶された画像データのみに基づき画像を生成してもよい。これによって、例えば、図１で示したラジアルメニュー５００（Ｖ）の元となる画像（元画像）を生成することができる。 The display control device (vehicle menu display control device) 21 uses the information from the external device 400 (the vehicle-mounted
表示制御装置（車両用メニュー表示制御装置）２１は、具体的には、例えば、階層構造を有すると共に、１つの階層の画像に複数の操作項目が含まれるメニューの表示を制御するものであり、上述のとおり、メニューの画像を生成するメニュー画像生成部２２と、生成されたメニューの画像の表示処理を行うメニュー表示処理部２４と、を有する。 Specifically, the display control device (vehicle menu display control device) 21 has, for example, a hierarchical structure and controls display of a menu in which a plurality of operation items are included in an image of one hierarchy. As described above, the menu
図３（Ａ）におけるメニュー表示処理部２４は、画像ＲＡＭ（不図示）等から、生成された画像（画像データ）を読み出し、データ形式を整えたり、表示に必要な情報を付加したりし、その結果として得られた画像データを表示装置１０に送る。 The menu
表示される車両用メニューは、例えば階層構造を有しており、選択された１つの項目に関連付けされた下位階層のメニューがある場合は、その下位階層のメニューが順次、表示される。下位階層のない項目が選択されると、例えば、メニュー画像生成部２２から処理実行装置２６に、最終的に選択された項目の内容を示す情報が送られる。処理実行装置２６は、例えば、動作ルーチンファイル２７を参照して、実行すべき処理の具体的な内容を示すデータを取得し（但し、この動作は不要な場合もあり得る）、取得したデータを、入出力Ｉ／Ｆ３０及びバスＢＵＳを経由して、外部機器（車載機器）４００に送る。これによって、ユーザーによって選択された項目に関連付けられている処理が実行される。 The displayed vehicle menu has, for example, a hierarchical structure. When there is a lower-level menu associated with one selected item, the lower-level menu is sequentially displayed. When an item without a lower hierarchy is selected, for example, information indicating the content of the finally selected item is sent from the menu
また、図３（Ａ）における制御装置２０あるいは表示制御装置２１（これらは、ハードウエアとしてＣＰＵ等（不図示）と、各種プログラムを格納する記憶装置（不図示）とを有する）は、種々の要因で生じる割り込み要求に対応することが可能である。 Further, the
外部機器４００の動作に起因して発生する割り込み要求は、例えば、車両に搭載される各種のＥＣＵ（電子制御ユニット：図１の符号４０１〜４０５）が情報を発出することで生じ得る。この場合は、例えば、その情報が、制御装置２０内のＣＰＵ等のハードウエアに伝えられ、ＣＰＵ等が、例えばＯＳ（オペレーティングシステム：ＧＵＩを含んでおり、図３（Ａ）の表示制御装置２１に対応する）に指令を送ることで、ハードウエア割り込みが生じ得る。 The interrupt request generated due to the operation of the
また、割り込み要求は、例えば、ユーザーが、車両用のポインティングデバイス（選択装置２００）を介さずに、音声で指示を発出したり、目のまばたきや瞳の移動等（アイコンタクト動作）によって指示を発出したりすることによっても生じ得る。この場合は、音声認識ソフトやアイコンタクト認識ソフト等が、ＯＳ（ＧＵＩを含んでおり、図３（Ａ）の表示制御装置２１に相当する）に指令を送ることで、ソフトウエア割り込みが生じ得る。このように、図３（Ａ）の制御装置２０（あるいは表示制御装置２１）は、ハードウエア割り込み、ソフトウエア割り込みのいずれにも対処することが可能である。 In addition, for example, the interrupt request is issued by the user by voice, without blinking the vehicle pointing device (selecting device 200), or by blinking eyes or moving the eyes (eye contact operation). It can also occur by issuing. In this case, a software interrupt may occur when voice recognition software, eye contact recognition software, or the like sends a command to the OS (which includes a GUI and corresponds to the
なお、図３（Ａ）では、信号インターフェース（信号Ｉ／Ｆ）としては、選択装置（入力装置あるいは操作装置）２００からの選択信号を処理する信号Ｉ／Ｆ４０、音声検出部３０２からの音声信号（音声による指令等）を処理する信号Ｉ／Ｆ５０、の２つを記載している。 In FIG. 3A, as a signal interface (signal I / F), a signal I /
信号Ｉ／Ｆ４０は、選択信号処理用の入出力処理プログラムに従って動作する選択信号処理用インターフェース部（不図示）を有する。また、信号Ｉ／Ｆ５０は、音声認識プログラムに従って動作する音声認識処理用インターフェース部（不図示）を有する。 The signal I /
次に、図３（Ｂ）を参照する。図３（Ｂ）に示されるように、メニュー画像生成部２２は、選択装置２００からの位置信号及び選択信号に基づいて、ユーザーによってどの項目が選択されたのかを判定する項目判定部６００と、その選択が最終選択であるか否かを判定する最終選択判定部６１０と、時間を計測するタイマー６１２と、選択装置２００からの位置信号に基づいてポインタの位置（言い換えれば、ポインティングされる項目）を判定すると共に、そのポインティングが所定時間以上、継続するかをタイマー６１２を用いて計測することで内容案内表示の要否を判定する内容案内表示要否判定部６１４と、表示制御処理を実行する制御処理部６２０（ここでは、内容案内表示として強調表示（表示領域の拡大の他、着色や模様付け等を含んでもよい）される項目（強調表示項目）の数やサイズを表示領域のサイズ等に合わせて調整する、強調表示項目の数・サイズ調整部６２１を有するものとする）と、メニューの表示形式（表示態様）を決定する表示形式決定部６４０（ここでは、内容案内情報（内容案内の対象となる項目の内容、その種別（区分等）、項目の数等）を記憶している記憶部６４２を含むものとする）と、内容案内表示に使用できる領域のサイズ等の情報を取得する表示可能領域情報取得部６４３と、制御処理部６２０の制御の下でメニュー画像を生成する画像生成処理部６５０と、を有する。 Next, reference is made to FIG. As shown in FIG. 3B, the menu
表示可能領域情報取得部６４３は、例えば、ポインタ（指針５０２）によってポインティングされている項目の表示領域のサイズや形状に基づき、内容案内表示に使用できる領域（拡張領域を含む）の情報を取得し、その情報を、制御処理部６２０に提供する。 The displayable area
なお、項目判定部６００、最終選択判定部６１０、内容案内表示要否判定部６１４、表示形式決定部６４０、表示可能領域情報取得部６４３等は、制御処理部６２０内に設けてもよい。各部は、制御処理部６２０の管理下にあることから、実質的に、制御処理部６２０に備わった機能ブロックとみることもできる。 The
制御処理部６２０の強調表示項目の数・サイズ調整部６２１は、内容案内表示要否判定部６１４によって内容案内表示が必要と判断された場合、表示可能領域情報取得部６４３から提供される内容案内表示に用いることができる領域（拡張領域を含む）の情報と、表示対象となる項目の数や形状等の情報と、に基づいて、表示領域の不足が生じないように、かつ無駄な空白が生じないように、内容案内画像に含める項目の数、形状、サイズ等を調整する。画像生成処理部６５０は、内容案内画像を、元のメニュー画像の、ポインティングされている項目以外の項目の画像と合成して、図３（Ｂ）、図３（Ｄ）のような、内容案内付のメニュー画像Ｗ（Ｗ’）を生成して出力する。これによって、内容案内付のメニュー画像Ｗ（Ｗ’）が、表示装置１０に表示される。 The content guidance provided from the displayable area
また、制御処理部６２０は、ユーザーによって、内容表示画像（図３（Ｂ）、図３（Ｄ）の符号ＧＤ、ＧＤ’）にポインタが合わされた状態で、選択装置２００による選択操作が行われたときは、画像生成処理部に指示して、次の階層のメニュー画像（例えば、図３（Ｄ）のメニュー画像）を生成させ、また、ポインタが、内容表示画像から外れた場合には、内容表示を終了させて、元のメニュー画像（例えば、図３（Ａ）のメニュー画像）を生成させる。 In addition, the
これらの動作が繰り返されることで、図３（Ａ）〜図３（Ｄ）に示したような表示をなすための元画像が生成される。 By repeating these operations, an original image for display as shown in FIGS. 3A to 3D is generated.
次に、図４（Ｃ）を参照する。図４（Ｃ）に示されるように、表示装置１０は、虚像の画像を表示するＨＵＤ装置５０１、及び実像の画像を表示する表示器６０１の少なくとも一方を含むことができる。なお、ＨＵＤ装置５０１は光源５０３を有しており、例えば、この光源５０３の光強度が、画像データに基づいて画素単位で変調されることで、スクリーン（不図示）上に画像が表示され、その画像の表示光が、投射光学系（不図示）を介して、図１のウインドシールド（光の一部を透過し、一部を反射する性質をもつ部材）１に投射されることで、例えば、図１で示したラジアルメニュー５００（Ｖ）が表示される。 Next, reference is made to FIG. As shown in FIG. 4C, the
次に、図５を参照する。図５は、車両用表示制御処理の主要な手順の一例を示すフローチャートである。まず、第ｍ階層（ｍ≧1）のメニューを表示する（ステップＳ１）。項目の選択がなされると（ステップＳ２でＹの場合）、最終選択（下位項目無しの場合）であるか否かを判定し（ステップＳ３）、Ｙの場合は、所定階層（初期階層等）のメニューの表示に戻る（ステップＳ１１）。また、ステップＳ３にてＮの場合は、次階層のメニューを表示する（ステップＳ１０）。 Reference is now made to FIG. FIG. 5 is a flowchart illustrating an example of a main procedure of the vehicle display control process. First, the menu of the m-th layer (m ≧ 1) is displayed (step S1). When an item is selected (in the case of Y in step S2), it is determined whether or not it is a final selection (in the case of no lower item) (step S3). Return to the menu display (step S11). If the answer is N in step S3, the next level menu is displayed (step S10).
ステップＳ２にてＮの場合は、ポインタ（指針等）を１つの項目に合わせたまま、所定時間が経過するか否か（言い換えれば、１つの項目を所定時間以上ポインティングしたか否か）が判定される（ステップＳ４）。 In the case of N in step S2, it is determined whether or not a predetermined time elapses (in other words, whether or not one item is pointed for a predetermined time or more) while keeping the pointer (pointer or the like) at one item. (Step S4).
ステップＳ４でＮの場合は、ステップＳ２に戻り、Ｙの場合は、ステップＳ５に移行する。ステップＳ５では、ポインタが指している項目の表示領域、又は、その表示領域に基づく拡張された表示領域に、その項目が選択されたならば表示される次階層のメニューの内容案内（個別項目、代表項目、項目の種類や特性等による分類等）を表示する。なお、このとき、通常の表示態様とは異なる表示態様を採用してもよい。なお、次階層のメニューが無い場合には、内容案内表示はブランク（空白）状態となる。 If N in step S4, the process returns to step S2. If Y, the process proceeds to step S5. In step S5, the content guide (individual item, menu item) of the next hierarchy displayed when the item is selected in the display area of the item pointed to by the pointer or an expanded display area based on the display area. Display representative items, classification by item type, characteristics, etc.). At this time, a display mode different from the normal display mode may be adopted. If there is no next level menu, the content guidance display is blank.
次に、ポインタが、内容案内画像から外れて、他の項目に移動したかを判定する（ステップＳ６）。ステップＳ６でＹの場合は、内容案内表示を終了する（ステップＳ７）。ステップＳ６にてＮの場合は、ステップＳ８で、ポインタが内容案内画像をポインティングしている状態で選択操作がなされたか否かが判定される。ステップＳ８にてＹの場合は、ステップＳ１１に移行し、Ｎの場合は、次階層のメニューが表示される（ステップＳ１２）。 Next, it is determined whether the pointer has moved out of the content guidance image and moved to another item (step S6). In the case of Y in step S6, the content guidance display is ended (step S7). If N in step S6, it is determined in step S8 whether or not a selection operation has been performed while the pointer is pointing to the content guidance image. In the case of Y in step S8, the process proceeds to step S11, and in the case of N, a menu of the next layer is displayed (step S12).
次に、図６を参照する。図６（Ａ）〜図６（Ｃ）は、次階層の内容案内表示を利用しない場合における、ラジアルメニューの第１〜第３階層の表示例を示す図である。ラジアルメニューは、図６（Ａ）に示されるように、仮想的な原点ＱＰを有し、原点ＯＰから外側に向かう複数の放射状の直線によって、メニューの表示領域が区画されてなる、外形が、例えば円や楕円のメニュー形式である。 Reference is now made to FIG. FIGS. 6A to 6C are diagrams illustrating display examples of the first to third layers of the radial menu when the content guidance display of the next layer is not used. As shown in FIG. 6 (A), the radial menu has a virtual origin QP, and a menu display area is defined by a plurality of radial straight lines extending outward from the origin OP. For example, a circle or ellipse menu format.
ラジアルメニューは、例えば、円を細分化する（例えば、扇形や楔（くさび）形の領域に分割する）ことで、多数の項目を、コンパクトにバランスよく配置することができる。近年、ＩＯＴ（物のインターネット）の活用によって、例えば、車両の運転者（ユーザー）が、車両を運転しながら、例えば、自宅の電気製品や給湯機器等の動作を制御することも可能となってきており、今後、メニューに表示する項目の数は、ますます増えるものと予測される。ラジアルメニューを利用した表示形式は、今後、活用の場が広がるものと考えられる。 In the radial menu, for example, a large number of items can be arranged in a compact and well-balanced manner by subdividing a circle (for example, dividing into a sector or wedge-shaped region). In recent years, by using IOT (Internet of Things), for example, it has become possible for a vehicle driver (user) to control the operation of, for example, home appliances and hot water supply devices while driving the vehicle. In the future, the number of items displayed on the menu is expected to increase. The display format using the radial menu is expected to be used in the future.
図６（Ａ）のラジアルメニューの表示では、メニューの第ｍ階層（ｍは１以上の自然数）に含まれる項目（大項目）として、「ＡＩＲ ＣＯＮＴＲＯＬ（空調）」という項目１と、「ＳＭＡＲＴ ＰＨＯＮＥ（スマートフォン）という項目２（「ＴＥＬ（電話）」というサブ項目２−１と、「ＭＡＩＬ（メール）」というサブ項目２−２とを含む）と、「ＦＵＥＬ ＭＥＴＥＲ（燃料メータ）」という項目３と、「ＡＵＤＩＯ（オーディオ）」という項目４と、が設けられている。なお、「ＡＩＲ ＣＯＮＴＲＯＬ（空調）」という項目１には、現在の車内温度を示す「２８℃」という表示もなされている。 In the display of the radial menu in FIG. 6A, as an item (large item) included in the m-th layer (m is a natural number of 1 or more) of the menu,
図６（Ａ）では、ポインタ（指針）５０２が、「ＡＩＲ ＣＯＮＴＲＯＬ（空調）」という項目１を指しており、この状態で、選択装置２００を用いた選択操作がなされることで、項目１が選択される。この結果、図６（Ｂ）のようなメニュー画像が表示される。 In FIG. 6A, the pointer (pointer) 502 points to the
図６（Ｂ）において、領域ＺＮ２（図６（Ａ）の項目１が表示されていた領域ＺＮ１に対応する領域である）において、選択履歴表示としての項目１と、エア吹出口を選択するための、「ＲＥＡＲ（後方）」という項目１−２と、「ＦＲＯＮＴ（前方）」という項目１−３とが配置されている。 In FIG. 6B, in order to select the
領域ＺＮ２に隣接して、先に説明したショートカット用項目としての項目２、４が配置されている。 The
また、項目２を起点として、時計回りに、ＡＵＴＯ（温度、風量、吹出口の自動設定
）という項目１−４と、フロントガラス用のデフロスターを示すアイコンによる項目１−６と、リアガラス用のくもり取り（デフォッガー）を示すアイコンによる項目１−７と、外気導入を示すアイコンによる項目１−８と、空気の内部循環を示すアイコンによる項目１−９とが、順に配置されている。In addition, starting from
図６（Ｂ）にて、ＲＥＡＲ（後方）という項目１−２が選択されると、図６（Ｃ）のようなメニューが表示される。図６（Ｃ）では、領域ＺＮ３（領域ＺＮ１、ＺＮ２に対応する領域）に、選択履歴を示す項目１−１、設定温度を示す項目１−１−１、１−１−２が配置され、項目１−１−２を起点として、時計回りに、設定温度を示す項目１−１−３〜１−１−７が配置される。また、項目１−１−７に隣接して、次の階層を表示するためのＮＥＸＴという項目１−１−８が配置されている。また、項目１−１と項目１−１−８に挟まれて、リターンキー（リターン用項目）１−１−９が配置されている。 In FIG. 6B, when the item 1-2 “REAR” is selected, a menu as shown in FIG. 6C is displayed. In FIG. 6C, an item 1-1 indicating selection history and items 1-1-1, 1-1-2 indicating set temperatures are arranged in the region ZN3 (regions corresponding to the regions ZN1, ZN2). Starting with item 1-1-2, items 1-1-3 to 1-1-7 indicating set temperatures are arranged clockwise. Further, an item 1-1-8 called NEXT for displaying the next hierarchy is arranged adjacent to the item 1-1-7. A return key (return item) 1-1-9 is arranged between the item 1-1 and the item 1-1-8.
特に、図６（Ｂ）のメニューは情報量が豊富で、全体の項目の配置等を理解するためには、やや時間がかかる場合があり得る。この点を考慮して、図７の例では、図６（Ｂ）のメニューについての、内容案内画像の表示を可能とする。 In particular, the menu in FIG. 6B has a large amount of information, and it may take some time to understand the arrangement of the entire items. In consideration of this point, in the example of FIG. 7, it is possible to display a content guidance image for the menu of FIG.
図７（Ａ）〜図７（Ｃ）は、ラジアルメニューにおける第１階層、次階層の内容案内表示（強調表示）、及び第２階層の表示の一例を示す図である。 FIG. 7A to FIG. 7C are diagrams illustrating examples of the first hierarchy, the next hierarchy content guidance display (highlighted display), and the second hierarchy display in the radial menu.
図７（Ａ）は、図６（Ａ）と同じである。図７（Ａ）において、ポインタ（指針５０２）によって項目１が所定時間以上、ポインティングされると、図７（Ｂ）のような、項目１についての内容案内がなされたメニュー（内容案内付のメニュー）が表示される。図７（Ｂ）では、内容案内画像は、拡張された領域ＺＮ１’（図７（Ａ）の領域ＺＮ１に対応する領域）に配置（表示）される。 FIG. 7A is the same as FIG. In FIG. 7A, when the
また、図７（Ｂ）の例では、内容案内画像には、図７（Ａ）で項目１が選択されたならば表示される項目（先に説明した図６（Ｂ）、あるいは図７（Ｃ）を参照。なお、図７（Ｃ）の内容は、実質的に図６（Ｂ）と同じである）の全部（但し、図６（Ｂ）や図７（Ｃ）におけるショートカット用項目２、４は除く）が表示されている。 In the example of FIG. 7B, the content guidance image includes an item that is displayed when
ここで、図７（Ｃ）に示されるように、ＲＥＡＲという項目１−２、ＦＲＯＮＴという項目１−３は、「空気吹出口の選択」という区分Ｒ１に区分（分類）され、ＡＵＴＯという項目１−４は、「自動設定」という区分Ｒ２に区分（分類）され、フロントガラス用のデフロスターを示すアイコンによる項目１−６、リアガラス用のくもり取り（デフォッガー）を示すアイコンによる項目１−７は「くもり取り」という区分Ｒ３に区分（分類）され、外気導入を示すアイコンによる項目１−８、空気の内部循環を示すアイコンによる項目１−９は、「風の流れ調整」という区分Ｒ４に区分（分類）される。 Here, as shown in FIG. 7C, the item 1-2 “REAR” and the item 1-3 “FRONT” are classified (classified) into the category R1 “selection of air outlet”, and the
よって、図７（Ｂ）の内容案内画像では、図７（Ｃ）における区分毎に、かつ、各区分の配置順（ここでは、指針５０２の移動方向である時計回りでの配置順）に従って、項目を配置している。よって、ユーザーは、図７（Ｂ）の内容案内画像を見ることで、図７（Ｃ）のような項目の配置を、容易に予測することができる。よって、図７（Ｃ）のメニューに移行したときに、メニュー全体の把握に要する時間が短縮され、また、誤った選択や錯誤による選択がなされる可能性も低減される。 Therefore, in the content guidance image of FIG. 7B, according to the division order in FIG. 7C and the arrangement order of each division (here, the clockwise arrangement order in which the
なお、図７（Ｂ）の内容案内表示では、図７（Ｃ）で表示される項目をそのまま示しているが、上記の区分Ｒ１〜Ｒ４を、例えば、文字等で表示して、次階層の項目の内容（概要や概略）を示してもよい。区分毎に表示する形式とすることで、例えば、ユーザーの視覚的な負担を軽減しつつ、わかり易く示すことができ、使い勝手が良い車両用メニューを実現することができる。 In the content guidance display of FIG. 7B, the items displayed in FIG. 7C are shown as they are. However, the above-described sections R1 to R4 are displayed with characters or the like, for example, in the next layer. The contents (outline or outline) of the item may be indicated. By adopting a format for displaying each category, for example, it is possible to realize a vehicle menu that can be displayed in an easy-to-understand manner while reducing the visual burden on the user and is easy to use.
次に、図８を参照する。図８（Ａ）〜図８（Ｅ）は、ラジアルメニューにおける第１階層、次階層の内容案内表示（強調表示）、及び第２階層の表示の他の例（応用例）を示す図である。 Reference is now made to FIG. FIGS. 8A to 8E are diagrams showing other examples (application examples) of the first hierarchy, the content guidance display (highlighted display) of the next hierarchy, and the display of the second hierarchy in the radial menu. .
第８の例では、内容案内画像に、次階層のメニューに含まれる項目の絞り込みの機能をもたせることによって、項目選択の効率をさらに向上させる。 In the eighth example, the item selection efficiency is further improved by providing the content guidance image with a function of narrowing down items included in the menu of the next layer.
例えば、図８（Ａ）において、内容案内画像の内の、「ＲＥＡＲ、ＦＲＯＮＴ」という項目がポインタ５０２によってポインティングされた（指された）状態で、選択装置２００による選択操作がなされたときは、次階層のメニューとして、図８（Ｂ）に示すような「ＲＥＡＲ、ＦＲＯＮＴ」に関係する項目のみのメニュー（あるいは、それらの項目を主体とするメニュー）の表示がなされる。言い換えれば、項目の数が絞り込まれたメニュー表示がなされる。 For example, in FIG. 8A, when the selection operation by the
また、図８（Ａ）にて、「ＡＵＴＯ」という項目がポインタ５０２によってポインティングされた状態で、選択装置２００による選択操作がなされると、次階層のメニューとして、図８（Ｃ）のような、「ＡＵＴＯ」に関連する項目のみのメニュー（あるいは、それらの項目を主体とするメニュー）の表示がなされる。 In addition, in FIG. 8A, when the selection operation by the
同様に、図８（Ａ）にて、「フロントガラス用デフロスター、リアガラス用デフォッガー」という項目がポインタ５０２によってポインティングされた状態で、選択装置２００による選択操作がなされると、次階層のメニューとして、図８（Ｄ）のようなメニューが表示される。また、図８（Ａ）にて、「外気導入、内部循環」という項目がポインタ５０２によってポインティングされた状態で、選択装置２００による選択操作がなされると、次階層のメニューとして、図８（Ｅ）のようなメニューが表示される。 Similarly, in FIG. 8A, when a selection operation is performed by the
このように、内容案内画像において、どの項目がポインティングされているかに応じて、次階層のメニューで表示する項目の絞り込みを行う（言い換えれば、表示する項目数を減少させる）ことで、次階層のメニューにおいて、ユーザーが必要としない項目が表示されなくなり、項目数が絞り込まれて項目数が減ることから、例えば、１つの項目の表示領域を大きくとることができる。 In this way, in the content guidance image, by narrowing down the items to be displayed in the menu of the next layer (in other words, reducing the number of items to be displayed) according to which item is pointed, the item of the next layer is reduced. In the menu, items not required by the user are not displayed, and the number of items is reduced and the number of items is reduced. For example, a display area of one item can be enlarged.
したがって、例えば、本来の項目の内容に加えて、項目の内容の理解に役立つ情報等を付加することも可能となる。例えば、図８（Ｂ）では、現在の温度を示す「２８℃」という温度情報の表記が付加されており、図８（Ｃ）では「ＡＵＴＯ」の意味が文字にて解説されており、図８（Ｃ）では、各アイコンの機能をわかり易くするための「ＦＲＯＮＴ」、「ＲＥＡＲ」という表示が付加されており、図８（Ｄ）では、各アイコンの機能をわかり易くするための「外気導入」、「内部循環」という説明表示が付加されている。よって、メニュー選択における利便性が、さらに向上する。 Therefore, for example, in addition to the content of the original item, information useful for understanding the content of the item can be added. For example, in FIG. 8B, the notation of temperature information “28 ° C.” indicating the current temperature is added, and in FIG. 8C, the meaning of “AUTO” is explained in letters. In FIG. 8 (C), “FRONT” and “REAR” are added for easy understanding of the function of each icon. In FIG. 8 (D), “introduction of outside air” for easy understanding of the function of each icon. , “Internal circulation” is added. Therefore, convenience in menu selection is further improved.
以上説明したように、本発明によれば、内容案内画像の表示を可能とすることにより、次階層のメニューを表示したときに、ユーザーが、全体の内容の把握等のために時間を要することによる、項目選択の非効率性を改善することができる。 As described above, according to the present invention, it is possible to display a content guidance image, so that when the menu of the next layer is displayed, the user needs time for grasping the entire content. Can improve the inefficiency of item selection.
これによって、ユーザーに煩わしさを感じさせることがなくなり、メニュー選択の利便性を向上させることができる。従って、使い勝手に優れた車載機器操作システムを実現することができる。 As a result, the user is not bothered and the convenience of menu selection can be improved. Therefore, it is possible to realize an in-vehicle device operation system that is easy to use.
なお、本明細書において、車両とは、例えば自動車、電車、飛行機、船舶等の「乗り物」を示す用語として広義に解釈し、又、メニューという用語も、例えば「複数の選択肢を含む表示」というように、広義に解釈するものとする。 In the present specification, the term “vehicle” is broadly interpreted as a term indicating “vehicle” such as an automobile, a train, an airplane, a ship, etc., and the term “menu” is also referred to as “display including a plurality of options”, for example. As such, it shall be interpreted broadly.
本発明は、上述の例示的な実施形態に限定されず、また、当業者は、上述の例示的な実施形態を特許請求の範囲に含まれる範囲まで、容易に変更することができるであろう。 The present invention is not limited to the above-described exemplary embodiments, and those skilled in the art will be able to easily modify the above-described exemplary embodiments to the extent included in the claims. .
１・・・車両、１０・・・表示装置、２０・・・制御装置、２１・・・表示制御装置（車両用メニュー表示制御装置）、２２・・・メニュー画像生成部、２４・・・・メニュー表示処理部、２６・・・処理実行装置、３０・・・入出力Ｉ／Ｆ（入出力インターフェース）、４０、５０・・・・信号インターフェース（信号Ｉ／Ｆ）、２００・・・選択装置（入力装置、操作装置、車両用ポインティングデバイス）、２１０・・・（円環状の）操作位置検出部、２１１ａ・・・円の円周に沿って連続的に形成された凸部（凸領域）、３０２・・・音声検出部、５００・・・ラジアルメニュー、５０１・・・ＨＵＤ装置、５０２・・・ポインタ（指針）、６００・・・項目判定部、６１０・・・最終選択判定部、６１２・・・タイマー、６１４・・・内容案内表示要否判定部、６２０・・・制御処理部、６２１・・・強調表示項目（内容案内表示用項目）の数・サイズ調整部、６４０・・・表示形式（表示態様）決定部、６４２・・・内容案内情報記憶部、６４３・・・表示可能領域情報取得部、６５０・・・画像生成処理部、Ｗ（Ｗ’）・・・内容案内付のメニュー（メニュー画像）、ＧＤ（ＧＤ’）・・・内容案内画像。 DESCRIPTION OF
Claims (9)
Translated fromJapanese前記メニューの画像の生成を制御する制御処理部と、前記制御処理部の制御の下で前記メニューの画像を生成する画像生成処理部と、を有するメニュー画像生成部と、
生成されたメニュー画像の表示処理を行う表示処理部と、
を有し、
前記メニュー画像生成部における前記制御処理部は、
前記ポインタが、第ｍ階層（ｍは１以上の自然数）のメニュー画像に含まれる１つの項目に合わされた状態で所定時間が経過したことが、前記位置信号に基づいて検出された場合、前記１つの項目が選択されたならば表示される第（ｍ＋１）階層のメニューの内容を案内する内容案内画像が、前記１つの項目の表示領域、又は、前記１つの項目の表示領域に基づく拡張された表示領域に配置されてなる内容案内付のメニュー画像を生成させる、
ことを特徴とする車両用メニュー表示制御装置。A vehicle menu display control device for controlling display of a menu having a hierarchical structure, a display device for displaying the menu, a position signal indicating the position of a pointer, and a selection signal for selecting an item included in the menu, A vehicle-mounted device operation system comprising: a selection device that is generated according to a user pointer movement operation and a selection operation; and a process execution device that executes an operation process of the vehicle-mounted device corresponding to an item that is finally selected by the user The vehicle menu display control device used for the vehicle,
A menu image generation unit comprising: a control processing unit that controls generation of the menu image; and an image generation processing unit that generates the menu image under the control of the control processing unit;
A display processing unit that performs display processing of the generated menu image;
Have
The control processor in the menu image generator is
When it is detected based on the position signal that the predetermined time has passed in a state where the pointer is set to one item included in the menu image of the m-th hierarchy (m is a natural number of 1 or more), the 1 The content guidance image for guiding the contents of the (m + 1) -th layer menu displayed when one item is selected is expanded based on the display area of the one item or the display area of the one item Generate a menu image with content guidance arranged in the display area,
A vehicle menu display control device.
前記内容案内付のメニュー画像を表示中に、前記ポインタが、前記内容案内画像を外れて、前記第ｍ階層のメニュー画像における、前記１つの項目以外の項目に合わされたことが、前記位置信号に基づいて検出された場合、前記内容案内付のメニュー画像に代えて、前記第ｍ階層のメニュー画像を生成させる、
ことを特徴とする、請求項１に記載の車両用メニュー表示制御装置。The control processing unit
While the menu image with content guidance is being displayed, the position signal indicates that the pointer has moved off the content guidance image and has been adjusted to an item other than the one item in the m-th layer menu image. If detected based on the above, the menu image of the m-th layer is generated instead of the menu image with content guidance.
The vehicle menu display control device according to claim 1, wherein:
前記内容案内画像にポインタが合わされた状態で、前記ユーザーによって選択操作が行われたことが前記選択信号に基づいて検出されると、第（ｍ＋１）階層のメニュー画像を生成させる、
ことを特徴とする、請求項１又は２に記載の車両用メニュー表示制御装置。The control processing unit
When it is detected based on the selection signal that a selection operation has been performed by the user in a state where the pointer is placed on the content guidance image, a menu image of the (m + 1) th layer is generated.
The vehicle menu display control device according to claim 1 or 2, characterized in that
前記第（ｍ＋１）階層のメニューに含まれる項目の全部又は一部、
又は、前記第（ｍ＋１）階層のメニューに含まれる複数の項目の内の、種別毎の代表項目、
又は、前記第（ｍ＋１）階層のメニューに含まれる複数の項目についての説明の項目、又は、種別毎の区分の項目、
が含まれることを特徴とする、請求項１乃至３の何れか１項に記載の車両用メニュー表示制御装置。Items included in the content guidance image include:
All or part of the items included in the menu of the (m + 1) th layer,
Or, a representative item for each type among a plurality of items included in the menu of the (m + 1) th layer,
Or an item for explanation of a plurality of items included in the menu of the (m + 1) th layer, or an item for classification for each type,
The vehicle menu display control device according to any one of claims 1 to 3, wherein the vehicle menu display control device is included.
前記選択信号によって、前記内容案内画像に含まれる項目が選択されて、前記第（ｍ＋１）階層のメニュー画像を生成させる際、
前記第（ｍ＋１）階層のメニュー画像に含まれる本来の項目の数がｎ個（ｎは２以上の自然数）である場合、前記ｎ個の項目を、前記内容案内画像にて選択された項目に関連するｊ個の項目（ｊは、ｊ＜ｎを満たす自然数）に絞り込み、その絞り込まれた項目を前記第（ｍ＋１）階層のメニュー画像に含ませる、
ことを特徴とする、請求項３に記載の車両用メニュー表示制御装置。The control processing unit
When an item included in the content guidance image is selected by the selection signal to generate the menu image of the (m + 1) th layer,
When the number of original items included in the menu image of the (m + 1) -th layer is n (n is a natural number of 2 or more), the n items are selected as items selected in the content guidance image. Refine to related j items (j is a natural number satisfying j <n), and include the refined items in the menu image of the (m + 1) -th layer.
The vehicle menu display control device according to claim 3, wherein:
メニューを表示する表示装置と、
ポインタの位置を示す位置信号及び前記メニューに含まれる項目を選択するための選択信号を、ユーザーのポインタ移動動作及び選択動作に応じて発生させる選択装置と、
前記ユーザーによって最終的に選択された項目に対応する、車載機器の操作処理を実行する処理実行装置と、
を有する車載機器操作システム。A vehicle menu display control device according to any one of claims 1 to 7,
A display device for displaying a menu;
A selection device for generating a position signal indicating the position of the pointer and a selection signal for selecting an item included in the menu according to the pointer movement operation and the selection operation of the user;
A process execution device that executes an operation process of the in-vehicle device corresponding to the item finally selected by the user;
An in-vehicle device operating system.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018062313AJP7076069B2 (en) | 2018-03-28 | 2018-03-28 | Vehicle menu display control device, in-vehicle device operation system, and GUI program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018062313AJP7076069B2 (en) | 2018-03-28 | 2018-03-28 | Vehicle menu display control device, in-vehicle device operation system, and GUI program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2019175114Atrue JP2019175114A (en) | 2019-10-10 |
| JP7076069B2 JP7076069B2 (en) | 2022-05-27 |
Family
ID=68168908
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018062313AActiveJP7076069B2 (en) | 2018-03-28 | 2018-03-28 | Vehicle menu display control device, in-vehicle device operation system, and GUI program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7076069B2 (en) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2023508463A (en)* | 2019-12-27 | 2023-03-02 | メソディカル マインド，エルエルシー． | graphical user interface system |
| US12248656B2 (en) | 2020-01-22 | 2025-03-11 | Methodical Mind, Llc | Graphical user interface system |
| US12405708B2 (en) | 2018-07-17 | 2025-09-02 | Methodical Mind, Llc | Graphical user interface system |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007287135A (en)* | 2006-03-20 | 2007-11-01 | Denso Corp | Image display controller and program for image display controller |
| JP2008052576A (en)* | 2006-08-25 | 2008-03-06 | Toshiba Corp | Information processing device |
| JP2008152345A (en)* | 2006-12-14 | 2008-07-03 | Sony Ericsson Mobilecommunications Japan Inc | Display processor, display processing method, display processing program, and mobile terminal device |
| JP2011111061A (en)* | 2009-11-27 | 2011-06-09 | Fujitsu Ten Ltd | On-vehicle display system |
| JP2013129352A (en)* | 2011-12-22 | 2013-07-04 | Panasonic Corp | In-vehicle display system |
- 2018
- 2018-03-28JPJP2018062313Apatent/JP7076069B2/enactiveActive
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007287135A (en)* | 2006-03-20 | 2007-11-01 | Denso Corp | Image display controller and program for image display controller |
| US20070261001A1 (en)* | 2006-03-20 | 2007-11-08 | Denso Corporation | Image display control apparatus and program for controlling same |
| JP2008052576A (en)* | 2006-08-25 | 2008-03-06 | Toshiba Corp | Information processing device |
| JP2008152345A (en)* | 2006-12-14 | 2008-07-03 | Sony Ericsson Mobilecommunications Japan Inc | Display processor, display processing method, display processing program, and mobile terminal device |
| JP2011111061A (en)* | 2009-11-27 | 2011-06-09 | Fujitsu Ten Ltd | On-vehicle display system |
| JP2013129352A (en)* | 2011-12-22 | 2013-07-04 | Panasonic Corp | In-vehicle display system |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US12405708B2 (en) | 2018-07-17 | 2025-09-02 | Methodical Mind, Llc | Graphical user interface system |
| JP2023508463A (en)* | 2019-12-27 | 2023-03-02 | メソディカル マインド，エルエルシー． | graphical user interface system |
| US12210731B2 (en) | 2019-12-27 | 2025-01-28 | Methodical Mind, Llc | Graphical user interface system |
| US12248656B2 (en) | 2020-01-22 | 2025-03-11 | Methodical Mind, Llc | Graphical user interface system |
Also Published As
| Publication number | Publication date |
|---|---|
| JP7076069B2 (en) | 2022-05-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105026203B (en) | Method for synchronizing a display device of a motor vehicle | |
| US20140304636A1 (en) | Vehicle's interactive system | |
| JP6299162B2 (en) | In-vehicle device operation system and operation device | |
| US20180307405A1 (en) | Contextual vehicle user interface | |
| CN106467065B (en) | Steering wheel touch device and steering wheel | |
| US9665269B2 (en) | Touch input apparatus and vehicle having the same | |
| WO2014160229A1 (en) | System and method for transitioning between operational modes of an in-vehicle device using gestures | |
| KR101806172B1 (en) | Vehicle terminal control system and method | |
| KR101866740B1 (en) | Control apparatus using touch and vehicle comprising the same | |
| JP7076069B2 (en) | Vehicle menu display control device, in-vehicle device operation system, and GUI program | |
| KR101681987B1 (en) | Control apparatus using touch and vehicle comprising the same | |
| US20130201126A1 (en) | Input device | |
| JP7340150B2 (en) | Operation image display device, operation image display system, and operation image display program | |
| JP2018195134A (en) | On-vehicle information processing system | |
| JP2017197015A (en) | On-board information processing system | |
| JP2020160856A (en) | Display controller, gui device, method, and gui program | |
| WO2019181928A1 (en) | Vehicular menu display control device, vehicle-mounted device operation system, and gui program | |
| JP7255584B2 (en) | VEHICLE MENU DISPLAY CONTROL DEVICE, VEHICLE DEVICE OPERATION SYSTEM, AND GUI PROGRAM | |
| JP7235033B2 (en) | VEHICLE MENU DISPLAY CONTROL DEVICE, VEHICLE DEVICE OPERATION SYSTEM, AND GUI PROGRAM | |
| JP2020067836A (en) | Display control device, display system, and GUI program | |
| JP7388362B2 (en) | Vehicle display control device, in-vehicle equipment operation system, method, and GUI program | |
| WO2019146703A1 (en) | Operation menu display control device for vehicle, vehicle-mounted device operation system, and gui program | |
| JP2020077074A (en) | Display control apparatus, display system, and gui program | |
| JP2019133329A (en) | Vehicle menu display control device, in-vehicle device operation system, and gui program | |
| JP6489253B2 (en) | Display device and in-vehicle device operation system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination | Free format text:JAPANESE INTERMEDIATE CODE: A621 Effective date:20210122 | |
| A977 | Report on retrieval | Free format text:JAPANESE INTERMEDIATE CODE: A971007 Effective date:20211223 | |
| A131 | Notification of reasons for refusal | Free format text:JAPANESE INTERMEDIATE CODE: A131 Effective date:20220104 | |
| A521 | Request for written amendment filed | Free format text:JAPANESE INTERMEDIATE CODE: A523 Effective date:20220303 | |
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) | Free format text:JAPANESE INTERMEDIATE CODE: A01 Effective date:20220405 | |
| A61 | First payment of annual fees (during grant procedure) | Free format text:JAPANESE INTERMEDIATE CODE: A61 Effective date:20220418 | |
| R150 | Certificate of patent or registration of utility model | Ref document number:7076069 Country of ref document:JP Free format text:JAPANESE INTERMEDIATE CODE: R150 |