JP7076069B2 - Vehicle menu display control device, in-vehicle device operation system, and GUI program - Google Patents

Description

Translated fromJapanese

本発明は、例えば自動車等の車両に搭載される車両用メニュー表示制御装置、車載機器操作システム、及びＧＵＩプログラム等に関する。 The present invention relates to, for example, a vehicle menu display control device, an in-vehicle device operation system, a GUI program, and the like mounted on a vehicle such as an automobile.

ＧＵＩ（グラフィカルユーザーインターフェース)は、マウスなどのポインティングデバイスを使用して、直感的にコンピュータを操作できるようにしたヒューマンインターフェース技術の一種であり、従来、ＧＵＩを用いて表示装置にメニューを表示し、所望の項目を選択できるようにすることが知られている。 GUI (Graphical User Interface) is a type of human interface technology that enables intuitive operation of a computer using a pointing device such as a mouse. Conventionally, a GUI is used to display a menu on a display device. It is known to allow the desired item to be selected.

車両用ポインティングデバイス（選択装置）を用いて、ユーザーが、ブラインド操作で、メニューの項目を選択できるようにした車載機器操作システムについては、例えば、特許文献１に記載されている。 For example,Patent Document 1 describes an in-vehicle device operation system that allows a user to select a menu item by a blind operation using a vehicle pointing device (selection device).

特開２００４－３４５５４９号公報Japanese Unexamined Patent Publication No. 2004-345549

車両用ポインティングデバイス（選択装置）は、ユーザーが、車両を運転しながら操作するものであることから、コンピュータシステムにおけるマウス等によるカーソルの操作（あるいは、携帯機器における指によるカーソル操作）のような、縦横に素早く動かすことができる特性を得ることが難しく、メニューの選択の効率が、ある程度、低下するのはやむを得ないことである。よって、車載機器操作システムにおけるメニュー選択では、冗長性を極力減らして、ユーザー（運転者等）の、メニュー選択の際の負担を軽減することが求められる。 Since the pointing device (selection device) for a vehicle is operated by the user while driving the vehicle, it is similar to the operation of a cursor by a mouse or the like in a computer system (or the operation of a cursor by a finger in a mobile device). It is difficult to obtain the characteristics that can be moved quickly in the vertical and horizontal directions, and it is unavoidable that the efficiency of menu selection is reduced to some extent. Therefore, in the menu selection in the in-vehicle device operation system, it is required to reduce the redundancy as much as possible and reduce the burden on the user (driver or the like) when selecting the menu.

この点を考慮して、車載機器操作システムにおけるメニュー画面では、使用頻度が高いと想定される項目を、選択し易い位置に配置したり、異なる種類の情報を一画面に集約することで、メニューの表示階層を減らしたり、あるいは、選択に失敗したときに、迅速な再選択を可能としたりする、といった工夫が必要となる。 In consideration of this point, on the menu screen of the in-vehicle device operation system, items that are expected to be used frequently can be placed in easy-to-select positions, and different types of information can be aggregated on one screen. It is necessary to reduce the display hierarchy of the display, or to enable quick reselection when the selection fails.

このような工夫によって、情報の多様性が増すと、その反面、メニューの全体の構成が複雑化して、全体の内容把握に、やや時間を要する場合が生じ得る。特に、１つの項目が選択されて次の階層のメニュー画像に移行した際に、ユーザーが、移行後のメニュー画像の全体の内容の把握等のために時間を要する場合があり、このことは、ユーザーに、冗長な感覚を与える一因（言い換えれば、項目選択の非効率性の一因）となる。 If the diversity of information increases due to such ingenuity, on the other hand, the overall structure of the menu becomes complicated, and it may take some time to grasp the entire contents. In particular, when one item is selected and the menu image is moved to the next layer, it may take time for the user to grasp the entire contents of the menu image after the movement, which means that it takes time. It contributes to the user's sense of redundancy (in other words, the inefficiency of item selection).

上記の特許文献１では、この問題については何ら言及されておらず、その対策についての示唆もない。 In the above-mentionedPatent Document 1, no mention is made of this problem, and there is no suggestion as a countermeasure.

本発明は、次階層のメニューを表示したときに、ユーザーが、全体の内容の把握等のために時間を要することによる、項目選択の非効率性を改善することを目的とする。 An object of the present invention is to improve the inefficiency of item selection due to the user taking time to grasp the entire contents when the menu of the next layer is displayed.

本発明の他の目的は、以下に例示する態様及び最良の実施形態、並びに添付の図面を参照することによって、当業者に明らかになるであろう。 Other objects of the invention will be apparent to those skilled in the art by reference to the embodiments exemplified below and the best embodiments, as well as the accompanying drawings.

以下に、本発明の概要を容易に理解するために、本発明に従う態様を例示する。 Hereinafter, in order to easily understand the outline of the present invention, embodiments according to the present invention will be illustrated.

第１の態様において、車両用メニュー表示制御装置は、
階層構造を有するメニューの表示を制御する車両用メニュー表示制御装置と、前記メニューを表示する表示装置と、ポインタの位置を示す位置信号及び前記メニューに含まれる項目を選択するための選択信号を、ユーザーのポインタ移動動作及び選択動作に応じて発生させる選択装置と、前記ユーザーによって最終的に選択された項目に対応する、車載機器の操作処理を実行する処理実行装置と、を有する車載機器操作システムに用いられる前記車両用メニュー表示制御装置であって、
前記メニューの画像の生成を制御する制御処理部と、前記制御処理部の制御の下で前記メニューの画像を生成する画像生成処理部と、を有するメニュー画像生成部と、
生成されたメニュー画像の表示処理を行う表示処理部と、
を有し、
前記メニュー画像生成部における前記制御処理部は、
前記ポインタが、第ｍ階層（ｍは１以上の自然数）のメニュー画像に含まれる１つの項目に合わされた状態で所定時間が経過したことが、前記位置信号に基づいて検出された場合、前記１つの項目が選択されたならば表示される第（ｍ＋１）階層のメニューの内容を案内する内容案内画像が、前記１つの項目の表示領域、又は、前記１つの項目の表示領域に基づく拡張された表示領域に配置されてなる内容案内付のメニュー画像を生成させる。In the first aspect, the vehicle menu display control device is
A vehicle menu display control device that controls the display of a menu having a hierarchical structure, a display device that displays the menu, a position signal indicating the position of a pointer, and a selection signal for selecting an item included in the menu. An in-vehicle device operation system including a selection device generated in response to a user's pointer movement operation and selection operation, and a processing execution device that executes operation processing of the in-vehicle device corresponding to the item finally selected by the user. The vehicle menu display control device used in the above.
A menu image generation unit having a control processing unit that controls the generation of an image of the menu, an image generation processing unit that generates an image of the menu under the control of the control processing unit, and a menu image generation unit.
A display processing unit that performs display processing of the generated menu image,
Have,
The control processing unit in the menu image generation unit is
When it is detected based on the position signal that a predetermined time has elapsed with the pointer aligned with one item included in the menu image of the m-th layer (m is a natural number of 1 or more), the above 1 The content guidance image that guides the contents of the menu of the first (m + 1) layer that is displayed when one item is selected is expanded based on the display area of the one item or the display area of the one item. Generate a menu image with content guidance arranged in the display area.

第１の態様では、ユーザーは、第ｍ階層のメニュー画像に含まれる１つの項目にポインタ（指針やカーソル等）を合わせ、その状態で所定時間を経過させる（言い換えれば、所定時間以上、１つの項目をポインティングする）ことで、その項目が選択されたならば表示される第（ｍ＋１）階層（次階層）のメニューの内容を案内する「内容案内画像」（単に「項目案内画像」、「項目ガイド画像」等と称する場合もある）を表示させることができる。 In the first aspect, the user puts a pointer (pointer, cursor, etc.) on one item included in the menu image of the mth layer, and elapses a predetermined time in that state (in other words, one item for a predetermined time or longer). By pointing an item), a "content guide image" (simply "item guide image", "item guide image" that guides the contents of the menu of the first (m + 1) layer (next layer) that is displayed when the item is selected) It may be called a "guide image" or the like).

従って、その項目を選択する前に、次階層で表示される内容（内容の全部、内容の一部、内容の概要、内容の概略等）を確認（事前確認）することができる。よって、その項目を選択して、次階層のメニューの画像が表示されると、ユーザーは、事前確認の記憶に基づいて、迅速に所望の項目（言い換えれば、所望の選択キー、あるいは所望の選択用表示）にポインタを合せることができる。従って、次階層のメニューを表示したときに、ユーザーが、全体の内容の把握等のために時間を要することによる、項目選択の非効率性（冗長性）が改善される。また、誤った項目選択の可能性も低減される。 Therefore, before selecting the item, it is possible to confirm (preliminary confirmation) the contents (all of the contents, a part of the contents, the outline of the contents, the outline of the contents, etc.) displayed in the next layer. Therefore, when the item is selected and the image of the menu of the next layer is displayed, the user can quickly select the desired item (in other words, the desired selection key or the desired selection) based on the memory of the prior confirmation. You can move the pointer to the display). Therefore, the inefficiency (redundancy) of item selection is improved because it takes time for the user to grasp the entire contents when the menu of the next layer is displayed. It also reduces the possibility of erroneous item selection.

内容案内画像（項目案内画像、項目ガイド画像）は、ポインティングしている項目の表示領域上、あるいは、その項目の表示領域に基づく拡張された表示領域（好ましくは、ポインティングしている項目以外の他の項目を欠損させないように拡張された表示領域）上に表示されることから、ユーザーは、視点を移動させることなく、内容案内画像を視認して、効率的に事前確認を行うことができる。 The content guide image (item guide image, item guide image) is an expanded display area (preferably other than the pointed item) on the display area of the pointed item or based on the display area of the item. Since it is displayed on the display area (enlarged so as not to lose the item), the user can visually check the content guidance image and efficiently perform prior confirmation without moving the viewpoint.

第１の態様に従属する第２の態様において、
前記制御処理部は、
前記内容案内付のメニュー画像を表示中に、前記ポインタが、前記内容案内画像を外れて、前記第ｍ階層のメニュー画像における、前記１つの項目以外の項目に合わされたことが、前記位置信号に基づいて検出された場合、前記内容案内付のメニュー画像に代えて、前記第ｍ階層のメニュー画像を生成させてもよい。In the second aspect, which is subordinate to the first aspect,
The control processing unit
While displaying the menu image with the content guide, the position signal indicates that the pointer deviates from the content guide image and is aligned with an item other than the one item in the menu image of the mth layer. If it is detected based on the above, the menu image of the mth layer may be generated instead of the menu image with the content guidance.

第２の態様では、ユーザーが、ポインタを、内容案内画像に合わせることをやめて、他の項目にポインタを移動させた場合（言い換えれば、ポインタが、内容案内画像を外れて、第ｍ階層のメニュー画像における、直前にポインティングした項目以外の項目に合わされた場合）には、内容案内画像は自動的に終了されて、元のメニュー画像の表示（第ｍ階層のメニューの表示）に戻る。よって、内容案内を終了させるための特別な操作が不要であり、ユーザーに負担を与えることがない。 In the second aspect, when the user stops aligning the pointer with the content guide image and moves the pointer to another item (in other words, the pointer deviates from the content guide image and the menu in the m-th layer is used. When an item other than the item pointed immediately before is matched in the image), the content guidance image is automatically terminated and the display returns to the original menu image display (display of the menu in the mth layer). Therefore, no special operation for terminating the content guidance is required, and no burden is imposed on the user.

第１又は第２の態様に従属する第３の態様において、
前記制御処理部は、
前記内容案内画像にポインタが合わされた状態で、前記ユーザーによって選択操作が行われたことが前記選択信号に基づいて検出されると、第（ｍ＋１）階層のメニュー画像を生成させてもよい。In the third aspect, which is subordinate to the first or second aspect,
The control processing unit
When it is detected based on the selection signal that the selection operation is performed by the user while the pointer is placed on the content guidance image, the menu image of the first (m + 1) layer may be generated.

第３の態様では、ユーザーが、内容案内画像にポインタを合わせたままで、選択装置を用いて選択操作を行うと、内容案内は終了されて、次階層のメニュー画像が表示される。例えば、事前確認の結果として、ポインティングしている項目が所望の項目であることを確認したユーザーが例えばクリック操作を行うことで、次階層のメニューへと移行させることができ、操作上の煩わしさが生じない。なお、この機能を設けない場合は、ポインタを他の項目に移動させて、内容案内表示を終了させた後、再度、その項目をポインティングして選択することになる。 In the third aspect, when the user performs a selection operation using the selection device while the pointer is on the content guidance image, the content guidance is terminated and the menu image of the next layer is displayed. For example, as a result of prior confirmation, a user who confirms that the item being pointed to is a desired item can move to the next level menu by performing, for example, a click operation, which is troublesome in operation. Does not occur. If this function is not provided, the pointer is moved to another item to end the content guidance display, and then the item is pointed and selected again.

第１乃至第３の何れか１つの態様に従属する第４の態様において、
前記内容案内画像に含まれる項目には、
前記第（ｍ＋１）階層のメニューに含まれる項目の全部又は一部、
又は、前記第（ｍ＋１）階層のメニューに含まれる複数の項目の内の、種別毎の代表項目、
又は、前記第（ｍ＋１）階層のメニューに含まれる複数の項目についての説明の項目、
又は、種別毎の区分の項目、
が含まれるようにしてもよい。In the fourth aspect, which is subordinate to any one of the first to third aspects,
Items included in the content guidance image include
All or part of the items included in the menu of the first (m + 1) layer,
Or, a representative item for each type among a plurality of items included in the menu of the first (m + 1) layer.
Alternatively, an item for explaining a plurality of items included in the menu of the first (m + 1) layer,
Or, the item of the classification for each type,
May be included.

第４の態様では、内容案内画像に、次階層で表示される複数の項目の全部を含ませることができ、また、例えば、表示面積の制限によって全部を表示できない場合は、その一部を含まることで内容の概要（概略）を示すことができる。 In the fourth aspect, the content guidance image can include all of a plurality of items displayed in the next layer, and for example, if all of the items cannot be displayed due to the limitation of the display area, a part thereof is included. By doing so, the outline (outline) of the contents can be shown.

また、一部の項目を含ませる場合に、次階層のメニューに含まれる複数の項目の内の、種別毎の代表項目（種別（種類）を判別できる少なくとも１つの項目）を含ませることで、概要（概略）の効率的な把握を可能とすることができる。 In addition, when some items are included, by including the representative item for each type (at least one item that can determine the type (type)) among the plurality of items included in the menu of the next layer. It is possible to efficiently grasp the outline (outline).

また、項目という概念は広義に解釈するものとし、項目の内容を直接的に示す文字、記号、図形等の他、概要（概略）を示す説明（説明文や説明用図形等）を、内容案内用の項目として採用することもできる。 In addition, the concept of an item shall be interpreted in a broad sense, and in addition to characters, symbols, figures, etc. that directly indicate the content of the item, explanations (explanatory text, explanatory figures, etc.) that indicate an outline (outline) are provided. It can also be adopted as an item for.

また、複数の項目を、予め、その種別（種類、特性、属性等）に応じて分類しておき、その分類（種別毎の区分）を示す表示を内容案内用の項目として採用することもできる。 It is also possible to classify a plurality of items in advance according to their types (types, characteristics, attributes, etc.), and to adopt a display indicating the classification (classification for each type) as an item for content guidance. ..

本態様によれば、第ｍ階層のメニューにおいて１つの項目を選択したならば、次に表示される項目群の内容、項目群の概要（概略）について、ユーザーの視覚的な負担を軽減しつつ、わかり易く示すことができ、使い勝手が良い車両用メニューを実現することができる。 According to this aspect, if one item is selected in the menu of the mth layer, the content of the item group displayed next and the outline (outline) of the item group are reduced from the visual burden on the user. , It can be shown in an easy-to-understand manner, and a user-friendly vehicle menu can be realized.

第１乃至第４の何れか１つの態様に従属する第５の態様において、
前記第（ｍ＋１）階層のメニューの画像には、ショートカット用項目としての、前記第ｍ階層において、前記１つの項目に隣接して配置されていた項目が含まれるようにしてもよい。In the fifth aspect, which is subordinate to any one of the first to fourth aspects,
The image of the menu of the first (m + 1) layer may include an item arranged adjacent to the one item in the mth layer as a shortcut item.

第５の態様では、次階層のメニューに、ショートカット用項目（誤った選択をした場合に、前階層のメニューに戻ることなく、前階層にて正しい項目を選択した場合の状態に直接的に遷移させるための項目であり、ここでは、直前の階層にて選択された項目に隣接していた項目である）が含まれる。ショートカット用項目を用いると、誤った項目選択からの回復を迅速に行えるが、その一方、ショートカット用項目は、次階層のメニューに含まれる本来の項目とは種類の異なる項目であり、ショートカット用項目が含まれる分、メニューの構成が複雑化する点は否めない。 In the fifth aspect, the menu for the shortcut (when an erroneous selection is made, the state is directly changed to the state when the correct item is selected in the previous layer without returning to the menu in the previous layer) in the menu of the next layer. This is an item for making the item to be displayed, and here, an item adjacent to the item selected in the immediately preceding hierarchy) is included. By using the shortcut item, you can quickly recover from the wrong item selection, but on the other hand, the shortcut item is a different type of item from the original item included in the menu of the next level, and the shortcut item. It is undeniable that the menu structure becomes complicated due to the inclusion of.

本態様では、ユーザーは、内容案内画像によって、次階層のメニューの項目（本来の項目のみの内容であってもよく、ショートカット用項目を含めた内容であってもよい）を事前に確認することができることから、ショートカット用項目が存在する場合でも、特に問題はなくなり、効率的な項目の選択が可能となる。 In this embodiment, the user confirms in advance the items of the menu of the next layer (the contents may be only the original items or the contents including the shortcut items) by the content guidance image. Therefore, even if there is a shortcut item, there is no particular problem and efficient item selection becomes possible.

第３の態様に従属する第６の態様において、
前記制御処理部は、
前記選択信号によって、前記内容案内画像に含まれる項目が選択されて、前記第（ｍ＋１）階層のメニュー画像を生成させる際、
前記第（ｍ＋１）階層のメニュー画像に含まれる本来の項目の数がｎ個（ｎは２以上の自然数）である場合、前記ｎ個の項目を、前記内容案内画像にて選択された項目に関連するｊ個の項目（ｊは、ｊ＜ｎを満たす自然数）に絞り込み、その絞り込まれた項目を前記第（ｍ＋１）階層のメニュー画像に含ませるようにしてもよい。In the sixth aspect, which is subordinate to the third aspect,
The control processing unit
When the item included in the content guidance image is selected by the selection signal and the menu image of the first (m + 1) layer is generated.
When the number of original items included in the menu image of the (m + 1) layer is n (n is a natural number of 2 or more), the n items are set to the items selected in the content guide image. You may narrow down to j related items (j is a natural number satisfying j <n), and include the narrowed down items in the menu image of the first (m + 1) layer.

第６の態様では、内容案内画像に、次階層のメニューに含まれる項目の絞り込みの機能をもたせることによって、項目選択の効率をさらに向上させる。 In the sixth aspect, the efficiency of item selection is further improved by giving the content guidance image a function of narrowing down the items included in the menu of the next layer.

例えば、内容案内画像にＡ、Ｂの２つの項目が含まれる場合、項目Ａにポインタが合わされた状態で選択操作がなされると、第（ｍ＋１）階層の画像では、項目Ａに関連する項目のみの表示（あるいは、項目Ａに関連する項目を主体とする表示）がなされ、項目Ｂにポインタが合わされた状態で選択操作がなされると、項目Ｂに関連する項目のみの表示（あるいは、項目Ｂに関連する項目を主体とする表示）がなされる、というように、内容案内画像におけるポインティング位置に応じて、次階層のメニューで表示する項目の絞り込みが行われる。 For example, when the content guidance image contains two items A and B, if the selection operation is performed with the pointer placed on the item A, only the items related to the item A are displayed in the image of the first (m + 1) layer. (Or display mainly for items related to item A), and when the selection operation is performed with the pointer on item B, only the items related to item B are displayed (or display for item B). The items to be displayed in the menu of the next layer are narrowed down according to the pointing position in the content guidance image.

これによって、ユーザーが必要としない項目が表示されなくなり、項目数が絞り込まれて項目数が減ることから、１つの項目の表示領域を大きくとることができ、したがって、例えば、本来の項目の内容に加えて、項目の内容の理解に役立つ情報（例えば、アイコンの意味等を示す文字による説明）を付加することも可能となり、メニュー選択における利便性を、さらに向上させることができる。 As a result, items that the user does not need are not displayed, the number of items is narrowed down, and the number of items is reduced. Therefore, the display area of one item can be made large. In addition, it is possible to add information useful for understanding the contents of the item (for example, explanation in characters indicating the meaning of the icon), and the convenience in menu selection can be further improved.

第１乃至第６の何れか１つの態様に従属する第７の態様において、
前記メニュー画像生成部における前記画像生成処理部が生成する前記メニューの画像は、原点を有し、前記原点から外側に向かう複数の放射状の直線によって、前記メニューの表示領域が区画されてなるラジアルメニューの画像としてもよい。In the seventh aspect, which is subordinate to any one of the first to sixth aspects,
The image of the menu generated by the image generation processing unit in the menu image generation unit has an origin, and the display area of the menu is divided by a plurality of radial straight lines extending outward from the origin. It may be an image of.

第７の態様では、メニュー（操作メニュー）の表示形式として、ラジアルメニュー形式を採用する。ラジアルメニューは、円を細分化する（例えば、扇形や楔（くさび）形の領域に分割する）ことで、多数の項目を、コンパクトにバランスよく配置することができる。近年、ＩＯＴ（物のインターネット）の活用によって、例えば、車両の運転者（ユーザー）が、車両を運転しながら、例えば、自宅の電気製品や給湯機器等の動作を制御することも可能となってきており、今後、メニューに表示する項目の数は、ますます増えるものと予測される。ラジアルメニューを利用した表示形式は、今後、活用の場が広がるものと考えられる。 In the seventh aspect, the radial menu format is adopted as the display format of the menu (operation menu). In the radial menu, a large number of items can be arranged in a compact and well-balanced manner by subdividing the circle (for example, dividing it into fan-shaped or wedge-shaped areas). In recent years, the use of the IOT (Internet of Things) has made it possible for, for example, a vehicle driver (user) to control the operation of, for example, home electric appliances and hot water supply equipment while driving the vehicle. It is expected that the number of items displayed in the menu will increase more and more in the future. The display format using the radial menu is expected to be used more widely in the future.

第８の態様において、車載機器操作システムは、
第１乃至第７の何れか１つの態様に記載の車両用メニュー表示制御装置と、
メニューを表示する表示装置と、
ポインタの位置を示す位置信号及び前記メニューに含まれる項目を選択するための選択信号を、ユーザーのポインタ移動動作及び選択動作に応じて発生させる選択装置と、
前記ユーザーによって最終的に選択された項目に対応する、車載機器の操作処理を実行する処理実行装置と、
を有する。In the eighth aspect, the in-vehicle device operation system is
The vehicle menu display control device according to any one of the first to seventh aspects, and the vehicle menu display control device.
A display device that displays menus and
A selection device that generates a position signal indicating the position of the pointer and a selection signal for selecting an item included in the menu according to the pointer movement operation and the selection operation of the user.
A processing execution device that executes operation processing of the in-vehicle device corresponding to the item finally selected by the user, and
Have.

第８の態様によれば、例えば、車両を運転中の運転者等が、ブラインド操作で、快適に車載機器を操作可能な、車載機器操作システムを実現することができる。 According to the eighth aspect, for example, it is possible to realize an in-vehicle device operation system in which a driver or the like who is driving a vehicle can comfortably operate the in-vehicle device by a blind operation.

第９の態様において、ＧＵＩ（グラフィカルユーザーインターフェース）プログラムは、コンピュータを、第１乃至第７の何れか１つの態様に記載の車両用メニュー表示制御装置として動作させる。 In a ninth aspect, the GUI (Graphical User Interface) program operates the computer as the vehicle menu display control device according to any one of the first to seventh aspects.

第９の態様によれば、車両用表示に適した操作メニューの表示制御を、ソフトプログラムを用いて、簡易な構成にて実現することができる。 According to the ninth aspect, the display control of the operation menu suitable for the vehicle display can be realized by using a software program with a simple configuration.

当業者は、例示した本発明に従う態様が、本発明の精神を逸脱することなく、さらに変更され得ることを容易に理解できるであろう。 Those skilled in the art will readily appreciate that the embodiments according to the invention exemplified may be further modified without departing from the spirit of the invention.

車載機器操作システムの構成例を示す図である。It is a figure which shows the configuration example of the in-vehicle device operation system.図２（Ａ）は、選択装置（車載機器操作システムに用いられるポインティングデバイス）の外観を示す図、図２（Ｂ）は、図２（Ａ）におけるＡ－Ａ線に沿う断面構造を示す図である。FIG. 2A is a diagram showing the appearance of a selection device (pointing device used in an in-vehicle device operation system), and FIG. 2B is a diagram showing a cross-sectional structure along a line AA in FIG. 2A. Is.図３（Ａ）～図３（Ｄ）は、本発明の実施形態におけるメニュー選択（次階層の内容案内表示を利用した選択）の一例を示す図である。3A to 3D are diagrams showing an example of menu selection (selection using the content guidance display of the next layer) in the embodiment of the present invention.図４（Ａ）は、図１の車載機器操作システムにおける、制御装置及び車両用メニュー表示制御装置（表示制御装置）の、より具体的な構成例を示す図、図４（Ｂ）は、メニュー画像生成部の構成例を示す図、図４（Ｃ）は、表示装置の構成例を示す図である。4 (A) is a diagram showing a more specific configuration example of the control device and the vehicle menu display control device (display control device) in the in-vehicle device operation system of FIG. 1, and FIG. 4 (B) is a menu. FIG. 4C is a diagram showing a configuration example of an image generation unit, and FIG. 4C is a diagram showing a configuration example of a display device.車両用表示制御処理の主要な手順の一例を示すフローチャートである。It is a flowchart which shows an example of the main procedure of the display control process for a vehicle.図６（Ａ）～図６（Ｃ）は、次階層の内容案内表示を利用しない場合における、ラジアルメニューの第１～第３階層の表示例を示す図である。6 (A) to 6 (C) are diagrams showing display examples of the first to third layers of the radial menu when the content guidance display of the next layer is not used.図７（Ａ）～図７（Ｃ）は、ラジアルメニューにおける第１階層、次階層の内容案内表示（強調表示）、及び第２階層の表示の一例を示す図である。7 (A) to 7 (C) are diagrams showing an example of the content guidance display (highlighting) of the first layer, the next layer, and the display of the second layer in the radial menu.図８（Ａ）～図８（Ｅ）は、ラジアルメニューにおける第１階層、次階層の内容案内表示（強調表示）、及び第２階層の表示の他の例（応用例）を示す図である。8 (A) to 8 (E) are diagrams showing other examples (application examples) of the content guidance display (highlighting) of the first layer, the next layer, and the display of the second layer in the radial menu. ..

以下に説明する最良の実施形態は、本発明を容易に理解するために用いられている。従って、当業者は、本発明が、以下に説明される実施形態によって不当に限定されないことを留意すべきである。 The best embodiments described below have been used to facilitate understanding of the present invention. Accordingly, one of ordinary skill in the art should note that the invention is not unreasonably limited by the embodiments described below.

図１を参照する。図１は、車載機器操作システムの全体の構成例を示す図である。 See FIG. FIG. 1 is a diagram showing an overall configuration example of an in-vehicle device operation system.

車載機器操作システムは、表示装置１０と、入出力Ｉ／Ｆ３０（入出力インターフェース）と、制御装置２０（後述するが、表示制御装置（図３の符号２１）と、処理実行装置（図３の符号２６）と、を含んでいる）と、信号インターフェース（信号Ｉ／Ｆ）４０、５０と、ハンドル（例えばステアリングホイール）３に設けられ、ユーザー（ここでは運転者とする）が指（手）で操作可能な選択装置（入力装置）２００と、ユーザーの視線を検出する視線検出部３０１及び音声検出部３０２（これらは、例えば、選択装置２００を使用せずにメニューの項目を選択する場合に用いられる）と、制御装置２０の外部機器（車載機器）４００としての、各種のＥＣＵ（車載ＥＣＵ４０１、ナビ（ナビゲーション）ＥＣＵ４０２、オーディオＥＣＵ４０３、空調ＥＣＵ４０４、外部通信部（通信機器）４０５を含み、これらはバスＢＵＳを介して入出力Ｉ／Ｆ３０に接続されている）と、を有する。 The in-vehicle device operation system includes adisplay device 10, an input / output I / F 30 (input / output interface), a control device 20 (described later, a display control device (reference numeral 21 in FIG. 3), and a processing execution device (FIG. 3). (Including reference numeral 26), signal interfaces (signal I / F) 40, 50, and a handle (for example, a steering wheel) 3 provided with a finger (hand) by a user (here, a driver). The selection device (input device) 200 that can be operated with, and the line-of-sight detection unit 301 and thevoice detection unit 302 that detect the user's line of sight (these are, for example, when selecting a menu item without using the selection device 200). (Used) and various ECUs (vehicle-mountedECU 401, navigation (navigation)ECU 402,audio ECU 403,air conditioning ECU 404, external communication unit (communication device) 405 as the external device (vehicle-mounted device) 400 of thecontrol device 20 are included. Is connected to the input / output I /F 30 via the bus BUS).

表示装置１０は、実像及び虚像の画像の少なくとも一方を表示可能であり、ここでは、例えば、虚像を表示するＨＵＤ（ヘッドアップディスプレイ）装置を搭載するものとし、このＨＵＤ装置によって、ウインドシールド（フロントガラス等）２の虚像表示領域１０１（図中、破線の四角で示される虚像表示可能領域）内に虚像を表示する。 Thedisplay device 10 can display at least one of a real image and a virtual image. Here, for example, a HUD (head-up display) device for displaying a virtual image is mounted, and the windshield (front) is provided by this HUD device. A virtual image is displayed in the virtual image display area 101 (the virtual image displayable area indicated by the broken square in the figure) of 2 (glass, etc.).

図１では、虚像としてのラジアルメニュー（ラジアル操作メニュー）５００（Ｖ）が表示されている。なお、符号５００（Ｖ）の「（Ｖ）」は、虚像であることを示している。 In FIG. 1, a radial menu (radial operation menu) 500 (V) as a virtual image is displayed. In addition, "(V)" of reference numeral 500 (V) indicates that it is a virtual image.

また、符号５０２は、ユーザーの指（手）の動き（選択装置２００が検出する）に応じて位置が変化するポインタ（ここでは、時計の針のように、時計回りあるいは反時計回りに移動する）である。このポインタは、ラジアルメニュー（ラジアル操作メニュー）５００（Ｖ）に含まれる複数の項目（操作項目）のうちの１つをポイント（指定）する機能をもつ。 Further, thereference numeral 502 moves clockwise or counterclockwise like a pointer (here, like a clock hand) whose position changes according to the movement of the user's finger (hand) (detected by the selection device 200). ). This pointer has a function of pointing (designating) one of a plurality of items (operation items) included in the radial menu (radial operation menu) 500 (V).

なお、表示装置１０は、インストルパネル内又はインストルパネル上に設けられる表示パネル等の表示器であってもよく、ＨＵＤ装置と表示器とが併用されるものであってもよい。 Thedisplay device 10 may be a display device such as a display panel provided in the instrument panel or on the instrument panel, or the HUD device and the display device may be used in combination.

ラジアルメニュー５００（Ｖ）の表示処理において、必要に応じて、外部機器（車載機器）４００から入力される各種の情報を用いることができる。 In the display processing of the radial menu 500 (V), various information input from the external device (vehicle-mounted device) 400 can be used as needed.

なお、外部機器（車載機器）４００（車載ＥＣＵ４０１、ナビＥＣＵ４０２、オーディオＥＣＵ４０３、空調ＥＣＵ４０４、外部通信部（通信機器）４０５）は、外部機器情報を、バスＢＵＳを介して入出力Ｉ／Ｆ３０に送る。 The external device (vehicle-mounted device) 400 (vehicle-mountedECU 401,navigation ECU 402,audio ECU 403, air-conditioning ECU 404, external communication unit (communication device) 405) sends external device information to the input / output I /F 30 via the bus BUS. ..

ここで、車載（車両）ＥＣＵ４０１は、車両１の走行モード（ＥＣＯモード、ＳＰＯＲＴモード）、平均燃費、走行可能距離（航続可能距離）、水温、油温などを出力可能である。 Here, the vehicle-mounted (vehicle)ECU 401 can output the traveling mode (ECO mode, SPORT mode), average fuel consumption, mileage (cruising range), water temperature, oil temperature, etc. of thevehicle 1.

制御装置２０に含まれる表示制御装置（図３の符号２１）は、上記の情報に基づき、車両１の走行モードを示したり、選択されることで走行モードを変更可能とする画像（選択画像）を表示したり、平均燃費、走行可能距離（航続可能距離）、水温、油温等を表示したりする。１つの項目が選択された場合には、さらに、車両１に関する詳細情報に関する項目をラジアルメニュー５００内に表示してもよい。 The display control device (reference numeral 21 in FIG. 3) included in thecontrol device 20 indicates a driving mode of thevehicle 1 based on the above information, or an image (selected image) capable of changing the driving mode by being selected. Is displayed, and the average fuel consumption, mileage (cruising range), water temperature, oil temperature, etc. are displayed. When one item is selected, further items related to detailed information about thevehicle 1 may be displayed in theradial menu 500.

ナビＥＣＵ４０２は、次の分岐路の方向及び分岐路までの距離に関する情報や、車両１の経路付近に位置するオススメの経由地に関する施設情報や、これを経由した場合にロスする時間などの情報を出力可能である。制御装置２０に含まれる表示制御装置（図３の符号２１）は、上記の情報に基づき、例えば、次の分岐路の方向及び分岐路までの距離、経路案内のオン／オフを切り替える画像、オススメの経由地に関する施設情報、及び経由地を設定する画像等の少なくとも１つをメニューとして表示することができる。 Thenavigation ECU 402 provides information on the direction of the next branch road and the distance to the branch road, facility information on recommended stopovers located near the route ofvehicle 1, and information such as time lost when passing through the route. It can be output. The display control device (reference numeral 21 in FIG. 3) included in thecontrol device 20 is based on the above information, for example, the direction of the next branch road, the distance to the branch road, an image for switching on / off of route guidance, and recommended. At least one of facility information regarding the waypoints and images for setting the waypoints can be displayed as a menu.

オーディオＥＣＵ４０３は、オススメの音楽に関する情報などを出力可能である。制御装置２０に含まれる表示制御装置（図３の符号２１）は、上記の情報に基づき、オススメの音楽（オーディオ）に関する情報や、楽曲を選択するための画像をメニューとして表示することができる。 Theaudio ECU 403 can output information about recommended music and the like. The display control device (reference numeral 21 in FIG. 3) included in thecontrol device 20 can display information on recommended music (audio) and an image for selecting a music as a menu based on the above information.

空調ＥＣＵ４０４は、現在の空調状態に関する情報等を出力可能である。制御装置２０に含まれる表示制御装置（図３の符号２１）は、上記の情報に基づき、現在の空調状態に関する情報や、空調状態を変更可能とする画像を表示することができる。 Theair conditioning ECU 404 can output information and the like regarding the current air conditioning state. The display control device (reference numeral 21 in FIG. 3) included in thecontrol device 20 can display information on the current air-conditioning state and an image capable of changing the air-conditioning state based on the above information.

外部通信部４０５は、着信状態やメール受信情報など、車両１の外部からの情報を出力可能である。制御装置２０に含まれる表示制御装置（図３の符号２１）は、上記の情報に基づき、着信があること、メール受信があることを示す情報、電話を受話する又はメールを音声で読ませることが可能な画像等をメニューとして表示することができる。 Theexternal communication unit 405 can output information from the outside of thevehicle 1, such as an incoming call status and mail reception information. The display control device (reference numeral 21 in FIG. 3) included in thecontrol device 20 is, based on the above information, information indicating that there is an incoming call, information indicating that there is an e-mail reception, receiving a telephone call, or having the e-mail read by voice. Images and the like that can be displayed can be displayed as a menu.

次に、図２を参照する。図２（Ａ）は、選択装置（車載機器操作システムに用いられるポインティングデバイス）の外観を示す図、図２（Ｂ）は、図２（Ａ）におけるＡ－Ａ線に沿う断面構造を示す図である。 Next, refer to FIG. FIG. 2A is a diagram showing the appearance of a selection device (pointing device used in an in-vehicle device operation system), and FIG. 2B is a diagram showing a cross-sectional structure along a line AA in FIG. 2A. Is.

ここでは、選択装置（入力装置、あるいは操作装置と称することもある）２００が、図１において示したラジアルメニュー５００における項目を選択することに用いられることを想定して説明する。 Here, it is assumed that the selection device (sometimes referred to as an input device or an operation device) 200 is used for selecting an item in theradial menu 500 shown in FIG.

図２（Ａ）に示されるように、選択装置（ポインティングデバイス）２００は、ステアリングホイール３に配設され、ユーザーの指（ここでは、例えば親指とする）の位置（言い換えれば、操作位置Ｃ）を検出する円環状の操作位置検出部２１０と、この操作位置検出部２１０と一体となって設けられ、操作位置検出部２１０が親指で押されることで、ユーザーによって選択（決定）がなされたことを検出する決定操作検出部２２０と、リターン処理を行うときに使用されるリターンスイッチ２３０と、を有する。 As shown in FIG. 2A, the selection device (pointing device) 200 is arranged on thesteering wheel 3 and is the position of the user's finger (here, for example, the thumb) (in other words, the operation position C). An annular operationposition detection unit 210 for detecting is provided integrally with the operationposition detection unit 210, and the operationposition detection unit 210 is pressed with a thumb to be selected (determined) by the user. It has a determinationoperation detection unit 220 for detecting the above, and areturn switch 230 used when performing return processing.

なお、上記の例では、選択装置２００の操作を指（手）で行っているが、ユーザーの、その他の身体部位を用いてもよい。 In the above example, theselection device 200 is operated by a finger (hand), but other body parts of the user may be used.

選択装置２００は、ユーザーの親指等が操作面に触れた位置（操作位置Ｃ）を検出するタッチセンサであり、図２（Ｂ）に示すように、表面カバー２１１と、センサシート２１２と、スペーサ２１３と、を備える。選択装置２００は、ユーザーが、親指等でその操作面上を触れる操作（以下、タッチ操作という）あるいは所定の軌跡を描くようになぞる操作（以下、ジェスチャ操作という）を行った際に、ユーザーの親指等が操作面に触れている位置（操作位置Ｃ）を検出して、ポインタ（指針等）の位置を示す「位置信号」を生成し、また、ユーザーによる選択（決定）がなされると、その選択（決定）を検出して、選択（決定）がなされたことを示す「選択信号（言い換えれば、選択（決定）検出信号）」を出力する。 Theselection device 200 is a touch sensor that detects a position where the user's thumb or the like touches the operation surface (operation position C), and as shown in FIG. 2 (B), thesurface cover 211, thesensor sheet 212, and the spacer. 213 and. Theselection device 200 is used when the user performs an operation of touching the operation surface with a thumb or the like (hereinafter referred to as a touch operation) or an operation of tracing a predetermined trajectory (hereinafter referred to as a gesture operation). When the position where the thumb or the like is touching the operation surface (operation position C) is detected, a "position signal" indicating the position of the pointer (pointer or the like) is generated, and the user makes a selection (decision). The selection (decision) is detected, and a "selection signal (in other words, a selection (decision) detection signal)" indicating that the selection (decision) has been made is output.

選択装置２００における表面カバー２１１は、合成樹脂等の遮光性の絶縁材料によってシート状に形成され、凸状断面の立体形状が、中心点Ｑを中心とする円の円周に沿って連続的に形成された凸部（凸領域）２１１ａ（図２（Ａ）において、放射状の模様が付された領域）と、凸部（凸領域）２１１ａに連接する比較的平坦な平坦部（平坦領域）２１１ｂと、を有する。凸部（凸領域）２１１ａは、山状の断面（凸状断面）を有し、その山（凸形状）は、中心点Ｑに向かう方向（内側）に長く、その反対方向である外側に短い輪郭線（稜線）を有する。その山（凸形状）が、中心点Ｑを中心とする円の円周に沿って、連続的に設けられることで凸部（凸領域）２１１ａが構成される。 Thesurface cover 211 in theselection device 200 is formed in a sheet shape by a light-shielding insulating material such as synthetic resin, and the three-dimensional shape of the convex cross section is continuously along the circumference of a circle centered on the center point Q. The formed convex portion (convex region) 211a (region with a radial pattern in FIG. 2A) and the relatively flat flat portion (flat region) 211b connected to the convex portion (convex region) 211a. And have. The convex portion (convex region) 211a has a mountain-shaped cross section (convex cross section), and the mountain (convex shape) is long in the direction toward the center point Q (inside) and short in the opposite direction to the outside. It has a contour line (ridge line). The convex portion (convex region) 211a is formed by continuously providing the mountain (convex shape) along the circumference of the circle centered on the center point Q.

また、図２（Ｂ）に記載されるように、表面カバー２１１における凸部（凸領域）２１１ａの下には、センサシート２１２が設けられており、これらを含む部分によって、上記の操作位置検出部２１０が構成される。ユーザーは、例えば、上記の凸部（凸領域）２１１ａの、長手方向（中心点Ｑに向かう方向であり、言い換えれば内側方向）の斜面を指の触感で認識することにより、操作位置検出部２１０上における指のおおよその位置を認識することができ、選択装置２００を見なくても、選択装置２００を操作することができる。言い換えれば、ブラインド操作が可能となる。なお、上記の凸部（凸領域）２１１ａが設けられない場合も想定され得るが、この場合でも、ユーザーが、中心点Ｑを中心とした円の円周に沿って手（指）の位置を移動させた場合、ユーザーは、自身が移動させた手（指）の軌跡（指等がタッチセンサの操作面に接触した位置の時間的変遷の跡）を知覚できることから、ユーザーは、自身の手の位置が、円の円周上のおおよそどの位置にあるかの見当をつけることができる。したがって、この場合でも、ブラインド操作が可能である。 Further, as shown in FIG. 2B, asensor sheet 212 is provided under the convex portion (convex region) 211a in thesurface cover 211, and the operation position detection described above is performed by the portion including these. Theunit 210 is configured. For example, the user recognizes the slope of the convex portion (convex region) 211a in the longitudinal direction (direction toward the center point Q, in other words, the inner direction) by touching the finger, thereby detecting theoperation position 210. The approximate position of the finger on the top can be recognized, and theselection device 200 can be operated without looking at theselection device 200. In other words, blind operation is possible. It may be assumed that the convex portion (convex region) 211a is not provided, but even in this case, the user positions the hand (finger) along the circumference of the circle centered on the center point Q. When moved, the user can perceive the trajectory of the hand (finger) that he / she has moved (the trace of the temporal transition of the position where the finger or the like touches the operation surface of the touch sensor), so that the user can perceive his / her hand. You can get an idea of where the position of is approximately on the circumference of the circle. Therefore, even in this case, the blind operation is possible.

センサシート２１２は、少なくとも凸部（凸領域）２１１ａに対応する表面カバー２１１の裏面側において、中心点Ｑを中心とする円の円周に沿って配設され、ユーザーの指の操作位置Ｃを検出して、制御装置２０（表示制御装置２１）に、ユーザーの指等の操作位置Ｃに関する情報（操作位置の情報、あるいは操作位置を示す信号）を出力する。センサシート２１２は、例えば、絞り加工により表面カバー２１１と一体成形されることで、表面カバー２１１と同様の形状に加工される（図２（Ｂ）参照）。このように一体成形されることで、表面カバー２１１とセンサシート２１２は、一枚のシートのようになり、上記の凸部（凸領域）２１１ａの段差形状は、その一枚のシートの曲がった部分（盛り上がった部分）で構成されることになる。また、このように一体成形されることで、表面カバー２１１の裏面とセンサシート２１２の表面とが当接する。これにより、表面カバー２１１の段差形状に対応して、センサシート２１２の検出部が配置されることになる。このように表面カバー２１１の段差形状に対応してセンサシート２１２の検出部が配置されているため、ユーザーの指等の移動が、凸部（凸領域）２１１ａ等の段差形状を有した操作面上で行われるものであっても、例えば表示制御装置２１が、ユーザーの指の位置を検出することが可能である。 Thesensor sheet 212 is arranged along the circumference of a circle centered on the center point Q on the back surface side of thefront surface cover 211 corresponding to at least the convex portion (convex region) 211a, and the operation position C of the user's finger is set. Upon detection, information regarding the operation position C such as the user's finger (information on the operation position or a signal indicating the operation position) is output to the control device 20 (display control device 21). Thesensor sheet 212 is, for example, integrally molded with thesurface cover 211 by drawing, so that thesensor sheet 212 has the same shape as the surface cover 211 (see FIG. 2B). By being integrally molded in this way, thesurface cover 211 and thesensor sheet 212 become like a single sheet, and the stepped shape of the convex portion (convex region) 211a is that the single sheet is bent. It will be composed of parts (raised parts). Further, by being integrally molded in this way, the back surface of thefront surface cover 211 and the front surface of thesensor sheet 212 come into contact with each other. As a result, the detection unit of thesensor sheet 212 is arranged corresponding to the stepped shape of thesurface cover 211. Since the detection portion of thesensor sheet 212 is arranged corresponding to the step shape of thesurface cover 211 in this way, the movement of the user's finger or the like has an operation surface having a step shape such as the convex portion (convex region) 211a. Even if it is performed above, for example, thedisplay control device 21 can detect the position of the user's finger.

スペーサ２１３は、センサシート２１２の裏面側に位置し、一体成形された表面カバー２１１とセンサシート２１２の形状に合わせて形成され、ユーザーの指等によって、表面カバー２１１が表側から押圧された際に、上記の形状を保持する部材である。 The spacer 213 is located on the back surface side of thesensor sheet 212 and is formed according to the shapes of the integrally moldedfront surface cover 211 and thesensor sheet 212, and when thefront surface cover 211 is pressed from the front side by a user's finger or the like. , A member that retains the above shape.

決定操作検出部２２０は、操作位置検出部２１０の裏面側に複数（図２（Ｂ）の例では５個）設けられる。決定操作検出部２２０は、制御装置２０（表示制御装置２１を含む）と電気的に接続されており、ユーザーが、操作位置検出部２１０の操作面（表面カバー２１１の凸部（凸領域））２１１ａを押下する操作（以下、押下操作という）を行うと、決定操作検出部２２０が押され、これによって、ユーザーによって選択（決定）がなされたことが検出され、選択（決定）がなされたことを示す信号（選択信号、言い換えれば選択（決定）検出信号）が出力される。出力された位置信号や選択信号は、制御装置２０（表示制御装置２１を含む）に送られる。表示制御装置２１は、送られてきた位置信号に基づいて、ポインタ（指針５０２等）がポインティングする（指す）項目を判定（検出）し、また、送られてきた選択信号に基づき、ラジアルメニュー５００に含まれる複数の項目のうちのどの項目が選択されたかを判定し、その選択に応じた操作メニュー画像を生成し、表示装置１０に表示する。これによって、選択された項目の内容に応じて、操作メニューの表示が切り替えられる。 A plurality of determination operation detection units 220 (five in the example of FIG. 2B) are provided on the back surface side of the operationposition detection unit 210. The determinationoperation detection unit 220 is electrically connected to the control device 20 (including the display control device 21), and the user can use the operation surface of the operation position detection unit 210 (convex portion (convex region) of the surface cover 211). When the operation of pressing the 211a (hereinafter referred to as the pressing operation) is performed, the decisionoperation detection unit 220 is pressed, whereby it is detected that the user has made a selection (decision), and the selection (decision) has been made. (Selection signal, in other words, selection (decision) detection signal) is output. The output position signal and selection signal are sent to the control device 20 (including the display control device 21). Thedisplay control device 21 determines (detects) an item to be pointed (pointed to) by a pointer (pointer 502 or the like) based on the sent position signal, and theradial menu 500 is based on the sent selection signal. It is determined which item is selected from the plurality of items included in the above, an operation menu image corresponding to the selection is generated, and the image is displayed on thedisplay device 10. As a result, the display of the operation menu is switched according to the contents of the selected item.

リターンスイッチ２３０は、操作位置検出部２１０及び決定操作検出部２２０とは離れた位置にあるスイッチである。ユーザーが、リターンスイッチ２３０の操作面を押下する（言い換えれば、押下操作がなされる）と、制御装置２０内の表示制御装置２１にリターン信号が送信される。表示制御装置２１は、リターンスイッチ２３０からのリターン信号に基づき、ラジアルメニュー５００の表示を、直近の過去の操作メニュー画像に戻す。言い換えれば、直前の表示への切り替えが行われる。 Thereturn switch 230 is a switch located at a position away from the operationposition detection unit 210 and the determinationoperation detection unit 220. When the user presses the operation surface of the return switch 230 (in other words, the pressing operation is performed), a return signal is transmitted to thedisplay control device 21 in thecontrol device 20. Thedisplay control device 21 returns the display of theradial menu 500 to the latest past operation menu image based on the return signal from thereturn switch 230. In other words, the display is switched to the immediately preceding display.

次に、図３を参照する。図３（Ａ）～図３（Ｄ）は、本発明の実施形態におけるメニュー選択（次階層の内容案内表示を利用した選択）の一例を示す図である。 Next, refer to FIG. 3A to 3D are diagrams showing an example of menu selection (selection using the content guidance display of the next layer) in the embodiment of the present invention.

図３（Ａ）に示されるように、第１階層のメニューでは、上から下に向かって、項目Ａ～Ｄが順に配置されている。ここでは、ユーザーは、ポインタ（指針等）を、上から下に向かって操作しているものとする。 As shown in FIG. 3A, in the menu of the first layer, items A to D are arranged in order from top to bottom. Here, it is assumed that the user is operating the pointer (pointer, etc.) from top to bottom.

図３（Ａ）では、項目Ｃにポインタ（指針）が合わせられている。なお、図中、ＺＮ１は、項目Ｃの表示領域を示す。この状態で、ユーザー（運転者等）が、選択装置２００を用いて選択操作（クリック等）を行うと、項目Ｃが選択されて、図３（Ｄ）のメニュー画像（第２階層のメニュー画像）へと、直接的に遷移する。 In FIG. 3A, the pointer (pointer) is aligned with the item C. In the figure, ZN1 indicates a display area of item C. In this state, when the user (driver or the like) performs a selection operation (click or the like) using theselection device 200, the item C is selected and the menu image of FIG. 3 (D) (menu image of the second layer). ) Directly.

図３（Ｄ）の第２階層のメニュー画像（メニュー画面）では、使用頻度が高いと想定される項目を、選択し易い位置に配置したり、異なる種類の情報を一画面に集約することで、メニューの表示階層を減らしたり、あるいは、選択に失敗したときに、迅速な再選択を可能としたりする、といった工夫が施されている。 In the menu image (menu screen) of the second layer of FIG. 3 (D), items that are expected to be used frequently are arranged at positions where they can be easily selected, and different types of information are aggregated on one screen. , The display hierarchy of the menu is reduced, or when the selection fails, quick reselection is possible.

選択に失敗した場合の対策としては、具体的には、ショートカット用項目（項目Ｂ、Ｄ）が設けられている。ショートカット用項目は、誤った選択をした場合に、前階層のメニューに戻ることなく、前階層にて正しい項目を選択した場合の状態に直接的に遷移させるための項目であり、ここでは、直前の階層にて選択された項目に隣接していた項目である項目Ｂ、Ｄである。 Specifically, as a countermeasure when the selection fails, shortcut items (items B and D) are provided. The shortcut item is an item for directly transitioning to the state when the correct item is selected in the previous layer without returning to the menu in the previous layer when an incorrect selection is made. Here, immediately before Items B and D that are adjacent to the item selected in the hierarchy of.

図３（Ｄ）の第２階層のメニュー画像では、図３（Ａ）における項目Ｃの表示領域ＺＮ１に対応する、表示領域ＺＮ２において、選択履歴を示す項目Ｃと、使用頻度が最も高いと想定される、種類（特性、属性）Ｓ１の項目Ｗ、Ｘと、が配置され、領域ＺＮ２の上下に、ショートカット用項目としての項目Ｂ、Ｄが配置され、項目Ｄの下には、次に使用頻度が中程度と想定される種類（特性、属性）Ｓ２の項目Ｙが配置され、その下にリターンキーが配置され、項目Ｂの上側には、使用頻度が比較的低いと想定される、種類（特性、属性）Ｓ３の項目Ｕ、Ｖが配置されている。 In the menu image of the second layer of FIG. 3 (D), it is assumed that the item C indicating the selection history in the display area ZN2 corresponding to the display area ZN1 of the item C in FIG. 3 (A) and the frequency of use are the highest. Items W and X of type (characteristics, attributes) S1 are arranged, items B and D as shortcut items are arranged above and below the area ZN2, and items B and D as shortcut items are arranged below the item D and then used. The item Y of the type (characteristic, attribute) S2 that is assumed to have a medium frequency is arranged, the return key is arranged below it, and the type that is assumed to be used relatively infrequently above the item B. (Characteristics, attributes) Items U and V of S3 are arranged.

このような工夫によって、情報の多様性が増すと、その反面、メニューの全体の構成が複雑化して、全体の内容把握に、やや時間を要する場合が生じ得るのはやむを得ない。特に、図３（Ａ）において、１つの項目（項目Ｃ）が選択されて次の階層のメニュー画像（図３（Ｂ）のメニュー画像）に移行した際に、ユーザーが、移行後のメニュー画像の全体の内容の把握等のために時間を要する場合があり、このことは、ユーザーに、冗長な感覚を与える一因（言い換えれば、項目選択の非効率性の一因）となると考えられる。 If the diversity of information increases due to such ingenuity, on the other hand, the overall structure of the menu becomes complicated, and it is unavoidable that it may take some time to grasp the entire contents. In particular, in FIG. 3A, when one item (item C) is selected and the menu image of the next layer (menu image of FIG. 3B) is transferred, the user can use the menu image after the migration. It may take some time to grasp the entire contents of the image, which is considered to be one of the factors that give the user a redundant feeling (in other words, one of the causes of the inefficiency of item selection).

そこで、図３（Ｂ）、図３（Ｃ）に示されるように、内容案内画像を表示可能とし、次階層で表示される項目に関して、事前に情報を得ることができるようにする。 Therefore, as shown in FIGS. 3B and 3C, the content guide image can be displayed so that information can be obtained in advance regarding the items to be displayed in the next layer.

言い換えれば、図３（Ａ）において、ユーザーが、項目Ｃにポインタ（指針等）を合わせ、その状態で所定時間を経過させる（言い換えれば、所定時間（例えば１秒）以上、項目Ｃをポインティングする）と、その項目Ｃが選択されたならば表示されるメニュー（図３（Ｄ））の内容を案内する「内容案内画像」（単に「項目案内画像」、「項目ガイド画像」等と称する場合もある）ＧＤ、ＧＤ’を表示させることができる。 In other words, in FIG. 3A, the user points the pointer (pointer, etc.) on the item C and causes the predetermined time to elapse in that state (in other words, points the item C for a predetermined time (for example, 1 second) or more). ) And the "content guide image" (simply referred to as "item guide image", "item guide image", etc.) that guides the contents of the menu (FIG. 3 (D)) displayed when the item C is selected. (There is also) GD, GD'can be displayed.

ここでは、内容案内画像が表示されている図３（Ｂ）、図３（Ｃ）のメニュー（メニュー画像）を、「内容案内付のメニュー（メニュー画像）」と称する。 Here, the menu (menu image) of FIGS. 3 (B) and 3 (C) on which the content guidance image is displayed is referred to as a “menu with content guidance (menu image)”.

図３（Ｂ）の例では、内容案内画像ＧＤには、図３（Ｄ）における、本来の項目Ｕ～Ｙの全部が含まれている。図３（Ｃ）の例では、内容案内画像ＧＤ’には、図３（Ｄ）における、種類毎の区分を示す表示（ここでは、種類を示す表記）Ｓ３、Ｓ１及びＳ２が含まれている。ここで、内容案内画像ＧＤ、ＧＤ’における項目の配置は、図３（Ｄ）の全体における、項目の、上から下へと向かう配置順のとおりとなっており、図３（Ｄ）に移行した場合における項目の配置がわかり易いようになっている。 In the example of FIG. 3B, the content guidance image GD includes all of the original items U to Y in FIG. 3D. In the example of FIG. 3C, the content guidance image GD'includes S3, S1 and S2 of the display indicating the classification for each type in FIG. 3D (here, the notation indicating the type). .. Here, the arrangement of the items in the content guidance images GD and GD'is in the order of arrangement of the items from top to bottom in the whole of FIG. 3 (D), and shifts to FIG. 3 (D). It is easy to understand the arrangement of items in the case of.

内容案内画像ＧＤ、ＧＤ’は、図３（Ａ）においてポインティングしている項目Ｃの表示領域ＺＮ１と同じ位置、かつ同じ面積の表示領域上に配置してもよく、また、図３（Ｂ）、図３（Ｃ）の例のように、その項目Ｃの表示領域ＺＮ１に基づく拡張された表示領域（好ましくは、ポインティングしている項目以外の他の項目を欠損させないように拡張された表示領域）ＺＮ１’上に表示してもよい。特に、表示領域を拡張すると、内容案内画像ＧＤ、ＧＤ’が強調されて示され、内容の理解が容易化されるという効果を得ることができる。内容案内画像ＧＤ、ＧＤ’が、図３（Ａ）の領域ＺＮ１に対応した領域に表示されることから、ユーザーは、視点を移動させることなく、内容案内画像ＧＤ、ＧＤ’を視認して、効率的に事前確認を行うことができる。 The content guide images GD and GD'may be arranged on the display area having the same position and area as the display area ZN1 of the item C pointing in FIG. 3 (A), and may be arranged on the display area of the same area (B). , As in the example of FIG. 3C, the expanded display area based on the display area ZN1 of the item C (preferably, the expanded display area so as not to lose other items other than the pointing item). ) May be displayed on ZN1'. In particular, when the display area is expanded, the content guide images GD and GD'are emphasized and shown, and the effect of facilitating the understanding of the content can be obtained. Since the content guidance images GD and GD'are displayed in the area corresponding to the area ZN1 in FIG. 3A, the user can visually recognize the content guidance images GD and GD'without moving the viewpoint. Preliminary confirmation can be performed efficiently.

従って、図３（Ａ）において、項目Ｃを選択する前に、次階層で表示される内容（内容の全部、内容の一部、内容の概要、内容の概略等）を確認（事前確認）することができる。よって、次階層のメニューの画像（図３（Ｄ））が表示されると、ユーザーは、事前確認の記憶に基づいて、迅速に所望の項目（言い換えれば、所望の選択キー、あるいは所望の選択用表示）にポインタ（指針５０２）を合せることができる。従って、次階層のメニューを表示したときに、ユーザーが、全体の内容の把握等のために時間を要することによる、項目選択の非効率性（冗長性）が改善される。また、誤った項目選択の可能性も低減される。 Therefore, in FIG. 3A, before selecting the item C, the contents displayed in the next layer (all the contents, a part of the contents, the outline of the contents, the outline of the contents, etc.) are confirmed (preliminary confirmation). be able to. Therefore, when the image of the menu in the next layer (FIG. 3 (D)) is displayed, the user can quickly obtain the desired item (in other words, the desired selection key or the desired selection) based on the memory of the prior confirmation. The pointer (pointer 502) can be aligned with the display). Therefore, the inefficiency (redundancy) of item selection is improved because it takes time for the user to grasp the entire contents when the menu of the next layer is displayed. It also reduces the possibility of erroneous item selection.

また、図３（Ｂ）、図３（Ｃ）の、内容案内付のメニュー画像Ｗ、Ｗ’が表示されている状態で、ユーザーが、内容案内画像ＧＤ、ＧＤ’（言い換えれば、それらに含まれる項目の何れか１つ）にポインタ（指針５０２）を合わせたままで、選択装置２００を用いて選択操作を行うと、内容案内は終了されて、次階層のメニュー画像（図３（Ｄ）が表示されるのが好ましい。この場合、例えば、事前確認の結果として、ポインティングしている項目が所望の項目であることを確認したユーザーがクリック操作を行うことで、次階層のメニュー（図３（Ｄ）へと移行させることができ、操作上の煩わしさが生じない。 Further, in the state where the menu images W and W'with the content guidance of FIGS. 3 (B) and 3 (C) are displayed, the user can use the content guidance images GD and GD'(in other words, they are included in them). If the selection operation is performed using theselection device 200 while the pointer (pointer 502) is still aligned with any one of the items to be displayed, the content guidance is terminated and the menu image of the next layer (FIG. 3 (D)) is displayed. It is preferable that the menu is displayed. In this case, for example, as a result of prior confirmation, a user who confirms that the pointed item is a desired item performs a click operation to perform a menu in the next layer (FIG. 3 (FIG. 3). It is possible to shift to D), and there is no trouble in operation.

また、ユーザーが、ポインタ（指針５０２）を、内容案内画像ＧＤ、ＧＤ’に合わせることをやめて、他の項目（図３（Ｂ）、図３（Ｃ）における項目Ａ、Ｂ、Ｄの何れか１つ）にポインタを移動させた場合（言い換えれば、ポインタが、内容案内画像を外れて、図３（Ａ）のメニュー画像における、直前にポインティングした項目（項目Ｃ）以外の項目に合わされた場合）には、内容案内画像ＧＤ、ＧＤ’は自動的に終了されて、元のメニュー画像の表示（図３（Ａ）のメニューの表示）に戻るようにするのが好ましい。この場合は、内容案内を終了させるための特別な操作が不要であり、ユーザーに負担を与えることがない。 Further, the user stops aligning the pointer (pointer 502) with the content guide images GD and GD', and any of the other items (items A, B, and D in FIGS. 3 (B) and 3 (C)). When the pointer is moved to (1) (in other words, when the pointer deviates from the content guidance image and is aligned with an item other than the immediately pointed item (item C) in the menu image of FIG. 3 (A)). ), It is preferable that the content guidance images GD and GD'are automatically terminated and the display returns to the original menu image display (display of the menu in FIG. 3A). In this case, no special operation for terminating the content guidance is required, and the user is not burdened.

次に、上記のような処理を実行する、車両用メニュー表示制御装置等の構成例について説明する。ここで、図４を参照する。図４（Ａ）は、図１の車載機器操作システムにおける、制御装置及び車両用メニュー表示制御装置（表示制御装置）の、より具体的な構成例を示す図、図４（Ｂ）は、メニュー画像生成部の構成例を示す図、図４（Ｃ）は、表示装置の構成例を示す図である。図４において、図１、図２と共通する部分には同じ符号が付されている（この点は以下の図面でも同様である）。 Next, a configuration example of a vehicle menu display control device or the like that executes the above processing will be described. Here, reference is made to FIG. 4 (A) is a diagram showing a more specific configuration example of the control device and the vehicle menu display control device (display control device) in the in-vehicle device operation system of FIG. 1, and FIG. 4 (B) is a menu. FIG. 4C is a diagram showing a configuration example of an image generation unit, and FIG. 4C is a diagram showing a configuration example of a display device. In FIG. 4, the same reference numerals are given to the portions common to those in FIGS. 1 and 2 (this point is the same in the following drawings).

図４（Ａ）において、制御装置２０は、表示制御装置（車両用メニュー表示制御装置）２１と、処理実行装置２６と、を有し、必要に応じて、記憶装置（不図示）に、動作ルーチンファイル２７が記憶される。 In FIG. 4A, thecontrol device 20 has a display control device (vehicle menu display control device) 21 and aprocessing execution device 26, and operates in a storage device (not shown) as needed. The routine file 27 is stored.

表示制御装置（車両用メニュー表示制御装置）２１は、メニュー画像生成部２２と、メニュー表示処理部２４と、を有しており、必要に応じて、記憶装置（不図示）内にメニューファイル２５が記憶される。 The display control device (vehicle menu display control device) 21 has a menuimage generation unit 22 and a menudisplay processing unit 24, and amenu file 25 is stored in a storage device (not shown) as needed. Is remembered.

上記の制御装置２０の各構成は、例えば、記憶装置（不図示）に格納されているＯＳ（オペレーティングシステム）等に搭載されるＧＵＩ（グラフィカルユーザーインターフェース）プログラムに従ってＣＰＵやＭＰＵ（コンピュータ：不図示）が動作することで実現することができる。 Each configuration of thecontrol device 20 described above is, for example, according to a GUI (graphical user interface) program installed in an OS (operating system) or the like stored in a storage device (not shown), such as a CPU or an MPU (computer: not shown). Can be realized by operating.

表示制御装置（車両用メニュー表示制御装置）２１におけるメニュー画像生成部２２は、メニュー画像（操作メニュー画像）を生成する。例えば、予め用意されている複数のメニューファイル２５の中から使用可能なものを取り出し（読み出し）、必要な情報を画像合成で組み込むことで、複数の操作項目を含むメニュー（操作メニュー）の画像を生成する。但し、これに限定されるものではなく、記憶部（不図示）に予め記憶された配列、又は記憶部（不図示）に記憶されたプログラムにより定められた配列に従って、複数の項目を配置する（項目を画像合成する）ことで、メニュー（操作メニュー）の画像を生成してもよく、あるいは、レンダリングにより画像を生成してもよい。生成された画像は、画像ＲＡＭ（不図示）等に、一旦、蓄積される。 The menuimage generation unit 22 in the display control device (vehicle menu display control device) 21 generates a menu image (operation menu image). For example, by extracting (reading) usable information from a plurality of menu files 25 prepared in advance and incorporating necessary information by image composition, an image of a menu (operation menu) including a plurality of operation items can be obtained. Generate. However, the present invention is not limited to this, and a plurality of items are arranged according to an array stored in advance in the storage unit (not shown) or an arrangement determined by a program stored in the storage unit (not shown) ((not shown). An image of a menu (operation menu) may be generated by (combining images of items), or an image may be generated by rendering. The generated image is temporarily stored in an image RAM (not shown) or the like.

なお、表示制御装置（車両用メニュー表示制御装置）２１は、外部機器４００（車載ＥＣＵ４０１、ナビＥＣＵ４０２、オーディオＥＣＵ４０３、空調ＥＣＵ４０４、外部通信部（通信機器）４０５等）からの情報を使用して画像を生成することができ、あるいは、その情報を使用せずに、記憶部（不図示）に予め記憶された画像データのみに基づき画像を生成してもよい。これによって、例えば、図１で示したラジアルメニュー５００（Ｖ）の元となる画像（元画像）を生成することができる。 The display control device (vehicle menu display control device) 21 uses information from an external device 400 (vehicle-mountedECU 401,navigation ECU 402,audio ECU 403,air conditioning ECU 404, external communication unit (communication device) 405, etc.) to obtain an image. Or may generate an image based only on image data stored in advance in a storage unit (not shown) without using the information. Thereby, for example, the original image (original image) of the radial menu 500 (V) shown in FIG. 1 can be generated.

表示制御装置（車両用メニュー表示制御装置）２１は、具体的には、例えば、階層構造を有すると共に、１つの階層の画像に複数の操作項目が含まれるメニューの表示を制御するものであり、上述のとおり、メニューの画像を生成するメニュー画像生成部２２と、生成されたメニューの画像の表示処理を行うメニュー表示処理部２４と、を有する。 Specifically, the display control device (vehicle menu display control device) 21 controls the display of a menu that has a hierarchical structure and includes a plurality of operation items in an image of one layer. As described above, it has a menuimage generation unit 22 that generates a menu image, and a menudisplay processing unit 24 that performs display processing of the generated menu image.

図３（Ａ）におけるメニュー表示処理部２４は、画像ＲＡＭ（不図示）等から、生成された画像（画像データ）を読み出し、データ形式を整えたり、表示に必要な情報を付加したりし、その結果として得られた画像データを表示装置１０に送る。 The menudisplay processing unit 24 in FIG. 3A reads the generated image (image data) from an image RAM (not shown) or the like, arranges the data format, and adds information necessary for display. The image data obtained as a result is sent to thedisplay device 10.

表示される車両用メニューは、例えば階層構造を有しており、選択された１つの項目に関連付けされた下位階層のメニューがある場合は、その下位階層のメニューが順次、表示される。下位階層のない項目が選択されると、例えば、メニュー画像生成部２２から処理実行装置２６に、最終的に選択された項目の内容を示す情報が送られる。処理実行装置２６は、例えば、動作ルーチンファイル２７を参照して、実行すべき処理の具体的な内容を示すデータを取得し（但し、この動作は不要な場合もあり得る）、取得したデータを、入出力Ｉ／Ｆ３０及びバスＢＵＳを経由して、外部機器（車載機器）４００に送る。これによって、ユーザーによって選択された項目に関連付けられている処理が実行される。 The displayed vehicle menu has, for example, a hierarchical structure, and if there is a lower-level menu associated with one selected item, the lower-level menus are sequentially displayed. When an item having no lower hierarchy is selected, for example, information indicating the content of the finally selected item is sent from the menuimage generation unit 22 to theprocessing execution device 26. Theprocess execution device 26, for example, refers to the operation routine file 27 to acquire data indicating the specific contents of the process to be executed (however, this operation may not be necessary), and obtains the acquired data. , Input / output I / F30 and bus BUS to the external device (vehicle-mounted device) 400. This performs the process associated with the item selected by the user.

また、図３（Ａ）における制御装置２０あるいは表示制御装置２１（これらは、ハードウエアとしてＣＰＵ等（不図示）と、各種プログラムを格納する記憶装置（不図示）とを有する）は、種々の要因で生じる割り込み要求に対応することが可能である。 Further, thecontrol device 20 or the display control device 21 (these have a CPU or the like (not shown) as hardware and a storage device (not shown) for storing various programs in FIG. 3A) are various. It is possible to respond to interrupt requests caused by factors.

外部機器４００の動作に起因して発生する割り込み要求は、例えば、車両に搭載される各種のＥＣＵ（電子制御ユニット：図１の符号４０１～４０５）が情報を発出することで生じ得る。この場合は、例えば、その情報が、制御装置２０内のＣＰＵ等のハードウエアに伝えられ、ＣＰＵ等が、例えばＯＳ（オペレーティングシステム：ＧＵＩを含んでおり、図３（Ａ）の表示制御装置２１に対応する）に指令を送ることで、ハードウエア割り込みが生じ得る。 The interrupt request generated due to the operation of theexternal device 400 can be generated, for example, by issuing information from various ECUs (electronic control units:reference numerals 401 to 405 in FIG. 1) mounted on the vehicle. In this case, for example, the information is transmitted to hardware such as a CPU in thecontrol device 20, and the CPU or the like includes, for example, an OS (operating system: GUI, and thedisplay control device 21 in FIG. 3A). By sending a command to (corresponding to), a hardware interrupt may occur.

また、割り込み要求は、例えば、ユーザーが、車両用のポインティングデバイス（選択装置２００）を介さずに、音声で指示を発出したり、目のまばたきや瞳の移動等（アイコンタクト動作）によって指示を発出したりすることによっても生じ得る。この場合は、音声認識ソフトやアイコンタクト認識ソフト等が、ＯＳ（ＧＵＩを含んでおり、図３（Ａ）の表示制御装置２１に相当する）に指令を送ることで、ソフトウエア割り込みが生じ得る。このように、図３（Ａ）の制御装置２０（あるいは表示制御装置２１）は、ハードウエア割り込み、ソフトウエア割り込みのいずれにも対処することが可能である。 Further, for the interrupt request, for example, the user issues an instruction by voice without going through a pointing device for a vehicle (selection device 200), or gives an instruction by blinking eyes or moving eyes (eye contact operation). It can also occur by issuing. In this case, the voice recognition software, the eye contact recognition software, or the like may generate a software interrupt by sending a command to the OS (which includes the GUI and corresponds to thedisplay control device 21 in FIG. 3A). .. As described above, the control device 20 (or display control device 21) of FIG. 3A can deal with both hardware interrupts and software interrupts.

なお、図３（Ａ）では、信号インターフェース（信号Ｉ／Ｆ）としては、選択装置（入力装置あるいは操作装置）２００からの選択信号を処理する信号Ｉ／Ｆ４０、音声検出部３０２からの音声信号（音声による指令等）を処理する信号Ｉ／Ｆ５０、の２つを記載している。 In FIG. 3A, as the signal interface (signal I / F), the signal I /F 40 for processing the selection signal from the selection device (input device or operation device) 200, and the voice signal from thevoice detection unit 302 are used. Two signals, I / F50, for processing (voice commands, etc.) are described.

信号Ｉ／Ｆ４０は、選択信号処理用の入出力処理プログラムに従って動作する選択信号処理用インターフェース部（不図示）を有する。また、信号Ｉ／Ｆ５０は、音声認識プログラムに従って動作する音声認識処理用インターフェース部（不図示）を有する。 The signal I /F 40 has a selection signal processing interface unit (not shown) that operates according to an input / output processing program for selection signal processing. Further, the signal I /F 50 has a voice recognition processing interface unit (not shown) that operates according to the voice recognition program.

次に、図３（Ｂ）を参照する。図３（Ｂ）に示されるように、メニュー画像生成部２２は、選択装置２００からの位置信号及び選択信号に基づいて、ユーザーによってどの項目が選択されたのかを判定する項目判定部６００と、その選択が最終選択であるか否かを判定する最終選択判定部６１０と、時間を計測するタイマー６１２と、選択装置２００からの位置信号に基づいてポインタの位置（言い換えれば、ポインティングされる項目）を判定すると共に、そのポインティングが所定時間以上、継続するかをタイマー６１２を用いて計測することで内容案内表示の要否を判定する内容案内表示要否判定部６１４と、表示制御処理を実行する制御処理部６２０（ここでは、内容案内表示として強調表示（表示領域の拡大の他、着色や模様付け等を含んでもよい）される項目（強調表示項目）の数やサイズを表示領域のサイズ等に合わせて調整する、強調表示項目の数・サイズ調整部６２１を有するものとする）と、メニューの表示形式（表示態様）を決定する表示形式決定部６４０（ここでは、内容案内情報（内容案内の対象となる項目の内容、その種別（区分等）、項目の数等）を記憶している記憶部６４２を含むものとする）と、内容案内表示に使用できる領域のサイズ等の情報を取得する表示可能領域情報取得部６４３と、制御処理部６２０の制御の下でメニュー画像を生成する画像生成処理部６５０と、を有する。 Next, refer to FIG. 3 (B). As shown in FIG. 3B, the menuimage generation unit 22 includes anitem determination unit 600 that determines which item has been selected by the user based on the position signal and the selection signal from theselection device 200. The finalselection determination unit 610 that determines whether or not the selection is the final selection, thetimer 612 that measures the time, and the position of the pointer based on the position signal from the selection device 200 (in other words, the item to be pointed). The content guidance displaynecessity determination unit 614, which determines the necessity of the content guidance display by measuring whether the pointing continues for a predetermined time or longer by using thetimer 612, and the display control process are executed. The number and size of items (highlighted items) to be highlighted (here, coloring, patterning, etc. may be included in addition to enlargement of the display area) as the content guidance display in the control processing unit 620 (here, the size of the display area, etc.) It is assumed that it has a number / size adjustment unit 621 for highlighting items to be adjusted according to the above) and a displayformat determination unit 640 for determining the display format (display mode) of the menu (here, content guidance information (content guidance). It is assumed that thestorage unit 642 that stores the contents of the target item, its type (classification, etc.), the number of items, etc.) is included) and the display for acquiring information such as the size of the area that can be used for the content guidance display. It has a possible areainformation acquisition unit 643 and an imagegeneration processing unit 650 that generates a menu image under the control of thecontrol processing unit 620.

表示可能領域情報取得部６４３は、例えば、ポインタ（指針５０２）によってポインティングされている項目の表示領域のサイズや形状に基づき、内容案内表示に使用できる領域（拡張領域を含む）の情報を取得し、その情報を、制御処理部６２０に提供する。 The displayable areainformation acquisition unit 643 acquires information on an area (including an extended area) that can be used for content guidance display, for example, based on the size and shape of the display area of the item pointed by the pointer (pointer 502). , The information is provided to thecontrol processing unit 620.

なお、項目判定部６００、最終選択判定部６１０、内容案内表示要否判定部６１４、表示形式決定部６４０、表示可能領域情報取得部６４３等は、制御処理部６２０内に設けてもよい。各部は、制御処理部６２０の管理下にあることから、実質的に、制御処理部６２０に備わった機能ブロックとみることもできる。 Theitem determination unit 600, the finalselection determination unit 610, the content guidance displaynecessity determination unit 614, the displayformat determination unit 640, the displayable areainformation acquisition unit 643, and the like may be provided in thecontrol processing unit 620. Since each unit is under the control of thecontrol processing unit 620, it can be substantially regarded as a functional block provided in thecontrol processing unit 620.

制御処理部６２０の強調表示項目の数・サイズ調整部６２１は、内容案内表示要否判定部６１４によって内容案内表示が必要と判断された場合、表示可能領域情報取得部６４３から提供される内容案内表示に用いることができる領域（拡張領域を含む）の情報と、表示対象となる項目の数や形状等の情報と、に基づいて、表示領域の不足が生じないように、かつ無駄な空白が生じないように、内容案内画像に含める項目の数、形状、サイズ等を調整する。画像生成処理部６５０は、内容案内画像を、元のメニュー画像の、ポインティングされている項目以外の項目の画像と合成して、図３（Ｂ）、図３（Ｄ）のような、内容案内付のメニュー画像Ｗ（Ｗ’）を生成して出力する。これによって、内容案内付のメニュー画像Ｗ（Ｗ’）が、表示装置１０に表示される。 The number / size adjustment unit 621 of the highlighted item of thecontrol processing unit 620 is provided by the displayable areainformation acquisition unit 643 when the content guidance displaynecessity determination unit 614 determines that the content guidance display is necessary. Based on the information of the area (including the extended area) that can be used for display and the information such as the number and shape of the items to be displayed, there is a wasteful blank space so that the display area is not insufficient. Adjust the number, shape, size, etc. of the items to be included in the content guide image so that it does not occur. The imagegeneration processing unit 650 synthesizes the content guidance image with the image of the item other than the pointed item of the original menu image, and the content guidance as shown in FIGS. 3 (B) and 3 (D). The attached menu image W (W') is generated and output. As a result, the menu image W (W') with the content guidance is displayed on thedisplay device 10.

また、制御処理部６２０は、ユーザーによって、内容表示画像（図３（Ｂ）、図３（Ｄ）の符号ＧＤ、ＧＤ’）にポインタが合わされた状態で、選択装置２００による選択操作が行われたときは、画像生成処理部に指示して、次の階層のメニュー画像（例えば、図３（Ｄ）のメニュー画像）を生成させ、また、ポインタが、内容表示画像から外れた場合には、内容表示を終了させて、元のメニュー画像（例えば、図３（Ａ）のメニュー画像）を生成させる。 Further, thecontrol processing unit 620 performs a selection operation by theselection device 200 in a state where the pointer is placed on the content display image (reference numeral GD, GD'in FIGS. 3B and 3D) by the user. When this happens, the image generation processing unit is instructed to generate a menu image of the next layer (for example, the menu image of FIG. 3D), and when the pointer deviates from the content display image, The content display is terminated, and the original menu image (for example, the menu image of FIG. 3A) is generated.

これらの動作が繰り返されることで、図３（Ａ）～図３（Ｄ）に示したような表示をなすための元画像が生成される。 By repeating these operations, the original image for displaying as shown in FIGS. 3 (A) to 3 (D) is generated.

次に、図４（Ｃ）を参照する。図４（Ｃ）に示されるように、表示装置１０は、虚像の画像を表示するＨＵＤ装置５０１、及び実像の画像を表示する表示器６０１の少なくとも一方を含むことができる。なお、ＨＵＤ装置５０１は光源５０３を有しており、例えば、この光源５０３の光強度が、画像データに基づいて画素単位で変調されることで、スクリーン（不図示）上に画像が表示され、その画像の表示光が、投射光学系（不図示）を介して、図１のウインドシールド（光の一部を透過し、一部を反射する性質をもつ部材）１に投射されることで、例えば、図１で示したラジアルメニュー５００（Ｖ）が表示される。 Next, reference is made to FIG. 4 (C). As shown in FIG. 4C, thedisplay device 10 can include at least one of aHUD device 501 for displaying an image of a virtual image and adisplay device 601 for displaying an image of a real image. TheHUD device 501 has alight source 503. For example, the light intensity of thelight source 503 is modulated in pixel units based on image data, so that an image is displayed on a screen (not shown). The display light of the image is projected onto the windshield (a member having a property of transmitting a part of the light and reflecting a part of the light) 1 of FIG. 1 via a projection optical system (not shown). For example, the radial menu 500 (V) shown in FIG. 1 is displayed.

次に、図５を参照する。図５は、車両用表示制御処理の主要な手順の一例を示すフローチャートである。まず、第ｍ階層（ｍ≧1）のメニューを表示する（ステップＳ１）。項目の選択がなされると（ステップＳ２でＹの場合）、最終選択（下位項目無しの場合）であるか否かを判定し（ステップＳ３）、Ｙの場合は、所定階層（初期階層等）のメニューの表示に戻る（ステップＳ１１）。また、ステップＳ３にてＮの場合は、次階層のメニューを表示する（ステップＳ１０）。 Next, refer to FIG. FIG. 5 is a flowchart showing an example of a main procedure of display control processing for a vehicle. First, the menu of the mth layer (m ≧ 1) is displayed (step S1). When an item is selected (in the case of Y in step S2), it is determined whether or not it is the final selection (in the case of no lower item) (step S3), and in the case of Y, a predetermined layer (initial layer, etc.). Return to the display of the menu of (step S11). If it is N in step S3, the menu of the next layer is displayed (step S10).

ステップＳ２にてＮの場合は、ポインタ（指針等）を１つの項目に合わせたまま、所定時間が経過するか否か（言い換えれば、１つの項目を所定時間以上ポインティングしたか否か）が判定される（ステップＳ４）。 In the case of N in step S2, it is determined whether or not a predetermined time has elapsed (in other words, whether or not one item has been pointed for a predetermined time or longer) while the pointer (pointer, etc.) is aligned with one item. (Step S4).

ステップＳ４でＮの場合は、ステップＳ２に戻り、Ｙの場合は、ステップＳ５に移行する。ステップＳ５では、ポインタが指している項目の表示領域、又は、その表示領域に基づく拡張された表示領域に、その項目が選択されたならば表示される次階層のメニューの内容案内（個別項目、代表項目、項目の種類や特性等による分類等）を表示する。なお、このとき、通常の表示態様とは異なる表示態様を採用してもよい。なお、次階層のメニューが無い場合には、内容案内表示はブランク（空白）状態となる。 In the case of N in step S4, the process returns to step S2, and in the case of Y, the process proceeds to step S5. In step S5, the content guidance (individual item,) of the menu of the next layer displayed when the item is selected in the display area of the item pointed to by the pointer or the expanded display area based on the display area. Representative items, classification by item type, characteristics, etc.) are displayed. At this time, a display mode different from the normal display mode may be adopted. If there is no menu in the next layer, the content guidance display will be in a blank state.

次に、ポインタが、内容案内画像から外れて、他の項目に移動したかを判定する（ステップＳ６）。ステップＳ６でＹの場合は、内容案内表示を終了する（ステップＳ７）。ステップＳ６にてＮの場合は、ステップＳ８で、ポインタが内容案内画像をポインティングしている状態で選択操作がなされたか否かが判定される。ステップＳ８にてＹの場合は、ステップＳ１１に移行し、Ｎの場合は、次階層のメニューが表示される（ステップＳ１２）。 Next, it is determined whether the pointer deviates from the content guidance image and moves to another item (step S6). If it is Y in step S6, the content guidance display ends (step S7). In the case of N in step S6, it is determined in step S8 whether or not the selection operation is performed while the pointer is pointing to the content guidance image. If it is Y in step S8, the process proceeds to step S11, and if it is N, the menu of the next layer is displayed (step S12).

次に、図６を参照する。図６（Ａ）～図６（Ｃ）は、次階層の内容案内表示を利用しない場合における、ラジアルメニューの第１～第３階層の表示例を示す図である。ラジアルメニューは、図６（Ａ）に示されるように、仮想的な原点ＱＰを有し、原点ＯＰから外側に向かう複数の放射状の直線によって、メニューの表示領域が区画されてなる、外形が、例えば円や楕円のメニュー形式である。 Next, refer to FIG. 6 (A) to 6 (C) are diagrams showing display examples of the first to third layers of the radial menu when the content guidance display of the next layer is not used. As shown in FIG. 6A, the radial menu has a virtual origin QP, and the outer shape is such that the display area of the menu is divided by a plurality of radial straight lines extending outward from the origin OP. For example, a circle or ellipse menu format.

ラジアルメニューは、例えば、円を細分化する（例えば、扇形や楔（くさび）形の領域に分割する）ことで、多数の項目を、コンパクトにバランスよく配置することができる。近年、ＩＯＴ（物のインターネット）の活用によって、例えば、車両の運転者（ユーザー）が、車両を運転しながら、例えば、自宅の電気製品や給湯機器等の動作を制御することも可能となってきており、今後、メニューに表示する項目の数は、ますます増えるものと予測される。ラジアルメニューを利用した表示形式は、今後、活用の場が広がるものと考えられる。 In the radial menu, for example, by subdividing the circle (for example, dividing it into fan-shaped or wedge-shaped areas), a large number of items can be arranged in a compact and well-balanced manner. In recent years, the use of the IOT (Internet of Things) has made it possible for, for example, a vehicle driver (user) to control the operation of, for example, home electric appliances and hot water supply equipment while driving the vehicle. It is expected that the number of items displayed in the menu will increase more and more in the future. The display format using the radial menu is expected to be used more widely in the future.

図６（Ａ）のラジアルメニューの表示では、メニューの第ｍ階層（ｍは１以上の自然数）に含まれる項目（大項目）として、「ＡＩＲ ＣＯＮＴＲＯＬ（空調）」という項目１と、「ＳＭＡＲＴ ＰＨＯＮＥ（スマートフォン）という項目２（「ＴＥＬ（電話）」というサブ項目２－１と、「ＭＡＩＬ（メール）」というサブ項目２－２とを含む）と、「ＦＵＥＬ ＭＥＴＥＲ（燃料メータ）」という項目３と、「ＡＵＤＩＯ（オーディオ）」という項目４と、が設けられている。なお、「ＡＩＲ ＣＯＮＴＲＯＬ（空調）」という項目１には、現在の車内温度を示す「２８℃」という表示もなされている。 In the display of the radial menu in FIG. 6 (A), the items (major items) included in the mth layer (m is a natural number of 1 or more) of the menu includeitem 1 "AIR CONTRO" and "SMART PHONE". Item 2 (including sub-item 2-1 called "TEL (telephone)" and sub-item 2-2 called "MAIL (mail)") anditem 3 "FUEL METER (fuel meter)" Anditem 4 called "AUDIO (audio)" are provided. In addition, in theitem 1 of "AIR CONTROL (air conditioning)", "28 ° C." indicating the current temperature inside the vehicle is also displayed.

図６（Ａ）では、ポインタ（指針）５０２が、「ＡＩＲ ＣＯＮＴＲＯＬ（空調）」という項目１を指しており、この状態で、選択装置２００を用いた選択操作がなされることで、項目１が選択される。この結果、図６（Ｂ）のようなメニュー画像が表示される。 In FIG. 6 (A), the pointer (pointer) 502 points to theitem 1 "AIR CONTROLL", and in this state, the selection operation using theselection device 200 is performed to change theitem 1. Be selected. As a result, the menu image as shown in FIG. 6B is displayed.

図６（Ｂ）において、領域ＺＮ２（図６（Ａ）の項目１が表示されていた領域ＺＮ１に対応する領域である）において、選択履歴表示としての項目１と、エア吹出口を選択するための、「ＲＥＡＲ（後方）」という項目１－２と、「ＦＲＯＮＴ（前方）」という項目１－３とが配置されている。 In FIG. 6B, in order to select theitem 1 as the selection history display and the air outlet in the area ZN2 (the area corresponding to the area ZN1 in which theitem 1 in FIG. 6A is displayed). The item 1-2 of "REAR (rear)" and the item 1-3 of "FRONT (front)" are arranged.

領域ＺＮ２に隣接して、先に説明したショートカット用項目としての項目２、４が配置されている。Items 2 and 4 as shortcut items described above are arranged adjacent to the area ZN2.

また、項目２を起点として、時計回りに、ＡＵＴＯ（温度、風量、吹出口の自動設定
）という項目１－４と、フロントガラス用のデフロスターを示すアイコンによる項目１－６と、リアガラス用のくもり取り（デフォッガー）を示すアイコンによる項目１－７と、外気導入を示すアイコンによる項目１－８と、空気の内部循環を示すアイコンによる項目１－９とが、順に配置されている。Also, starting fromitem 2, in a clockwise direction, item 1-4 called AUTO (automatic setting of temperature, air volume, and air outlet), item 1-6 with an icon indicating the defroster for the windshield, and cloudiness for the rear glass. Items 1-7 with an icon indicating the windshield (defogger), item 1-8 with an icon indicating the introduction of outside air, and item 1-9 with an icon indicating the internal circulation of air are arranged in order.

図６（Ｂ）にて、ＲＥＡＲ（後方）という項目１－２が選択されると、図６（Ｃ）のようなメニューが表示される。図６（Ｃ）では、領域ＺＮ３（領域ＺＮ１、ＺＮ２に対応する領域）に、選択履歴を示す項目１－１、設定温度を示す項目１－１－１、１－１－２が配置され、項目１－１－２を起点として、時計回りに、設定温度を示す項目１－１－３～１－１－７が配置される。また、項目１－１－７に隣接して、次の階層を表示するためのＮＥＸＴという項目１－１－８が配置されている。また、項目１－１と項目１－１－８に挟まれて、リターンキー（リターン用項目）１－１－９が配置されている。 When the item 1-2 called REAR (rear) is selected in FIG. 6 (B), a menu as shown in FIG. 6 (C) is displayed. In FIG. 6C, items 1-1 indicating the selection history and items 1-1-1 and 1-1-2 indicating the set temperature are arranged in the area ZN3 (the area corresponding to the areas ZN1 and ZN2). Starting from item 1-1-2, items 1-1-3 to 1-1-7 indicating the set temperature are arranged clockwise. Further, an item 1-1-8 called NEXT for displaying the next layer is arranged adjacent to the item 1-1-7. Further, a return key (return item) 1-1-9 is arranged between the item 1-1 and the item 1-1-8.

特に、図６（Ｂ）のメニューは情報量が豊富で、全体の項目の配置等を理解するためには、やや時間がかかる場合があり得る。この点を考慮して、図７の例では、図６（Ｂ）のメニューについての、内容案内画像の表示を可能とする。 In particular, the menu of FIG. 6B has abundant information, and it may take some time to understand the arrangement of all items. In consideration of this point, in the example of FIG. 7, it is possible to display the content guidance image for the menu of FIG. 6 (B).

図７（Ａ）～図７（Ｃ）は、ラジアルメニューにおける第１階層、次階層の内容案内表示（強調表示）、及び第２階層の表示の一例を示す図である。 7 (A) to 7 (C) are diagrams showing an example of the content guidance display (highlighting) of the first layer, the next layer, and the display of the second layer in the radial menu.

図７（Ａ）は、図６（Ａ）と同じである。図７（Ａ）において、ポインタ（指針５０２）によって項目１が所定時間以上、ポインティングされると、図７（Ｂ）のような、項目１についての内容案内がなされたメニュー（内容案内付のメニュー）が表示される。図７（Ｂ）では、内容案内画像は、拡張された領域ＺＮ１’（図７（Ａ）の領域ＺＮ１に対応する領域）に配置（表示）される。 FIG. 7 (A) is the same as FIG. 6 (A). In FIG. 7A, when theitem 1 is pointed by the pointer (pointer 502) for a predetermined time or longer, a menu (menu with content guidance) for which the content guidance for theitem 1 is provided as shown in FIG. 7B is provided. ) Is displayed. In FIG. 7B, the content guidance image is arranged (displayed) in the expanded region ZN1'(region corresponding to the region ZN1 in FIG. 7A).

また、図７（Ｂ）の例では、内容案内画像には、図７（Ａ）で項目１が選択されたならば表示される項目（先に説明した図６（Ｂ）、あるいは図７（Ｃ）を参照。なお、図７（Ｃ）の内容は、実質的に図６（Ｂ）と同じである）の全部（但し、図６（Ｂ）や図７（Ｃ）におけるショートカット用項目２、４は除く）が表示されている。 Further, in the example of FIG. 7 (B), in the content guidance image, the item displayed if theitem 1 is selected in FIG. 7 (A) (FIG. 6 (B) described above, or FIG. 7 (A). Refer to C). The contents of FIG. 7 (C) are substantially the same as those of FIG. 6 (B)) (however, theshortcut item 2 in FIGS. 6 (B) and 7 (C)). 4 is excluded) is displayed.

ここで、図７（Ｃ）に示されるように、ＲＥＡＲという項目１－２、ＦＲＯＮＴという項目１－３は、「空気吹出口の選択」という区分Ｒ１に区分（分類）され、ＡＵＴＯという項目１－４は、「自動設定」という区分Ｒ２に区分（分類）され、フロントガラス用のデフロスターを示すアイコンによる項目１－６、リアガラス用のくもり取り（デフォッガー）を示すアイコンによる項目１－７は「くもり取り」という区分Ｒ３に区分（分類）され、外気導入を示すアイコンによる項目１－８、空気の内部循環を示すアイコンによる項目１－９は、「風の流れ調整」という区分Ｒ４に区分（分類）される。 Here, as shown in FIG. 7 (C), the item 1-2 of REAR and the item 1-3 of FRONT are classified (classified) into the category R1 of "selection of air outlet", and theitem 1 of AUTO. -4 is classified (classified) into the category R2 called "automatic setting", and item 1-6 with the icon indicating the defroster for the windshield and item 1-7 with the icon indicating the cloud removal (defogger) for the rear glass are ". Items 1-8 by the icon indicating the introduction of outside air and items 1-9 by the icon indicating the internal circulation of the air are classified (classified) into the category R3 called "cloud removal" and classified into the category R4 called "wind flow adjustment". being classified.

よって、図７（Ｂ）の内容案内画像では、図７（Ｃ）における区分毎に、かつ、各区分の配置順（ここでは、指針５０２の移動方向である時計回りでの配置順）に従って、項目を配置している。よって、ユーザーは、図７（Ｂ）の内容案内画像を見ることで、図７（Ｃ）のような項目の配置を、容易に予測することができる。よって、図７（Ｃ）のメニューに移行したときに、メニュー全体の把握に要する時間が短縮され、また、誤った選択や錯誤による選択がなされる可能性も低減される。 Therefore, in the content guidance image of FIG. 7B, each division in FIG. 7C and according to the arrangement order of each division (here, the arrangement order in the clockwise direction which is the moving direction of the pointer 502). Items are arranged. Therefore, the user can easily predict the arrangement of the items as shown in FIG. 7 (C) by looking at the content guide image of FIG. 7 (B). Therefore, when the menu is shifted to the menu of FIG. 7C, the time required for grasping the entire menu is shortened, and the possibility of making an erroneous selection or making a selection by mistake is also reduced.

なお、図７（Ｂ）の内容案内表示では、図７（Ｃ）で表示される項目をそのまま示しているが、上記の区分Ｒ１～Ｒ４を、例えば、文字等で表示して、次階層の項目の内容（概要や概略）を示してもよい。区分毎に表示する形式とすることで、例えば、ユーザーの視覚的な負担を軽減しつつ、わかり易く示すことができ、使い勝手が良い車両用メニューを実現することができる。 In the content guidance display of FIG. 7B, the items displayed in FIG. 7C are shown as they are, but the above categories R1 to R4 are displayed by, for example, characters, and the next layer is displayed. The contents (outline or outline) of the item may be shown. By displaying each category, for example, it is possible to reduce the visual burden on the user and to show it in an easy-to-understand manner, and it is possible to realize a user-friendly vehicle menu.

次に、図８を参照する。図８（Ａ）～図８（Ｅ）は、ラジアルメニューにおける第１階層、次階層の内容案内表示（強調表示）、及び第２階層の表示の他の例（応用例）を示す図である。 Next, refer to FIG. 8 (A) to 8 (E) are diagrams showing other examples (application examples) of the content guidance display (highlighting) of the first layer, the next layer, and the display of the second layer in the radial menu. ..

第８の例では、内容案内画像に、次階層のメニューに含まれる項目の絞り込みの機能をもたせることによって、項目選択の効率をさらに向上させる。 In the eighth example, the efficiency of item selection is further improved by giving the content guidance image a function of narrowing down the items included in the menu of the next layer.

例えば、図８（Ａ）において、内容案内画像の内の、「ＲＥＡＲ、ＦＲＯＮＴ」という項目がポインタ５０２によってポインティングされた（指された）状態で、選択装置２００による選択操作がなされたときは、次階層のメニューとして、図８（Ｂ）に示すような「ＲＥＡＲ、ＦＲＯＮＴ」に関係する項目のみのメニュー（あるいは、それらの項目を主体とするメニュー）の表示がなされる。言い換えれば、項目の数が絞り込まれたメニュー表示がなされる。 For example, in FIG. 8A, when the selection operation is performed by theselection device 200 while the item "REAR, FRONT" in the content guidance image is pointed (pointed to) by thepointer 502. As the menu of the next layer, a menu of only items related to "REAR, FRONT" as shown in FIG. 8B (or a menu mainly composed of those items) is displayed. In other words, the menu display is narrowed down to the number of items.

また、図８（Ａ）にて、「ＡＵＴＯ」という項目がポインタ５０２によってポインティングされた状態で、選択装置２００による選択操作がなされると、次階層のメニューとして、図８（Ｃ）のような、「ＡＵＴＯ」に関連する項目のみのメニュー（あるいは、それらの項目を主体とするメニュー）の表示がなされる。 Further, in FIG. 8A, when the selection operation is performed by theselection device 200 with the item "AUTO" pointed by thepointer 502, the menu of the next layer is as shown in FIG. 8C. , A menu of only items related to "AUTO" (or a menu mainly composed of those items) is displayed.

同様に、図８（Ａ）にて、「フロントガラス用デフロスター、リアガラス用デフォッガー」という項目がポインタ５０２によってポインティングされた状態で、選択装置２００による選択操作がなされると、次階層のメニューとして、図８（Ｄ）のようなメニューが表示される。また、図８（Ａ）にて、「外気導入、内部循環」という項目がポインタ５０２によってポインティングされた状態で、選択装置２００による選択操作がなされると、次階層のメニューとして、図８（Ｅ）のようなメニューが表示される。 Similarly, in FIG. 8A, when the selection operation is performed by theselection device 200 with the item "windshield defroster, rear glass defogger" pointed by thepointer 502, the menu of the next layer is displayed. A menu as shown in FIG. 8D is displayed. Further, in FIG. 8A, when the selection operation is performed by theselection device 200 while the item “outside air introduction, internal circulation” is pointed by thepointer 502, FIG. 8 (E) is displayed as a menu of the next layer. ) Is displayed.

このように、内容案内画像において、どの項目がポインティングされているかに応じて、次階層のメニューで表示する項目の絞り込みを行う（言い換えれば、表示する項目数を減少させる）ことで、次階層のメニューにおいて、ユーザーが必要としない項目が表示されなくなり、項目数が絞り込まれて項目数が減ることから、例えば、１つの項目の表示領域を大きくとることができる。 In this way, by narrowing down the items to be displayed in the menu of the next layer (in other words, reducing the number of items to be displayed) according to which item is pointed in the content guidance image, the item of the next layer is displayed. In the menu, items that the user does not need are not displayed, the number of items is narrowed down, and the number of items is reduced. Therefore, for example, the display area of one item can be made large.

したがって、例えば、本来の項目の内容に加えて、項目の内容の理解に役立つ情報等を付加することも可能となる。例えば、図８（Ｂ）では、現在の温度を示す「２８℃」という温度情報の表記が付加されており、図８（Ｃ）では「ＡＵＴＯ」の意味が文字にて解説されており、図８（Ｃ）では、各アイコンの機能をわかり易くするための「ＦＲＯＮＴ」、「ＲＥＡＲ」という表示が付加されており、図８（Ｄ）では、各アイコンの機能をわかり易くするための「外気導入」、「内部循環」という説明表示が付加されている。よって、メニュー選択における利便性が、さらに向上する。 Therefore, for example, in addition to the original content of the item, it is possible to add information or the like useful for understanding the content of the item. For example, in FIG. 8 (B), the notation of temperature information "28 ° C." indicating the current temperature is added, and in FIG. 8 (C), the meaning of "AUTO" is explained in characters. In 8 (C), the indications "FRONT" and "REAR" are added to make the function of each icon easy to understand, and in FIG. 8 (D), "outside air introduction" to make the function of each icon easy to understand. , "Internal circulation" is added. Therefore, the convenience in menu selection is further improved.

以上説明したように、本発明によれば、内容案内画像の表示を可能とすることにより、次階層のメニューを表示したときに、ユーザーが、全体の内容の把握等のために時間を要することによる、項目選択の非効率性を改善することができる。 As described above, according to the present invention, by enabling the display of the content guidance image, it takes time for the user to grasp the entire content when the menu of the next layer is displayed. Therefore, the inefficiency of item selection can be improved.

これによって、ユーザーに煩わしさを感じさせることがなくなり、メニュー選択の利便性を向上させることができる。従って、使い勝手に優れた車載機器操作システムを実現することができる。 As a result, the user does not feel annoyed, and the convenience of menu selection can be improved. Therefore, it is possible to realize an in-vehicle device operation system having excellent usability.

なお、本明細書において、車両とは、例えば自動車、電車、飛行機、船舶等の「乗り物」を示す用語として広義に解釈し、又、メニューという用語も、例えば「複数の選択肢を含む表示」というように、広義に解釈するものとする。 In the present specification, the term "vehicle" is broadly interpreted as a term indicating a "vehicle" such as an automobile, a train, an airplane, or a ship, and the term "menu" is also referred to as, for example, "a display including a plurality of options". It shall be interpreted in a broad sense.

本発明は、上述の例示的な実施形態に限定されず、また、当業者は、上述の例示的な実施形態を特許請求の範囲に含まれる範囲まで、容易に変更することができるであろう。 The present invention is not limited to the above-mentioned exemplary embodiments, and those skilled in the art will be able to easily modify the above-mentioned exemplary embodiments to the extent included in the claims. ..

１・・・車両、１０・・・表示装置、２０・・・制御装置、２１・・・表示制御装置（車両用メニュー表示制御装置）、２２・・・メニュー画像生成部、２４・・・・メニュー表示処理部、２６・・・処理実行装置、３０・・・入出力Ｉ／Ｆ（入出力インターフェース）、４０、５０・・・・信号インターフェース（信号Ｉ／Ｆ）、２００・・・選択装置（入力装置、操作装置、車両用ポインティングデバイス）、２１０・・・（円環状の）操作位置検出部、２１１ａ・・・円の円周に沿って連続的に形成された凸部（凸領域）、３０２・・・音声検出部、５００・・・ラジアルメニュー、５０１・・・ＨＵＤ装置、５０２・・・ポインタ（指針）、６００・・・項目判定部、６１０・・・最終選択判定部、６１２・・・タイマー、６１４・・・内容案内表示要否判定部、６２０・・・制御処理部、６２１・・・強調表示項目（内容案内表示用項目）の数・サイズ調整部、６４０・・・表示形式（表示態様）決定部、６４２・・・内容案内情報記憶部、６４３・・・表示可能領域情報取得部、６５０・・・画像生成処理部、Ｗ（Ｗ’）・・・内容案内付のメニュー（メニュー画像）、ＧＤ（ＧＤ’）・・・内容案内画像。 1 ... Vehicle, 10 ... Display device, 20 ... Control device, 21 ... Display control device (menu display control device for vehicle), 22 ... Menu image generator, 24 ... Menu display processing unit, 26 ... processing execution device, 30 ... input / output I / F (input / output interface), 40, 50 ... signal interface (signal I / F), 200 ... selection device (Input device, operation device, pointing device for vehicle), 210 ... (annular) operation position detection unit, 211a ... Convex portion (convex region) continuously formed along the circumference of the circle. , 302 ... Voice detection unit, 500 ... Radial menu, 501 ... HUD device, 502 ... Pointer (pointer), 600 ... Item determination unit, 610 ... Final selection determination unit, 612 ... Timer, 614 ... Content guidance display necessity judgment unit, 620 ... Control processing unit, 621 ... Number / size adjustment unit of highlight display items (content guidance display items), 640 ... Display format (display mode) determination unit, 642 ... content guidance information storage unit, 643 ... displayable area information acquisition unit, 650 ... image generation processing unit, W (W') ... with content guidance Menu (menu image), GD (GD') ... Content guidance image.

Claims (9)

Translated fromJapanese

階層構造を有するメニューの表示を制御する車両用メニュー表示制御装置と、前記メニューを表示する表示装置と、ポインタの位置を示す位置信号及び前記メニューに含まれる項目を選択するための選択信号を、ユーザーのポインタ移動動作及び選択動作に応じて発生させる選択装置と、前記ユーザーによって最終的に選択された項目に対応する、車載機器の操作処理を実行する処理実行装置と、を有する車載機器操作システムに用いられる前記車両用メニュー表示制御装置であって、
前記メニューの画像の生成を制御する制御処理部と、前記制御処理部の制御の下で前記メニューの画像を生成する画像生成処理部と、を有するメニュー画像生成部と、
生成されたメニュー画像の表示処理を行う表示処理部と、
を有し、
前記メニュー画像生成部における前記制御処理部は、
前記ポインタが、第ｍ階層（ｍは１以上の自然数）のメニュー画像に含まれる１つの項目に合わされた状態で所定時間が経過したことが、前記位置信号に基づいて検出された場合、前記１つの項目が選択されたならば表示される第（ｍ＋１）階層のメニューの内容を案内する内容案内画像が、前記１つの項目の表示領域、又は、前記１つの項目の表示領域に基づく拡張された表示領域に配置されてなる内容案内付のメニュー画像を生成させ、
前記第（ｍ＋１）階層のメニューの画像には、ショートカット用項目としての、前記第ｍ階層において、前記１つの項目に隣接して配置されていた項目が含まれる、
ことを特徴とする車両用メニュー表示制御装置。A vehicle menu display control device that controls the display of a menu having a hierarchical structure, a display device that displays the menu, a position signal indicating the position of a pointer, and a selection signal for selecting an item included in the menu. An in-vehicle device operation system including a selection device generated in response to a user's pointer movement operation and selection operation, and a processing execution device that executes operation processing of the in-vehicle device corresponding to the item finally selected by the user. The vehicle menu display control device used in the above.
A menu image generation unit having a control processing unit that controls the generation of an image of the menu, an image generation processing unit that generates an image of the menu under the control of the control processing unit, and a menu image generation unit.
A display processing unit that performs display processing of the generated menu image,
Have,
The control processing unit in the menu image generation unit is
When it is detected based on the position signal that a predetermined time has elapsed with the pointer aligned with one item included in the menu image of the m-th layer (m is a natural number of 1 or more), the above 1 The content guidance image that guides the contents of the menu of the first (m + 1) layer that is displayed when one item is selected is expanded based on the display area of the one item or the display area of the one item. Generate a menu image with content guidance arranged in the display area,
The image of the menu of the first (m + 1) layer includes an item arranged adjacent to the one item in the mth layer as a shortcut item .
A vehicle menu display control device characterized by this. 前記制御処理部は、
前記内容案内付のメニュー画像を表示中に、前記ポインタが、前記内容案内画像を外れて、前記第ｍ階層のメニュー画像における、前記１つの項目以外の項目に合わされたことが、前記位置信号に基づいて検出された場合、前記内容案内付のメニュー画像に代えて、前記第ｍ階層のメニュー画像を生成させる、
ことを特徴とする、請求項１に記載の車両用メニュー表示制御装置。The control processing unit
While displaying the menu image with the content guide, the position signal indicates that the pointer deviates from the content guide image and is aligned with an item other than the one item in the menu image of the mth layer. If it is detected based on the above, the menu image of the mth layer is generated instead of the menu image with the content guidance.
The vehicle menu display control device according to claim 1. 前記制御処理部は、
前記内容案内画像にポインタが合わされた状態で、前記ユーザーによって選択操作が行われたことが前記選択信号に基づいて検出されると、第（ｍ＋１）階層のメニュー画像を生成させる、
ことを特徴とする、請求項１又は２に記載の車両用メニュー表示制御装置。The control processing unit
When it is detected based on the selection signal that the selection operation is performed by the user while the pointer is placed on the content guidance image, a menu image of the first (m + 1) layer is generated.
The vehicle menu display control device according to claim 1 or 2, characterized in that. 前記内容案内画像に含まれる項目には、
前記第（ｍ＋１）階層のメニューに含まれる項目の全部又は一部、
又は、前記第（ｍ＋１）階層のメニューに含まれる複数の項目の内の、種別毎の代表項目、
又は、前記第（ｍ＋１）階層のメニューに含まれる複数の項目についての説明の項目、又は、種別毎の区分の項目、
が含まれることを特徴とする、請求項１乃至３の何れか１項に記載の車両用メニュー表示制御装置。Items included in the content guidance image include
All or part of the items included in the menu of the first (m + 1) layer,
Or, a representative item for each type among a plurality of items included in the menu of the first (m + 1) layer.
Or, an item for explaining a plurality of items included in the menu of the first (m + 1) layer, or an item for each type.
The vehicle menu display control device according to any one of claims 1 to 3, wherein the vehicle menu display control device is included. 前記制御処理部は、
前記選択信号によって、前記内容案内画像に含まれる項目が選択されて、前記第（ｍ＋１）階層のメニュー画像を生成させる際、
前記第（ｍ＋１）階層のメニュー画像に含まれる本来の項目の数がｎ個（ｎは２以上の
自然数）である場合、前記ｎ個の項目を、前記内容案内画像にて選択された項目に関連するｊ個の項目（ｊは、ｊ＜ｎを満たす自然数）に絞り込み、その絞り込まれた項目を前記第（ｍ＋１）階層のメニュー画像に含ませる、
ことを特徴とする、請求項３に記載の車両用メニュー表示制御装置。The control processing unit
When the item included in the content guidance image is selected by the selection signal and the menu image of the first (m + 1) layer is generated.
When the number of original items included in the menu image of the (m + 1) layer is n (n is a natural number of 2 or more), the n items are set to the items selected in the content guide image. Narrow down to j related items (j is a natural number satisfying j <n), and include the narrowed down items in the menu image of the first (m + 1) layer.
The vehicle menu display control device according to claim 3, characterized in that. 階層構造を有するメニューの表示を制御する車両用メニュー表示制御装置と、前記メニューを表示する表示装置と、ポインタの位置を示す位置信号及び前記メニューに含まれる項目を選択するための選択信号を、ユーザーのポインタ移動動作及び選択動作に応じて発生させる選択装置と、前記ユーザーによって最終的に選択された項目に対応する、車載機器の操作処理を実行する処理実行装置と、を有する車載機器操作システムに用いられる前記車両用メニュー表示制御装置であって、
前記メニューの画像の生成を制御する制御処理部と、前記制御処理部の制御の下で前記メニューの画像を生成する画像生成処理部と、を有するメニュー画像生成部と、
生成されたメニュー画像の表示処理を行う表示処理部と、
を有し、
前記メニュー画像生成部における前記制御処理部は、
前記ポインタが、第ｍ階層（ｍは１以上の自然数）のメニュー画像に含まれる１つの項目に合わされた状態で所定時間が経過したことが、前記位置信号に基づいて検出された場合、前記１つの項目が選択されたならば表示される第（ｍ＋１）階層のメニューの内容を案内する内容案内画像が、前記１つの項目の表示領域、又は、前記１つの項目の表示領域に基づく拡張された表示領域に配置されてなる内容案内付のメニュー画像を生成させ、
前記内容案内画像にポインタが合わされた状態で、前記ユーザーによって選択操作が行われたことが前記選択信号に基づいて検出されると、第（ｍ＋１）階層のメニュー画像を生成させ、
前記選択信号によって、前記内容案内画像に含まれる項目が選択されて、前記第（ｍ＋１）階層のメニュー画像を生成させる際、
前記第（ｍ＋１）階層のメニュー画像に含まれる本来の項目の数がｎ個（ｎは２以上の
自然数）である場合、前記ｎ個の項目を、前記内容案内画像にて選択された項目に関連するｊ個の項目（ｊは、ｊ＜ｎを満たす自然数）に絞り込み、その絞り込まれた項目を前記第（ｍ＋１）階層のメニュー画像に含ませる、
ことを特徴とする車両用メニュー表示制御装置。A vehicle menu display control device that controls the display of a menu having a hierarchical structure, a display device that displays the menu, a position signal indicating the position of a pointer, and a selection signal for selecting an item included in the menu. An in-vehicle device operation system including a selection device generated in response to a user's pointer movement operation and selection operation, and a processing execution device that executes operation processing of the in-vehicle device corresponding to the item finally selected by the user. The vehicle menu display control device used in the above.
A menu image generation unit having a control processing unit that controls the generation of an image of the menu, an image generation processing unit that generates an image of the menu under the control of the control processing unit, and a menu image generation unit.
A display processing unit that performs display processing of the generated menu image,
Have,
The control processing unit in the menu image generation unit is
When it is detected based on the position signal that a predetermined time has elapsed with the pointer aligned with one item included in the menu image of the mth layer (m is a natural number of 1 or more), the 1 The content guidance image that guides the contents of the menu of the first (m + 1) layer that is displayed when one item is selected is expanded based on the display area of the one item or the display area of the one item. Generate a menu image with content guidance arranged in the display area,
When it is detected based on the selection signal that the selection operation is performed by the user while the pointer is placed on the content guidance image, a menu image of the first (m + 1) layer is generated.
When the item included in the content guidance image is selected by the selection signal and the menu image of the first (m + 1) layer is generated.
The number of original items included in the menu image of the first (m + 1) layer is n (n is 2 or more).
In the case of (natural number), the n items are narrowed down to j items related to the items selected in the content guidance image (j is a natural number satisfying j <n), and the narrowed down items are selected. Included in the menu image of the first (m + 1) layer ,
A vehicle menu display control device characterized by this. 前記メニュー画像生成部における前記画像生成処理部が生成する前記メニューの画像は、原点を有し、前記原点から外側に向かう複数の放射状の直線によって、前記メニューの表示領域が区画されてなるラジアルメニューの画像である、ことを特徴とする、請求項１乃至６の何れか１項に記載の車両用メニュー表示制御装置。 The image of the menu generated by the image generation processing unit in the menu image generation unit has an origin, and the display area of the menu is divided by a plurality of radial straight lines extending outward from the origin. The vehicle menu display control device according to any one of claims 1 to 6, wherein the image is. 請求項１乃至７の何れか１項に記載の車両用メニュー表示制御装置と、
メニューを表示する表示装置と、
ポインタの位置を示す位置信号及び前記メニューに含まれる項目を選択するための選択信号を、ユーザーのポインタ移動動作及び選択動作に応じて発生させる選択装置と、
前記ユーザーによって最終的に選択された項目に対応する、車載機器の操作処理を実行する処理実行装置と、
を有する車載機器操作システム。The vehicle menu display control device according to any one of claims 1 to 7.
A display device that displays menus and
A selection device that generates a position signal indicating the position of the pointer and a selection signal for selecting an item included in the menu according to the pointer movement operation and the selection operation of the user.
A processing execution device that executes operation processing of the in-vehicle device corresponding to the item finally selected by the user, and
In-vehicle device operation system. コンピュータを、請求項１乃至７の何れか１項に記載の車両用メニュー表示制御装置として動作させる、ＧＵＩ（グラフィカルユーザーインターフェース）プログラム。 A GUI (Graphical User Interface) program that operates a computer as a vehicle menu display control device according to any one of claims 1 to 7.

Images