【０００１】[0001]
【発明の属する技術分野】本発明は、情報処理装置およ
び情報処理方法、記録媒体、並びにプログラムに関し、
特に、簡単な操作によってメニューを選択して各種コマ
ンドを入力することができるようにした情報処理装置お
よび情報処理方法、記録媒体、並びにプログラムに関す
る。TECHNICAL FIELD The present invention relates to an information processing apparatus and an information processing method, a recording medium, and a program,
In particular, the present invention relates to an information processing apparatus and an information processing method, a recording medium, and a program that enable selection of a menu and input of various commands by a simple operation.
【０００２】[0002]
【従来の技術】従来、例えばパーソナルコンピュータに
おいて、ユーザがメニューの選択を行うための操作を入
力する場合、マウス、もしくは、タッチパッドなどの入
力デバイスを用いて表示画面に表示されているカーソル
を移動させ、図１に示されるように、ウィンドウ１のツ
ールバー２に表示されている項目から、所望の項目を選
択することにより、メニュー１１を表示させて、ユーザ
が所望するメニューを選択する。ユーザが意図する操作
の内容によっては、メニュー１１のみならず、更にサブ
メニュー１２およびサードメニュー１３を表示させて、
更にカーソルを移動させるための操作入力を行う必要が
あった。2. Description of the Related Art Conventionally, in a personal computer, for example, when a user inputs an operation for selecting a menu, a cursor displayed on a display screen is moved using a mouse or an input device such as a touch pad. Then, as shown in FIG. 1, by selecting a desired item from the items displayed on the toolbar 2 of the window 1, the menu 11 is displayed and the user selects the desired menu. Depending on the content of the operation intended by the user, not only the menu 11 but also the sub menu 12 and the third menu 13 are displayed,
Furthermore, it was necessary to perform an operation input for moving the cursor.
【０００３】[0003]
【発明が解決しようとする課題】例えば、ユーザが意図
するコマンドがサードメニュー１３に表示されている場
合、ユーザは、マウス、あるいはタッチパッドなどの入
力デバイスを用いて、カーソルを移動させ、図中矢印に
示されるように、表示されるメニュー１１、サブメニュ
ー１２、およびサードメニュー１３に表示されているそ
れぞれの項目の表示位置に対応させて、複雑な操作（例
えば、カーソルを移動させるために、マウスを正しい位
置に移動させる操作）を行う必要があった。For example, when the command intended by the user is displayed on the third menu 13, the user moves the cursor using an input device such as a mouse or a touch pad, As shown by the arrow, a complicated operation (for example, in order to move the cursor, corresponding to the display position of each item displayed in the displayed menu 11, submenu 12, and third menu 13), It was necessary to move the mouse to the correct position).
【０００４】これらの操作入力は、マウスやタッチパッ
ドの操作になれていないユーザや、小さな表示画面を有
するパーソナルコンピュータ、あるいはＰＤＡなどの装
置を利用するユーザにとっては、特に困難である。These operation inputs are particularly difficult for a user who is not operating a mouse or a touch pad, or a user who uses a personal computer having a small display screen or a device such as a PDA.
【０００５】本発明はこのような状況に鑑みてなされた
ものであり、簡単な操作によってメニューを選択して各
種コマンドを入力することができるようにするものであ
る。The present invention has been made in view of the above circumstances, and it is possible to select a menu and input various commands by a simple operation.
【０００６】[0006]
【課題を解決するための手段】本発明の情報処理装置
は、ユーザの操作入力を２次元の方向情報として取得す
る方向情報取得手段と、それぞれが所定の方向と対応付
けられた複数のメニューを記憶する第１の記憶手段と、
方向情報取得手段により取得された方向情報に基づい
て、第１の記憶手段により記憶された複数のメニューの
うちの１つを選択する選択手段と、選択手段により選択
されたメニューを実行する実行手段とを備えることを特
徴とする。The information processing apparatus of the present invention comprises a direction information acquisition means for acquiring a user's operation input as two-dimensional direction information, and a plurality of menus each associated with a predetermined direction. First storage means for storing,
Selection means for selecting one of the plurality of menus stored in the first storage means based on the direction information acquired by the direction information acquisition means, and execution means for executing the menu selected by the selection means. And is provided.
【０００７】記憶手段により記憶された複数のメニュー
を、それぞれのメニューが対応付けられている所定の方
向と関連付けて表示する表示手段を更に備えさせるよう
にすることができる。It is possible to further include display means for displaying the plurality of menus stored by the storage means in association with a predetermined direction to which each menu is associated.
【０００８】ユーザの操作入力から速度情報を取得する
速度情報取得手段と、速度情報取得手段により取得され
た速度情報を数値に変換する変換手段とを更に備えさせ
るようにすることができ、実行手段には、変換手段によ
り変換されて得られた数値を基に、メニューを実行させ
るようにすることができる。It is possible to further include speed information acquisition means for acquiring speed information from a user's operation input, and conversion means for converting the speed information acquired by the speed information acquisition means into a numerical value. The menu can be executed based on the numerical value obtained by the conversion by the conversion means.
【０００９】変換手段により変換されて得られた数値を
表示する表示手段を更に備えさせるようにすることがで
きる。It is possible to further include display means for displaying a numerical value obtained by conversion by the conversion means.
【００１０】ユーザの操作入力から時間情報を取得する
時間情報取得手段と、時間情報取得手段により取得され
た時間情報を数値に変換する変換手段とを更に備えさせ
るようにすることができ、実行手段には、変換手段によ
り変換されて得られた数値を基に、メニューを実行させ
るようにすることができる。It is possible to further include a time information acquisition means for acquiring time information from a user's operation input, and a conversion means for converting the time information acquired by the time information acquisition means into a numerical value. The menu can be executed based on the numerical value obtained by the conversion by the conversion means.
【００１１】変換手段により変換されて得られた数値を
表示する表示手段を更に備えさせるようにすることがで
きる。It is possible to further include display means for displaying a numerical value obtained by conversion by the conversion means.
【００１２】ユーザの操作入力を２次元に取得し、その
移動距離を取得する距離情報取得手段と、距離情報取得
手段により取得された移動距離を数値に変換する変換手
段とを更に備えさせるようにすることができ、実行手段
には、変換手段により変換されて得られた数値を基に、
メニューを実行させるようにすることができる。[0012] It further comprises a distance information acquisition means for acquiring a user's operation input in two dimensions and a movement distance thereof, and a conversion means for converting the movement distance acquired by the distance information acquisition means into a numerical value. The execution means can be based on the numerical value obtained by conversion by the conversion means,
The menu can be executed.
【００１３】変換手段により変換されて得られた数値を
表示する表示手段を更に備えさせるようにすることがで
きる。It is possible to further include display means for displaying a numerical value obtained by conversion by the conversion means.
【００１４】方向情報取得手段により取得された方向情
報を記憶する第２の記憶手段を更に備えさせるようにす
ることができ、第１の記憶手段には、それぞれが所定の
方向と対応付けられた複数のメニューからなるメニュー
群を階層的に記憶させるようにすることができ、選択手
段には、ユーザの操作入力が所定の時間行われなかった
場合、第２の記憶手段によって記憶された少なくとも１
つの方向情報と、第１の記憶手段によって記憶されたメ
ニュー群を基に、複数のメニューのうちの１つを選択さ
せるようにすることができる。A second storage means for storing the direction information acquired by the direction information acquisition means may be further provided, and each of the first storage means is associated with a predetermined direction. A menu group composed of a plurality of menus can be stored hierarchically, and the selection means stores at least one stored in the second storage means when a user's operation input is not performed for a predetermined time.
One of the plurality of menus can be selected based on the one direction information and the menu group stored by the first storage means.
【００１５】本発明の情報処理方法は、ユーザの操作入
力を２次元の方向情報として取得する方向情報取得ステ
ップと、それぞれが所定の方向と対応付けられた複数の
メニューの記憶を制御する記憶制御ステップと、方向情
報取得ステップの処理により取得された方向情報に基づ
いて、記憶制御ステップの処理により記憶が制御された
複数のメニューのうちの１つを選択する選択ステップ
と、選択ステップの処理により選択されたメニューを実
行する実行ステップとを含むことを特徴とする。According to the information processing method of the present invention, a direction information acquisition step of acquiring a user's operation input as two-dimensional direction information, and a storage control for controlling storage of a plurality of menus each associated with a predetermined direction. A selection step of selecting one of a plurality of menus whose storage is controlled by the processing of the storage control step, based on the direction information acquired by the processing of the step and the direction information acquisition step, and the processing of the selection step And an execution step of executing the selected menu.
【００１６】本発明の記録媒体に記録されているプログ
ラムは、ユーザの操作入力を２次元の方向情報として取
得する方向情報取得ステップと、それぞれが所定の方向
と対応付けられた複数のメニューの記憶を制御する記憶
制御ステップと、方向情報取得ステップの処理により取
得された方向情報に基づいて、記憶制御ステップの処理
により記憶が制御された複数のメニューのうちの１つを
選択する選択ステップと、選択ステップの処理により選
択されたメニューを実行する実行ステップとを含むこと
を特徴とする。The program recorded on the recording medium of the present invention includes a direction information acquisition step for acquiring a user's operation input as two-dimensional direction information, and a storage of a plurality of menus each associated with a predetermined direction. A storage control step for controlling the storage device, and a selection step for selecting one of a plurality of menus whose storage is controlled by the processing of the storage control step, based on the direction information acquired by the processing of the direction information acquisition step, And an execution step of executing the menu selected by the processing of the selection step.
【００１７】本発明のプログラムは、ユーザの操作入力
を２次元の方向情報として取得する方向情報取得ステッ
プと、それぞれが所定の方向と対応付けられた複数のメ
ニューの記憶を制御する記憶制御ステップと、方向情報
取得ステップの処理により取得された方向情報に基づい
て、記憶制御ステップの処理により記憶が制御された複
数のメニューのうちの１つを選択する選択ステップと、
選択ステップの処理により選択されたメニューを実行す
る実行ステップとを含むことを特徴とする。The program of the present invention includes a direction information acquisition step of acquiring a user's operation input as two-dimensional direction information, and a storage control step of controlling storage of a plurality of menus each associated with a predetermined direction. A selection step of selecting one of a plurality of menus whose storage is controlled by the processing of the storage control step based on the direction information acquired by the processing of the direction information acquisition step,
And an execution step of executing the menu selected by the processing of the selection step.
【００１８】本発明の情報処理装置および情報処理方
法、並びにプログラムにおいては、ユーザの操作入力が
２次元の方向情報として取得され、それぞれが所定の方
向と対応付けられた複数のメニューが記憶され、取得さ
れた方向情報に基づいて、記憶された複数のメニューの
うちの１つが選択され、選択されたメニューが実行され
る。In the information processing apparatus, the information processing method, and the program of the present invention, a user's operation input is acquired as two-dimensional direction information, and a plurality of menus each associated with a predetermined direction are stored. One of the stored menus is selected based on the acquired direction information, and the selected menu is executed.
【００１９】[0019]
【発明の実施の形態】以下、図２に示されるような、例
えば、パーソナルコンピュータ２１、電子ブックプレー
ヤ２２、あるいは、ＰＤＡ２３など、ディスプレイやタ
ッチパネルなどの、テキストやグラフィックを表示可能
な表示部を有し、タッチパッドやタッチパネルなどの、
ユーザが２次元的な操作により各種指令を入力すること
ができる操作入力部を有する装置における、本発明の実
施の形態について説明する。BEST MODE FOR CARRYING OUT THE INVENTION Hereinafter, as shown in FIG. 2, for example, a display unit such as a personal computer 21, an electronic book player 22, a PDA 23, or the like, which has a display unit such as a display or a touch panel, can display text and graphics. , Such as touch pad and touch panel,
An embodiment of the present invention in an apparatus having an operation input unit through which a user can input various commands by two-dimensional operation will be described.
【００２０】図３は、図２のパーソナルコンピュータ２
１の構成を示すブロック図である。FIG. 3 shows the personal computer 2 of FIG.
2 is a block diagram showing a configuration of No. 1.
【００２１】CPU（Central Processing Unit）３１は、
入出力インターフェース３２および内部バス３３を介し
て、ユーザが、入力部３４を用いて入力した各種指令に
対応する信号や、ネットワークインターフェース４０を
介して、他のパーソナルコンピュータが送信した制御信
号の入力を受け、入力された信号に基づいた各種処理を
実行する。ROM（Read Only Memory）３５は、CPU３１が
使用するプログラムや演算用のパラメータのうちの基本
的に固定のデータを格納する。ＲＡＭ（RandomAccess M
emory）３６は、CPU３１の実行において使用するプログ
ラムや、その実行において適宜変化するパラメータを格
納する。CPU３１、ROM３５、およびＲＡＭ３６は、内部
バス３３により相互に接続されている。The CPU (Central Processing Unit) 31 is
Through the input / output interface 32 and the internal bus 33, the user inputs signals corresponding to various commands input using the input unit 34 and control signals transmitted from other personal computers via the network interface 40. It receives and executes various processes based on the input signal. A ROM (Read Only Memory) 35 stores basically fixed data of programs used by the CPU 31 and parameters for calculation. RAM (RandomAccess M
The emory) 36 stores programs used in the execution of the CPU 31 and parameters that change appropriately in the execution. The CPU 31, ROM 35, and RAM 36 are connected to each other by an internal bus 33.
【００２２】内部バス３３は、入出力インターフェース
３２とも接続されている。入力部３４は、例えば、キー
ボード、タッチパッド、ジョグダイヤル、あるいはマウ
スなどからなり、ユーザがCPU３１に各種の指令を入力
するとき操作される。表示部３７は、例えば、ＣＲＴ
（Cathode Ray Tube）や液晶表示装置などからなり、各
種情報をテキスト、あるいはイメージなどで表示する。The internal bus 33 is also connected to the input / output interface 32. The input unit 34 is, for example, a keyboard, a touch pad, a jog dial, a mouse, or the like, and is operated when the user inputs various commands to the CPU 31. The display unit 37 is, for example, a CRT.
It consists of a (Cathode Ray Tube) and a liquid crystal display device, and displays various information as text or images.
【００２３】ＨＤＤ（hard disk drive）３８は、ハー
ドディスクを駆動し、それらにCPU３１によって実行す
るプログラムや情報を記録または再生させる。ドライブ
３９には、必要に応じて磁気ディスク１４、光ディスク
１５、光磁気ディスク１６、および半導体メモリ１７が
装着され、データの授受を行う。An HDD (hard disk drive) 38 drives hard disks and causes them to record or reproduce programs and information executed by the CPU 31. The magnetic disk 14, the optical disk 15, the magneto-optical disk 16, and the semiconductor memory 17 are mounted on the drive 39 as necessary to exchange data.
【００２４】ネットワークインターフェース４０は、例
えば、電子ブックプレーヤ２２などと所定のケーブルを
用いて接続され、それらの機器との情報の授受を行った
り、インターネットを介してウェブサーバにアクセス
し、必要な情報を検索して、読み込んだり、新たなデー
タを登録したり、登録されているデータの更新を行う。The network interface 40 is connected to, for example, the electronic book player 22 or the like using a predetermined cable, exchanges information with these devices, and accesses a web server via the Internet to access necessary information. Search for, read, register new data, and update registered data.
【００２５】これらの入力部３４乃至ネットワークイン
ターフェース４０は、入出力インターフェース３２およ
び内部バス３３を介してCPU３１に接続されている。The input section 34 to the network interface 40 are connected to the CPU 31 via the input / output interface 32 and the internal bus 33.
【００２６】図４は、図２の電子ブックプレーヤ２２の
構成を示すブロック図である。FIG. 4 is a block diagram showing the configuration of the electronic book player 22 shown in FIG.
【００２７】CPU（Central Processing Unit）５１は、
ユーザが、例えば、タッチパッド、操作キーあるいは操
作ボタンなどよりなる入力部５２を用いて入力した各種
指令に対応する信号や、通信部５８を介して入力された
制御信号に基づいた各種処理を実行する。ROM（Read On
ly Memory）５３は、CPU５１が使用するプログラムや演
算用のパラメータのうちの基本的に固定のデータを格納
する。ＲＡＭ（RandomAccess Memory）５４は、CPU５１
の実行において使用するプログラムや、その実行におい
て適宜変化するパラメータを格納する。The CPU (Central Processing Unit) 51 is
For example, the user executes various processes based on signals corresponding to various commands input using the input unit 52 including a touch pad, operation keys, operation buttons, or the like, and control signals input via the communication unit 58. To do. ROM (Read On
The ly memory) 53 stores basically fixed data of a program used by the CPU 51 and parameters for calculation. The RAM (Random Access Memory) 54 is the CPU 51.
Stores the program used in the execution of and the parameters that change appropriately in the execution.
【００２８】電子書籍ROM５５には、例えば、フラッシ
ュＲＯＭ、ＥＥＰＲＯＭなどの書き換え可能なメモリ
や、ＰＲＯＭなどの書き込み可能なメモリが用いられ、
通信部５８を介してダウンロードされた、あるいは、ド
ライブ６０を介して記録媒体から読み取られたコンテン
ツデータもしくはオブジェクトデータを記録する。な
お、電子書籍ROM５５に代わって、例えば、ＳＲＡＭや
半導体メモリなどの、書き換え可能な他の形態のメモリ
を用いるようにしても良いことは言うまでもない。As the electronic book ROM 55, for example, a rewritable memory such as a flash ROM or an EEPROM or a writable memory such as a PROM is used.
The content data or object data downloaded via the communication unit 58 or read from the recording medium via the drive 60 is recorded. It goes without saying that, in place of the electronic book ROM 55, another rewritable memory such as SRAM or semiconductor memory may be used.
【００２９】表示制御部５６は、CPU５１の制御に従っ
て、表示パネル５７に、各種情報をテキスト、あるいは
イメージなどで表示させる。表示パネル５７は、例え
ば、ＣＲＴ（Cathode Ray Tube）や液晶表示装置などか
ら構成され、表示制御部５６の制御に従って、各種情報
をテキスト、あるいはイメージなどで表示する。Under the control of the CPU 51, the display control unit 56 causes the display panel 57 to display various kinds of information as text or images. The display panel 57 is composed of, for example, a CRT (Cathode Ray Tube), a liquid crystal display device, or the like, and displays various kinds of information as text or images under the control of the display control unit 56.
【００３０】インターフェース５９には、ドライブ６０
が接続されるとともに、半導体メモリ１７が接続され、
データの授受を行う。ドライブ６０には、必要に応じて
磁気ディスク１４、光ディスク１５、もしくは光磁気デ
ィスク１６が装着され、データの授受を行う。The interface 59 includes a drive 60.
And the semiconductor memory 17 are connected,
Send and receive data. The drive 60 is loaded with the magnetic disk 14, the optical disk 15, or the magneto-optical disk 16 as necessary to exchange data.
【００３１】通信部５８は、情報の授受を行うために、
パーソナルコンピュータなどの他の装置や、インターネ
ットを介して、ウェブサーバなどにアクセスし、必要な
情報を検索して、ダウンロードする処理を実行する。The communication section 58 exchanges information in order to exchange information.
It accesses a web server or the like via another device such as a personal computer or the Internet, searches for necessary information, and executes a process of downloading.
【００３２】次に、図５を用いて、ＰＤＡ２３の内部構
成について説明する。Next, the internal structure of the PDA 23 will be described with reference to FIG.
【００３３】CPU（Central Processing Unit）７１は、
発振器７２から供給されるクロック信号に同期して、Fl
ash ROM（Read only Memory）７３またはEDO DRAM（Ext
ended Data Out Dynamic Random Access Memory）７４
に格納されているオペレーティングシステム、または開
発されたアプリケーションプログラムなどの各種のプロ
グラムを実行する。The CPU (Central Processing Unit) 71 is
Fl is synchronized with the clock signal supplied from the oscillator 72.
ash ROM (Read only Memory) 73 or EDO DRAM (Ext
ended Data Out Dynamic Random Access Memory) 74
Executes various programs such as operating system stored in, or developed application programs.
【００３４】Flash ROM７３は、EEPROM（Electrically
Erasable Programmable Read OnlyMemory）の一種であ
るフラッシュメモリで構成され、一般的には、CPU７１
が使用するプログラムや演算用のパラメータのうちの基
本的に固定のデータを格納する。EDO DRAM７４は、CPU
７１の実行において使用するプログラムや、その実行に
おいて適宜変化するパラメータを格納する。The Flash ROM 73 is an EEPROM (Electrically
Erasable Programmable Read Only Memory), which is a type of flash memory.
Stores basically fixed data of the program and calculation parameters used by. EDO DRAM74 is CPU
The program used in the execution of 71 and the parameters that change appropriately in the execution are stored.
【００３５】メモリースティックインターフェース７５
は、ＰＤＡ２３に装着されているメモリースティック９
１からデータを読み出すとともに、CPU７１から供給さ
れたデータをメモリースティック９１に書き込む。Memory Stick Interface 75
Is a Memory Stick 9 attached to the PDA 23
The data is read from 1 and the data supplied from the CPU 71 is written in the memory stick 91.
【００３６】USB（Universal Serial Bus）インターフ
ェース７６は、発振器７７から供給されるクロック信号
に同期して、接続されているUSB機器であるドライブ８
３からデータまたはプログラムを入力するとともに、CP
U７１から供給されたデータをドライブ８３に供給す
る。USBインターフェース７６は、発振器７７から供給
されるクロック信号に同期して、接続されているUSB機
器であるクレードル８４からデータまたはプログラムを
入力するとともに、CPU７１から供給されたデータをク
レードル８４に供給する。The USB (Universal Serial Bus) interface 76 is synchronized with the clock signal supplied from the oscillator 77, and is connected to the drive 8 which is a USB device.
Enter data or program from 3 and CP
The data supplied from U71 is supplied to the drive 83. The USB interface 76 inputs data or a program from the cradle 84, which is a connected USB device, in synchronization with the clock signal supplied from the oscillator 77, and also supplies the data supplied from the CPU 71 to the cradle 84.
【００３７】クレードル８４とは、ＰＤＡ２３とパーソ
ナルコンピュータとを有線で接続し、いわゆるホットシ
ンクと称される処理により、データのシンクロナイズを
実行するためのドッキングステーションである。The cradle 84 is a docking station for connecting the PDA 23 and a personal computer by wire and executing data synchronization by a process called a so-called hot sync.
【００３８】また、USBインターフェース７６には、ド
ライブ８３も接続されている。ドライブ８３は、装着さ
れている磁気ディスク１４、光ディスク１５、光磁気デ
ィスク１６、または半導体メモリ１７に記録されている
データまたはプログラムを読み出して、そのデータまた
はプログラムを、USBインターフェース７６を介して、
接続されているCPU７１またはEDO DRAM７４に供給す
る。また、ドライブ８３は、CPU７１から供給されたデ
ータまたはプログラムを、装着されている磁気ディスク
１４、光ディスク１５、光磁気ディスク１６、または半
導体メモリ１７に記録させる。A drive 83 is also connected to the USB interface 76. The drive 83 reads out the data or program recorded in the mounted magnetic disk 14, optical disk 15, magneto-optical disk 16, or semiconductor memory 17, and reads the data or program via the USB interface 76.
It is supplied to the connected CPU 71 or EDO DRAM 74. The drive 83 also records the data or program supplied from the CPU 71 on the mounted magnetic disk 14, optical disk 15, magneto-optical disk 16, or semiconductor memory 17.
【００３９】また、ＰＤＡ２３は、携帯型電話機やPHS
（Personal Handyphone System）などと接続することも
可能であり、インターネットを介して、ウェブサーバな
どにアクセスすることができる。The PDA 23 is a portable telephone or PHS.
(Personal Handyphone System), etc. can be connected, and a web server etc. can be accessed via the Internet.
【００４０】Flash ROM７３、EDO DRAM７４、メモリー
スティックインターフェース７５、およびUSBインター
フェース７６は、アドレスバスおよびデータバスを介し
て、CPU７１に接続されている。The flash ROM 73, EDO DRAM 74, memory stick interface 75, and USB interface 76 are connected to the CPU 71 via an address bus and a data bus.
【００４１】表示部９０は、LCDバスを介して、CPU７１
からデータを受信し、受信したデータに対応する画像ま
たは文字などを表示する。タッチパッド制御部７８は、
入力デバイスであるタッチパッドが操作されたとき、操
作に対応したデータ（例えば、タッチされた座標を示
す）をタッチパッドから受信し、受信したデータに対応
する信号を、シリアルバスを介してCPU７１に供給す
る。The display section 90 is connected to the CPU 71 via the LCD bus.
Receives data from, and displays images or characters corresponding to the received data. The touch pad control unit 78
When the touch pad as an input device is operated, data corresponding to the operation (for example, indicating the touched coordinates) is received from the touch pad, and a signal corresponding to the received data is sent to the CPU 71 via the serial bus. Supply.
【００４２】ここでは、表示部９０とタッチパッドを個
別に用意するものとして説明するが、タッチパッドを表
示部９０の上側に設け（いわゆるタッチパネル）、表示
部９０の表示内容に従って、ユーザが表示部９０に重な
って設けられたタッチパッドを操作し、タッチパッド制
御部７８が、ユーザの操作に対応したデータの入力を受
けるようにしても良い。Although the display unit 90 and the touch pad are separately prepared here, the touch pad is provided on the upper side of the display unit 90 (so-called touch panel) so that the user can display the display unit 90 according to the display content of the display unit 90. It is also possible to operate the touch pad provided so as to overlap with 90 so that the touch pad control unit 78 receives the input of data corresponding to the user's operation.
【００４３】EL（Electroluminescence）ドライバ７９
は、表示部９０の液晶表示部の裏側に設けられている電
界発光素子を動作させ、表示部９０の表示の明るさを制
御する。EL (Electroluminescence) driver 79
Controls the brightness of the display of the display unit 90 by operating the electroluminescent element provided on the back side of the liquid crystal display unit of the display unit 90.
【００４４】赤外線通信部８０は、CPU７１から受信し
たデータを、赤外線を媒体として、UART（Universal as
ynchronous receiver transmitter）を介して、図示せ
ぬ他の機器に送信するとともに、他の機器から送信され
た赤外線を媒体とするデータを受信して、CPU７１に供
給する。すなわち、ＰＤＡ２３は、UARTを介して、他の
機器と通信することができる。The infrared communication section 80 uses the infrared rays as a medium to transfer the data received from the CPU 71 to a UART (Universal as
The data is transmitted to another device (not shown) via the synchronous receiver transmitter), and the infrared ray data transmitted from the other device is received and supplied to the CPU 71. That is, the PDA 23 can communicate with other devices via the UART.
【００４５】音声再生部８２は、スピーカ、および音声
のデータの復号回路などから構成され、予め記憶してい
る音声のデータ、またはインターネットを介して受信し
た音声データなどを復号して、再生し、音声を出力す
る。例えば、音声再生部８２は、バッファ８１を介し
て、CPU７１から供給された音声のデータを再生して、
データに対応する音声を出力する。The voice reproducing section 82 is composed of a speaker, a voice data decoding circuit, and the like, and decodes and reproduces voice data stored in advance or voice data received via the Internet. Output audio. For example, the audio reproduction unit 82 reproduces the audio data supplied from the CPU 71 via the buffer 81,
Output the voice corresponding to the data.
【００４６】キー８８は、例えば、入力キーなどで構成
され、CPU７１に各種の指令を入力するとき、使用者に
より操作される。The key 88 is composed of, for example, an input key or the like, and is operated by the user when inputting various commands to the CPU 71.
【００４７】ジョグダイヤル８９は、回転操作または本
体側への押圧操作に対応するデータをCPU７１に供給す
る。The jog dial 89 supplies the CPU 71 with data corresponding to a rotating operation or a pressing operation on the main body side.
【００４８】電源回路８７は、装着されているバッテリ
８５または接続されているＡＣ（Alternating curren
t）アダプタ８６から供給される電源の電圧を変換し
て、電源をCPU７１乃至音声再生部８２のそれぞれに供
給する。The power supply circuit 87 includes a battery 85 mounted therein or an AC (Alternating curren) connected thereto.
t) The voltage of the power supply supplied from the adapter 86 is converted, and the power is supplied to each of the CPU 71 to the sound reproducing unit 82.
【００４９】パーソナルコンピュータ２１、電子ブック
プレーヤ２２、あるいは、ＰＤＡ２３などの装置におい
て、通常の動作時には、パーソナルコンピュータ２１の
表示部３７、図４を用いて説明した電子ブックプレーヤ
２２の表示パネル５７、あるいは、図５を用いて説明し
たＰＤＡ２３の表示部９０には、カーソルが表示され、
図３を用いて説明したパーソナルコンピュータ２１の入
力部３７のタッチパッド、図４を用いて説明した電子ブ
ックプレーヤ２２の入力部５２のタッチパッド、あるい
は、図５を用いて説明したＰＤＡ２３のタッチパッド制
御部７８のタッチパッドにユーザが操作入力することに
よって、カーソルの移動が指令される。すなわち、ユー
ザがタッチパッド上を指などで触れ、その位置を左から
右に移動した場合、カーソルの位置は、その移動距離に
基づいて、表示画面上を左から右に移動される。In a device such as the personal computer 21, the electronic book player 22, or the PDA 23, during normal operation, the display unit 37 of the personal computer 21, the display panel 57 of the electronic book player 22 described with reference to FIG. 4, or , A cursor is displayed on the display unit 90 of the PDA 23 described with reference to FIG.
The touch pad of the input unit 37 of the personal computer 21 described with reference to FIG. 3, the touch pad of the input unit 52 of the electronic book player 22 described with reference to FIG. 4, or the touch pad of the PDA 23 described with reference to FIG. The movement of the cursor is instructed by the user's operation input on the touch pad of the control unit 78. That is, when the user touches the touch pad with a finger or the like and moves the position from left to right, the position of the cursor is moved from left to right on the display screen based on the moving distance.
【００５０】本発明を適応したパーソナルコンピュータ
２１、電子ブックプレーヤ２２、あるいは、ＰＤＡ２３
などの装置において、メニューＧＵＩモードが選択され
た場合、図３を用いて説明したパーソナルコンピュータ
２１の表示部３７、図４を用いて説明した電子ブックプ
レーヤ２２の表示パネル５７、あるいは、図５を用いて
説明したＰＤＡ２３の表示部９０には、図６のメニュー
ＧＵＩ１０１が表示される。ここでは、メニューＧＵＩ
１０１にメニュー１乃至メニュー８の８つのメニュー項
目が表示されているものとする。A personal computer 21, an electronic book player 22, or a PDA 23 to which the present invention is applied.
When the menu GUI mode is selected, the display unit 37 of the personal computer 21 described with reference to FIG. 3, the display panel 57 of the electronic book player 22 described with reference to FIG. 4, or FIG. The menu GUI 101 shown in FIG. 6 is displayed on the display unit 90 of the PDA 23 described above. Here, the menu GUI
It is assumed that eight menu items of menu 1 to menu 8 are displayed on 101.
【００５１】ここで、メニューＧＵＩ１０１に表示され
るメニューの内容は、そのとき実行されているアプリケ
ーションなどによって決まるものであり、メニューＧＵ
Ｉ１０１に対応する画像データは、例えば、図３を用い
て説明したパーソナルコンピュータ２１のＲＡＭ３６、
図４を用いて説明した電子ブックプレーヤ２２のＲＡＭ
５４、あるいは、図５を用いて説明したＰＤＡ２３のED
ODRAM７４などに予め記憶されているものとする。Here, the contents of the menu displayed on the menu GUI 101 are determined by the application being executed at that time, and the menu GU
The image data corresponding to I101 is, for example, the RAM 36 of the personal computer 21 described with reference to FIG.
RAM of the electronic book player 22 described with reference to FIG.
54, or the ED of the PDA 23 described with reference to FIG.
It is assumed to be stored in advance in the ODRAM 74 or the like.
【００５２】そして、図３を用いて説明したパーソナル
コンピュータ２１の入力部３７のタッチパッド、図４を
用いて説明した電子ブックプレーヤ２２の入力部５２の
タッチパッド、あるいは、図５を用いて説明したＰＤＡ
２３のタッチパッド制御部７８のタッチパッド（以下、
これらのタッチパッドを総称して、パッド１１１と称す
る）は、メニューＧＵＩモードにおいて、図７（Ａ）に
示されるように、ユーザの指などによる操作方向（操作
開始点と操作終了点には関わらない操作方向のみ）によ
って、現在のカーソルの位置とは関わりなく、図６に示
されるメニューＧＵＩ１０１に表示されたメニュー１乃
至メニュー８のうちのいずれかを選択するための操作入
力を受けるものとする。Then, the touch pad of the input section 37 of the personal computer 21 described with reference to FIG. 3, the touch pad of the input section 52 of the electronic book player 22 described with reference to FIG. 4, or the description with reference to FIG. Did PDA
The touch pad of the touch pad control unit 78 of 23 (hereinafter,
These touchpads are collectively referred to as the pad 111) in the menu GUI mode, as shown in FIG. 7A, regardless of the operation direction (operation start point and operation end point) by the user's finger or the like. 6), regardless of the current position of the cursor, an operation input for selecting any one of menu 1 to menu 8 displayed in the menu GUI 101 shown in FIG. 6 is received. .
【００５３】例えば、図７（Ｂ）に示されるように、ユ
ーザが、パッド１１１上に触れた指などを左下から右上
に、斜めに移動させた場合、その操作入力は、その移動
方向に対応したメニューであるメニュー７の選択を示
す。For example, as shown in FIG. 7B, when the user diagonally moves the finger touching the pad 111 from the lower left to the upper right, the operation input corresponds to the moving direction. The selection of menu 7, which is the completed menu, is shown.
【００５４】そして、ユーザによって選択されたメニュ
ー７に、複数のサブメニューが含まれている場合、図８
に示されるように、複数のサブメニュー（例えば、サブ
メニュー１乃至サブメニュー８）で構成されたメニュー
ＧＵＩ１２１が表示される。ユーザは、同様にしてパッ
ド１１１を操作することにより、サブメニュー１乃至サ
ブメニュー８のうち、所望のメニューを選択することが
できる。When the menu 7 selected by the user includes a plurality of submenus, the menu shown in FIG.
As shown in, a menu GUI 121 configured by a plurality of submenus (for example, submenu 1 to submenu 8) is displayed. By operating the pad 111 in the same manner, the user can select a desired menu from the submenus 1 to 8.
【００５５】このように、メニューＧＵＩ１０１および
メニューＧＵＩ１２１を表示させ、パッド１１１への操
作入力（方向）を、メニューＧＵＩの表示と対応付ける
ことにより非常に簡単な操作で、サブメニューまでの階
層の操作入力を行うことが可能となる。ここでは、サブ
メニューまでの操作入力について説明したが、サードメ
ニュー以下の更に下位の階層の操作入力についても同様
であることは言うまでもない。As described above, by displaying the menu GUI 101 and the menu GUI 121 and associating the operation input (direction) to the pad 111 with the display of the menu GUI, the operation input of the layers up to the submenu can be performed by a very simple operation. It becomes possible to do. Here, the operation input up to the sub-menu has been described, but it goes without saying that the same applies to the operation input in a lower hierarchy below the third menu.
【００５６】図９のフローチャートを参照して、図６乃
至図８を用いて説明した、ユーザがパッド１１１に触れ
た指などの位置を移動させた方向に基づいて実行される
メニューＧＵＩモードの処理１について説明する。The processing in the menu GUI mode executed based on the direction in which the position of the finger or the like touching the pad 111 by the user is moved, which has been described with reference to the flowchart of FIG. 9 with reference to FIGS. 6 to 8. 1 will be described.
【００５７】ここでは、図３を用いて説明したパーソナ
ルコンピュータ２１において処理が実行されるものとし
て説明するが、例えば、図４を用いて説明した電子ブッ
クプレーヤ２２、あるいは、図５を用いて説明したＰＤ
Ａ２３などにおいても同様の処理が実行可能であるのは
言うまでもない。Here, description will be made assuming that the processing is executed by the personal computer 21 described with reference to FIG. 3, but for example, the electronic book player 22 described with reference to FIG. 4 or the description with reference to FIG. Done PD
It goes without saying that the same processing can be executed in A23 and the like.
【００５８】ステップＳ１において、ＣＰＵ３１は、入
出力インターフェース３２および内部バス３３を介して
入力部３４から入力されるユーザの操作に対応する信号
によって、メニューＧＵＩ表示モード開始の指令を受け
る。In step S1, the CPU 31 receives a command to start the menu GUI display mode by a signal corresponding to a user operation input from the input unit 34 via the input / output interface 32 and the internal bus 33.
【００５９】ステップＳ２において、ＣＰＵ３１は、内
部バス３３および入出力インターフェース３２を介し
て、表示部３７に、メニューＧＵＩ１０１に対応するデ
ータを出力し、表示部３７に、メニューＧＵＩ１０１を
表示させる。In step S2, the CPU 31 outputs the data corresponding to the menu GUI 101 to the display unit 37 via the internal bus 33 and the input / output interface 32, and causes the display unit 37 to display the menu GUI 101.
【００６０】ステップＳ３において、ＣＰＵ３１は、入
出力インターフェース３２および内部バス３３を介して
入力部３４から入力されるユーザの操作に対応する信号
に基づいて、パッド１１１が操作されたか否かを判断す
る。In step S3, the CPU 31 determines whether or not the pad 111 has been operated based on the signal corresponding to the user's operation input from the input unit 34 via the input / output interface 32 and the internal bus 33. .
【００６１】ステップＳ３において、パッド１１１が操
作されていないと判断された場合、パッド１１１が操作
されたと判断されるまで、ステップＳ３の処理が繰り返
される。ステップＳ３において、パッド１１１が操作さ
れたと判断された場合、ステップＳ４において、ＣＰＵ
３１は、入出力インターフェース３２および内部バス３
３を介して入力部３４から入力されるユーザの操作に対
応する信号に基づいて、ユーザがパッド１１１に触れた
指などの位置を取得することにより、操作開始位置、す
なわち、パッド１１１上において、ユーザが指などを最
初に触れた位置を取得する。If it is determined in step S3 that the pad 111 has not been operated, the process of step S3 is repeated until it is determined that the pad 111 has been operated. If it is determined in step S3 that the pad 111 has been operated, in step S4 the CPU
31 is an input / output interface 32 and an internal bus 3
By acquiring the position of the finger or the like touching the pad 111 by the user based on the signal corresponding to the user's operation input from the input unit 34 via 3, the operation start position, that is, on the pad 111, The position where the user first touches a finger or the like is acquired.
【００６２】ステップＳ５において、ＣＰＵ３１は、入
出力インターフェース３２および内部バス３３を介して
入力部３４から入力されるユーザの操作に対応する信号
に基づいて、ユーザの指などがパッド１１１から離れた
か否かを判断する。In step S5, the CPU 31 determines whether or not the user's finger or the like has left the pad 111, based on the signal corresponding to the user's operation input from the input unit 34 via the input / output interface 32 and the internal bus 33. To judge.
【００６３】ステップＳ５において、ユーザの指などが
パッド１１１から離れていないと判断された場合、ユー
ザの指などがパッド１１１から離れたと判断されるま
で、ステップＳ５の処理が繰り返される。ステップＳ５
において、ユーザの指などがパッド１１１から離れたと
判断された場合、ステップＳ６において、ＣＰＵ３１
は、入出力インターフェース３２および内部バス３３を
介して入力部３４から入力されるユーザの操作に対応す
る信号に基づいて、操作終了位置、すなわち、ユーザの
指が離れた位置を取得し、ステップＳ４において取得さ
れた操作開始位置の情報を基に、操作方向を検出する。When it is determined in step S5 that the user's finger or the like is not separated from the pad 111, the process of step S5 is repeated until it is determined that the user's finger or the like is separated from the pad 111. Step S5
If it is determined that the user's finger or the like has been separated from the pad 111 in step S6, the CPU 31
Acquires the operation end position, that is, the position where the user's finger is released based on the signal corresponding to the user's operation input from the input unit 34 via the input / output interface 32 and the internal bus 33, and step S4 The operation direction is detected based on the information on the operation start position acquired in.
【００６４】ステップＳ７において、ＣＰＵ３１は、ス
テップＳ６において検出された操作方向によって指示さ
れたメニュー内容に従って処理を実行する。例えば、操
作方向によって指定されたメニューが所定のコマンドを
示す場合、対応するコマンドが実行され、操作方向によ
って指定されたメニューがサブメニューを含む場合、図
８を用いて説明したように、サブメニューの内容を表示
したメニューＧＵＩ１２１を表示させる。In step S7, the CPU 31 executes the processing in accordance with the menu content instructed by the operation direction detected in step S6. For example, when the menu specified by the operation direction indicates a predetermined command, the corresponding command is executed, and when the menu specified by the operation direction includes a sub-menu, as described using FIG. The menu GUI 121 displaying the contents of is displayed.
【００６５】ステップＳ８において、ＣＰＵ３１は、入
出力インターフェース３２および内部バス３３を介して
入力部３４から入力されるユーザの操作に対応する信号
に基づいて、メニューＧＵＩモードの終了指示が入力さ
れたか否かを判断する。メニューＧＵＩモードの終了指
示は、例えば、ステップＳ７において実行されるコマン
ドなどの処理の開始時に、ユーザの操作入力なしに、メ
ニューＧＵＩモードの終了指令が発生されるようにして
も良いし、メニューＧＵＩに表示されるメニューに、
「メニューＧＵＩモードの終了」、もしくは、パッド１
１１を用いて、通常通りにカーソルを移動させるための
操作入力を行うためのモードである「カーソルモード
（マウスモード）」などの項目を含ませて、そのメニュ
ーがユーザの操作によって選択されたされた場合に、メ
ニューＧＵＩモードの終了指令が発生されるようにして
もよい。In step S8, the CPU 31 determines whether or not a menu GUI mode end instruction is input based on a signal corresponding to a user operation input from the input unit 34 via the input / output interface 32 and the internal bus 33. To judge. For the instruction to end the menu GUI mode, for example, at the start of processing such as the command executed in step S7, an instruction to end the menu GUI mode may be generated without a user's operation input. In the menu displayed in
"End menu GUI mode" or pad 1
11, the menu is selected by the user's operation by including an item such as “cursor mode (mouse mode)” which is a mode for performing an operation input for moving the cursor as usual. In this case, a menu GUI mode end command may be generated.
【００６６】ステップＳ８において、終了指令が入力さ
れていないと判断された場合、処理は、ステップＳ３に
戻り、それ以降の処理が繰り返される。ステップＳ８に
おいて、終了指令が入力されたと判断された場合、処理
が終了される。If it is determined in step S8 that the end command has not been input, the process returns to step S3, and the subsequent processes are repeated. If it is determined in step S8 that the end command has been input, the process ends.
【００６７】このような処理により、従来、メニューの
表示位置に基づいて、カーソルを複雑に移動させて指令
していたメニューの選択を、簡単な操作入力で実行させ
るようにすることができる。By such processing, it is possible to execute the menu selection, which has been conventionally performed by moving the cursor intricately based on the display position of the menu, by a simple operation input.
【００６８】更に、図１０に示されるように、所定のメ
ニューに対応させて、ユーザがパッド１１１に対して指
などを触れて、所望の方向に動かした場合の速度、ある
いは、所望の方向に動かした後、指などを離すまでの時
間によって、数値入力を可能とすることも出来る。その
場合、メニューＧＵＩ１３１の対応するメニューの付近
に、数値表示ボックス１３２を表示させ、入力された数
値を表示することが出来る。Further, as shown in FIG. 10, in correspondence with a predetermined menu, the speed when the user touches the pad 111 with a finger or the like to move it in a desired direction, or the desired direction is displayed. It is also possible to input numerical values depending on the time until the finger is released after moving. In that case, a numerical value display box 132 can be displayed near the corresponding menu of the menu GUI 131 to display the input numerical value.
【００６９】ユーザがパッド１１１に対して指などを触
れて、所望の方向に動かした後、指などを離すまでの時
間によって、数値入力を可能とした場合、例えば、時間
の経過にともなって、数値表示ボックス１３２に表示さ
れる数値を変更させ、ユーザが所望の数値となった時点
で指などを離すことにより、ユーザは、任意の数値を入
力することが出来る。When the user touches the pad 111 with a finger or the like, moves the finger in a desired direction, and then allows the user to input a numerical value depending on the time until the finger or the like is released, for example, with the passage of time, The user can input an arbitrary numerical value by changing the numerical value displayed in the numerical value display box 132 and releasing the finger or the like when the user reaches a desired numerical value.
【００７０】また、図１１に示されるメニューＧＵＩ１
４１のように、全てのメニュー項目に対して、数値表示
ボックス１４２乃至数値表示ボックス１４５を設けて、
それぞれの方向に対応する操作において、操作時間、も
しくは操作速度を検出するようにしても良い。Also, the menu GUI1 shown in FIG.
Like 41, numerical display boxes 142 to 145 are provided for all menu items,
The operation time or the operation speed may be detected in the operation corresponding to each direction.
【００７１】更に、図１２に示されるように、メニュー
ＧＵＩ１５１にスライドバー１５２を設け、パッド１１
１に対して入力される操作において、スライドバー１５
２の表示方向に対応する方向のユーザの指などの移動距
離を取得し、この移動距離に基づいて数値（例えば、拡
大率および縮小率など）を取得することもできる。この
場合、操作の移動距離に対応して、スライドバー１５２
内のマーカーが移動される。Further, as shown in FIG. 12, a slide bar 152 is provided in the menu GUI 151, and the pad 11
In the operation input for 1, the slide bar 15
It is also possible to acquire the moving distance of the user's finger or the like in the direction corresponding to the display direction of 2, and to acquire the numerical value (for example, the enlargement ratio and the reduction ratio) based on this moving distance. In this case, the slide bar 152 corresponds to the movement distance of the operation.
The marker inside is moved.
【００７２】そして、図１３に示されるメニューＧＵＩ
１６１、あるいは、図１４に示されるメニューＧＵＩ１
７１のように、数値入力のために取得されるパラメータ
として、操作時間、操作速度、および操作の移動距離
を、複数のメニューで複合させることも可能である。こ
の場合は、メニューの内容に対応して、ユーザの操作に
対して検出されるパラメータが決定される。すなわち、
ユーザからの操作入力を受けた場合、まず、操作方向が
検出されて、ユーザが所望するメニューが確定され、そ
れぞれのメニューによって、方向だけを検出するのか、
操作時間、操作速度、あるいは操作の移動距離の検出が
必要か否かが判断される。Then, the menu GUI shown in FIG.
161 or the menu GUI1 shown in FIG.
As in 71, the operation time, the operation speed, and the movement distance of the operation can be combined in a plurality of menus as parameters acquired for inputting a numerical value. In this case, the parameters detected in response to the user's operation are determined according to the contents of the menu. That is,
When receiving an operation input from the user, first, the operation direction is detected, the menu desired by the user is confirmed, and whether only the direction is detected by each menu,
It is determined whether it is necessary to detect the operation time, the operation speed, or the movement distance of the operation.
【００７３】例えば、図１３に示される、電子書籍など
のページ送りを操作するためのメニューＧＵＩ１６１に
おいては、ユーザによって入力された操作の方向がパッ
ド１１１に対して上向きであった場合、その操作時間、
操作速度、あるいは操作の移動距離に関わらず、前へ１
ページ進む処理が実行され、入力された操作の方向がパ
ッド１１１に対して下向きであった場合、その操作時
間、操作速度、あるいは操作の移動距離に関わらず、後
ろへ１ページ戻る処理が実行される。For example, in the menu GUI 161 shown in FIG. 13 for operating page turning of an electronic book or the like, if the direction of the operation input by the user is upward with respect to the pad 111, the operation time ,
1 regardless of operation speed or operation distance
When the page advancing process is executed and the direction of the input operation is downward with respect to the pad 111, the process of returning one page backward is executed regardless of the operation time, the operation speed, or the movement distance of the operation. It
【００７４】そして、ユーザによって入力された操作の
方向がパッド１１１に対して右向きであった場合、その
操作時間、あるいは操作速度に基づいて、早送りされる
ページ数が、数値表示ボックス１６２に表示されて、そ
の数値だけのページが早送りされ、入力された操作の方
向がパッド１１１に対して左向きであった場合、その操
作時間、あるいは操作速度に基づいて、まきもどされる
ページ数が、数値表示ボックス１６３に表示されて、そ
の数値だけのページがまきもどされる。When the direction of the operation input by the user is rightward with respect to the pad 111, the number of pages fast-forwarded is displayed in the numerical value display box 162 based on the operation time or the operation speed. If the page of that numerical value is fast forwarded and the direction of the input operation is leftward with respect to the pad 111, the number of pages to be unwound based on the operation time or the operation speed is displayed in the numerical value display box. It is displayed in 163, and the page only for the numerical value is returned.
【００７５】そして、図１４に示される、例えば、表示
デバイスの明るさおよびコントラストの調整を行うため
のメニューＧＵＩ１７１においては、ユーザによって入
力された操作の方向がパッド１１１に対して右向き、も
しくは左向きであった場合、その操作の移動距離に基づ
いて、スライドバー１７２のマーカーの位置が移動さ
れ、マーカーの位置が右寄りであれば、コントラストは
高く、左寄りであれば、コントラストは低く設定され
る。In the menu GUI 171 shown in FIG. 14 for adjusting the brightness and contrast of the display device, the direction of the operation input by the user is rightward or leftward with respect to the pad 111. If there is, the position of the marker on the slide bar 172 is moved based on the movement distance of the operation, and if the position of the marker is to the right, the contrast is high, and if it is to the left, the contrast is set to be low.
【００７６】そして、ユーザによって入力された操作の
方向がパッド１１１に対して上向きであった場合、その
操作時間、あるいは操作速度に基づいて、表示デバイス
の明るさの変更の割合が、数値表示ボックス１７３に表
示されて、その数値で示される割合に基づいて、表示画
面の明るさが明るい方向に変更され、入力された操作の
方向がパッド１１１に対して下向きであった場合、その
操作時間、あるいは操作速度に基づいて、表示デバイス
の暗さの変更の割合が、数値表示ボックス１７４に表示
されて、その数値で示される割合に基づいて、表示画面
の明るさが暗い方向に変更される。If the direction of the operation input by the user is upward with respect to the pad 111, the rate of change in the brightness of the display device is calculated based on the operation time or the operation speed. When the brightness of the display screen is changed to a bright direction based on the ratio displayed on the display screen 173 and the numerical value is displayed and the input operation direction is downward with respect to the pad 111, the operation time, Alternatively, the rate of change in darkness of the display device is displayed in the numerical value display box 174 based on the operation speed, and the brightness of the display screen is changed to a darker direction based on the rate indicated by the numerical value.
【００７７】次に、図１５および図１６のフローチャー
トを参照して、数値入力が可能なメニューを含むメニュ
ーＧＵＩが表示された場合のメニューＧＵＩモードの処
理２について説明する。Next, with reference to the flowcharts of FIGS. 15 and 16, the process 2 of the menu GUI mode when the menu GUI including the menu capable of inputting numerical values is displayed will be described.
【００７８】ここでも、図９を用いて説明したメニュー
ＧＵＩモードの処理１と同様に、図３を用いて説明した
パーソナルコンピュータ２１において処理が実行される
ものとして説明するが、例えば、図４を用いて説明した
電子ブックプレーヤ２２、あるいは、図５を用いて説明
したＰＤＡ２３などにおいても同様の処理が実行可能で
あるのは言うまでもない。Here, as with the process 1 of the menu GUI mode described with reference to FIG. 9, description will be made assuming that the process is executed by the personal computer 21 described with reference to FIG. It goes without saying that the same processing can be executed in the electronic book player 22 described using the above, or the PDA 23 described using FIG.
【００７９】ステップＳ２１乃至ステップＳ２３におい
て、図９のステップＳ１乃至ステップＳ３と同様の処理
が実行される。In steps S21 to S23, the same processes as steps S1 to S3 in FIG. 9 are executed.
【００８０】ステップＳ２３において、パッド１１１が
操作されたと判断された場合、ステップＳ２４におい
て、ＣＰＵ３１は、操作時間の計測を開始し、入出力イ
ンターフェース３２および内部バス３３を介して入力部
３４から入力されるユーザの操作に対応する信号に基づ
いて、パッド１１１に対する操作開始位置を取得する。When it is determined in step S23 that the pad 111 has been operated, the CPU 31 starts measuring the operation time and inputs it from the input unit 34 via the input / output interface 32 and the internal bus 33 in step S24. The operation start position for the pad 111 is acquired based on the signal corresponding to the user's operation.
【００８１】ステップＳ２５において、ＣＰＵ３１は、
入出力インターフェース３２および内部バス３３を介し
て入力部３４から入力されるユーザの操作に対応する信
号に基づいて、パッド１１１を操作する指などの、所定
の時間毎の移動速度を計測する。In step S25, the CPU 31
Based on a signal corresponding to a user's operation input from the input unit 34 via the input / output interface 32 and the internal bus 33, the moving speed of the finger or the like operating the pad 111 at predetermined time intervals is measured.
【００８２】ステップＳ２６において、ＣＰＵ３１は、
計測された所定の時間毎の移動速度は、予め定められた
所定の値以下の移動速度であるか否かを判断する。所定
の時間毎の移動速度が予め定められた所定の値以下の移
動速度である場合、パッドを操作する指などは、パッド
１１１から離されないまま、停止しようとしている、も
しくはほぼ停止している。In step S26, the CPU 31
It is determined whether or not the measured moving speed for each predetermined time is less than or equal to a predetermined value set in advance. When the moving speed for each predetermined time is equal to or lower than a predetermined value set in advance, a finger or the like operating the pad is about to stop or is almost stopped without being separated from the pad 111.
【００８３】ステップＳ２６において、移動速度は、予
め定められた所定の値以下の移動速度ではないと判断さ
れた場合、処理は、ステップＳ２５に戻り、それ以降の
処理が繰り返される。When it is determined in step S26 that the moving speed is not less than the predetermined value set in advance, the process returns to step S25, and the subsequent processes are repeated.
【００８４】ステップＳ２６において、移動速度は、予
め定められた所定の値以下の移動速度であると判断され
た場合、ステップＳ２７において、ＣＰＵ３１は、入出
力インターフェース３２および内部バス３３を介して入
力部３４から入力されるユーザの操作に対応する信号に
基づいて、現在の操作方向を検出する。When it is determined in step S26 that the moving speed is equal to or lower than the predetermined value set in advance, in step S27, the CPU 31 inputs the input unit via the input / output interface 32 and the internal bus 33. The current operation direction is detected on the basis of a signal corresponding to the user's operation input from 34.
【００８５】ステップＳ２８において、ＣＰＵ３１は、
ステップＳ２７の操作方向の検出結果に基づいて、操作
方向により指示されたメニューは、操作時間の値を必要
とするか否かを判断する。In step S28, the CPU 31
Based on the detection result of the operation direction in step S27, it is determined whether or not the menu instructed by the operation direction requires the value of the operation time.
【００８６】ステップＳ２８において、操作方向により
指示されたメニューは、操作時間の値を必要とすると判
断された場合、ステップＳ２９において、ＣＰＵ３１
は、現在の操作時間を基に、数値表示ボックスに表示さ
れている数値の変更など、メニュー内容に従ったＧＵＩ
の数値表示処理を実行する。If it is determined in step S28 that the menu instructed by the operation direction requires the value of the operation time, in step S29 the CPU 31
Is a GUI according to the menu contents such as changing the value displayed in the numerical display box based on the current operation time.
The numerical value display process of is executed.
【００８７】ステップＳ２８において、操作方向により
指示されたメニューは、操作時間の値を必要としないと
判断された場合、もしくは、ステップＳ２９の処理の終
了後、ステップＳ３０において、ＣＰＵ３１は、入出力
インターフェース３２および内部バス３３を介して入力
部３４から入力されるユーザの操作に対応する信号に基
づいて、ユーザの指などがパッド１１１から離れたか否
かを判断する。When it is determined in step S28 that the menu instructed by the operation direction does not require the value of the operation time, or after the processing in step S29 is completed, in step S30, the CPU 31 causes the input / output interface to operate. Based on a signal corresponding to the user's operation input from the input unit 34 via the input unit 32 and the internal bus 33, it is determined whether the user's finger or the like has left the pad 111.
【００８８】ステップＳ３０において、ユーザの指など
がパッド１１１から離れていないと判断された場合、処
理は、ステップＳ２８に戻り、それ以降の処理が繰り返
される。If it is determined in step S30 that the user's finger or the like is not separated from the pad 111, the process returns to step S28, and the subsequent processes are repeated.
【００８９】ステップＳ３０において、ユーザの指など
がパッド１１１から離れたと判断された場合、ステップ
Ｓ３１において、ＣＰＵ３１は、操作時間の計測を終了
し、入出力インターフェース３２および内部バス３３を
介して入力部３４から入力されるユーザの操作に対応す
る信号に基づいて、パッド１１１上の操作終了位置を取
得する。When it is determined in step S30 that the user's finger or the like has left the pad 111, in step S31, the CPU 31 ends the measurement of the operation time, and the input unit via the input / output interface 32 and the internal bus 33. The operation end position on the pad 111 is acquired based on the signal corresponding to the user's operation input from 34.
【００９０】ステップＳ３２において、ＣＰＵ３１は、
取得された操作終了位置を基に操作方向を検出し、検出
された操作方向により指示されたメニューは、操作速度
の値を必要とするか否かを判断する。In step S32, the CPU 31
The operation direction is detected based on the acquired operation end position, and it is determined whether or not the menu instructed by the detected operation direction requires the value of the operation speed.
【００９１】ステップＳ３２において、検出された操作
方向により指示されたメニューは、操作速度の値を必要
とすると判断された場合、ステップＳ３３において、Ｃ
ＰＵ３１は、検出した所定の時間毎の移動速度から、最
高操作速度を検出するか、あるいは、検出された操作開
始位置、操作終了位置、および操作時間から、平均操作
速度を算出し、それらの速度の値を基に、例えば、図１
４を用いて説明した表示画面の明るさの変更などの、メ
ニュー内容に従った処理を実行する。ここで、速度の値
を最高操作速度とするか、平均操作速度とするかは、予
め固定としても良いし、メニューによって異なるように
しても良い。If it is determined in step S32 that the menu instructed by the detected operation direction requires an operation speed value, in step S33 the C
The PU 31 detects the maximum operation speed from the detected moving speed at each predetermined time, or calculates the average operation speed from the detected operation start position, operation end position, and operation time, and then calculates those speeds. Based on the value of
4. The processing according to the menu contents, such as the change of the brightness of the display screen described using 4, is executed. Here, whether the value of the speed is the maximum operation speed or the average operation speed may be fixed in advance or may be different depending on the menu.
【００９２】ステップＳ３２において、検出された操作
方向により指示されたメニューは、操作速度の値を必要
としないと判断された場合、ステップＳ３４において、
ＣＰＵ３１は、操作方向により指示されたメニューは、
操作時間の値を必要とするか否かを判断する。When it is determined in step S32 that the menu instructed by the detected operation direction does not require the value of the operation speed, in step S34,
The CPU 31 indicates that the menu instructed by the operation direction is
Determine whether a value for operating time is required.
【００９３】ステップＳ３４において、操作方向により
指示されたメニューは、操作時間の値を必要とすると判
断された場合、ステップＳ３５において、ＣＰＵ３１
は、計測された操作時間の値を基に、例えば、図１４を
用いて説明した表示画面の明るさの変更などの、メニュ
ー内容に従った処理を実行する。If it is determined in step S34 that the menu instructed by the operation direction requires the value of the operation time, in step S35 the CPU 31
Performs processing according to the menu content, such as changing the brightness of the display screen described with reference to FIG. 14, based on the value of the measured operation time.
【００９４】ステップＳ３４において、操作方向により
指示されたメニューは、操作時間の値を必要としないと
判断された場合、ステップＳ３６において、ＣＰＵ３１
は、操作方向により指示されたメニューは、操作距離の
値を必要とするか否かを判断する。If it is determined in step S34 that the menu instructed by the operation direction does not require the value of the operation time, in step S36 the CPU 31
Determines whether the menu instructed by the operation direction requires the value of the operation distance.
【００９５】ステップＳ３６において、操作方向により
指示されたメニューは、操作距離の値を必要とすると判
断された場合、ステップＳ３７において、ＣＰＵ３１
は、操作距離の値を基に、例えば、図１４を用いて説明
したスライドバー１７２のマーカーの位置を変更して、
表示画面のコントラストを変更するなどの、メニュー内
容に従った処理を実行するIf it is determined in step S36 that the menu instructed by the operation direction requires the value of the operation distance, in step S37 the CPU 31
Changes the position of the marker of the slide bar 172 described with reference to FIG. 14 based on the value of the operation distance,
Perform processing according to the menu contents, such as changing the contrast of the display screen
【００９６】ステップＳ３６において、操作方向により
指示されたメニューは、操作距離の値を必要としないと
判断された場合、ステップＳ３８において、図９のステ
ップＳ７と同様の処理が実行される。When it is determined in step S36 that the menu instructed by the operation direction does not require the value of the operation distance, the same processing as step S7 of FIG. 9 is executed in step S38.
【００９７】ステップＳ３３、ステップＳ３５、ステッ
プＳ３７、もしくはステップＳ３８の処理の終了後、ス
テップＳ３９において、図９のステップＳ８と同様の処
理が実行される。ステップＳ３９において、メニューＧ
ＵＩモードの終了指示が入力されなかったと判断された
場合、処理は、ステップＳ２３に戻り、それ以降の処理
が繰り返される。ステップＳ３９において、メニューＧ
ＵＩモードの終了指示が入力されたと判断された場合、
処理が終了される。After the processing of step S33, step S35, step S37, or step S38 is completed, the same processing as step S8 of FIG. 9 is executed in step S39. In step S39, the menu G
If it is determined that the UI mode end instruction has not been input, the process returns to step S23, and the subsequent processes are repeated. In step S39, the menu G
If it is determined that the UI mode end instruction has been input,
The process ends.
【００９８】このような処理により、メニューＧＵＩの
表示と対応したパッド１１１への操作入力のパラメータ
として、その操作方向のみならず、操作時間、操作速
度、あるいは、操作距離などの、様々な要素を利用する
ことができ、数値の入力をともなう複雑な操作入力を、
簡単な操作で実行することが可能となる。By such processing, various parameters such as the operation time, the operation speed, or the operation distance as well as the operation direction are set as the parameters of the operation input to the pad 111 corresponding to the display of the menu GUI. Complex operation input that can be used and involves inputting numerical values,
It becomes possible to execute it by a simple operation.
【００９９】図１７および図１８を用いて、メニューＧ
ＵＩの具体的な表示例として、電子書籍を表示させるア
プリケーションの実行中にメニューＧＵＩモードが開始
された場合に表示されるメニューＧＵＩ１８１と、メニ
ューＧＵＩ１８１に対して下位の階層のメニューＧＵＩ
１９１、メニューＧＵＩ２０１、およびメニューＧＵＩ
２１１について説明する。Menu G will be described with reference to FIGS. 17 and 18.
As a specific display example of the UI, a menu GUI 181 displayed when the menu GUI mode is started during execution of an application for displaying an electronic book, and a menu GUI in a lower hierarchy than the menu GUI 181.
191, a menu GUI 201, and a menu GUI
211 will be described.
【０１００】図１７のメニューＧＵＩ１８１には、ペー
ジ送り、設定、書き込み、書庫へ戻る、拡大、縮小、マ
ウスモードの６つのメニューが表示されている。これら
のメニューは、全て、操作速度、操作時間、あるいは操
作距離などの値を必要としないメニューである。In the menu GUI 181 of FIG. 17, six menus of page turning, setting, writing, returning to the library, enlargement, reduction, and mouse mode are displayed. All of these menus are menus that do not require values such as operation speed, operation time, or operation distance.
【０１０１】ＣＰＵ３１は、入出力インターフェース３
２および内部バス３３を介して入力部３４から入力され
るユーザの操作に対応する信号に基づいて、ユーザの指
などのパッド１１１上での移動方向を検出する。The CPU 31 uses the input / output interface 3
The moving direction of the user's finger or the like on the pad 111 is detected based on a signal corresponding to the user's operation input from the input unit 34 via the internal bus 33 and the internal bus 33.
【０１０２】例えば、図１７のメニューＧＵＩ１８１が
表示されている状態において、ユーザの指が、パッド１
１１上で、右斜め下に移動された場合、「書き込み」メ
ニューのサブメニューとして、図１８（Ａ）に示される
メニューＧＵＩ１９１が表示される。メニューＧＵＩ１
９１には、文字飾り、アンダーライン、マーキング、文
字かこみ、の４つのサブメニューが表示されている。こ
れらのメニューも、全て、操作速度、操作時間、あるい
は操作距離などの値を必要としないメニューである。For example, when the menu GUI 181 shown in FIG. 17 is displayed, the user's finger touches the pad 1
11 is moved to the lower right, the menu GUI 191 shown in FIG. 18A is displayed as a submenu of the “write” menu. Menu GUI1
In 91, four submenus of character decoration, underline, marking, and character engraving are displayed. All of these menus are also menus that do not require values such as operation speed, operation time, or operation distance.
【０１０３】また、図１７のメニューＧＵＩ１８１が表
示されている状態において、ユーザが、「ページ送り」
のメニューを選択した場合、例えば、図１３を用いて説
明したメニューＧＵＩ１６１が表示される。同様にし
て、ユーザが、「拡大、縮小」のメニューを選択した場
合、例えば、図１１を用いて説明したメニューＧＵＩ１
４１が表示される。Also, in the state where the menu GUI 181 of FIG. 17 is displayed, the user performs a "page forward" operation.
When the menu is selected, for example, the menu GUI 161 described with reference to FIG. 13 is displayed. Similarly, when the user selects the “enlargement / reduction” menu, for example, the menu GUI1 described with reference to FIG.
41 is displayed.
【０１０４】更に、ユーザが、「設定」のメニューを選
択した場合、設定に関するコマンドやサブメニューが表
示された新たなメニューＧＵＩが表示される。そして、
ユーザが、「書庫へ戻る」や「マウスモード」のメニュ
ーを選択した場合、対応するコマンドの実行後、メニュ
ーＧＵＩモードが終了される。Furthermore, when the user selects the "setting" menu, a new menu GUI is displayed in which commands related to setting and submenus are displayed. And
When the user selects the menu of "return to archive" or "mouse mode", the menu GUI mode is terminated after executing the corresponding command.
【０１０５】図１８（Ａ）のメニューＧＵＩ１９１が表
示されている状態において、ＣＰＵ３１は、再び、入出
力インターフェース３２および内部バス３３を介して入
力部３４から入力されるユーザの操作に対応する信号に
基づいて、ユーザの指などのパッド１１１上での移動方
向を検出する。In the state where the menu GUI 191 of FIG. 18A is displayed, the CPU 31 again outputs a signal corresponding to the user's operation input from the input unit 34 via the input / output interface 32 and the internal bus 33. Based on this, the moving direction of the user's finger or the like on the pad 111 is detected.
【０１０６】例えば、図１８（Ａ）のメニューＧＵＩ１
９１が表示されている状態において、ユーザの指が、パ
ッド１１１上で、右に移動された場合、「アンダーライ
ン」の項目に対するサードメニューとして、図１８
（Ｂ）に示されるメニューＧＵＩ２０１が表示される。
メニューＧＵＩ２０１には、様々なアンダーラインの種
類が表示され、それぞれのアンダーラインに対応して、
数値表示ボックス２０２乃至数値表示ボックス２０９が
表示されている。すなわち、メニューＧＵＩ２０１に対
する操作入力は、その操作方向と操作時間（もしくは操
作速度）との両方が検出されて、対応する種類のアンダ
ーラインが、操作時間（もしくは操作速度）に対応する
文字数だけ、表示された電子書籍の所望の位置に引かれ
る。For example, the menu GUI1 of FIG. 18 (A)
When the user's finger is moved to the right on the pad 111 in the state where 91 is displayed, as a third menu for the item “underline”, as shown in FIG.
The menu GUI 201 shown in (B) is displayed.
Various underline types are displayed on the menu GUI 201. Corresponding to each underline,
Numerical value display boxes 202 to 209 are displayed. That is, in the operation input to the menu GUI 201, both the operation direction and the operation time (or operation speed) are detected, and the corresponding type of underline is displayed by the number of characters corresponding to the operation time (or operation speed). The desired electronic book is pulled to the desired position.
【０１０７】同様にして、図１８（Ａ）のメニューＧＵ
Ｉ１９１が表示されている状態において、ユーザの指
が、パッド１１１上で、下に移動された場合、「マーキ
ング」の項目に対するサードメニューとして、図１８
（Ｃ）に示されるメニューＧＵＩ２１１が表示される。
メニューＧＵＩ２１１には、様々なマーキングの色が表
示され、それぞれの色に対応して、数値表示ボックス２
１２乃至数値表示ボックス２１９が表示されている。す
なわち、メニューＧＵＩ２１１に対する操作入力は、そ
の操作方向と操作時間（もしくは操作速度）との両方が
検出されて、対応する色のマーキングが、操作時間（も
しくは操作速度）に対応する文字数だけ、表示された電
子書籍の所望の位置に引かれる。Similarly, the menu GU shown in FIG.
When the user's finger is moved down on the pad 111 in the state where I191 is displayed, as a third menu for the item of “marking”, as illustrated in FIG.
The menu GUI 211 shown in (C) is displayed.
Various colors of markings are displayed on the menu GUI 211, and the numerical value display box 2 is displayed corresponding to each color.
12 to numerical value display boxes 219 are displayed. That is, in the operation input to the menu GUI 211, both the operation direction and the operation time (or operation speed) are detected, and the corresponding color marking is displayed by the number of characters corresponding to the operation time (or operation speed). The electronic book is pulled to the desired position.
【０１０８】更に、同様にして、図１８（Ａ）のメニュ
ーＧＵＩ１９１が表示されている状態において、ユーザ
の指が、パッド１１１上で、上に移動された場合、もし
くは左に移動された場合においても、選択されたメニュ
ーに対応するサードメニューが表示されたメニューＧＵ
Ｉが表示され、ユーザがパッド１１１に対して操作した
操作方向のみならず、そのメニューの内容に従って、操
作速度、操作時間、あるいは操作距離などの数値が取得
されて、対応する処理が実行される。Similarly, when the user's finger is moved up or left on the pad 111 in the state where the menu GUI 191 of FIG. 18A is displayed. Also, the menu GU in which the third menu corresponding to the selected menu is displayed
I is displayed, and the numerical value such as the operating speed, the operating time, or the operating distance is acquired according to the content of the menu as well as the operating direction of the user operating the pad 111, and the corresponding process is executed. .
【０１０９】また、本発明を適応したメニューＧＵＩを
用いることにより、メニューの選択がパッド１１１に対
する１方向の入力で実行される。従って、下位の階層の
メニューＧＵＩが表示されるのを待たずに実行される次
の操作入力を受け付けることにより、いわゆるショート
カット入力と同様の処理を実行することが出来る。換言
すれば、ＣＰＵ３１が検出することが出来る操作入力の
方向が、例えば８方向であった場合においても、ユーザ
は、複数の方向の操作の組み合わせにより、８以上の任
意の数のメニューを選択することが可能となる。Further, by using the menu GUI to which the present invention is applied, selection of the menu is executed by one-directional input to the pad 111. Therefore, by accepting the next operation input to be executed without waiting for the menu GUI of the lower hierarchy to be displayed, the same processing as the so-called shortcut input can be executed. In other words, even if the direction of the operation input that can be detected by the CPU 31 is, for example, eight directions, the user selects an arbitrary number of menus of eight or more by combining operations in a plurality of directions. It becomes possible.
【０１１０】図１９のフローチャートを参照して、メニ
ューＧＵＩモードのショートカット処理について説明す
る。The shortcut process in the menu GUI mode will be described with reference to the flowchart of FIG.
【０１１１】ステップＳ５１乃至ステップＳ５５におい
て、図９のステップＳ１乃至ステップＳ５と同様の処理
が実行される。In steps S51 to S55, the same processes as steps S1 to S5 in FIG. 9 are executed.
【０１１２】ステップＳ５５において、ユーザの指など
がパッド１１１から離れたと判断された場合、ステップ
Ｓ５６において、ＣＰＵ３１は、入出力インターフェー
ス３２および内部バス３３を介して入力部３４から入力
されるユーザの操作に対応する信号に基づいて、操作終
了位置を取得し、操作方向を検出して一時保存する。When it is determined in step S55 that the user's finger or the like has moved away from the pad 111, the CPU 31 operates the user's operation input from the input section 34 via the input / output interface 32 and the internal bus 33 in step S56. The operation end position is acquired based on the signal corresponding to, the operation direction is detected, and the operation direction is temporarily stored.
【０１１３】ステップＳ５７において、ステップＳ５３
と同様の処理が実行され、ステップＳ５７において、パ
ッド１１１が操作されたと判断された場合、処理は、ス
テップＳ５４に戻り、それ以降の処理が繰り返される。In step S57, step S53
If it is determined in step S57 that the pad 111 has been operated, the process returns to step S54, and the subsequent processes are repeated.
【０１１４】ステップＳ５７において、パッド１１１が
操作されなかったと判断された場合、ステップＳ５８に
おいて、ＣＰＵ３１は、予め定められた所定の時間以
上、パッド１１１に対する操作が行われなかったか否か
を判断する。ステップＳ５８において、まだ所定時間が
経過していないと判断された場合、処理は、ステップＳ
５７に戻り、それ以降の処理が繰り返される。When it is determined in step S57 that the pad 111 has not been operated, the CPU 31 determines in step S58 whether or not the pad 111 has been operated for a predetermined time or more. If it is determined in step S58 that the predetermined time has not yet elapsed, the process proceeds to step S58.
The process returns to 57 and the subsequent processes are repeated.
【０１１５】ステップＳ５８において、所定時間以上操
作が行われなかったと判断された場合、ステップＳ５９
において、ＣＰＵ３１は、これまで行われた全ての操作
の操作方向（例えば、３回の操作入力に対して、それぞ
れ、上、右、下などの操作方向）を検出する。If it is determined in step S58 that the operation has not been performed for the predetermined time or longer, step S59
In, the CPU 31 detects the operation directions of all the operations performed so far (for example, the operation directions of up, right, down, etc. for three operation inputs).
【０１１６】ステップＳ６０において、ＣＰＵ３１は、
操作方向によって指定されるメニュー内容に従った処理
を実行する。At step S60, the CPU 31
The processing according to the menu contents specified by the operation direction is executed.
【０１１７】例えば、３回の操作入力に対して、それぞ
れ、上、右、下の操作方向が検出された場合、メインメ
ニューのメニューＧＵＩにおいて、上方向に操作された
場合に表示されるべきメニューＧＵＩにおいて指定され
るサブメニューが抽出される。そして、そのサブメニュ
ーのうち、右方向の操作に対応するサブメニューが実行
された場合に表示されるべきメニューＧＵＩにおいて指
定されるサードメニューが抽出される。そして、そのサ
ードメニューのうち、下方向の操作に対応するサードメ
ニューが実行される。For example, when the up, right, and down operation directions are respectively detected with respect to three operation inputs, the menu GUI to be displayed in the menu GUI of the main menu when the up operation is performed. The submenu specified in the GUI is extracted. Then, of the submenus, the third menu specified in the menu GUI to be displayed when the submenu corresponding to the rightward operation is executed is extracted. Then, among the third menus, the third menu corresponding to the downward operation is executed.
【０１１８】このショートカットは、２つ以上のいくつ
の操作から構成されていても良い。また、ショートカッ
トの最後は、必ずしもコマンドを示していなくても良
く、例えば、図１７を用いて説明したメニューＧＵＩ１
８１が表示されている状態において、右斜め下、右、の
２つの操作からなるショートカットが入力された場合、
直ちに、図１８（Ｂ）を用いて説明したメニューＧＵＩ
２０１が表示されるようにしても良い。This shortcut may be composed of any number of two or more operations. Further, at the end of the shortcut, it is not always necessary to indicate a command, and for example, the menu GUI1 described with reference to FIG.
When 81 is displayed and a shortcut consisting of two operations, diagonally right lower and right, is input,
Immediately, the menu GUI described with reference to FIG.
201 may be displayed.
【０１１９】ステップＳ６１において、図９のステップ
Ｓ８と同様の処理が実行される。ステップＳ６１におい
て、メニューＧＵＩモードの終了指示が入力されていな
いと判断された場合、処理は、ステップＳ５３に戻り、
それ以降の処理が繰り返される。ステップＳ６１におい
て、メニューＧＵＩモードの終了指示が入力されたと判
断された場合、処理は終了される。In step S61, the same processing as step S8 in FIG. 9 is executed. When it is determined in step S61 that the menu GUI mode end instruction has not been input, the process returns to step S53,
The subsequent processing is repeated. If it is determined in step S61 that an instruction to end the menu GUI mode has been input, the processing ends.
【０１２０】図１６を用いて説明した処理により、ユー
ザは、複数の方向の操作の組み合わせにより、キーボー
ドを用いて入力される従来のショートカット操作と同様
に、簡単な操作で任意のメニューを選択したり、コマン
ドを入力することが可能となる。By the processing described with reference to FIG. 16, the user can select an arbitrary menu by a simple operation by a combination of operations in a plurality of directions, as in the conventional shortcut operation input using the keyboard. You can also enter commands.
【０１２１】以上説明した処理により、例えば、マウス
などの位置情報を入力する入力デバイスの操作が不慣れ
なユーザにも、簡単な操作でメニューを選択することが
可能となる。更に、操作入力のパラメータは、方向のみ
ならず、方向と移動距離の組み合わせ、方向と移動速度
の組み合わせ、あるいは、方向と操作時間の組み合わせ
などを利用することが出きるので、数値入力を必要とす
る命令も、非常に簡単な操作で実行することが出来る。By the processing described above, for example, even a user who is unfamiliar with the operation of an input device such as a mouse for inputting positional information can select a menu with a simple operation. Further, as the parameter of the operation input, not only the direction but also the combination of the direction and the moving distance, the combination of the direction and the moving speed, or the combination of the direction and the operation time can be used. The command to do can also be executed by a very simple operation.
【０１２２】更に、ユーザは、複数の方向の操作の組み
合わせにより、キーボードを用いて入力される従来のシ
ョートカット操作と同様に、任意のコマンドを入力する
ことが可能となるので、操作入力を効率よく行うことが
出来る。Furthermore, the user can input an arbitrary command by combining operations in a plurality of directions, as in the conventional shortcut operation input using a keyboard, so that the operation input can be performed efficiently. You can do it.
【０１２３】なお、ここでは、タッチパッドやタッチパ
ネルなどのパネル状の入力デバイスを用いて操作入力す
る場合について説明したが、例えば、マウス、ジョイス
ティック、トラックボール、トラックスティック、ある
いは、トラックポイントなどの入力デバイスを用いて同
様の操作入力を行うことが出来るのは言うまでもない。Here, a case has been described where the operation input is performed using a panel-shaped input device such as a touch pad or a touch panel. It goes without saying that the same operation input can be performed using the device.
【０１２４】上述した一連の処理は、ソフトウェアによ
り実行することもできる。そのソフトウェアは、そのソ
フトウェアを構成するプログラムが、専用のハードウェ
アに組み込まれているコンピュータ、または、各種のプ
ログラムをインストールすることで、各種の機能を実行
することが可能な、例えば汎用のパーソナルコンピュー
タなどに、記録媒体からインストールされる。The series of processes described above can also be executed by software. The software is, for example, a general-purpose personal computer, in which a program that constitutes the software is installed in dedicated hardware, or various functions can be executed by installing various programs. Installed from the recording medium.
【０１２５】この記録媒体は、図３乃至図５に示すよう
に、コンピュータとは別に、ユーザにプログラムを提供
するために配布される、プログラムが記録されている磁
気ディスク４１（フレキシブルディスクを含む）、光デ
ィスク４２（CD-ROM（Compact Disk-Read Only Memor
y），DVD（Digital Versatile Disk）を含む）、光磁気
ディスク４３（ＭＤ(Mini-Disk)（商標）を含む）、も
しくは半導体メモリ４４などよりなるパッケージメディ
アなどにより構成される。As shown in FIGS. 3 to 5, this recording medium is a magnetic disk 41 (including a flexible disk) on which a program is recorded, which is distributed in order to provide the program to the user separately from the computer. , Optical disk 42 (CD-ROM (Compact Disk-Read Only Memor
y), a DVD (including a Digital Versatile Disk), a magneto-optical disk 43 (including an MD (Mini-Disk) (trademark)), a package medium including a semiconductor memory 44, or the like.
【０１２６】また、本明細書において、記録媒体に記録
されるプログラムを記述するステップは、記載された順
序に沿って時系列的に行われる処理はもちろん、必ずし
も時系列的に処理されなくとも、並列的あるいは個別に
実行される処理をも含むものである。Further, in the present specification, the steps for writing the program recorded on the recording medium are not limited to the processing performed in time series according to the order described, but are not necessarily performed in time series. It also includes processing executed in parallel or individually.
【０１２７】[0127]
【発明の効果】本発明の情報処理装置および情報処理方
法並びにプログラムによれば、ユーザの操作入力を２次
元の方向情報として取得し、それぞれが所定の方向と対
応付けられた複数のメニューを記憶し、取得された方向
情報に基づいて、記憶された複数のメニューのうちの１
つを選択し、選択されたメニューを実行するようにした
ので、ユーザは、簡単な操作でメニューを選択すること
が可能となる。According to the information processing apparatus, the information processing method, and the program of the present invention, a user's operation input is acquired as two-dimensional direction information, and a plurality of menus, each of which is associated with a predetermined direction, are stored. Then, based on the acquired direction information, one of the plurality of stored menus
Since one is selected and the selected menu is executed, the user can select the menu with a simple operation.
【図１】従来のメニューの選択方法について説明するた
めの図である。FIG. 1 is a diagram for explaining a conventional menu selection method.
【図２】本発明を適応することが可能な装置について説
明するための図である。FIG. 2 is a diagram for explaining an apparatus to which the present invention can be applied.
【図３】図２のパーソナルコンピュータの構成を示すブ
ロック図である。FIG. 3 is a block diagram showing the configuration of the personal computer shown in FIG.
【図４】図２の電子ブックプレーヤの構成を示すブロッ
ク図である。FIG. 4 is a block diagram showing a configuration of the electronic book player of FIG.
【図５】図２のＰＤＡの構成を示すブロック図である。5 is a block diagram showing a configuration of the PDA of FIG.
【図６】メニューＧＵＩについて説明するための図であ
る。FIG. 6 is a diagram for explaining a menu GUI.
【図７】パッドに対する操作入力について説明するため
の図である。FIG. 7 is a diagram for explaining an operation input on a pad.
【図８】メインメニューのメニューＧＵＩとサブメニュ
ーのメニューＧＵＩについて説明するための図である。FIG. 8 is a diagram for explaining a menu GUI of a main menu and a menu GUI of a sub menu.
【図９】メニューＧＵＩモードの処理１について説明す
るためのフローチャートである。FIG. 9 is a flowchart illustrating a process 1 in a menu GUI mode.
【図１０】数値表示ボックスについて説明するための図
である。FIG. 10 is a diagram for explaining a numerical value display box.
【図１１】数値表示ボックスの利用例について説明する
ための図である。FIG. 11 is a diagram for explaining an example of use of a numerical value display box.
【図１２】スライドバーについて説明するための図であ
る。FIG. 12 is a diagram for explaining a slide bar.
【図１３】メニューによって入力が異なる場合について
説明するための図である。FIG. 13 is a diagram for explaining a case where input differs depending on a menu.
【図１４】メニューによって入力が異なる場合について
説明するための図である。FIG. 14 is a diagram for explaining a case where input differs depending on a menu.
【図１５】メニューＧＵＩモードの処理２について説明
するためのフローチャートである。FIG. 15 is a flowchart illustrating a process 2 in a menu GUI mode.
【図１６】メニューＧＵＩモードの処理２について説明
するためのフローチャートである。FIG. 16 is a flowchart illustrating a process 2 in a menu GUI mode.
【図１７】メニューＧＵＩの具体例について説明するた
めの図である。FIG. 17 is a diagram illustrating a specific example of a menu GUI.
【図１８】メニューＧＵＩの具体例について説明するた
めの図である。FIG. 18 is a diagram illustrating a specific example of a menu GUI.
【図１９】メニューＧＵＩモードのショートカット入力
処理について説明するためのフローチャートである。FIG. 19 is a flowchart illustrating a shortcut input process in a menu GUI mode.
２１ パーソナルコンピュータ， ２２ 電子ブックプ
レーヤ， ２３ ＰＤＡ， ３１ CPU， ３４ 入力
部， ３７ 表示部， ５１ CPU， ５２ 入力部，
５６ 表示制御部， ５７ 表示パネル， ７１ CP
U， ７８ タッチパッド制御部部， ８８ キー，
８９ ジョグダイヤル， ９０ 表示部，１０１ メニ
ューＧＵＩ， １１１ パッド， １２１，１３１ メ
ニューＧＵＩ １３２ 数値表示ボックス， １５２
スライドバー21 personal computer, 22 electronic book player, 23 PDA, 31 CPU, 34 input section, 37 display section, 51 CPU, 52 input section,
56 display control unit, 57 display panel, 71 CP
U, 78 touch pad control section, 88 key,
89 jog dial, 90 display unit, 101 menu GUI, 111 pad, 121, 131 menu GUI 132 numerical display box, 152
Slide bar
─────────────────────────────────────────────────────フロントページの続き Ｆターム(参考） 5B075 ND03 ND22 ND23 ND35 PP03 PP13 PP30 PQ02 PQ05 PQ46 PQ48 PQ49 PQ60 UU08 UU11 UU40 5E501 AA02 AA04 AA12 AC34 BA05 CA02 CB08 CC14 EA07 EB05 FA05 FA23 FA47 FB03 FB43 ─────────────────────────────────────────────────── ───Continued front page F term (reference) 5B075 ND03 ND22 ND23 ND35 PP03 PP13 PP30 PQ02 PQ05 PQ46 PQ48 PQ49 PQ60 UU08 UU11 UU40 5E501 AA02 AA04 AA12 AC34 BA05 CA02 CB08 CC14 EA07 EB05 FA05 FA23 FA47 FB03 FB43
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001289235AJP2003099171A (en) | 2001-09-21 | 2001-09-21 | Information processor, information processing method, recording medium, and its program |
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001289235AJP2003099171A (en) | 2001-09-21 | 2001-09-21 | Information processor, information processing method, recording medium, and its program |
| Publication Number | Publication Date |
|---|---|
| JP2003099171Atrue JP2003099171A (en) | 2003-04-04 |
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001289235APendingJP2003099171A (en) | 2001-09-21 | 2001-09-21 | Information processor, information processing method, recording medium, and its program |
| Country | Link |
|---|---|
| JP (1) | JP2003099171A (en) |
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006528806A (en)* | 2003-07-25 | 2006-12-21 | ソニー エリクソン モバイル コミュニケーションズ， エービー | Event list menu to access menu items in the hierarchical menu |
| KR100686956B1 (en) | 2006-02-20 | 2007-02-26 | 김선권 | Method and apparatus for providing layered ring menu for graphic user interface |
| JP2007102495A (en)* | 2005-10-04 | 2007-04-19 | Nintendo Co Ltd | Image processor, image processing program, game apparatus, and game program |
| KR100791377B1 (en) | 2005-12-28 | 2008-01-07 | 삼성전자주식회사 | A mobile device providing a user interface and a method of executing a function using the user interface |
| JP2009037584A (en)* | 2007-07-31 | 2009-02-19 | Palo Alto Research Center Inc | User interface for a context-aware leisure activity proposal system |
| JP2009076044A (en)* | 2007-09-18 | 2009-04-09 | Palo Alto Research Center Inc | Method and apparatus for selecting an object in a user interface by making a gesture |
| JP2010055343A (en)* | 2008-08-28 | 2010-03-11 | Sony Corp | Information processing apparatus and method, and program |
| JP2010530578A (en)* | 2007-06-12 | 2010-09-09 | マイクロソフト コーポレーション | Visual feedback display |
| JP2011013990A (en)* | 2009-07-03 | 2011-01-20 | Pioneer Electronic Corp | Content reproduction apparatus |
| JP2012014559A (en)* | 2010-07-02 | 2012-01-19 | Canon Inc | Display control apparatus and display control method |
| JP2014075130A (en)* | 2012-10-02 | 2014-04-24 | Toyota Motor Engineering & Manufacturing North America Inc | Method for managing user input on user interface, user interface, and computer-readable medium |
| WO2017125828A1 (en)* | 2016-01-20 | 2017-07-27 | Semiconductor Energy Laboratory Co., Ltd. | Input device, input/output device, and data processing device |
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH05127819A (en)* | 1991-10-31 | 1993-05-25 | Nec Corp | Stroke command supporting system |
| JPH06332620A (en)* | 1993-05-25 | 1994-12-02 | Brother Ind Ltd | Cursor movement controller |
| JPH07200126A (en)* | 1993-12-21 | 1995-08-04 | Xerox Corp | User interface device, graphic keyboard device and usage method of graphic keyboard |
| JPH08305535A (en)* | 1995-05-08 | 1996-11-22 | Fuji Xerox Co Ltd | Information display device |
| JPH1074124A (en)* | 1997-07-07 | 1998-03-17 | Fuji Xerox Co Ltd | Display device for user interface |
| JPH11338600A (en)* | 1998-05-26 | 1999-12-10 | Yamatake Corp | Setting value changing method and setting value changing device |
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH05127819A (en)* | 1991-10-31 | 1993-05-25 | Nec Corp | Stroke command supporting system |
| JPH06332620A (en)* | 1993-05-25 | 1994-12-02 | Brother Ind Ltd | Cursor movement controller |
| JPH07200126A (en)* | 1993-12-21 | 1995-08-04 | Xerox Corp | User interface device, graphic keyboard device and usage method of graphic keyboard |
| JPH08305535A (en)* | 1995-05-08 | 1996-11-22 | Fuji Xerox Co Ltd | Information display device |
| JPH1074124A (en)* | 1997-07-07 | 1998-03-17 | Fuji Xerox Co Ltd | Display device for user interface |
| JPH11338600A (en)* | 1998-05-26 | 1999-12-10 | Yamatake Corp | Setting value changing method and setting value changing device |
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006528806A (en)* | 2003-07-25 | 2006-12-21 | ソニー エリクソン モバイル コミュニケーションズ， エービー | Event list menu to access menu items in the hierarchical menu |
| JP2007102495A (en)* | 2005-10-04 | 2007-04-19 | Nintendo Co Ltd | Image processor, image processing program, game apparatus, and game program |
| KR100791377B1 (en) | 2005-12-28 | 2008-01-07 | 삼성전자주식회사 | A mobile device providing a user interface and a method of executing a function using the user interface |
| KR100686956B1 (en) | 2006-02-20 | 2007-02-26 | 김선권 | Method and apparatus for providing layered ring menu for graphic user interface |
| JP2010530578A (en)* | 2007-06-12 | 2010-09-09 | マイクロソフト コーポレーション | Visual feedback display |
| KR101541928B1 (en)* | 2007-06-12 | 2015-08-05 | 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 | Visual feedback display |
| JP2009037584A (en)* | 2007-07-31 | 2009-02-19 | Palo Alto Research Center Inc | User interface for a context-aware leisure activity proposal system |
| JP2009076044A (en)* | 2007-09-18 | 2009-04-09 | Palo Alto Research Center Inc | Method and apparatus for selecting an object in a user interface by making a gesture |
| JP2010055343A (en)* | 2008-08-28 | 2010-03-11 | Sony Corp | Information processing apparatus and method, and program |
| US8312374B2 (en) | 2008-08-28 | 2012-11-13 | Sony Corporation | Information processing apparatus and method and computer program |
| JP2011013990A (en)* | 2009-07-03 | 2011-01-20 | Pioneer Electronic Corp | Content reproduction apparatus |
| JP2012014559A (en)* | 2010-07-02 | 2012-01-19 | Canon Inc | Display control apparatus and display control method |
| JP2014075130A (en)* | 2012-10-02 | 2014-04-24 | Toyota Motor Engineering & Manufacturing North America Inc | Method for managing user input on user interface, user interface, and computer-readable medium |
| WO2017125828A1 (en)* | 2016-01-20 | 2017-07-27 | Semiconductor Energy Laboratory Co., Ltd. | Input device, input/output device, and data processing device |
| US10324570B2 (en) | 2016-01-20 | 2019-06-18 | Semiconductor Energy Laboratory Co., Ltd. | Input device, input/output device, and data processing device |
| US10802659B2 (en) | 2016-01-20 | 2020-10-13 | Semiconductor Energy Laboratory Co., Ltd. | Input device, input/output device, and data processing device |
| US11720190B2 (en) | 2016-01-20 | 2023-08-08 | Semiconductor Energy Laboratory Co., Ltd. | Display device with touch sensor |
| US12204710B2 (en) | 2016-01-20 | 2025-01-21 | Semiconductor Energy Laboratory Co., Ltd. | Display device with alignment film over pixel electrode and conductive film functioning as touch sensor and common electrode |
| Publication | Publication Date | Title |
|---|---|---|
| US11204687B2 (en) | Visual thumbnail, scrubber for digital content | |
| EP1202156B1 (en) | Data input/output system, data input/output method and program recording medium | |
| RU2506630C2 (en) | Rendering teaching animations on user interface display | |
| JP3372563B2 (en) | Tree structure display editing device | |
| US7039868B2 (en) | Information processing apparatus, information processing method, storage medium, and program | |
| EP1784709B1 (en) | Multi-planar three-dimensional user interface | |
| JP6153868B2 (en) | Method and apparatus for displaying items | |
| JP4142175B2 (en) | Graphical user interface device | |
| KR101442929B1 (en) | Devices, methods, and graphical user interfaces for accessibility using a touch-sensitive surface | |
| CN101727286A (en) | Information processing apparatus, information processing method and program | |
| US5798759A (en) | Method and apparatus for mobile device screen reformatting | |
| US20090128504A1 (en) | Touch screen peripheral device | |
| US20080297484A1 (en) | Method and apparatus for providing gesture information based on touchscreen and information terminal device having the apparatus | |
| US20100162176A1 (en) | Reduced complexity user interface | |
| CN106502520A (en) | For navigating and playing the user interface of content | |
| CN105164625A (en) | Digital device and method of controlling therefor | |
| CN103314351A (en) | Method and device for editing touch display | |
| JP2008146243A (en) | Information processing apparatus, information processing method, and program | |
| KR20050094865A (en) | A programmable virtual book system | |
| JP2009129352A (en) | Display system, display device, and program | |
| CN102707939A (en) | Method and apparatus for presenting elements of a user interface | |
| JP2003099171A (en) | Information processor, information processing method, recording medium, and its program | |
| JP2009259163A (en) | User interface device and program | |
| KR20110095612A (en) | Link providing method and electronic device applying the same | |
| US20100171706A1 (en) | Information processor, user interface control method and program |
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination | Free format text:JAPANESE INTERMEDIATE CODE: A621 Effective date:20080909 | |
| A977 | Report on retrieval | Free format text:JAPANESE INTERMEDIATE CODE: A971007 Effective date:20100927 | |
| A131 | Notification of reasons for refusal | Free format text:JAPANESE INTERMEDIATE CODE: A131 Effective date:20100930 | |
| A521 | Request for written amendment filed | Free format text:JAPANESE INTERMEDIATE CODE: A523 Effective date:20101028 | |
| A131 | Notification of reasons for refusal | Free format text:JAPANESE INTERMEDIATE CODE: A131 Effective date:20110407 | |
| A02 | Decision of refusal | Free format text:JAPANESE INTERMEDIATE CODE: A02 Effective date:20110726 |