【０００１】[0001]
【発明の属する技術分野】本発明は、複数の操作対象に
対して操作信号を出力するための操作信号出力装置に関
する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an operation signal output device for outputting an operation signal to a plurality of operation objects.
【０００２】[0002]
【発明が解決しようとする課題】例えば、自動車の車室
内においては、ライト，ワイパー，ドア，ミラーなどの
自動車の運転に直接関連するものに加えて、所謂アクセ
サリと称されるラジオやＣＤ，或いは空調機器やカーナ
ビゲーション装置などの多数の操作対象が配置されてお
り、運転者は、これらを必要に応じて適宜操作しながら
自動車を運転するようになっている。しかしながら、こ
れら多数の操作対象に対する現状の操作環境について
は、以下のような問題がある。For example, in the interior of a car, in addition to those directly related to the operation of the car, such as lights, wipers, doors, and mirrors, radios and CDs called so-called accessories, or A large number of operation targets such as an air conditioner and a car navigation device are arranged, and a driver drives a vehicle while appropriately operating these as needed. However, the current operation environment for these many operation targets has the following problems.
【０００３】先ず、ラジオ，ＣＤ，空調機器などの操作
スイッチは、インストルメントパネルの中央部分に集中
的に配置される傾向にあり、この部分に配置されたスイ
ッチは運転者側から遠く操作しづらい。また、集中的に
配置されるため、一瞥しただけでは、どの操作スイッチ
がどの操作対象に対応しているのかが分かり難い。特
に、ラジオのボリューム調整，空調機器の風量調整など
の場合は、運転者が視線をスイッチ側に向けている時間
が長くなるため、前方注意を怠ることになってしまう。
本発明は上記事情に鑑みてなされたものであり、その目
的は、複数の操作対象の操作を容易に行うことが可能な
操作信号出力装置を提供することにある。First, the operation switches of radios, CDs, air conditioners and the like tend to be arranged intensively in the central part of the instrument panel, and the switches arranged in this part are difficult to operate far from the driver side. . In addition, since they are arranged intensively, it is difficult to understand at a glance which operation switch corresponds to which operation target. In particular, in the case of adjusting the volume of a radio, adjusting the air volume of an air conditioner, or the like, the time during which the driver turns his or her gaze to the switch side becomes longer, so that the driver must be careful of the forward direction.
The present invention has been made in view of the above circumstances, and an object of the present invention is to provide an operation signal output device capable of easily performing operations on a plurality of operation targets.
【０００４】[0004]
【課題を解決するための手段】上記目的を達成するた
め、請求項１記載の操作信号出力装置は、所定範囲内に
おいて人間の身体の一部を撮像するための撮像手段と、
この撮像手段によって撮像された前記人間の身体の一部
の画像をパターン認識する画像認識手段と、複数の操作
対象の内、前記画像認識手段によって認識された画像パ
ターンに対応する操作対象に操作信号を選択的に出力す
る操作信号出力手段とを具備したことを特徴とする。According to a first aspect of the present invention, there is provided an operation signal output device for imaging a part of a human body within a predetermined range.
Image recognition means for pattern-recognizing an image of a part of the human body imaged by the imaging means; and an operation signal corresponding to an operation object corresponding to the image pattern recognized by the image recognition means among a plurality of operation objects. And an operation signal output means for selectively outputting the operation signal.
【０００５】斯様に構成すれば、例えば、自動車の車室
内などのように複数の操作対象が配設されている環境に
おいて、運転者が手などによって特定のサイン（人差し
指を立てるなどの）を所定範囲内に示すと、その特定の
サインが撮像手段によって撮像される。撮像された画像
は画像認識手段によってパターン認識され、操作信号出
力手段は、画像認識手段が認識した画像パターンに対応
する操作対象に操作信号を選択的に出力する。従って、
運転者は、従来とは異なり、ラジオやＣＤなどの操作対
象に設けられている操作スイッチの位置を眼で確認した
上でその操作スイッチまで手を伸ばして操作する必要が
なくなり、複数の操作対象の操作を容易に行うことがで
きる。[0005] With such a configuration, for example, in an environment where a plurality of operation objects are arranged, such as in the interior of a car, the driver can use a hand or the like to give a specific sign (such as raising an index finger). When it is within the predetermined range, the specific sign is imaged by the imaging means. The captured image is subjected to pattern recognition by the image recognition means, and the operation signal output means selectively outputs an operation signal to an operation target corresponding to the image pattern recognized by the image recognition means. Therefore,
Unlike conventional models, the driver does not need to check the position of the operation switch provided on the operation target such as a radio or CD with his eyes and reach for the operation switch to operate. Operation can be easily performed.
【０００６】この場合、請求項２に記載したように、前
記操作信号出力手段に、前記人間の身体の一部の画像パ
ターンと前記操作信号を出力する前記操作対象との対応
関係を予め設定するための設定手段を設けるのが好まし
い。斯様に構成すれば、使用者は、自分が操作を行い易
いように、身体の一部で示すサインと各操作対象との対
応関係を設定できる。In this case, the correspondence between the image pattern of a part of the human body and the operation target that outputs the operation signal is preset in the operation signal output means. Is preferably provided. With this configuration, the user can set the correspondence between the sign shown by a part of the body and each operation target so that the user can easily perform the operation.
【０００７】請求項３に記載したように、前記操作信号
出力手段を、前記画像認識手段によって認識された特定
操作対象のオンオフ操作に対応する共通の画像パターン
が与えられると、当該特定操作対象のオンオフ状態を参
照して、当該特定操作対象がオフ状態であればオン操作
信号を出力し、当該特定操作対象がオン状態であればオ
フ操作信号を出力するように構成するのが好ましい。According to a third aspect of the present invention, when a common image pattern corresponding to the on / off operation of the specific operation target recognized by the image recognition unit is provided to the operation signal output unit, the specific operation target is output. With reference to the on / off state, it is preferable that an on operation signal is output if the specific operation target is in an off state, and an off operation signal is output if the specific operation target is in an on state.
【０００８】斯様に構成すれば、オン操作，オフ操作に
対応する身体の一部で示す特定のサインを共通化するこ
とによって、各操作対象の操作を行うために必要な前記
サインの数を少なくすることができ、単純なサインによ
って操作を行うことが可能となる。[0008] According to this structure, the number of the above-mentioned signs necessary for performing the operation of each operation object can be reduced by sharing a specific sign shown by a part of the body corresponding to the ON operation and the OFF operation. The operation can be performed with a simple sign.
【０００９】請求項４に記載したように、前記複数の操
作対象に対して操作量増加信号と操作量減少信号とを出
力するための前記人間の身体の一部の画像パターンを夫
々共通化し、前記画像認識手段を、前記所定範囲を前記
複数の操作対象に対応する複数の区画に分割して、その
何れにおいて前記画像パターンが撮像されたかを認識可
能に構成し、前記操作信号出力手段を、前記画像認識手
段が前記画像パターンを認識すると、当該画像パターン
が認識された区画に対応する操作対象に前記操作量増加
信号または前記操作量減少信号を出力する構成にすると
良い。According to a fourth aspect of the present invention, an image pattern of a part of the human body for outputting an operation amount increase signal and an operation amount decrease signal to the plurality of operation objects is shared, respectively. The image recognizing unit divides the predetermined range into a plurality of sections corresponding to the plurality of operation targets, and is configured to be able to recognize in which of the sections the image pattern is captured, and the operation signal output unit. When the image recognizing means recognizes the image pattern, it is preferable to output the operation amount increase signal or the operation amount decrease signal to an operation target corresponding to the section in which the image pattern is recognized.
【００１０】斯様に構成すれば、各操作対象毎に操作量
増加信号及び操作量減少信号に対応する特定のサインを
設定する必要がなく、前記サインの数を少なくすること
ができると共に、より簡単に操作を行うことができる。With this configuration, it is not necessary to set a specific sign corresponding to the operation amount increase signal and the operation amount decrease signal for each operation object, and the number of the signs can be reduced. Operation can be performed easily.
【００１１】[0011]
【発明の実施の形態】以下、本発明を自動車に適用した
場合の一実施例について図面を参照して説明する。ＣＣ
Ｄカメラ（撮像手段）１は、自動車の運転席（右ハンド
ル）の左側で、所定範囲として例えば３０〜５０ｃｍ平
方の範囲内（図３参照）において、各種の操作信号に対
応して運転者の左手によって示されるパターン（図２参
照）を撮像するために、ＣＣＤ画素部分が運転席の前方
から後方に向くようにして設けられている。そのＣＣＤ
カメラ１の撮像信号は、スイッチコントロールＥＣＵ(E
lectric Contorol Unit)２のＣＰＵ（画像認識手段，操
作信号出力手段）３に与えられるようになっている。DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS An embodiment in which the present invention is applied to an automobile will be described below with reference to the drawings. CC
The D camera (imaging means) 1 is provided on the left side of the driver's seat (right handle) of the automobile in a predetermined range of, for example, 30 to 50 cm square (see FIG. 3) in response to various operation signals. In order to image the pattern shown by the left hand (see FIG. 2), a CCD pixel portion is provided so as to face from the front to the rear of the driver's seat. The CCD
The imaging signal of the camera 1 is transmitted to the switch control ECU (E
and a CPU (image recognition means, operation signal output means) 3 of an electric control unit 2.
【００１２】自動車の車室内には、ラジオ４，ＣＤ５，
空調機器６などの各種操作対象が配置されている。そし
て、ＣＰＵ（マイクロコンピュータ）３は、ＣＣＤカメ
ラ１の撮像信号を画像処理してパターン認識すると、当
該画像パターンに対応する操作対象に、当該画像パター
ンに対応する操作信号をスイッチ駆動回路７を介して出
力するようになっている。Radio 4, CD5,
Various operation targets such as the air conditioner 6 are arranged. When the CPU (microcomputer) 3 recognizes the pattern by performing image processing on the imaging signal of the CCD camera 1, the CPU 3 sends an operation signal corresponding to the image pattern to the operation target corresponding to the image pattern via the switch driving circuit 7. Output.
【００１３】自動車のハンドル８には、プレ入力スイッ
チ（有効化スイッチ）９が配設されており、そのプレ入
力スイッチ９の出力信号は、スイッチコントロールＥＣ
Ｕ（以下、単にＥＣＵと称す）２の入力モード処理部１
０を介してＣＰＵ３に与えられるようになっている。プ
レ入力スイッチ９は、例えばスライドスイッチなどで構
成されており、プレ入力スイッチ９がオン操作される
と、ＣＰＵ３は、ＣＣＤカメラ１により撮像された運転
者の左手で示されるパターンによる各種操作対象の操作
を有効化するようになっている。A pre-input switch (validation switch) 9 is provided on the steering wheel 8 of the automobile, and an output signal of the pre-input switch 9 is a switch control EC.
U (hereinafter simply referred to as ECU) 2 input mode processing unit 1
0 to the CPU 3. The pre-input switch 9 is configured by, for example, a slide switch, and when the pre-input switch 9 is turned on, the CPU 3 causes the CPU 3 to perform various operations to be performed according to a pattern shown by the left hand of the driver captured by the CCD camera 1. The operation is enabled.
【００１４】ＥＣＵ２には、設定スイッチ（設定手段）
１１が設けられており、その設定スイッチ１１の出力信
号も、入力モード処理部１０を介してＣＰＵ３に与えら
れるようになっている。設定スイッチ１１は、各操作対
象毎に設けられており、運転者の左手で示されるパター
ンと、各種操作対象の各種操作とを予め対応付けて設定
する場合にオン操作するものである。また、ＥＣＵ２
は、報知音発生装置（操作報知手段）１２に制御信号を
与えることによって、各種操作対象に対して操作信号を
出力したことを報知するための報知音を出力するように
なっている。A setting switch (setting means) is provided in the ECU 2.
An output signal of the setting switch 11 is also provided to the CPU 3 via the input mode processing unit 10. The setting switch 11 is provided for each operation target, and is turned on when setting a pattern indicated by the left hand of the driver and various operations of various operation targets in advance in association with each other. ECU2
Supplies a control signal to a notification sound generation device (operation notification means) 12 to output a notification sound for notifying that an operation signal has been output to various operation targets.
【００１５】次に、本実施例の作用について図２乃至図
４をも参照して説明する。先ず、運転者は、設定スイッ
チ１１をオン操作して、自分の左手で示す各種のパター
ンでどの操作を行うかを対応付けるための設定操作を行
う。Next, the operation of this embodiment will be described with reference to FIGS. First, the driver turns on the setting switch 11 and performs a setting operation for associating which operation is to be performed in various patterns indicated by his / her left hand.
【００１６】例えば、図２〜に一例を示すように、
左手の人差し指を立てるパターン（サイン）はラジオ
４のオンオフ操作，人差し指と中指とを立てるパターン
はＣＤ５のオンオフ操作，人差し指，中指及び薬指を
立てるパターンは空調機器６のオンオフ操作に対応さ
せる。For example, as shown in FIG.
The pattern (sign) of raising the index finger of the left hand corresponds to the on / off operation of the radio 4, the pattern of raising the index finger and the middle finger corresponds to the on / off operation of the CD 5, and the pattern of raising the index finger, the middle finger and the ring finger corresponds to the on / off operation of the air conditioner 6.
【００１７】また、親指を立てるパターン（以下、パ
ターンＵＰと称す）はボリューム或いは風量などの増大
操作，パターンの親指を下方へ向けて示すパターン
（以下、パターンＤＯＷＮと称す）はボリューム或いは
風量などの減少操作に対応させるように、各パターン
〜をＣＣＤカメラ１に示して撮像させると共に、ＥＣ
Ｕ２の設定スイッチ１１を夫々オン操作することによっ
て各パターンと操作とを対応付けて、図示しない不揮発
性のメモリなどに記憶させる。A pattern for raising the thumb (hereinafter, referred to as a pattern UP) is an operation for increasing the volume or air volume, and a pattern for pointing the thumb downward (hereinafter, referred to as a pattern DOWN) is for the volume or air volume. In order to correspond to the decreasing operation, each pattern (1) to (5) is shown on the CCD
By turning on the setting switch 11 of U2, each pattern is associated with an operation and stored in a non-illustrated nonvolatile memory or the like.
【００１８】そして、自動車の運転中に各操作対象に操
作信号を出力する場合には、プレ入力スイッチ９をオン
操作することにより、ＥＣＵ２は、図４に示すフローチ
ャートに従って動作する。尚、初期状態では、各機器４
〜６はオフ状態にあるものとする。この図４で、ＣＰＵ
３は、各判断ステップＳ１〜Ｓ５において、ＣＣＤカメ
ラ１によりパターン〜が撮像されたか否かを判断す
る。何れのパターンも撮像されず各ステップＳ１〜Ｓ５
において「ＮＯ」と判断した場合は、ステップＳ１に戻
り以上のループを繰り返す。When an operation signal is output to each operation target during driving of the automobile, the pre-input switch 9 is turned on, so that the ECU 2 operates according to the flowchart shown in FIG. In the initial state, each device 4
To 6 are in the off state. In FIG. 4, the CPU
3 determines in each of the determination steps S1 to S5 whether or not the pattern 1 has been imaged by the CCD camera 1. Each of the steps S1 to S5 does not take an image of any pattern.
If it is determined to be "NO" in step S1, the process returns to step S1 and repeats the above loop.
【００１９】この状態から、運転者が左手で、例えばラ
ジオ４のオンオフ操作に対応するパターンのサインを
つくり、ＣＣＤカメラ１の撮像範囲（所定範囲）に示す
ことによって、そのパターンのサインがＣＣＤカメラ
１より撮像されたとすると、ＣＰＵ３は、「パターン
入力あり？」のステップＳ１において「ＹＥＳ」と判断
し、「ラジオ オン状態？」の判断ステップＳ６に移行
する。From this state, the driver makes a sign of a pattern corresponding to, for example, the on / off operation of the radio 4 with the left hand, and indicates the sign of the pattern in the imaging range (predetermined range) of the CCD camera 1 so that the sign of the pattern becomes the CCD camera. Assuming that the image is taken from Step 1, the CPU 3 determines "YES" in the step S1 of "Pattern input?", And shifts to the determination step S6 of "Radio on?"
【００２０】判断ステップＳ６において、ＣＰＵ３は、
例えば、各機器４〜６を夫々オン状態にした場合にセッ
トするフラグの状態を参照することによって、ラジオ４
が現在オン状態にあるか否かを判断する。この場合は、
ラジオ４はオフ状態であるから「ＮＯ」と判断して、
「ラジオ オン操作」の処理ステップＳ７に移行する。In the judgment step S6, the CPU 3
For example, by referring to the state of the flag set when each of the devices 4 to 6 is turned on, the radio 4
It is determined whether or not is currently on. in this case,
Since the radio 4 is in the off state, it is determined as “NO”,
The process proceeds to the processing step S7 of "radio ON operation".
【００２１】処理ステップＳ７において、ＣＰＵ３は、
ラジオ４にオン操作信号を出力してラジオ４をオン状態
にすると共に、内部の図示しないＲＡＭのフラグ格納領
域に“１”を書込んで、ラジオ４をオン状態にしたこと
を示すフラグ（以下、オン状態フラグと称す）をセット
する。そして、次の「オン報知」の処理ステップＳ８に
移行する。In the processing step S7, the CPU 3
An on operation signal is output to the radio 4 to turn the radio 4 on, and a flag indicating that the radio 4 is turned on by writing "1" in a flag storage area of an internal RAM (not shown). , On-state flag). Then, the process proceeds to the next "ON notification" processing step S8.
【００２２】処理ステップＳ８において、ＣＰＵ３は、
報知音発生装置１２に制御信号を出力し、ラジオ４にオ
ン操作信号を出力したことを運転者に報知するための報
知音を発生させる。報知音は、一定の音程を有するもの
や、或いは、短いメロディを奏するものとして、どの操
作対象に操作信号を出力したかが判別できるように、各
操作対象に応じて異なるものにするのが好ましい。そし
て、ステップＳ２に移行する。In the processing step S8, the CPU 3
A control signal is output to the notification sound generation device 12 and a notification sound for notifying the driver that the on operation signal has been output to the radio 4 is generated. It is preferable that the notification sound is different depending on each operation target so that it is possible to determine which operation target has output the operation signal, as having a certain pitch or playing a short melody. . Then, control goes to a step S2.
【００２３】一方、判断ステップＳ６において、ラジオ
４のオン状態フラグが既にセットされている場合は、Ｃ
ＰＵ３は「ＹＥＳ」と判断して、「ラジオ オフ操作」
の処理ステップＳ９，「オフ報知」の処理ステップＳ１
０に順次移行して、ラジオ４のオフ操作に関する処理を
行う。On the other hand, in the judgment step S6, if the on-state flag of the radio 4 is already set,
PU3 determines “YES” and “radio off operation”
Processing step S9, “OFF notification” processing step S1
The processing sequentially shifts to 0, and processing relating to the operation of turning off the radio 4 is performed.
【００２４】即ち、ステップＳ９において、ＣＰＵ３
は、ラジオ４にオフ操作信号を出力してラジオ４をオフ
状態にすると、内部のＲＡＭのフラグ格納領域に“０”
を書込んで、ラジオ４のオン状態フラグをリセットす
る。そして、ステップＳ１０において、ＣＰＵ３は、報
知音発生装置１２に制御信号を出力し、ラジオ４にオフ
操作信号を出力したことを運転者に報知するための報知
音を発生させる。That is, in step S9, the CPU 3
When the radio 4 is turned off by outputting an off operation signal to the radio 4, "0" is stored in the flag storage area of the internal RAM.
Is written to reset the on-state flag of the radio 4. Then, in step S10, the CPU 3 outputs a control signal to the notification sound generation device 12, and generates a notification sound for notifying the driver that the off operation signal has been output to the radio 4.
【００２５】同様に、ＣＤ５のオンオフ操作に対応する
パターンがＣＣＤカメラ１によって撮像された場合
は、ＣＰＵ３は、「パターン入力あり？」のステップ
Ｓ２において「ＹＥＳ」と判断し、「ＣＤオン状態？」
の判断ステップＳ１１に移行する。そして、判断ステッ
プＳ１１においてＣＤ５のオン状態フラグを参照し、そ
の結果に応じて、「ＣＤオン操作」の処理ステップＳ１
２及び「オン報知」の処理ステップＳ１３に移行してＣ
Ｄ５のオン操作に関する処理を行うか、或いは、「ＣＤ
オフ操作」の処理ステップＳ１４及び「オフ報知」の処
理ステップＳ１５に移行してＣＤ５のオフ操作に関する
処理を行う。その後は、ステップＳ３に移行する。Similarly, when a pattern corresponding to the on / off operation of the CD 5 is picked up by the CCD camera 1, the CPU 3 determines "YES" in step S2 of "pattern input?""
The process proceeds to the judgment step S11. Then, in the judgment step S11, the on state flag of the CD 5 is referred to, and according to the result, the "CD on operation" processing step S1 is performed.
2 and shift to the processing step S13 of “ON notification” and C
Perform the process related to the ON operation of D5, or select “CD
The processing shifts to the processing step S14 of "OFF operation" and the processing step S15 of "OFF notification" to perform processing relating to the OFF operation of the CD5. Thereafter, the process proceeds to step S3.
【００２６】また、空調機器５のオンオフ操作に対応す
るパターンがＣＣＤカメラ１によって撮像された場合
は、ＣＰＵ３は、「パターン入力あり？」のステップ
Ｓ３において「ＹＥＳ」と判断し、「空調オン状態？」
の判断ステップＳ１６に移行する。そして、判断ステッ
プＳ１６において空調機器６のオン状態フラグを参照
し、その結果に応じて、「空調オン操作」の処理ステッ
プＳ１７及び「オン報知」の処理ステップＳ１８に移行
して空調機器６のオン操作に関する処理を行うか、或い
は、「空調オフ操作」の処理ステップＳ１９及び「オフ
報知」の処理ステップＳ２０に移行して空調機器６のオ
フ操作に関する処理を行う。その後は、ステップＳ４に
移行する。When a pattern corresponding to the on / off operation of the air conditioner 5 is picked up by the CCD camera 1, the CPU 3 determines "YES" in step S3 of "pattern input?" ? "
The process proceeds to the judgment step S16. Then, in the judgment step S16, the on state flag of the air conditioner 6 is referred to, and according to the result, the process proceeds to the processing step S17 of “air-conditioning on operation” and the processing step S18 of “on notification” to turn on the air conditioner 6 The process related to the operation is performed, or the process proceeds to the process step S19 of the “air-conditioning off operation” and the process step S20 of the “off notification” to perform the process related to the off operation of the air conditioner 6. Thereafter, the process proceeds to step S4.
【００２７】以上のようにして、各機器４〜６の何れか
がオン状態にある場合に、運転者が左手でパターンＵＰ
のサインをつくり、ＣＣＤカメラ１の撮像範囲に示すこ
とによって撮像されたとすると、ＣＰＵ３は、「（エリ
アＡ，Ｂ，Ｃにおいて）パターンＵＰ入力あり？」のス
テップＳ４において「ＹＥＳ」と判断し、「（エリア
Ａ，Ｂ，Ｃに応じて）オン状態？」の判断ステップＳ２
１に移行する。As described above, when any one of the devices 4 to 6 is in the ON state, the driver can use the left hand to change the pattern UP.
Is created and the image is taken by indicating the image in the imaging range of the CCD camera 1, the CPU 3 determines "YES" in step S4 of "(Area A, B, C) Pattern UP input?" Judgment step S2 of "On state (according to areas A, B, C)?"
Move to 1.
【００２８】ステップＳ４において、ＣＰＵ３は、図３
に示すＣＣＤカメラ１の撮像範囲を４分割してなる４つ
のエリア（区画）の内３つのエリアＡ，Ｂ，Ｃ（エリア
Ｄは未使用）の何れにおいて、パターンＵＰが撮像され
たかを判別して、そのエリアに応じた操作対象にＵＰ操
作を行う。ここで、エリアＡ，Ｂ，Ｃは、夫々ラジオ
４，ＣＤ５，空調機器６に対応している。In step S4, the CPU 3 executes
It is determined which of the three areas A, B, and C (area D is unused) of the four areas (sections) obtained by dividing the imaging range of the CCD camera 1 shown in FIG. Then, the UP operation is performed on the operation target corresponding to the area. Here, areas A, B, and C correspond to radio 4, CD 5, and air conditioner 6, respectively.
【００２９】即ち、エリアＡにおいてパターンＵＰが撮
像された場合、ＣＰＵ３は、判断ステップＳ２１におい
てラジオ４のオン状態フラグを参照し、ラジオ４がオン
状態であり「ＹＥＳ」と判断すると、「（エリアＡ，
Ｂ，Ｃに応じて）ＵＰ操作」の処理ステップＳ２２に移
行する。そして、ラジオ４に対して操作量増加信号を出
力することにより、ラジオ４のボリュームを上昇させる
（１回の操作量増加信号の出力に対して、予め定められ
た１ステップ分だけ）。That is, when the pattern UP is imaged in the area A, the CPU 3 refers to the on-state flag of the radio 4 in the judgment step S21, and if the radio 4 is in the on-state and judges "YES", the "(area A,
The processing moves to the processing step S22 of "UP operation" according to B and C). Then, by outputting an operation amount increase signal to the radio 4, the volume of the radio 4 is increased (for one output of the operation amount increase signal, only one predetermined step).
【００３０】その後、「ＵＰ報知」の処理ステップＳ２
３に移行して、ＣＰＵ３は、報知音発生装置１２に制御
信号を出力し、ラジオ４に操作量増加信号を出力したこ
とを運転者に報知するための報知音を発生させると、ス
テップＳ１に移行する。また、判断ステップＳ２１にお
いてラジオ４がオフ状態である場合には、ＣＰＵ３は
「ＮＯ」と判断して、特に処理を行うことなくステップ
Ｓ１に移行する。Thereafter, processing step S2 of "UP notification"
When the CPU 3 outputs a control signal to the notification sound generation device 12 and generates a notification sound for notifying the driver that the operation amount increase signal has been output to the radio 4, the CPU 3 proceeds to step S1. Transition. If the radio 4 is in the off state in the judgment step S21, the CPU 3 judges "NO" and shifts to the step S1 without performing any processing.
【００３１】以上のＵＰ操作に関する処理は、エリアＢ
或いはＣにおいてパターンＵＰが撮像された場合に、Ｃ
Ｄ５或いは空調機器６について同様に行われ、ＣＤ５の
場合には、ボリュームを１ステップ分増加させ、空調機
器６の場合は風量を１ステップ分増加させる。The processing relating to the UP operation is performed in the area B
Alternatively, when the pattern UP is imaged in C,
The same operation is performed for D5 or the air conditioner 6. In the case of CD5, the volume is increased by one step, and in the case of the air conditioner 6, the air volume is increased by one step.
【００３２】また、運転者が左手でパターンＤＯＷＮの
サインをつくり、ＣＣＤカメラ１の撮像範囲に示すこと
によって撮像された場合には、ＣＰＵ３は、「（エリア
Ａ，Ｂ，Ｃにおいて）パターンＤＯＷＮ入力あり？」の
ステップＳ５において「ＹＥＳ」と判断し、「（エリア
Ａ，Ｂ，Ｃに応じて）オン状態？」の判断ステップＳ２
４に移行する。When the driver makes a sign of the pattern DOWN with the left hand and picks up the image by indicating it in the image pickup range of the CCD camera 1, the CPU 3 sets the pattern DOWN (in the areas A, B and C) to "input pattern DOWN". "Yes" is determined in step S5 of "Yes?", And "On state (according to areas A, B, and C)?"
Move to 4.
【００３３】そして、ＵＰ操作の場合と同様に、エリア
ＡにおいてパターンＤＯＷＮが撮像された場合、ＣＰＵ
３は、判断ステップＳ２１においてラジオ４のオン状態
フラグを参照し、ラジオ４がオン状態であり「ＹＥＳ」
と判断すると、「（エリアＡ，Ｂ，Ｃに応じて）ＤＯＷ
Ｎ操作」の処理ステップＳ２５に移行する。そして、ラ
ジオ４に対して操作量減少信号を出力することにより、
ラジオ４のボリュームを減少させる（予め定められた１
ステップ分だけ）。As in the case of the UP operation, when the pattern DOWN is imaged in the area A, the CPU
No. 3 refers to the on-state flag of the radio 4 in the judgment step S21, and indicates that the radio 4 is on and “YES”.
When it is determined, "(according to areas A, B, C) DOW
The processing shifts to the processing step S25 of “N operation”. By outputting a manipulated variable decrease signal to the radio 4,
Decrease the volume of radio 4 (predetermined 1
Step only).
【００３４】その後、「ＤＯＷＮ報知」の処理ステップ
Ｓ２６に移行して、ＣＰＵ３は、報知音発生装置１２に
制御信号を出力し、ラジオ４に操作量減少信号を出力し
たことを運転者に報知するための報知音を発生させる
と、ステップＳ１に移行する。また、判断ステップＳ２
４においてラジオ４がオフ状態である場合には、ＣＰＵ
３は「ＮＯ」と判断して、特に処理を行うことなくステ
ップＳ１に移行する。Thereafter, the process shifts to the processing step S26 of "DOWN notification", in which the CPU 3 outputs a control signal to the notification sound generating device 12 and notifies the driver that the operation amount decrease signal has been output to the radio 4. When the notification sound is generated, the process proceeds to step S1. Also, the judgment step S2
If the radio 4 is off at 4, the CPU
No. 3 determines “NO” and shifts to the step S1 without performing any processing.
【００３５】以上のＤＯＷＮ操作に関する処理は、エリ
アＢ或いはＣにおいてパターンＤＯＷＮが撮像された場
合に、ＣＤ５或いは空調機器６について同様に行われ、
ＣＤ５の場合にはボリュームを１ステップ分減少させ、
空調機器６の場合は風量を１ステップ分減少させる。The above processing relating to the DOWN operation is performed in the same manner for the CD 5 or the air conditioner 6 when the pattern DOWN is imaged in the area B or C.
In the case of CD5, reduce the volume by one step,
In the case of the air conditioner 6, the air volume is reduced by one step.
【００３６】以上のように本実施例によれば、ＥＣＵ２
のＣＰＵ３は、ＣＣＤカメラ１によって撮像された運転
者の左手の画像をパターン認識して、その画像パターン
がパターン〜，或いは、パターンＵＰまたはＤＯＷ
Ｎの何れであるかを判別し、自動車の車室内に設置され
ているラジオ４，ＣＤ５，空調機器６の内、認識された
画像パターンに対応する操作対象に操作信号を選択的に
出力するようにした。As described above, according to this embodiment, the ECU 2
CPU 3 recognizes the image of the driver's left hand captured by the CCD camera 1 and changes the image pattern from the pattern UP to the pattern UP or the pattern UP or DOW.
N, and selectively outputs an operation signal to an operation target corresponding to the recognized image pattern among the radio 4, CD 5, and air conditioner 6 installed in the cabin of the automobile. I made it.
【００３７】即ち、運転者が自動車の運転中であって
も、左手で特定のサインをつくってＣＣＤカメラ１の撮
像範囲内に示すだけで、その特定のサインに応じた操作
対象に操作信号が選択的に出力され、オンオフやボリュ
ームの上げ下げを行うことができる。従って、運転者
は、従来とは異なり、ラジオ４やＣＤ５などの本体に設
けられている操作スイッチの位置を眼で確認し、その操
作スイッチまで手を伸ばして操作する必要がなくなり、
複数の操作対象の操作を容易に行うことができる。ま
た、自動車の運転中において前方または周囲の確認が疎
かにならないので、安全に運転を行うことができる。That is, even when the driver is driving a car, an operation signal is sent to an operation target corresponding to the specific sign only by creating a specific sign with the left hand and indicating the sign within the imaging range of the CCD camera 1. It is selectively output and can be turned on and off, and the volume can be raised or lowered. Therefore, unlike the related art, the driver does not need to check the position of the operation switch provided on the main body of the radio 4 or the CD 5 with his eyes and reach for the operation switch to operate.
Operation of a plurality of operation targets can be easily performed. In addition, the driver can drive safely because the driver does not lose sight of the front or surroundings while driving the car.
【００３８】また、ＥＣＵ２に、設定スイッチ１１を設
けて、運転者が左手で示す特定のサインと操作信号を出
力する操作対象との対応関係を予め設定できるようにし
たので、運転者は、自分が操作を行い易いように（例え
ば、操作頻度の高いものに対して簡単なサインを割当て
るなど）、左手で示すサインと各機器４〜６との対応関
係を設定することができる。Further, the ECU 2 is provided with a setting switch 11 so that the driver can set in advance the correspondence between a specific sign indicated by the left hand and an operation target for outputting an operation signal. Can be set so that the user can easily perform the operation (for example, assigning a simple sign to a frequently-used one), and the correspondence between the sign indicated by the left hand and each of the devices 4 to 6 can be set.
【００３９】また、本実施例によれば、ＥＣＵ２からの
操作信号の出力を有効化するためのプレ入力スイッチ９
を設けたので、特に操作を行う必要がない時に、ＣＣＤ
カメラ１によって不用意に左手が撮像されてしまい、誤
って操作信号を出力させることがなく、必要がある時だ
け確実に各機器４〜６の操作を行うことができる。According to the present embodiment, the pre-input switch 9 for validating the output of the operation signal from the ECU 2 is provided.
Is provided, so when no operation is required, the CCD
The left hand is not carelessly imaged by the camera 1 and an operation signal is not erroneously output, so that the operation of each of the devices 4 to 6 can be reliably performed only when necessary.
【００４０】更に、本実施例によれば、ＥＣＵ２のＣＰ
Ｕ３は、各機器４〜６の内、特定操作対象のオンオフ操
作共通の画像パターンを認識すると、その特定操作対象
のオンオフ状態をフラグにより参照して、当該特定操作
対象がオフ状態であればオン操作信号を出力し、当該特
定操作対象がオン状態であればオフ操作信号を出力する
ので、オン操作，オフ操作夫々について特定のサインを
対応させる必要がなく、各操作対象の操作を行うために
必要なサインの数を少なくすることができ、単純なサイ
ンによって操作を行うことが可能となる。Further, according to this embodiment, the CP of the ECU 2
When U3 recognizes an image pattern common to the on / off operation of the specific operation target among the devices 4 to 6, the U3 refers to the on / off state of the specific operation target by a flag, and turns on if the specific operation target is in the off state. An operation signal is output, and an off operation signal is output if the specific operation target is in an on state. Therefore, it is not necessary to associate a specific sign for each of the on operation and the off operation. The number of required signs can be reduced, and the operation can be performed with simple signs.
【００４１】また、各機器４〜６に対して操作量増加信
号，操作量減少信号を出力するために左手で示す特定の
サインを、夫々パターンＵＰ，パターンＤＯＷＮとして
共通化し、ＣＰＵ３は、ＣＣＤカメラ１の撮像範囲を、
各機器４〜６に対応するエリアＡ，Ｂ，Ｃに分割して、
その何れにおいてパターンＵＰ或いはＤＯＷＮが撮像さ
れたかを認識して、パターンＵＰ或いはＤＯＷＮが認識
されたエリアに対応する操作対象に操作量増加信号或い
は前記操作量減少信号を出力するので、各機器４〜６毎
に操作量増加信号及び操作量減少信号に対応する特定の
サインを対応させる必要がなく、サインの数を少なくす
ることができると共に、より簡単に操作を行うことがで
きる。Further, a specific sign indicated by the left hand for outputting an operation amount increase signal and an operation amount decrease signal to each of the devices 4 to 6 is shared as a pattern UP and a pattern DOWN, respectively. 1 imaging range,
Divided into areas A, B, and C corresponding to each device 4-6,
It recognizes which of the patterns UP or DOWN was imaged, and outputs an operation amount increase signal or the operation amount decrease signal to an operation target corresponding to the area in which the pattern UP or DOWN has been recognized. It is not necessary to associate a specific sign corresponding to the manipulated variable increase signal and the manipulated variable decrease signal for every 6, and the number of signs can be reduced, and the operation can be performed more easily.
【００４２】加えて、本実施例によれば、報知音発生装
置１２は、ＥＣＵ２が各機器４〜６に操作信号を出力す
るのに応じて報知音を発生させるので、運転者は、その
報知音によって、各機器４〜６に操作信号が確実に出力
されたか否かを確認することができる。In addition, according to the present embodiment, the notification sound generating device 12 generates a notification sound in response to the ECU 2 outputting an operation signal to each of the devices 4 to 6, so that the driver can receive the notification sound. It is possible to confirm whether or not the operation signal has been reliably output to each of the devices 4 to 6 by the sound.
【００４３】本発明は上記し且つ図面に記載した実施例
にのみ限定されるものではなく、以下のような変形また
は拡張が可能である。プレ入力スイッチ９の代わりに、
有効化スイッチとしてモーメンタリ動作するモーメンタ
リスイッチで構成し、そのモーメンタリスイッチを、例
えば運転者が通常ハンドルに手を添える位置において操
作可能となるようにする。そして、運転者が、モーメン
タリスイッチをモーメンタリ動作でオン操作している間
だけ、図４に示すフローチャートに従った制御を行うよ
うにしても良い。斯様に構成すれば、各機器４〜６の操
作が本当に必要な時にだけ、操作信号の出力を行わせる
ことができる。また、プレ入力スイッチ９は、必要に応
じて設ければ良い。The present invention is not limited to the embodiment described above and shown in the drawings, and the following modifications or extensions are possible. Instead of the pre-input switch 9,
The activation switch is constituted by a momentary switch that operates momentarily, and the momentary switch can be operated, for example, at a position where the driver normally puts his hand on the steering wheel. Then, the control according to the flowchart shown in FIG. 4 may be performed only while the driver turns on the momentary switch in the momentary operation. With such a configuration, it is possible to output the operation signal only when the operation of each of the devices 4 to 6 is really necessary. The pre-input switch 9 may be provided as needed.
【００４４】オン状態にある操作対象が１つだけの場合
には、ステップＳ４，Ｓ５，Ｓ２１，Ｓ２２，Ｓ２４及
びＳ２５において、パターンＵＰまたはＤＯＷＮが、エ
リアＡ，Ｂ，Ｃの何れにおいて撮像されたかを判別する
必要はなく、そのオン状態にある操作対象に対して操作
量増加信号及び操作量減少信号を出力すれば良い。この
場合は、運転者は、パターンＵＰまたはＤＯＷＮに対応
する特定のサインを、エリアＡ，Ｂ，Ｃを意識すること
なくＣＣＤカメラ１に撮像させることができるので、よ
り操作が簡単になる。ラジオ４及びＣＤ５のボリューム
並びに空調機器６の風量を一定として、パターンＵＰ，
ＤＯＷＮによってラジオ４の選局やＣＤ５の曲番号，空
調機器６の設定温度を変化させても良い。または、これ
らには別個のパターン（サイン）を割り当てて、ボリュ
ームや風量とは独立に操作するようにしても良い。If there is only one operation target in the ON state, in steps S4, S5, S21, S22, S24 and S25, which of the areas A, B, and C has the pattern UP or DOWN been imaged in? It is not necessary to determine the operation amount, and an operation amount increase signal and an operation amount decrease signal may be output to the operation target in the ON state. In this case, the driver can cause the CCD camera 1 to image a specific sign corresponding to the pattern UP or DOWN without being conscious of the areas A, B, and C, so that the operation is further simplified. With the volume of the radio 4 and the CD 5 and the air volume of the air conditioner 6 kept constant, the patterns UP,
The selection of the radio 4, the music number of the CD 5, and the set temperature of the air conditioner 6 may be changed by DOWN. Alternatively, separate patterns (signs) may be assigned to these and operated independently of the volume and air volume.
【００４５】各機器４〜６のオンオフ操作に対応するパ
ターン（特定サイン）は必ずしも共通化する必要はな
く、オン操作，オフ操作に対応するパターンを別個に設
定しても良い。その場合には、ＣＰＵ３は、オン操作信
号或いはオフ操作信号を出力する前に、各機器４〜６の
オンオフ状態を判別する必要がなくなる。The pattern (specific signature) corresponding to the on / off operation of each of the devices 4 to 6 does not necessarily need to be shared, and the patterns corresponding to the on / off operation may be set separately. In this case, the CPU 3 does not need to determine the on / off state of each of the devices 4 to 6 before outputting the on operation signal or the off operation signal.
【００４６】また、パターンＵＰまたはＤＯＷＮについ
ても、各機器４〜６で共通化する必要はなく、各機器４
〜６毎に別個に設定しても良い。その場合には、ＣＰＵ
３は、ステップＳ４，Ｓ５，Ｓ２１，Ｓ２２，Ｓ２４及
びＳ２５において、エリアＡ，Ｂ，Ｃの何れで撮像が行
われたかを判別する必要がなくなる。特定のサインを示
すのは左手に限らず右手でも良く、要は人間の身体の一
部であればどの部分によって示すようにしても良い。例
えば、ＣＣＤカメラ１に使用される画素数をある程度多
くすることにより視線の方向を認識して、その視線が特
定の操作対象の方向を一定時間（例えば、０．５秒）向
いていた場合に、その特定の操作対象に操作信号を出力
するように構成することも可能である。設定スイッチ１
１は、必要に応じて設ければ良く、特定のサインとその
サインによって出力される各操作対象への操作信号と対
応関係は、固定的に設定されていても良い。その場合、
設定手段は省略することができる。Also, the pattern UP or DOWN does not need to be shared by the devices 4 to 6,
6 may be set separately. In that case, the CPU
In step 3, in steps S4, S5, S21, S22, S24, and S25, there is no need to determine which of areas A, B, and C has been imaged. The specific sign may be indicated not only by the left hand but also by the right hand, and may be indicated by any part of the human body. For example, if the direction of the line of sight is recognized by increasing the number of pixels used in the CCD camera 1 to some extent, and the line of sight has been directed to the direction of a specific operation target for a certain period of time (for example, 0.5 seconds), It is also possible to configure so as to output an operation signal to the specific operation target. Setting switch 1
1 may be provided as needed, and a specific sign and an operation signal to each operation object output by the sign and the correspondence may be fixedly set. In that case,
The setting means can be omitted.
【００４７】報知音発生装置１２は、音声によって例え
ば「ラジオをオンしました」，「ラジオをオフしまし
た」，「ＣＤのボリュームを上げました」などのよう
に、出力した操作信号の内容を報知するものでも良い。
操作報知手段は、必要に応じて設ければ良い。パターン
ＵＰ，パターンＤＯＷＮによる操作量の増加または減少
を、１回のサインの撮像に応じて予め定められた１ステ
ップ分だけ行うようにしたが、パターンＵＰ，パターン
ＤＯＷＮのサインが示されている時間の長さに応じて、
操作量の増加または減少を順次（ステップ数を増加させ
て）行うようにしても良い。自動車の車室内に限ること
なく、例えば、住宅内において、複数のＡＶ機器が設置
されている部屋などのように、複数の操作対象がある環
境であれば適用が可能である。The notification sound generating device 12 outputs the contents of the output operation signal by voice, for example, "the radio is turned on", "the radio is turned off", or "the volume of the CD is turned up". It may be a notification.
The operation notification means may be provided as needed. The amount of operation by the pattern UP and the pattern DOWN is increased or decreased by one predetermined step in accordance with one sign imaging, but the time during which the signs of the pattern UP and the pattern DOWN are indicated. Depending on the length of
The operation amount may be increased or decreased sequentially (by increasing the number of steps). The present invention is not limited to the interior of a car, but may be applied to any environment in which there are a plurality of operation targets, such as a room in a house where a plurality of AV devices are installed.
【００４８】[0048]
【発明の効果】本発明は以上説明した通りであるので、
以下の効果を奏する。請求項１記載の操作信号出力装置
によれば、例えば、自動車の車室内などのように複数の
操作対象が配設されている環境において、使用者たる運
転者が例えば手で特定のサインをつくって所定範囲内に
示すと、その特定のサインが撮像手段によって撮像さ
れ、画像認識手段によってパターン認識される。する
と、操作信号出力手段は、画像認識手段が認識した画像
パターンに対応する操作対象に、操作信号を選択的に出
力する。従って、運転者は、ラジオやＣＤなどの操作対
象に設けられている操作スイッチの位置を確認した上
で、その操作スイッチまで手を伸ばして操作する必要が
なくなり、複数の操作対象の操作を容易に行うことがで
きる。Since the present invention is as described above,
The following effects are obtained. According to the operation signal output device of the first aspect, for example, in an environment where a plurality of operation objects are arranged, such as a vehicle interior of a car, a driver as a user makes a specific sign by hand, for example. When the specific sign is within the predetermined range, the specific sign is imaged by the image pickup means, and pattern recognition is performed by the image recognition means. Then, the operation signal output unit selectively outputs the operation signal to the operation target corresponding to the image pattern recognized by the image recognition unit. Therefore, the driver does not need to reach the operation switch after confirming the position of the operation switch provided on the operation target such as a radio or a CD, and can easily operate the plurality of operation targets. Can be done.
【００４９】請求項２記載の操作信号出力装置によれ
ば、操作信号出力手段に、人間の身体の一部の画像パタ
ーンと操作信号を出力する操作対象との対応関係を予め
設定するための設定手段を設けたので、使用者は、自分
が操作を行い易いように、身体の一部で示すサインと各
操作対象との対応関係を設定できる。According to the operation signal output device of the second aspect, the setting for preliminarily setting the correspondence between the image pattern of a part of the human body and the operation target for outputting the operation signal in the operation signal output means. Since the means is provided, the user can set the correspondence between the sign shown by a part of the body and each operation target so that the user can easily perform the operation.
【００５０】請求項３記載の操作信号出力装置によれ
ば、操作信号出力手段を、特定操作対象のオンオフ操作
に対応する共通の画像パターンが与えられると、当該特
定操作対象のオンオフ状態を参照して、当該特定操作対
象がオフ状態であればオン操作信号を出力し、当該特定
操作対象がオン状態であればオフ操作信号を出力するの
で、各操作対象の操作を行うために身体の一部で示す特
定のサインの数を少なくすることができ、単純なサイン
によって操作を行うことが可能となる。According to the operation signal output device of the third aspect, when a common image pattern corresponding to the ON / OFF operation of the specific operation target is given, the operation signal output means refers to the ON / OFF state of the specific operation target. If the specific operation target is in the off state, an on operation signal is output, and if the specific operation target is in the on state, an off operation signal is output. Can reduce the number of specific signatures, and can be operated with simple signatures.
【００５１】請求項４記載の操作信号出力装置によれ
ば、操作信号出力手段は、画像認識手段が複数の操作対
象に対して操作量増加信号と操作量減少信号とを出力す
るための共通化された画像パターンを認識すると、当該
画像パターンが認識された区画に対応する操作対象に操
作量増加信号または操作量減少信号を出力するので、各
操作対象毎に操作量増加信号または操作量減少信号に対
応する特定のサインを設定する必要がなく、サインの数
を少なくすることができると共に、より簡単に操作を行
うことができる。According to the operation signal output device of the fourth aspect, the operation signal output means is a common operation for the image recognition means to output an operation amount increase signal and an operation amount decrease signal to a plurality of operation objects. When the recognized image pattern is recognized, an operation amount increase signal or an operation amount decrease signal is output to the operation object corresponding to the section in which the image pattern is recognized. Therefore, an operation amount increase signal or an operation amount decrease signal is output for each operation object. Therefore, it is not necessary to set a specific signature corresponding to, the number of signatures can be reduced, and the operation can be performed more easily.
【図１】本発明の一実施例を示す電気的構成の機能ブロ
ック図FIG. 1 is a functional block diagram of an electrical configuration showing an embodiment of the present invention.
【図２】使用者が左手で示す特定サインの一例を示す図FIG. 2 is a diagram showing an example of a specific sign shown by a user with a left hand.
【図３】ＣＣＤカメラが撮像を行う範囲を４分割したエ
リアＡ，Ｂ，Ｃ及びＤを示す図FIG. 3 is a diagram showing areas A, B, C, and D obtained by dividing a range in which a CCD camera performs imaging into four parts.
【図４】ＥＣＵに内蔵されているＣＰＵの制御内容を示
すフローチャートFIG. 4 is a flowchart showing control contents of a CPU incorporated in the ECU.
１はＣＣＤカメラ（撮像手段）、３はＣＰＵ（画像認識
手段，操作信号出力手段）、４はラジオ（操作対象）、
５はＣＤ（操作対象）、６は空調機器（操作対象）、９
はプレ入力スイッチ（有効化スイッチ）、１１は設定ス
イッチ（設定手段）、１２は報知音発生装置（操作報知
手段）を示す。1 is a CCD camera (imaging means), 3 is a CPU (image recognition means, operation signal output means), 4 is a radio (operation target),
5 is a CD (operation target), 6 is an air conditioner (operation target), 9
Denotes a pre-input switch (validation switch), 11 denotes a setting switch (setting means), and 12 denotes a notification sound generation device (operation notification means).
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP29843897AJPH11134090A (en) | 1997-10-30 | 1997-10-30 | Operation signal output device |
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP29843897AJPH11134090A (en) | 1997-10-30 | 1997-10-30 | Operation signal output device |
| Publication Number | Publication Date |
|---|---|
| JPH11134090Atrue JPH11134090A (en) | 1999-05-21 |
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP29843897APendingJPH11134090A (en) | 1997-10-30 | 1997-10-30 | Operation signal output device |
| Country | Link |
|---|---|
| JP (1) | JPH11134090A (en) |
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002236534A (en)* | 2001-02-13 | 2002-08-23 | Mitsubishi Motors Corp | In-vehicle equipment operation device |
| JP2004050927A (en)* | 2002-07-18 | 2004-02-19 | Denso Corp | Air-conditioner |
| JP2005063090A (en)* | 2003-08-11 | 2005-03-10 | Keio Gijuku | Hand pattern switch device |
| JP2005242694A (en)* | 2004-02-26 | 2005-09-08 | Mitsubishi Fuso Truck & Bus Corp | Hand pattern switch device |
| CN1313905C (en)* | 2003-08-11 | 2007-05-02 | 三菱扶桑卡客车株式会社 | Hand pattern switch device |
| US7289645B2 (en) | 2002-10-25 | 2007-10-30 | Mitsubishi Fuso Truck And Bus Corporation | Hand pattern switch device |
| JP2011054138A (en)* | 2009-09-04 | 2011-03-17 | Hyundai Motor Co Ltd | Operation device for vehicle |
| US8077970B2 (en) | 2006-12-04 | 2011-12-13 | Denso Corporation | Operation estimating apparatus and related article of manufacture |
| JP2012222784A (en)* | 2011-04-14 | 2012-11-12 | Casio Comput Co Ltd | Remote operation device, remote operation method and program |
| WO2013175603A1 (en)* | 2012-05-24 | 2013-11-28 | パイオニア株式会社 | Operation input device, operation input method and operation input program |
| JP2015020677A (en)* | 2013-07-23 | 2015-02-02 | アルパイン株式会社 | Image recognition device, gesture input device and computer program |
| JP2015125778A (en)* | 2013-12-26 | 2015-07-06 | ビステオン グローバル テクノロジーズ インコーポレイテッド | Plane field activation system and method for gesture-based control systems |
| JP2016091171A (en)* | 2014-10-31 | 2016-05-23 | 三菱自動車工業株式会社 | Operation input device |
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002236534A (en)* | 2001-02-13 | 2002-08-23 | Mitsubishi Motors Corp | In-vehicle equipment operation device |
| JP2004050927A (en)* | 2002-07-18 | 2004-02-19 | Denso Corp | Air-conditioner |
| US7289645B2 (en) | 2002-10-25 | 2007-10-30 | Mitsubishi Fuso Truck And Bus Corporation | Hand pattern switch device |
| DE102004038965B4 (en)* | 2003-08-11 | 2009-04-02 | Mitsubishi Fuso Truck And Bus Corp. | Hand image switching device |
| CN1313905C (en)* | 2003-08-11 | 2007-05-02 | 三菱扶桑卡客车株式会社 | Hand pattern switch device |
| JP2005063090A (en)* | 2003-08-11 | 2005-03-10 | Keio Gijuku | Hand pattern switch device |
| CN1324437C (en)* | 2004-02-26 | 2007-07-04 | 三菱扶桑卡客车公司 | Gesture switching gear |
| JP2005242694A (en)* | 2004-02-26 | 2005-09-08 | Mitsubishi Fuso Truck & Bus Corp | Hand pattern switch device |
| US7499569B2 (en) | 2004-02-26 | 2009-03-03 | Mitsubishi Fuso Truck And Bus Corporation | Hand pattern switching apparatus |
| US8077970B2 (en) | 2006-12-04 | 2011-12-13 | Denso Corporation | Operation estimating apparatus and related article of manufacture |
| JP2011054138A (en)* | 2009-09-04 | 2011-03-17 | Hyundai Motor Co Ltd | Operation device for vehicle |
| US8849506B2 (en) | 2009-09-04 | 2014-09-30 | Hyundai Motor Japan R&D Center, Inc. | Operation system for vehicle |
| KR101470031B1 (en)* | 2009-09-04 | 2014-12-05 | 현대자동차일본기술연구소 | Vehicle operating device |
| JP2012222784A (en)* | 2011-04-14 | 2012-11-12 | Casio Comput Co Ltd | Remote operation device, remote operation method and program |
| WO2013175603A1 (en)* | 2012-05-24 | 2013-11-28 | パイオニア株式会社 | Operation input device, operation input method and operation input program |
| JPWO2013175603A1 (en)* | 2012-05-24 | 2016-01-12 | パイオニア株式会社 | Operation input device, operation input method, and operation input program |
| JP2015020677A (en)* | 2013-07-23 | 2015-02-02 | アルパイン株式会社 | Image recognition device, gesture input device and computer program |
| JP2015125778A (en)* | 2013-12-26 | 2015-07-06 | ビステオン グローバル テクノロジーズ インコーポレイテッド | Plane field activation system and method for gesture-based control systems |
| JP2016091171A (en)* | 2014-10-31 | 2016-05-23 | 三菱自動車工業株式会社 | Operation input device |
| Publication | Publication Date | Title |
|---|---|---|
| JPH11134090A (en) | Operation signal output device | |
| JP4412252B2 (en) | Driving assistance device | |
| US6344793B1 (en) | Process for assisting a user of a motor vehicle when operating components of the motor vehicle as well as a pertaining system | |
| JP4802859B2 (en) | Manual operation device | |
| US10484651B2 (en) | Image display control device | |
| JP7225770B2 (en) | In-vehicle equipment operation system | |
| JP2001270400A (en) | Driver assist system and method for controlling information indicating part, communication means and vehicle actuator | |
| JP2007106353A (en) | Vehicular information display device, and vehicular information display system | |
| JP2002293194A (en) | On-vehicle display device | |
| US11068054B2 (en) | Vehicle and control method thereof | |
| CN110606029B (en) | Vehicle operation system and vehicle operation method | |
| US9073433B2 (en) | Vehicle control system | |
| JP7557916B2 (en) | On-vehicle device, on-vehicle device control method, and on-vehicle system | |
| US6529825B2 (en) | Voice guidance switching device and method | |
| JP2002236534A (en) | In-vehicle equipment operation device | |
| JP7512976B2 (en) | Vehicle display control device, vehicle display device, vehicle display control method and program | |
| JP2004262437A (en) | Vehicle input device | |
| US11073982B2 (en) | Vehicle and method of controlling the same | |
| KR20190062688A (en) | Vehicle and controlling method thereof | |
| JP2003312388A (en) | Onboard control device | |
| CN113733910A (en) | Intelligent interactive control system for motor vehicle | |
| JP2003153354A (en) | Haptic inputting apparatus | |
| CN118597008B (en) | Rearview mirror adjusting switch with control logic, rearview mirror adjusting method, vehicle and medium | |
| US20240217518A1 (en) | System and method for controlling vehicle behavior and vehicle computer employing method | |
| JP2023184028A (en) | Information processor and method for processing information |
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination | Free format text:JAPANESE INTERMEDIATE CODE: A621 Effective date:20040526 | |
| A131 | Notification of reasons for refusal | Free format text:JAPANESE INTERMEDIATE CODE: A131 Effective date:20060627 | |
| A521 | Written amendment | Free format text:JAPANESE INTERMEDIATE CODE: A523 Effective date:20060807 | |
| A131 | Notification of reasons for refusal | Free format text:JAPANESE INTERMEDIATE CODE: A131 Effective date:20070206 | |
| A521 | Written amendment | Free format text:JAPANESE INTERMEDIATE CODE: A523 Effective date:20070322 | |
| A02 | Decision of refusal | Free format text:JAPANESE INTERMEDIATE CODE: A02 Effective date:20070731 |