JP5318321B2 - Imaging device - Google Patents
Imaging deviceDownload PDFInfo
- Publication number
- JP5318321B2 JP5318321B2JP2005214736AJP2005214736AJP5318321B2JP 5318321 B2JP5318321 B2JP 5318321B2JP 2005214736 AJP2005214736 AJP 2005214736AJP 2005214736 AJP2005214736 AJP 2005214736AJP 5318321 B2JP5318321 B2JP 5318321B2
- Authority
- JP
- Japan
- Prior art keywords
- unit
- color information
- image
- area
- image signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Images
Landscapes
- Structure And Mechanism Of Cameras (AREA)
- Automatic Focus Adjustment (AREA)
- Studio Devices (AREA)
- Focusing (AREA)
Abstract
Description
Translated fromJapanese本発明は、デジタルスチルカメラ、デジタルビデオカメラ等の撮像装置に関し、特定的には、オートフォーカス機能を備えるデジタルスチルカメラ、デジタルビデオカメラ等の撮像装置に関する。 The present invention relates to an imaging apparatus such as a digital still camera and a digital video camera, and more particularly to an imaging apparatus such as a digital still camera and a digital video camera having an autofocus function.
現在、ＣＣＤやＣＭＯＳなどの撮像素子を備えるデジタルスチルカメラ、デジタルビデオカメラ等の撮像装置が爆発的に普及している。これらの撮像装置は、一般的に被写体の画像信号に基づき合焦状態を検出し、検出結果に基づいて撮影光学系に含まれるフォーカスレンズ群を光軸方向に移動させることにより、オートフォーカス制御を行うものが主流である。 Currently, imaging devices such as digital still cameras and digital video cameras equipped with an image sensor such as a CCD or a CMOS are explosively widespread. In general, these imaging devices detect an in-focus state based on an image signal of a subject, and perform autofocus control by moving a focus lens group included in a photographing optical system in the optical axis direction based on a detection result. What you do is mainstream.
撮像装置の多機能化に伴って、オートフォーカス制御に対しても高機能化が求められるようになってきている。例えば、特許文献１は、被写体の画像信号を複数のＡＦエリアに分割し、それぞれの肌色画素の数をカウントして、フォーカス調整を行うＡＦエリアを特定する撮像装置用のオートフォーカス装置を提案している。 Along with the increase in functionality of imaging devices, higher functionality is also required for autofocus control. For example,
特許文献１に記載されたオートフォーカス装置は、主被写体として人物を想定している。すなわち、特許文献１に記載されたオートフォーカス装置は、肌色画素に基づいてフォーカス制御を行うことにより、フォーカスエリアが人物に追従し、常に人物に的確に合焦できるとしている。
特許文献１に記載されたオートフォーカス装置は、主被写体として人物のみを想定しているため、他の被写体の場合にフォーカス追従を行うことができないという問題があった。デジタルスチルカメラ、デジタルビデオカメラ等は、人物が主被写体である場合ばかりではないため、特許文献１に記載されたオートフォーカス装置は、ユーザの要求に十分応えるものになっていない。 Since the autofocus device described in
そこで、本発明の目的は、任意に設定可能な被写体にフォーカス調整を行うことができる高機能な撮像装置を提供することである。 SUMMARY OF THE INVENTION An object of the present invention is to provide a high-performance imaging apparatus that can perform focus adjustment on a subject that can be arbitrarily set.
上記目的は、以下の撮像装置により達成される。被写体の電気的な画像信号を出力する撮像装置であって、焦点調節を行うためのフォーカスレンズ群を含み、被写体の光学的な像を形成する撮像光学系と、被写体の光学的な像を撮像して、電気的な画像信号に変換する撮像素子と、画像信号を複数のエリアに分割する画像分割部と、各エリア毎に画像信号から色情報をそれぞれ算出する色情報算出部と、予め参照色情報を設定する参照色情報設定部と、参照色情報と、色情報算出部により算出された各色情報とを比較した結果に基づいて、各エリアのうちの少なくとも１つを選択するエリア選択部と、選択されたエリアに対し、撮像光学系の合焦情報を算出する合焦情報算出部と、合焦情報に基づいて、フォーカスレンズ群を光軸方向に駆動するレンズ駆動部とを備え、色情報および参照色情報は、いずれも、色相に関する情報および彩度に関する情報の内の少なくとも一方からなることを特徴とする。 The above object is achieved by the following imaging device. An imaging device that outputs an electrical image signal of a subject, including an imaging optical system that includes a focus lens group for performing focus adjustment and forms an optical image of the subject, and an optical image of the subject An image sensor that converts the image signal into an electric image signal, an image dividing unit that divides the image signal into a plurality of areas, a color information calculation unit that calculates color information from the image signal for each area, and a reference in advance A reference color information setting unit that sets color information, and an area selection unit that selects at least one of the areas based on a result of comparing the reference color information and each color information calculated by the color information calculation unit And a focusing information calculation unit that calculates focusing information of the imaging optical system for the selected area, and a lens driving unit that drives the focus lens group in the optical axis direction based on the focusing information, Color information and reference color Distribution are all characterized by comprising at least one of the information about the information and saturation regarding hue.
好ましくは、参照色情報は、予め撮像された画像信号から、画像分割部によって分割された所望のエリアに対して、色情報算出部が算出した色情報である。一例として、画像信
号に基づく画像を表示する表示部を備え、選択されたエリアについて、参照色情報に基づき、表示部により表示されるべき画像信号の色を補正する特定エリア色補正処理部をさらに備える。Preferably, the reference color information is color information calculated by the color information calculation unit for a desired area divided by the image division unit from an image signal captured in advance. As an example, a specific area color correction processing unit that includes a display unit that displays an image based on an image signal, and that corrects the color of the image signal to be displayed by the display unit based on reference color information for the selected area. Prepare.
好ましくは、参照色情報に基づいて、撮像素子が出力する画像信号を補正する補正部を含む画像処理部を備え、合焦情報算出部は、補正された画像信号に基づいて、合焦情報を算出する。一例として、補正部は、撮像素子が出力する画像信号に対して、表示のためあるいは格納のために用いられる画像信号とは異なる補正を行う。 Preferably, an image processing unit including a correction unit that corrects an image signal output from the image sensor based on the reference color information is provided, and the focus information calculation unit calculates the focus information based on the corrected image signal. calculate. As an example, the correction unit performs correction different from the image signal used for display or storage on the image signal output from the image sensor.
好ましくは、色情報算出部は、各エリア毎に画像信号から輝度をそれぞれ算出するとともに、さらに、算出した輝度が所定の値より大きいかどうかを判定する輝度判定部と、輝度判定部が算出した輝度が所定の値より大きいエリアを、エリア選択部が選択することを禁止する選択禁止部とを備える。 Preferably, the color information calculation unit calculates the luminance from the image signal for each area, and further calculates a luminance determination unit that determines whether the calculated luminance is greater than a predetermined value, and the luminance determination unit calculates A selection prohibiting unit that prohibits the area selecting unit from selecting an area having a luminance greater than a predetermined value;
好ましくは、レンズ駆動部がフォーカスレンズを駆動する際に、被写体に補助光を投光する補助光源をさらに備え、色情報算出部は、補助光の色に応じて算出した色情報を補正する。 Preferably, when the lens driving unit drives the focus lens, the lens driving unit further includes an auxiliary light source that projects auxiliary light onto the subject, and the color information calculation unit corrects the color information calculated according to the color of the auxiliary light.
好ましくは、複数の参照色情報を格納する情報格納部をさらに備える。より好ましくは、情報格納部に格納された複数の参照色情報を表示する表示部をさらに備える。 Preferably, an information storage unit for storing a plurality of reference color information is further provided. More preferably, it further includes a display unit that displays a plurality of reference color information stored in the information storage unit.
好ましくは、複数の参照色情報と、当該参照色情報に関連する画像を表示するための画像信号とを格納する情報格納部をさらに備える。より好ましくは、情報格納部に格納された画像信号に基づく画像及び複数の参照色情報の少なくとも一方を表示させる表示部をさらに備える。 Preferably, the information storage unit further stores a plurality of reference color information and an image signal for displaying an image related to the reference color information. More preferably, it further includes a display unit for displaying at least one of an image based on the image signal stored in the information storage unit and a plurality of reference color information.
好ましくは、撮像装置は、撮像装置本体と、撮像光学部とに分離可能であり、撮像光学部は、撮像光学系を含み、撮像装置本体は、撮像素子と、画像分割部と、色情報算出部と、参照色情報設定部と、エリア選択部と、合焦情報算出部と、レンズ駆動部とを含む。 Preferably, the imaging device is separable into an imaging device main body and an imaging optical unit, the imaging optical unit includes an imaging optical system, the imaging device main body includes an imaging element, an image dividing unit, and color information calculation. Unit, a reference color information setting unit, an area selection unit, a focusing information calculation unit, and a lens driving unit.
好ましくは、撮像装置は、撮像装置本体と、撮像光学部とに分離可能であり、撮像光学部は、撮像光学系と、レンズ駆動部とを含み、撮像装置本体は、撮像素子と、画像分割部と、色情報算出部と、参照色情報設定部と、エリア選択部と、合焦情報算出部とを含む。 Preferably, the imaging device is separable into an imaging device main body and an imaging optical unit, the imaging optical unit includes an imaging optical system and a lens driving unit, and the imaging device main body includes an imaging element and an image dividing unit. A color information calculation unit, a reference color information setting unit, an area selection unit, and a focus information calculation unit.
上記目的は、以下の半導体集積回路により達成される。半導体集積回路は、上記の撮像装置に用いられる半導体集積回路であって、少なくとも画像分割部と、色情報算出部と、参照色情報設定部と、エリア選択部と、合焦情報算出部とを動作させる。 The above object is achieved by the following semiconductor integrated circuit. The semiconductor integrated circuit is a semiconductor integrated circuit used in the above-described imaging device, and includes at least an image dividing unit, a color information calculating unit, a reference color information setting unit, an area selecting unit, and a focusing information calculating unit. Make it work.
本発明によれば、任意に設定可能な被写体にフォーカス調整を行うことができる高機能な撮像装置を提供することが可能である。 ADVANTAGE OF THE INVENTION According to this invention, it is possible to provide the highly functional imaging device which can perform focus adjustment to the object which can be set arbitrarily.
（実施の形態１）
図１は、本発明の実施の形態１にかかる撮像装置のブロック図である。実施の形態１にかかる撮像装置は、レンズ鏡筒１１と、撮像光学系であるズームレンズ系１２と、撮像素子であるＣＣＤ１４と、画像処理部１５と、画像メモリ１６と、表示部１７と、操作部１９と、補助光源２０と、レンズ駆動部２１と、システムコントローラ３０とを含む。(Embodiment 1)
FIG. 1 is a block diagram of an imaging apparatus according to the first embodiment of the present invention. The imaging apparatus according to the first embodiment includes a
レンズ鏡筒１１は、内部にズームレンズ系１２を保持する。ズームレンズ系１２は、被写体の光学的な像を変倍可能に形成する撮像光学系である。ズームレンズ系１２は、被写体側から順に、変倍時に光軸に沿って移動するズームレンズ群１２ａ及びズームレンズ群１２ｂと、合焦状態に調節のために光軸に沿って移動するフォーカスレンズ群１３とからなる。 The
ＣＣＤ１４は、ズームレンズ系１２が形成した光学的な像を所定のタイミングで撮像し、電気的な画像信号に変換して出力する撮像素子である。画像処理部１５は、ＣＣＤ１４から出力された画像信号にホワイトバランス補正やγ補正などの所定の画像処理を施す処理部である。画像メモリ１６は、画像処理部１５から出力された画像信号を一次的に格納する。 The
表示部１７は、典型的には液晶ディスプレイであり、後述するシステムコントローラ３０からの指令に基づき、ＣＣＤ１４から出力された画像信号あるいは画像メモリ１６に格納された画像信号を、画像処理部１５を介して入力させ、この画像信号を可視画像としてユーザに表示する。また、画像処理部１５は、ユーザにより着脱可能なメモリーカード１８と双方向にアクセス可能である。メモリーカード１８は、後述するシステムコントローラ３０からの指令に基づき、ＣＣＤ１４から出力された画像信号あるいは画像メモリ１６
に格納された画像信号を、画像処理部１５を介して入力させて格納したり、格納された画像信号を、画像処理部１５を介して画像メモリ１６へ出力させ一時的に格納させたりする。The
The image signal stored in is input and stored via the
操作部１９は、撮像装置本体の外側に設けられ、ユーザが撮像装置本体の設定するため、あるいは操作するために用いる釦類である。なお、操作部１９は、複数の操作釦を含むが詳細は図２を用いて後述する。補助光源２０は、典型的にはＬＥＤであり、撮像環境が暗い場合に後述するシステムコントローラ３０からの指令に基づき、被写体側に向けられて点灯する発光素子である。 The
レンズ駆動部２１は、後述するシステムコントローラ３０のレンズ位置制御部３３からの指令に基づき、フォーカスレンズ群１３を光軸方向（Ａ方向あるいはＢ方向）に駆動する駆動信号を出力する。 The
システムコントローラ３０は、半導体集積回路により実現されており、画像分割部３１と、合焦情報算出部３２と、レンズ位置制御部３３と、色情報算出部３４と、参照色情報設定部３５と、エリア選択部３６とを含む。画像分割部３１は、画像メモリ１６から出力される画像信号を複数のエリアに分割する処理を行う。合焦情報算出部３２は、画像分割部３１により複数のエリアに分割された画像信号から、各エリアのコントラスト情報とフォーカスレンズ群１３の位置情報とに基づいてデフォーカス量を演算する。The system controller 30 is realized by a semiconductor integrated circuit, and includes an
レンズ位置制御部３３は、合焦情報算出部３２から出力されるデフォーカス量に基づいてフォーカスレンズ１３の位置を制御するための制御信号を生成し、レンズ駆動部２１へ出力する。また、レンズ位置制御部３３は、レンズ駆動部２１によりフォーカスレンズ１３を駆動させたときの位置情報を合焦情報算出部３２に出力する。このとき、合焦情報算出部３２は、フォーカスレンズ１３の位置情報とコントラスト情報からデフォーカス量を算出することができる。The lens
色情報算出部３４は、画像分割部３１によって複数のエリアに分割された画像信号から各エリアの色情報を算出する。参照色情報設定部３５は、色情報算出部３４から出力される各エリアの色情報のうちユーザにより選択されたエリアの色情報を算出して格納させ、参照色情報設定処理を行う。なお、色情報算出部３４は、不揮発性メモリを含み、一旦格納させた参照色情報を撮像装置本体の電源を切った場合でも保持することが可能である。 The color
エリア選択部３６は、色情報算出部３４から出力される各エリアの色情報と参照色情報設定部３５から出力される色情報とを比較してほぼ一致するエリアを選択して、選択されたエリアの位置を合焦情報算出部３２へ出力することにより、フォーカス追従撮像処理を行う。すなわち、参照色情報設定部３５は、フォーカス追従撮像処理を行う場合、格納している色情報を読み出してエリア選択部３６へ出力する。 The
図２は、本発明の実施の形態１における撮像装置本体背面の概略図である。実施の形態１にかかる撮像装置は、撮像装置本体１０と、表示部１７と、操作部１９と、ファインダー１０ａとを含む。 FIG. 2 is a schematic view of the back surface of the imaging apparatus main body according to
ファインダー１０ａは、光学的に被写体の像をユーザの瞳に導く光学系である。表示部１７は、先に説明した液晶ディスプレイであり、撮像された画像信号を可視画像としてユーザに表示する。操作部１９は、シャッター釦１９ａと、カーソルキー１９ｂと、決定釦１９ｃと、メニュー釦１９ｄとからなる。 The viewfinder 10a is an optical system that optically guides an image of a subject to a user's pupil. The
シャッター釦１９ａは、ユーザにより半押しされることによってフォーカス追従撮像処
理を開始させ、ユーザにより全押しされることによって撮像した画像をメモリーカードに格納させる操作を行う。カーソルキー１９ｂは、表示部１７に表示された各種動作モードのメニューから項目及びその内容を選択するために操作される。決定釦１９ｃは、カーソルキー１９ｂによって選択された内容を決定するために操作される。メニュー釦１９ｄは、撮像装置本体の一般的な各種動作モードのメニュー表示を行うために操作される。The shutter button 19a starts the focus follow-up imaging process when pressed halfway by the user, and performs an operation of storing an image captured when fully pressed by the user in the memory card. The cursor key 19b is operated to select an item and its content from a menu of various operation modes displayed on the
各種動作モードのメニューの項目には、後述する表示部１７に撮像した画像信号の色情報を格納させる（参照色情報設定）処理を開始するかどうかが含まれる。ユーザが、メニュー釦１９ｄを操作して、表示部１７に参照色情報設定処理の開始に関するメニューを表示させると、カーソルキー１９ｂは、ユーザによる操作でその内容の選択を受け付ける。この状態において、ユーザがカーソルキー１９ｂを操作し参照色情報設定処理の開始を選択し、決定釦１９ｃを操作すると、参照色情報設定部３５により参照色情報設定処理が開始される。 The item of the menu of various operation modes includes whether or not to start processing for storing color information of a captured image signal on the
図３は、本発明の実施の形態１における被写体の参照色情報設定の動作フローチャートである。図３に示すフローチャートは、システムコンローラ３０上で動作するプログラムの動作フローを示す。また、図４は、本発明の実施の形態１における中央に被写体が写し出された表示部の概観図であり、表示部１７の中央に被写体Ｐ１が写し出されている例を示している。また、図５は、本発明の実施の形態１における中央に被写体とエリア枠が写し出された表示部の概観図であり、被写体Ｐ１に７×７個のエリア枠を表示させた例を示している。メニュー釦１９ｄと決定釦１９ｃにより色情報を参照するモードが設定された場合、参照色情報設定処理が開始される。FIG. 3 is an operation flowchart for setting reference color information of a subject in the first embodiment of the present invention. A flowchart shown in FIG. 3 shows an operation flow of a program operating on the system controller 30. FIG. 4 is an overview of the display unit in which the subject is projected at the center according to the first embodiment of the present invention, and shows an example in which the subject P1 is projected at the center of the
ステップＳ１０１において、ＣＣＤ１４で撮像された画像信号が画像処理部１５から出力され表示部１７に可視画像とエリア枠とを表示する。このとき、表示部１７に表示されている画像は、図５に示すように、可視画像とエリア枠とが重畳された表示状態となる。また、画像メモリ１６からシステムコントローラ３０の画像分割部３１に入力された画像信号は、エリアごとに分割される。 In step S <b> 101, an image signal captured by the
ステップＳ１０２において、エリア枠が選択されたかどうかの入力待ちになる。このとき特定のエリアが太枠で囲まれて表示され、選択可能であることが示される。ユーザは、太枠のエリアをカーソルキー１９ｂで移動させることができる。例えば、ユーザが中央に太枠のエリアを移動させて決定釦１９ｃを押すと、中央のエリア枠Ａ１が選択されたことになり、ステップＳ１０３の処理に進む。 In step S102, the process waits for an input indicating whether an area frame has been selected. At this time, a specific area is displayed surrounded by a thick frame to indicate that it can be selected. The user can move the thick frame area with the
ステップＳ１０３において、色情報算出部３４は、選択されたエリア（ここでは太枠のエリア）内に表示されている分割された画像の色情報を算出して、ステップＳ１０４の処理に進む。 In step S103, the color
ステップＳ１０４において、参照情報設定部３５は算出された色情報を格納し、参照色情報設定処理を終了する。 In step S104, the reference
図６は、本発明の実施の形態１における色相および彩度情報の演算式である。以下、ステップＳ１０３において説明した、色情報算出部３４の色相および彩度情報の演算原理を説明する。なお、画像信号を赤（以降ではＲと称す），緑（以降ではＧと称す），青（以降ではＢと称す）で分けて表し、Ｒ，Ｇ，Ｂをそれぞれ２５６階調として説明する。 FIG. 6 is an arithmetic expression for hue and saturation information according to
色相および彩度情報の演算は、色情報算出部３４において実行される。はじめに、色情報算出部３４は、画像分割部３１から出力された分割画像信号に対して、Ｒ，Ｇ，Ｂの最大値を求め、求められた最大値をＶとする（式１）。次に、色情報算出部３４は、画像分割部３１から出力された分割画像信号に対して、最小値を求め、求められた最小値をＶから引き算をしてｄとする（式２）。さらに、色情報算出部３４は、Ｖとｄから彩度Ｓを求める（式３）。The calculation of hue and saturation information is executed in the color
色情報算出部３４は、彩度Ｓ＝０であれば色相Ｈ＝０とする（式４）。また、色情報算出部３４は、彩度Ｓが０以外の値である場合、所定の処理を行って色相を演算する（式５〜式７）。ここで、所定の処理とは、Ｒ，Ｇ，Ｂの最大値がＲと等しい場合には式５により色相Ｈを求め、Ｇと等しい場合には式６により色相Ｈを求め、Ｂと等しい場合には式７により色相Ｈを求める処理である。 The color
最後に、色情報算出部３４は、求められた色相Ｈが負の値に成っている場合、３６０を加算して、正の値に変換する（式８）。以上のようにして、色情報算出部３４は、分割画像信号の色相および彩度情報を、演算により算出する。 Finally, when the obtained hue H is a negative value, the color
図７は、本発明の実施の形態１における色相および彩度情報のチャート図である。図７において、彩度Ｓはチャートの半径方向に相当し、中心をＳ＝０とし、周辺へ向けて０〜２５５の範囲で増加するようにプロットされる。また、図７において、色相Ｈは、回転方向に相当し、回転方向に沿って０〜３５９の値で表す。 FIG. 7 is a chart of hue and saturation information in
例えば、分割画像信号の色情報がＲ＝２５０，Ｇ＝１８０，Ｂ＝１２０であったとすると、色情報算出部３４は、前述した各式を用いて、各式からＶ＝２５０、ｄ＝２５０−１２０＝１３０、彩度Ｓ＝１３０×２５５／２５０＝１３３、色相Ｈ＝（１８０−１２０）×６０／１３３＝２７を得ることができる。 For example, assuming that the color information of the divided image signal is R = 250, G = 180, and B = 120, the color
以上の通り、色情報算出部３４は、分割画像信号の彩度と色相とを算出する。算出された彩度と色相とは、参照色情報として参照色情報設定部３５へ出力され保存される。次に、参照色情報に隣接して設定される参照近傍領域について説明する。 As described above, the color
色情報算出部３４により算出された参照色情報は、参照色情報設定部３５に格納され、随時参照されて撮像されるべき被写体の色情報を判断するリファレンスとして用いられる。ところで、一般に、同一被写体であっても照明光や露光時間などの要因によって、撮像した色情報が微妙に変化する場合がある。したがって、参照色情報と撮像されるべき被写体の色情報とを比較する場合、参照色情報に一定の許容幅を持たせて、同一性判断をすることが望ましい。この参照色情報の一定の許容幅を参照近傍領域と呼ぶ。 The reference color information calculated by the color
以下、参照近傍領域を算出する例を示す。図８は、本発明の実施の形態１における参照色情報と参照近傍領域１を示した色相および彩度情報のチャート図である。図８において、参照色情報（Ｈ１，Ｓ１）としてプロットされた点は、参照色情報設定部３５で格納された色情報に相当する。なお、参照色情報は、一例として先に算出したＲ＝２５０，Ｇ＝１８０，Ｂ＝１２０とした場合に求められる色相Ｈ＝２７（＝Ｈ１）、彩度Ｓ＝１３０（＝Ｓ１）を表している。 Hereinafter, an example of calculating the reference vicinity region will be shown. FIG. 8 is a chart of hue and saturation information showing the reference color information and the
参照近傍領域１は、格納されている参照色情報（Ｈ１，Ｓ１）に対してそれぞれ許容幅を規定した領域である。色相の許容幅ΔＨ＝１０、彩度の許容幅ΔＳ＝３０とすると、参照近傍領域１は、色相はＨ１±１０、彩度はＳ１±３０の領域に相当し、図８において、２本の円弧と２本の半径方向の線分で囲まれる領域となる。 The
図９は、本発明の実施の形態１における参照色情報と参照近傍領域２を示した色相および彩度情報のチャート図である。図９において、参照色情報（Ｈ１，Ｓ１）としてプロットされた点は、参照色情報設定部３５で格納された色情報に相当する。なお、参照色情報
は、一例として先に算出したＲ＝２５０，Ｇ＝１８０，Ｂ＝１２０とした場合に求められる色相Ｈ＝２７（＝Ｈ１）、彩度Ｓ＝１３０（＝Ｓ１）を表している。FIG. 9 is a chart of hue and saturation information showing the reference color information and the reference neighboring area 2 in the first embodiment of the present invention. In FIG. 9, the points plotted as the reference color information (H1, S1) correspond to the color information stored in the reference color
参照近傍領域２は、彩度が０〜２５５のすべての範囲で、色相の許容幅ΔＨにより規定される。つまり、参照近傍領域２は、色相はＨ１±１０の領域に相当し、図９において、円弧と半径方向の線分で囲まれる扇形の領域となる。 The reference vicinity region 2 is defined by the hue tolerance width ΔH in the entire range of saturation from 0 to 255. That is, the reference neighboring area 2 corresponds to an area having a hue of H1 ± 10, and in FIG. 9, is a sector area surrounded by a circular arc and a line segment in the radial direction.
以上説明した２つの例では、いずも色相の許容幅を一律に設定したが、これに限られない。補助光源を使用する場合などでは、光源の色相情報に基づいて参照される色情報の範囲を補正することで、暗所で撮像装置を使用している場合においても参照範囲を正確に規定することが可能になる。例えば、ＬＥＤ等を用いた赤系色の補助光源の場合にはＨ１を０の方向にシフトさせるので補正が可能である。In the two examples described above, the allowable range of hue is set uniformly, but the present invention is not limited to this. When an auxiliary light source is used, the reference range can be accurately specified even when the imaging device is used in a dark place by correcting the color information range that is referenced based on the hue information of the light source. Is possible. For example, in the case of a reddish color auxiliary light source using an LED or the like can be corrected bythe shifting H1 is the direction of 0.
また、以上説明した２つの例では、参照色情報設定部３５に撮像した被写体の色情報を格納させる例であったが、これに限られない。例えば、撮像装置本体に、肌色などあらかじめいくつかの参照色情報を格納させておいてもよい。 In the two examples described above, the reference color
図１０は、本発明の実施の形態１におけるフォーカス追従撮像処理の動作フローチャートである。また、図１１は、本発明の実施の形態１における被写体とエリア枠が写し出された表示部の概観図である。また、図１２は、本発明の実施の形態１における２体の被写体とエリア枠が写し出された表示部の概観図である。以下、図１０ないし図１２を参照して、実施の形態１にかかる撮像装置のフォーカス追従撮像処理を説明する。 FIG. 10 is an operation flowchart of focus tracking imaging processing according to
図１０に示す動作フローチャートは、システムコントローラ３０上で動作するプログラムのフローを示す。図１０において、ユーザによりシャッター釦１９ａが半押しされた場合、フォーカス追従撮像処理が開始される。 The operation flowchart shown in FIG. 10 shows the flow of a program that runs on the system controller 30. In FIG. 10, when the shutter button 19a is half-pressed by the user, the focus follow-up imaging process is started.
ステップＳ１５１において、ＣＣＤ１４で撮像され画像処理部１５で所定の画像処理が施された画像信号が、表示部１７にエリア枠と共に表示される。このとき、表示部１７には、図１１に示すように被写体Ｐ１と７×７個のエリア枠が表示される。 In step S151, an image signal captured by the
次に、ステップＳ１５２において、参照色情報設定部３５に格納されている参照色情報に基づいて、先の図８及び図９において説明したいずれかの方法で参照近傍領域が算出され、色情報算出部３４から出力される各エリアの色情報が参照近傍領域内であるかどうかが判定される。参照色情報に近い色情報を有するエリアがあればステップＳ１５３の処理に進み、なければステップＳ１５８の処理に進む。 Next, in step S152, based on the reference color information stored in the reference color
ステップＳ１５３において、参照色情報に近い色情報を有するエリアが１つかどうかを判定し、１つであればステップＳ１５６の処理に進み、２つ以上であればステップＳ１５４の処理に進む。 In step S153, it is determined whether there is one area having color information close to the reference color information. If there is one, the process proceeds to step S156, and if there are two or more, the process proceeds to step S154.
図１１を用いた例では、参照色情報に近い色情報を有するエリアが１つ（エリアＡ４）であり、ステップＳ１５６の処理に進む。ステップＳ１５６において、合焦情報算出部３２、レンズ位置制御部３３、レンズ駆動部２１によりフォーカスレンズ群１３が図１のＡ方向あるいはＢ方向に駆動される。その後、合焦情報算出部３２は、フォーカス位置と画像信号から生成されるコントラスト信号とから、エリアＡ１においてコントラスト値が最も高くなるフォーカス位置（合焦位置）を演算し、レンズ位置制御部３３へ制御信号を出力する。 In the example using FIG. 11, there is one area (area A4) having color information close to the reference color information, and the process proceeds to step S156. In step S156, the
ステップＳ１５７において、ステップＳ１５６の処理にて合焦情報算出部３２で求めた
合焦位置までのデフォーカス量分だけレンズ位置制御部３３、レンズ駆動部２１によりフォーカスレンズ１３を選択エリア（エリアＡ１）で合焦させる動作を行い、次のステップＳ１６０の処理に進む。In step S157, the
一方、図１２を用いた例では、参照色情報に近い色情報を有するエリアが２つ（エリアＡ２およびエリアＡ３）であり、ステップＳ１５４の処理に進む。ステップＳ１５４において、合焦情報算出部３２、レンズ位置制御部３３、レンズ駆動部２１によりフォーカスレンズ群１３が図１のＡ方向あるいはＢ方向に駆動される。その後、合焦情報算出部３２は、フォーカス位置と画像信号から生成されるコントラスト信号とから、エリアＡ２とエリアＡ３の各々においてコントラスト値が最も高くなるフォーカス位置（合焦位置）を演算し、レンズ位置制御部３３へ制御信号を出力する。 On the other hand, in the example using FIG. 12, there are two areas (area A2 and area A3) having color information close to the reference color information, and the process proceeds to step S154. In step S154, the
ステップＳ１５５において、ステップＳ１５４の処理にて合焦情報算出部３２で求めた各エリアの合焦位置までのデフォーカス量のうち最至近になるエリア（ここではエリアＡ３）を選択し、レンズ位置制御部３３、レンズ駆動部２１によりフォーカスレンズ１３を選択エリア（エリアＡ３）で合焦させる動作を行い、次のステップＳ１６０の処理に進む。なお、最至近エリアに合焦させる例で説明したが、中央付近のエリアを優先して合焦させるようにしてもよい。 In step S155, the closest area (here, area A3) is selected from the defocus amounts to the focus position of each area obtained by the focus
ステップＳ１５２において、参照色情報に近い色情報を有するエリアがない場合、ステップＳ１５８に進む。ステップＳ１５８において、合焦情報算出部３２、レンズ位置制御部３３、レンズ駆動部２１によりフォーカスレンズ群１３が図１のＡ方向あるいはＢ方向に駆動される。その後、合焦情報算出部３２は、フォーカス位置と画像信号から生成されるコントラスト信号とから、すべてのエリアに対してコントラスト値が最も高くなるフォーカス位置を演算する。 If there is no area having color information close to the reference color information in step S152, the process proceeds to step S158. In step S158, the
ステップＳ１５９において、ステップＳ１５８の処理にて合焦情報算出部３２で求めた各エリアの合焦位置までのデフォーカス量のうち最至近になるエリアを選択し、レンズ位置制御部３３、レンズ駆動部２１によりフォーカスレンズ１３を選択エリアで合焦させる動作を行い、次のステップＳ１６０の処理に進む。ここで、最至近エリアに合焦させる例で説明したが、同様に中央付近のエリアを優先して合焦させるようにしてもよい。 In step S159, the closest area is selected from the defocus amounts to the focus position of each area obtained by the focus
ステップＳ１６０において、シャッター釦１９ａが全押しされたかどうかを判定し、全押しされた場合には次のステップＳ１６１の処理に進む。シャッター釦１９ａが離された場合には以上の処理はすべてやり直しとなる。ステップＳ１６１ではシャッター釦１９ａが全押しされたタイミングで、システムコントローラ３０からの指令に基づき、画像メモリ１６または画像処理部１５から出力される画像信号をメモリーカードに格納させる撮像処理を行い、フォーカス追従撮像処理を終了させる。 In step S160, it is determined whether or not the shutter button 19a is fully pressed. If the shutter button 19a is fully pressed, the process proceeds to the next step S161. When the shutter button 19a is released, all the above processes are performed again. In step S161, at the timing when the shutter button 19a is fully pressed, on the basis of a command from the system controller 30, an imaging process for storing an image signal output from the
以上のように、実施の形態１にかかる撮像装置によれば、任意に設定可能な被写体の色情報に応じてフォーカス調整を行うので、ユーザが合焦したいと望む被写体に容易にフォーカス追従をさせることができる。このとき、被写体の色情報はユーザによって任意に設定することができ、撮像装置の機能を向上させることができる。また、色情報は、色相と彩度とからなるので、輝度の影響を受けることなくユーザが合焦したいと望む被写体に容易にフォーカス追従をさせることができる。 As described above, according to the imaging apparatus according to the first embodiment, the focus adjustment is performed according to the color information of the subject that can be arbitrarily set. Therefore, it is possible to easily follow the subject that the user desires to focus on. be able to. At this time, the color information of the subject can be arbitrarily set by the user, and the function of the imaging apparatus can be improved. Further, since the color information is composed of hue and saturation, it is possible to easily follow the subject that the user desires to focus without being affected by the luminance.
なお、実施の形態１では７×７個のエリア枠を用いる例で説明したが、エリア枠の設定は任意であり、適宜設定すればよい。例えば、エリア枠を表示部１７の中央付近に複数個配置してもよいし、１つ配置するようにしてもよい。 Although the example of using 7 × 7 area frames has been described in the first embodiment, the setting of the area frames is arbitrary and may be set as appropriate. For example, a plurality of area frames may be arranged near the center of the
（実施の形態２）
図１３は、本発明の実施の形態２における撮像装置のブロック図である。実施の形態２
にかかる撮像装置は、実施の形態１にかかる撮像装置と概略構成が等しいので、図１と同様に機能する構成要素については同一の番号を付し、詳細な説明は省略する。(Embodiment 2)
FIG. 13 is a block diagram of the imaging apparatus according to Embodiment 2 of the present invention. Embodiment 2
Since the image pickup apparatus according to the first embodiment has the same schematic configuration as that of the image pickup apparatus according to the first embodiment, components that function in the same manner as in FIG.
図１３において、参照色情報設定部４５は、参照色情報設定処理を行う場合、実施の形態１にかかる撮像装置の色情報算出部３４から出力される各エリアの色情報のうちユーザにより選択されたエリアの色情報を算出して格納する。また、参照色情報設定処理部４５は、フォーカス追従撮像処理を行う場合、格納している色情報を読み出してエリア選択部３６へ出力する。参照色情報設定処理部４５は、フォーカス追従撮像処理を行う場合、さらに画像処理部５５へ補正情報を出力する。実施の形態２にかかる撮像装置では、後述するように色情報算出部３４により得られた色情報に基づいて、被写体に対するフォーカス精度を向上させることができる。 In FIG. 13, when performing the reference color information setting process, the reference color
図１４は、本発明の実施の形態２における画像処理部の詳細ブロック図である。図１４において、画像処理部５５は、ＡＧＣ５５ａと、Ｒ，Ｇ，Ｂゲイン補正部５５ｂと、ホワイトバランス補正部５５ｃと、γ補正部５５ｄと、画像補正処理部５５ｅとを含む。 FIG. 14 is a detailed block diagram of the image processing unit in Embodiment 2 of the present invention. In FIG. 14, the
ＡＧＣ５５ａは、ＣＣＤ１４で撮像された画像信号のゲインを自動補正するＡＧＣ（Ａｕｔｏ Ｇａｉｎ Ｃｏｎｔｒｏｌ）回路である。ホワイトバランス補正部５５ｃは、撮像された画像信号のホワイトバランスを補正する。γ補正部５５ｄは、撮像された画像信号のγ補正を行う。画像補正処理部５５ｅは、画像信号中に存在する画素の傷などの補正を行う。Ｒ，Ｇ，Ｂゲイン補正部５５ｂは、参照色情報設定部４５から出力される補正情報に基づいてＲ，Ｇ，Ｂの各色のゲインを補正する。 The
画素補正処理部５５ｅは、画像メモリ１６へ画像情報を出力し、撮像時にメモリーカード１８に格納させたり、表示部１７に表示させたりするために画像信号が用いられる。Ｒ，Ｇ，Ｂゲイン補正部５５ｂも、画像メモリ１６へ画像情報を出力するが、この画像信号は、フォーカスレンズ群１３の駆動を制御するための色情報算出およびコントラスト情報算出に用いられる。 The pixel
図１５は、本発明の実施の形態２におけるフォーカス追従撮像処理の動作フローチャートである。以下、実施の形態２にかかる撮像装置の動作を説明する。 FIG. 15 is an operation flowchart of focus follow-up imaging processing according to Embodiment 2 of the present invention. The operation of the imaging apparatus according to the second embodiment will be described below.
以下、実施の形態２にかかる撮像装置のフォーカス追従撮像処理の動作フローチャート（図１０）を、実施の形態１で説明したフォーカス追従撮像処理の動作フローチャートにステップＳ１６２の処理を追加した例として説明し、実施の形態１において説明した処理と重複する箇所については説明を省略する。なお、同様にこの動作フローチャートは、システムコントローラ５０上で動作するプログラムのフローを示す。実施の形態１と同様に、ユーザによりシャッター釦１９ａが半押しされた場合、フォーカス追従撮像処理が開始される。Hereinafter description, the operation flow chart of the focus tracking imaging process of the imaging apparatus according to the second embodiment (FIG. 10), as example of adding a focus tracking imaging operation flowchart in Step S162 treatment processes described in the first embodiment The description of the same parts as those described in the first embodiment is omitted. Similarly, this operation flowchart shows a flow of a program operating on the system controller 50. As in the first embodiment, when the shutter button 19a is half-pressed by the user, the focus tracking imaging process is started.
実施の形態２にかかる撮像装置において、ステップＳ１５２で参照色情報に近い色情報を有するエリアがある場合、図１５に示すステップＳ１６２の処理に進む。実施の形態２にかかる撮像装置において、図９に示す参照近傍領域２が規定されている。一例として、彩度が、０〜２５５のすべての範囲、色相およびその許容幅ΔＨが、Ｈ１＝０、ΔＨ＝３０とする。また、色相の許容幅の参照範囲はＨ＝±３０とする。つまり、赤系統の色を参照近傍領域２として説明する。In the imaging apparatus according to the second embodiment, when there is the area having the color information is close to the reference color information in step S152, the flow proceeds to processing steps S162 shown in FIG. 15. In the imaging apparatus according to the second embodiment, a reference vicinity region 2 shown in FIG. 9 is defined. As an example, it is assumed that the saturation ranges from 0 to 255, the hue, and the allowable width ΔH thereof are H1 = 0 and ΔH = 30. The reference range of the allowable hue range is H = ± 30. That is, the red color is described as the reference vicinity region 2.
ステップＳ１６２において、画素のゲイン補正処理が行われた後、実施の形態１におけるフローチャート（図１０）におけるステップＳ１５３の処理に戻る。以下、実施の形態２の撮像装置の特徴部分である、画像のゲイン補正処理について詳しく説明する。In Step S162, after the gain correction processing of the pixel is performed, the process returns to step S153 in the flowchart (FIG. 10) in the first embodiment. Hereinafter, image gain correction processing, which is a characteristic part of the imaging apparatus according to the second embodiment, will be described in detail.
実施の形態２にかかる撮像装置は、撮像素子から出力される画像信号に対して、２系統の画像処理を行うことに特徴がある。すなわち、画像処理部５５のホワイトバランス補正部５５ｃおよびγ補正部５５ｄは、撮像した画像をより自然に鮮やかに見えるようにＣＣＤ１４からの画像信号の各色のレベル補正が行う。一方、画像処理部５５のＲ，Ｇ，Ｂゲイン補正部５５ｂは、フォーカス調整用に独自に画像処理を施すことでデフォーカス量を演算するときに用いるコントラスト情報を、ユーザの撮影したい色を有する被写体にフォーカスを合わせやすいように補正する。 The imaging apparatus according to the second embodiment is characterized in that two systems of image processing are performed on the image signal output from the imaging element. That is, the white
図１６は、本発明の実施の形態２における被写体とエリア枠が写し出された表示部の概観図であり、表示部１７が、被写体として手前にある赤系統の色を有する花びらＰ３と奥にある緑系統の色を有する葉Ｐ４とを表示し、併せて７×７個のエリア枠を表示した状態を示す。 FIG. 16 is a schematic view of the display unit in which the subject and the area frame are shown in the second embodiment of the present invention, and the
図１７は、本発明の実施の形態２におけるゲイン補正前のフォーカス位置とコントラスト値の特性図であり、Ｒ，Ｇ，Ｂゲイン補正前の被写体のエリアＡ５（色情報を算出する３×３個のエリア枠を含み、３×３個のエリア枠の平均的なコントラスト情報を算出するＡＦ用のエリア枠とする）のフォーカス位置と平均的なコントラスト値との関係を示す。図１７からわかるように、手前に写っている花びらのコントラスト値が大きくなるフォーカス位置はＸ１、奥に写っている葉のコントラスト値が大きくなるフォーカス位置はＸ２である。 FIG. 17 is a characteristic diagram of the focus position and contrast value before gain correction according to Embodiment 2 of the present invention. The area A5 of the subject before R, G, B gain correction (3 × 3 pixels for calculating color information) is shown. The relationship between the focus position and the average contrast value is shown as an area frame for AF that calculates average contrast information of 3 × 3 area frames. As can be seen from FIG. 17, the focus position where the contrast value of the petal in the foreground becomes large is X1, and the focus position where the contrast value of the leaf in the back becomes large is X2.
通常、ホワイトバランス補正部５５ｃとγ補正部５５ｄとは、撮像した画像がより自然に、かつ鮮やかに見えるようにＣＣＤ１４からの画像信号の各色のレベル補正を行う。したがって、ホワイトバランス補正部５５ｃとγ補正部５５ｄが行われた画像信号に基づいて、フォーカス位置とコントラスト値との特性を求めた場合、必ずしもユーザの意図するフォーカス位置に合焦させるとは限らない。 Normally, the white
図１７の被写体の例では、ユーザが合焦させたい被写体は花びらであるにも係わらずコントラスト値が高い奥に写っている葉に合焦させてしまい、手前の花びらに合焦させることができない。 In the example of the subject in FIG. 17, the subject that the user wants to focus on is a petal, but the subject is focused on the leaf in the back with a high contrast value, and cannot be focused on the petal in the foreground. .
そこで、実施の形態２にかかる撮像装置は、参照色情報設定部４５に、ユーザの意図する参照色情報（Ｈ＝±３０の範囲）を予め格納させておき、その参照色情報と色情報算出部３４にて算出されたエリアＡ５における３×３個の各エリアの色情報とを比較する処理を行う。そして、比較した結果、一致するエリアが存在する場合（図１７の例では、一致するエリア枠はＡ６，Ａ７）、参照色情報設定部４５は、Ｒ，Ｇ，Ｂゲイン補正部５５ｂにＲのレベルを上げ他の色のレベルを下げるように、画像処理部５５へ補正情報を出力する。 Therefore, in the imaging apparatus according to the second embodiment, the reference color
図１８は、本発明の実施の形態２におけるゲイン補正後のフォーカス位置とコントラスト値の特性図であり、Ｒ，Ｇ，Ｂゲイン補正後の被写体のエリアＡ５のフォーカス位置と平均的なコントラスト値との関係を示す。図１８からわかるように、補正情報を用いてゲイン補正を行うことにより、手前の赤の花びらにおけるコントラスト値が上がり、奥の緑の葉におけるコントラスト値を下がっている。この結果、図１７の被写体の例でも、ユーザが合焦させたい被写体である花びらに合焦させることができる。 FIG. 18 is a characteristic diagram of the focus position and the contrast value after gain correction in Embodiment 2 of the present invention, and the focus position and average contrast value of the area A5 of the subject after R, G, B gain correction. The relationship is shown. As can be seen from FIG. 18, by performing the gain correction using the correction information, the contrast value of the red petal in the foreground is increased and the contrast value of the green leaf in the back is decreased. As a result, even in the example of the subject in FIG. 17, it is possible to focus on the petal that is the subject that the user wants to focus on.
以上のように、実施の形態２にかかる撮像装置によれば、予め格納された色情報に基づいて撮像された画像信号の内の分割画像のゲインを合焦のために補正するので、ユーザが意図する被写体に容易に合焦させることができる。 As described above, according to the imaging apparatus according to the second embodiment, the gain of the divided image in the image signal captured based on the color information stored in advance is corrected for focusing. It is possible to easily focus on the intended subject.
なお、実施の形態２において、参照色情報を設定する場合、Ｒ，Ｇ，Ｂの各色のゲインは所定の初期設定値に戻して行うことが望ましい。初期設定値を用いて参照色情報を設定することにより、参照色情報の再現性を確保することができる。 In the second embodiment, when setting the reference color information, it is desirable that the gains of the R, G, and B colors are returned to predetermined initial setting values. By setting the reference color information using the initial setting value, the reproducibility of the reference color information can be ensured.
また、実施の形態２において、Ｒ，Ｇ，Ｂゲイン補正部５５ｂに画像信号中に存在する画素の傷などの補正を行う処理を加えてもよい。このような処理を加えることにより、フォーカス追従のための性能を向上させることができる。 In the second embodiment, the R, G, B
また、実施の形態２において、色情報を算出する単位の３×３個のエリア枠含む構成で説明したが、エリア枠を表示部１７に複数個配置してもよいし、エリア枠について参照色情報を算出するエリア枠とほぼ一致するようにしてもよい。 In the second embodiment, the configuration including 3 × 3 area frames as a unit for calculating color information has been described. However, a plurality of area frames may be arranged on the
また、図１５のステップＳ１６２の処理後、実施の形態１において図１０を用いて説明した複数エリアの選択処理を行うフローに接続されているが、これに限られない。例えば、ユーザの意図する色の被写体に合焦させる精度を向上させるために、実施の形態１における複数エリアの選択処理の機能を有するようにしてもよい。Further, after step S162 in FIG. 15, are connected to the flow and selects a plurality of areas described with reference to FIG. 10 in the first embodiment is not limited thereto. For example, in order to improve the accuracy of focusing on the subject of the color intended by the user, the function of selecting a plurality of areas in the first embodiment may be provided.
（実施の形態３）
図１９は、本発明の実施の形態３における撮像装置のブロック図である。実施の形態３にかかる撮像装置は、実施の形態１にかかる撮像装置と概略構成が等しいので、図１と同様に機能する構成要素については同一の番号を付し、詳細な説明は省略する。(Embodiment 3)
FIG. 19 is a block diagram of an imaging apparatus according to
図１９において、輝度判定部３７は、色情報算出部３４から出力された色情報を入力し、図６に示す式１で求められた各エリアのＶに基づいて輝度が飽和しているかどうかを判定して出力する。選択禁止部３８は、輝度判定部３７によって判定された輝度が飽和しているエリアを合焦するエリアとして選択しないようにエリア選択部４６に禁止情報を送る。 In FIG. 19, the
図２０は、本発明の実施の形態３におけるフォーカス追従撮像処理の動作フローチャートである。以下、実施の形態３にかかる撮像装置のフォーカス追従撮像処理の動作フローチャートを、実施の形態１で説明したフォーカス追従撮像処理の動作フローチャート（図１０）にステップＳ１７１およびステップＳ１７２の処理を追加した例として説明し、実施の形態１において説明した処理と重複する箇所については説明を省略する。なお、同様にこの動作フローチャートは、システムコントローラ６０上で動作するプログラムのフローを示す。実施の形態１と同様に、ユーザによりシャッター釦１９ａが半押しされた場合、フォーカス追従撮像処理が開始される。 FIG. 20 is an operation flowchart of focus follow-up imaging processing according to
実施の形態２において、ステップＳ１５１の後、ステップＳ１７１へ進む。ステップＳ１７１において、輝度が飽和しているエリアがある場合、ステップＳ１７２の処理に進み、輝度が飽和しているエリアがない場合にはステップＳ１５２の処理に戻る。 In the second embodiment, after step S151, the process proceeds to step S171. In step S171, if there is an area where the luminance is saturated, the process proceeds to step S172. If there is no area where the luminance is saturated, the process returns to step S152.
一例として、撮像された画像信号のエリアＡ６のＶが２５５となり輝度が飽和している場合を説明する。ステップＳ１７１において、輝度判定部３７がエリアＡ６の輝度が飽和していると判定し選択禁止部３８へ判定結果を出力する。ステップＳ１７２において、選択禁止部３８がエリア選択部４６にエリアＡ８を合焦エリアとして選択しないようにする禁止情報を出力し、ステップＳ１５２の処理に戻る。 As an example, a case will be described in which the luminance of the image signal area A6 V is 255 and the luminance is saturated. In step S171, the
この結果、輝度が飽和した合焦エリアは、フォーカス調整に使用されなくなる。したがって、実施の形態３にかかる撮像装置は、飽和した画像信号に基づいて誤ったコントラス
ト情報あるいは色情報から合焦させるための情報を演算することがないので、偽合焦することがない。As a result, the focus area where the luminance is saturated is not used for focus adjustment. Therefore, since the imaging apparatus according to the third embodiment does not calculate information for focusing from erroneous contrast information or color information based on a saturated image signal, false imaging is not performed.
以上のように、実施の形態３にかかる撮像装置によれば、輝度が飽和した合焦エリアは、フォーカス調整に使用されないので、偽合焦が発生せず、フォーカスレンズ群を適正に移動させることができる。 As described above, according to the imaging apparatus according to the third embodiment, since the in-focus area where the brightness is saturated is not used for focus adjustment, false focus does not occur and the focus lens group is moved appropriately. Can do.
（実施の形態４）
図２１は、本発明の実施の形態４における撮像装置のブロック図である。実施の形態４にかかる撮像装置は、実施の形態１にかかる撮像装置と概略構成が等しいので、図１と同様に機能する構成要素については同一の番号を付し、詳細な説明は省略する。(Embodiment 4)
FIG. 21 is a block diagram of an imaging apparatus according to
図２１において、参照色情報設定部４７は、参照色情報設定処理を行う場合、色情報算出部３４から出力される各エリアの色情報のうち、ユーザにより選択されたエリアの色情報を算出して格納し、このエリアの位置と算出した色情報を画像処理部５６へ出力する。また、参照色情報設定部４７は、フォーカス追従撮像処理を行う場合、格納している色情報を読み出してエリア選択部３６へ出力する。 In FIG. 21, when performing the reference color information setting process, the reference color
さらに、参照色情報設定部４７は、フォーカス追従撮像処理を行う場合、参照色情報設定部４７から画像処理部５６へ補正情報を出力する。なお、この補正情報は、図１３と図１４を用いて説明した実施の形態２にかかる撮像装置と同様であり詳細な説明は省略する。 Further, the reference color
図２２は、本発明の実施の形態４における画像処理部の詳細ブロック図である。図２２において、画像処理部５６は、実施の形態２の画像処理部５５と概略構成が等しいので、同様に機能する構成要素については同一の番号を付し、詳細な説明は省略する。 FIG. 22 is a detailed block diagram of the image processing unit according to
特定エリア色補正処理部５５ｆは、参照色情報設定部４７から出力されたエリアの位置情報と算出した色情報に基づいて特定されたエリアの色を補正する。画像信号は、特定エリア色補正処理部５５ｆにおける補正処理が行われた後に画像メモリ１６へ出力される。 The specific area color
図２３は、本発明の実施の形態４における参照色情報設定処理の動作フローチャートである。以下、実施の形態４にかかる撮像装置のフォーカス追従撮像処理の動作フローチャートを、実施の形態１で説明した参照色情報設定処理の動作フローチャート（図３）にステップＳ１８１の処理を追加した例として説明し、実施の形態１において説明した処理と重複する箇所については説明を省略する。なお、同様にこの動作フローチャートは、システムコントローラ７０上で動作するプログラムのフローを示す。実施の形態１と同様に、ユーザによりカーソルキー１９ｂ、決定釦１９ｃ、メニュー釦１９ｄ等が操作されることにより、参照色情報設定処理が開始される。 FIG. 23 is an operation flowchart of reference color information setting processing according to
ステップＳ１０３において、選択されたエリアの色情報が算出された後、図２３に示すステップＳ１８１の処理が行われ、ステップＳ１０４の処理に戻る。ステップＳ１８１において、参照色情報設定部４７にて選択されたエリアの位置情報と色情報とが、特定エリア色補正処理部５５ｆに送られ、特定エリアに対する色補正処理が行われる。 In step S103, after the color information of the selected area is calculated, the process of step S181 shown in FIG. 23 is performed, and the process returns to step S104. In step S181, the position information and color information of the area selected by the reference color
図２４は、本発明の実施の形態４における被写体とエリア枠が写し出された表示部の概観図である。実施の形態４にかかる撮像装置において、ステップＳ１８１を実行した場合、図２４に示す表示状態となり、太枠のエリアＡ１内の色が参照色情報に置き換えられる。このとき、エリアＡ１全体を参照色情報に置き換えるのではなく、被写体のエッジ抽出を行うことで輪郭などを残し、ユーザの操作性を損なうことを防止することが望ましい。
次に、ステップＳ１０４において、参照情報設定部４６に算出された色情報が格納され、参照色情報設定処理を終了する。FIG. 24 is an overview diagram of the display unit in which the subject and the area frame are projected in the fourth embodiment of the present invention. In the imaging apparatus according to the fourth embodiment, when step S181 is executed, the display state shown in FIG. 24 is obtained, and the color in the thick area A1 is replaced with the reference color information. At this time, instead of replacing the entire area A1 with the reference color information, it is desirable to prevent the deterioration of the operability of the user by leaving an edge or the like by extracting the edge of the subject.
Next, in step S104, the calculated color information is stored in the reference
このように、実施の形態４にかかる撮像装置によれば、色情報を参照する場合に参照した単一の色情報を表示画面で被写体に合わせて表示させるので、ユーザが意図する色情報を抽出することができたかどうかを確認することが可能になる。 As described above, according to the imaging apparatus according to the fourth embodiment, the single color information referred to when referring to the color information is displayed according to the subject on the display screen, so that the color information intended by the user is extracted. It becomes possible to confirm whether or not it was possible.
なお、実施の形態４において、参照されるエリアと参照された単一の色情報を表示させるエリアとは同一の大きさであるとして説明したが、これに限られない。例えば、画素一つ一つについて参照した色情報と比較を行い、近い色情報の画素を参照した色情報に置き換えてもよい。また、参照した色情報に限らず赤、緑、青等の彩度の高い色に置き換えたり、参照色情報に対する補色など視認性の高い色情報に置き換えたりしてもよい。 In the fourth embodiment, the area to be referred to and the area to display the referenced single color information are assumed to be the same size, but the present invention is not limited to this. For example, the color information referred to for each pixel may be compared and replaced with the color information referring to a pixel having similar color information. Further, the color information is not limited to the referenced color information, and may be replaced with a highly saturated color such as red, green, or blue, or may be replaced with highly visible color information such as a complementary color to the reference color information.
（実施の形態５）
図２５は、本発明の実施の形態５における撮像装置のブロック図である。実施の形態５にかかる撮像装置は、実施の形態１にかかる撮像装置と概略構成が等しいので、図１と同様に機能する構成要素については同一の番号を付し、詳細な説明は省略する。(Embodiment 5)
FIG. 25 is a block diagram of an imaging apparatus according to
図２５において、参照色情報設定部４８は、参照色情報設定処理を行う場合、色情報算出部３４から出力される各エリアの色情報のうち、ユーザにより選択されたエリアの色情報を算出して格納し、このエリアの位置と算出した色情報を画像処理部５７へ出力する。また、参照色情報設定部４８は、フォーカス追従撮像処理を行う場合、格納している色情報のうち、ユーザによって選択された色情報を読み出してエリア選択部３６へ出力する。 In FIG. 25, when performing the reference color information setting process, the reference color information setting unit 48 calculates the color information of the area selected by the user from the color information of each area output from the color
さらに、参照色情報設定部４８は、フォーカス追従撮像処理を行う場合、参照色情報設定部４８から画像処理部５７へ補正情報を出力する。なお、この補正情報は、図１３と図１４を用いて説明した実施の形態２にかかる撮像装置と同様であり詳細な説明は省略する。 Further, the reference color information setting unit 48 outputs correction information from the reference color information setting unit 48 to the
図２６は、本発明の実施の形態５における画像処理部の詳細ブロック図である。図２６において、画像処理部５７は、実施の形態２の画像処理部５５と概略構成が等しいので、同様に機能する構成要素については同一の番号を付し、詳細な説明は省略する。 FIG. 26 is a detailed block diagram of the image processing unit in the fifth embodiment of the present invention. In FIG. 26, the
サムネイル処理部５５ｇは、参照色情報設定部４８から出力されたエリアの位置情報と参照色情報に基づいて、フォーカス追従撮像処理を行うために参照する被写体の画像信号を画像メモリ１６へ出力する。画像メモリ１６は、サムネイル処理部５５ｇから出力される画像信号を格納する。このとき画像メモリ１６に格納された画像信号は、フォーカス追従時に、フォーカス追従すべき色情報を選択するための参照画像として表示部１７に表示される。以下、通常の撮影時に画像メモリ１６に格納される画像信号と区別するために、サムネイル処理部５５ｇから出力され、画像メモリ１６に格納される画像信号を参照画像信号と呼ぶ。 The
画像メモリ１６に複数の参照画像信号を格納し、画像メモリ１６が格納する参照画像信号を表示部１７に表示させることにより、ユーザがフォーカス追従すべき被写体を任意に選択可能となるが、このときに行われる処理の詳細については後述する。なお、サムネイル処理部５５ｇは、通常撮影時あるいは表示部への通常モニタ表示時にはサムネイル処理を行わない。したがってその場合、画像信号は、画素補正処理部５５ｅから画像メモリ１６へ直接出力される。 By storing a plurality of reference image signals in the
また、画像メモリ１６に参照画像信号を格納する際、画像メモリ１６に不揮発性のメモリエリアを確保し、参照画像信号を圧縮あるいは間引いて格納するとよい。これにより、複数の参照画像信号を最小限の容量で保存することができる。 Further, when the reference image signal is stored in the
図２７は、本発明の実施の形態５における参照色情報設定処理の動作フローチャートである。以下、実施の形態５にかかる撮像装置の参照色情報設定処理の動作フローチャートを、実施の形態１で説明した参照色情報設定処理の動作フローチャート（図３）にステップＳ２０１、Ｓ２０２、およびＳ２０３の処理を追加した例として説明し、実施の形態１において説明した処理と重複する箇所については説明を省略する。なお、同様にこの動作フローチャートは、システムコントローラ８０上で動作するプログラムのフローを示す。実施の形態１と同様に、ユーザによりカーソルキー１９ｂ、決定釦１９ｃ、メニュー釦１９ｄ等が操作されることにより、参照色情報設定処理が開始される。 FIG. 27 is an operation flowchart of the reference color information setting process according to the fifth embodiment of the present invention. Hereinafter, the operation flowchart of the reference color information setting process of the imaging apparatus according to the fifth embodiment is the same as the operation flowchart (FIG. 3) of the reference color information setting process described in the first embodiment, and the processes of steps S201, S202, and S203. Is added as an example, and the description overlapping with the processing described in
ステップＳ２０１において、エリア枠内に表示された画像と、表示部１７の全画面内に表示された画像のどちらを参照画像として登録するかの選択の入力待ちになる。このとき特定のエリア（エリア枠または全画面枠）が太枠で囲まれて表示され、選択可能であることが示される。ユーザは、太枠のエリアをカーソルキー１９ｂで移動させることができる。例えば、ユーザがエリア枠に太枠のエリアを移動させて決定釦１９ｃを押すと、エリア枠内に表示された画像の登録が選択されたことになり、ステップＳ２０２の処理に進む。 In step S201, it waits for an input to select which of the image displayed in the area frame and the image displayed in the entire screen of the
ステップＳ２０２において、エリア枠内の画像信号を参照画像信号として画像メモリ１６に格納し、当該画像メモリ１６に格納した参照画像信号に基づく参照画像を表示部１７に表示させる。 In step S202, the image signal in the area frame is stored in the
一方、ステップＳ２０１において、ユーザが全画面に太枠のエリアを移動させて決定釦１９ｃを押すと、全画面の画像信号の登録が選択されたことになり、ステップＳ２０３の処理に進む。 On the other hand, in step S201, when the user moves the thick frame area to the full screen and presses the
ステップＳ２０３において、全画面内の画像信号を参照画像信号として画像メモリ１６に格納し、画像メモリ１６に格納した参照画像信号を表示部１７に表示させる。 In step S203, the image signal in the entire screen is stored in the
次に、本実施形態に係る撮像装置の具体的な表示例と、撮像装置の動作について説明する。図２８は、本発明の実施の形態５における被写体とエリア枠、参照画像１が写し出された表示部の概観図であり、被写体Ｐ１に７×７個のエリア枠を表示させた例を示している。メニュー釦１９ｄと決定釦１９ｃにより色情報を参照するモードが設定された場合、図３における参照色情報設定処理開始から処理が開始され、以降、実施の形態１において説明した処理を行い、ステップＳ１０４において、参照情報設定部４８で算出された色情報を格納し、図２７におけるステップＳ２０１の処理に進む。 Next, a specific display example of the imaging apparatus according to the present embodiment and the operation of the imaging apparatus will be described. FIG. 28 is an overview of the display unit in which the subject, the area frame, and the
ステップＳ２０１において、エリアＡ１枠内の画像と、表示部１７の全画面内の画像のどちらを参照画像として登録するかの入力を待つ。ここで、ユーザは、エリアＡ１枠内に表示された画像を選択するものとする。エリアＡ１枠内の画像が選択された場合、処理は次のステップＳ２０２へ進む。 In step S201, input of which of the image in the area A1 frame and the image in the entire screen of the
ステップＳ２０２において、エリアＡ１枠内の画像信号を画像メモリ１６に格納し、図２８に示すように、表示部１７に参照画像を表示させる。参照画像は、表示部１７の下側に示す参照画像表示枠内に表示される。図２８に示す例では、表示部１７の下側に参照画像表示枠が７つ儲けられており、そのうちの１つの参照画像表示枠（エリアＣ１）に、エリアＡ１枠内に表示されていた画像を参照画像として表示させることとなる。そして、参照色情報設定処理を終了する。 In step S202, the image signal in the area A1 frame is stored in the
なお、参照色情報設定部４８は、参照画像と参照色情報とを対応付けて記録したテーブルを保持する。参照色情報設定部４８が保持するテーブルの一例を図２９に示す。図２９において、参照画像には、当該参照画像が選択された際にフォーカス追従に用いる参照色情報（色相Ｈ、彩度Ｓ）が対応付けられている。参照色情報設定部４８は、フォーカス追従撮像処理時に、テーブルを参照し、ユーザによって選択された参照画像に対応付けられた参照色情報をフォーカス追従時に用いる参照色情報として選択する。 The reference color information setting unit 48 holds a table in which a reference image and reference color information are recorded in association with each other. An example of a table held by the reference color information setting unit 48 is shown in FIG. In FIG. 29, the reference image is associated with reference color information (hue H, saturation S) used for focus tracking when the reference image is selected. The reference color information setting unit 48 refers to the table during the focus follow-up imaging process, and selects reference color information associated with the reference image selected by the user as reference color information used during focus follow-up.
図３０は、本発明の実施の形態５における被写体とエリア枠，参照画像１及び２が写し出された表示部の概観図であり、被写体Ｐ２に７×７個のエリア枠を表示させた例を示している。メニュー釦１９ｄと決定釦１９ｃにより色情報を参照するモードが設定された場合、図３における参照色情報設定処理開始から処理が開始され、以降、実施の形態１において説明した処理を行い、ステップＳ１０４において、参照情報設定部４８で算出された色情報を格納し、図２７におけるステップＳ２０１の処理に進む。 FIG. 30 is an overview of the display unit in which the subject, the area frame, and the
ステップＳ２０１において、図３０に示すエリアＢ１枠内の画像と、全画面内の画像のどちらを参照画像として登録するかの入力を待つ。ここで、ユーザは、全画面内に表示された画像を選択するものとする。図３０に示す全画面内に表示された画像が選択された場合、処理はステップＳ２０３へ進む。 In step S201, input of which of the image in the area B1 frame shown in FIG. 30 and the image in the entire screen is registered as a reference image is awaited. Here, it is assumed that the user selects an image displayed on the entire screen. When the image displayed on the entire screen shown in FIG. 30 is selected, the process proceeds to step S203.
ステップＳ２０３において、表示部１７の全画面内の画像信号を参照画像信号として画像メモリ１６に格納し、図３０に示すように、表示部１７に参照画像を表示させる。なお、同ステップにおいて、参照画像信号は、図３に示すステップＳ１０４で格納された参照色情報（ここでは、エリアＢ１の色情報）に対応付けて格納される。 In step S203, the image signal in the entire screen of the
図３０の例では、図２８においてエリアＡ１内に表示された画像が参照画像として登録された後、全画面内に表示された画像が参照画像として登録された場合を示している。図３０に示すように、新たに登録された参照画像２は、先に登録された参照画像１と共に、参照画像２として表示部１７の下側に表示される。そして、参照色情報設定処理を終了する。 In the example of FIG. 30, the image displayed in the area A1 in FIG. 28 is registered as the reference image, and then the image displayed in the entire screen is registered as the reference image. As shown in FIG. 30, the newly registered reference image 2 is displayed on the lower side of the
また、被写体のエッジ抽出を行い、参照画像として選択したエリア（この場合は被写体Ｐ２の帽子の部分）を対応する色情報で塗りつぶすようにしてもよいし、選択したエリアの部分だけの色情報を残すようにしてもよい。また、単に、選択したエリアの色情報だけを参照画像として表示させるようにしてもよい。 Alternatively, the subject edge may be extracted and the area selected as the reference image (in this case, the hat portion of the subject P2) may be filled with the corresponding color information, or the color information of only the selected area portion may be displayed. It may be left. Alternatively, only the color information of the selected area may be displayed as a reference image.
図３１は、本発明の実施の形態５におけるフォーカス追従撮像処理の動作フローチャートである。また、図３２は、本発明の実施の形態５における被写体とエリア枠、参照画像１〜３が写し出された表示部の概観図である。以下、図３１及び図３２を参照して、実施の形態５にかかる撮像装置のフォーカス追従撮像処理を説明する。 FIG. 31 is an operation flowchart of focus tracking imaging processing according to
図３１に示す動作フローチャートは、システムコントローラ８０上で動作するプログラムのフローを示す。以下、実施の形態５にかかる撮像装置のフォーカス追従撮像処理の動作フローチャートを、実施の形態１で説明したフォーカス追従撮像処理の動作フローチャート（図１０）にステップＳ２１１〜Ｓ２１３の処理を追加した例として説明し、実施の形態１において説明した処理と重複する箇所については説明を省略する。なお、同様にこの動作フローチャートは、システムコントローラ８０上で動作するプログラムのフローを示す。実施の形態１と同様に、ユーザによりシャッター釦１９ａが半押しされた場合、フォーカス追従撮像処理が開始される。 The operation flowchart shown in FIG. 31 shows the flow of a program that runs on the system controller 80. Hereinafter, an operation flowchart of the focus tracking imaging process of the imaging apparatus according to the fifth embodiment is an example in which the processes of steps S211 to S213 are added to the operation flowchart (FIG. 10) of the focus tracking imaging process described in the first embodiment. Explanation will be omitted for portions that overlap with the processing described in the first embodiment. Similarly, this operation flowchart shows a flow of a program operating on the system controller 80. As in the first embodiment, when the shutter button 19a is half-pressed by the user, the focus tracking imaging process is started.
図１０におけるステップＳ１５１において、ＣＣＤ１４で撮像され画像処理部５７で所定の画像処理が施された画像信号が表示部１７にエリア枠と共に表示される。このときの表示部１７の表示例を図３２に示す。図３２に示すように、表示部１７の下側には、被写体Ｐ２と、２１×１３個のエリア枠と、参照画像を表示するための７つの参照画像表示枠１〜７とが表示される。また、図３２では、７つの参照画像表示枠のうち、３つの参照表示枠１〜３（エリアＣ１〜Ｃ３）に参照画像が表示されている。 In step S151 in FIG. 10, an image signal captured by the
ステップＳ２１１において、登録された参照画像が１つであるか否かが判定される。登録された参照画像が複数ある場合、処理は次のステップ２１２に進む。一方、登録された参照画像が１つである場合、参照色情報設定部４８が格納する参照色情報が１つであることを意味する。その場合、参照色情報設定部４８は複数の候補の中から参照色情報を選択する必要がないため、ステップＳ１５２の処理へ進む。 In step S211, it is determined whether or not there is one registered reference image. If there are a plurality of registered reference images, the process proceeds to the
ステップＳ２１２において、参照画像が選択されたかどうかの入力を待つ。ユーザは、複数表示された参照画像の中から、フォーカス追従を所望する参照画像を選択する。図３２に示す例では、すでに参照画像として登録され、表示されている３つの参照画像１〜３の中から１つを選択する。ここでは、エリアＣ２に表示されている参照画像２をユーザが選択するものとする。複数の候補の中から参照画像を選択する際には、選択された参照画像表示枠を太くする、あるいはハイライトにするなどして、現在選択されている参照画像をユーザが把握できるようにするとよい。ユーザにより参照画像が選択されると、処理は次のステップＳ２１３へ進む。 In step S212, input of whether or not a reference image has been selected is awaited. The user selects a reference image for which focus tracking is desired from among a plurality of displayed reference images. In the example shown in FIG. 32, one of the three
ステップＳ２１３において、フォーカス追従すべき参照色情報を選択する。参照色情報設定部４８は、ステップＳ２１１において選択された参照画像に対応する参照色情報に基づいて、先の図８及び図９において説明したいずれかの方法で参照近傍領域を算出し、色情報算出部３４から出力される各エリアの色情報が参照近傍領域内であるかどうかを判定する。参照色情報に近い色情報を有するエリアがあればステップＳ１５３の処理に進み、なければステップＳ１５８の処理に進む。 In step S213, reference color information to be focus-followed is selected. Based on the reference color information corresponding to the reference image selected in step S211, the reference color information setting unit 48 calculates the reference neighborhood area by any of the methods described in FIG. 8 and FIG. It is determined whether or not the color information of each area output from the
図３２に示す例では、ステップＳ１５２以降の処理において、参照色情報に合致するエリアがエリアＢ２であると判定され、ステップＳ１５２、Ｓ１５３、Ｓ１５６、Ｓ１５７、Ｓ１６０、Ｓ１６１の順で処理が行われる。具体的には、エリアＢ２においてデフォーカス量が演算され、合焦情報算出部３２、レンズ位置制御部３３、レンズ駆動部２１によりフォーカスレンズ群１３が図２５のＡ方向あるいはＢ方向に駆動される。その後、合焦情報算出部３２は、フォーカス位置と画像信号から生成されるコントラスト信号とから、エリアＢ２においてコントラスト値が最も高くなるフォーカス位置（合焦位置）を演算し、レンズ位置制御部３３へ制御信号を出力する。 In the example shown in FIG. 32, in the processing after step S152, it is determined that the area that matches the reference color information is area B2, and processing is performed in the order of steps S152, S153, S156, S157, S160, and S161. Specifically, the defocus amount is calculated in the area B2, and the
このように、実施の形態５にかかる撮像装置によれば、ユーザが撮影したい頻度の高い被写体の色情報を複数登録して選択できるようにしたので、被写体が変わるごとに撮影したい被写体の色情報を登録する必要がない。したがって、ユーザは、撮影時に意図する被写体の色情報を選択すればよいので、使いやすいフォーカス追従撮像機能を実現することができる。 As described above, according to the imaging apparatus according to the fifth embodiment, since the user can register and select a plurality of color information of a subject that the user wants to shoot frequently, the color information of the subject that the user wants to shoot every time the subject changes. There is no need to register. Therefore, since the user only has to select the color information of the intended subject at the time of shooting, an easy-to-use focus tracking imaging function can be realized.
また、参照画像信号を画像メモリ１６の不揮発性のメモリエリアに格納することにより、参照画像信号として登録された後は、撮像装置本体の電源のＯＮ／ＯＦＦに関わらず、登録した参照画像を保持することができる。また、ユーザの指示に応じて登録した参照画像を消去してもよく、また、不揮発性のメモリエリアに格納する代わりに、２次電源等で動作する揮発性のメモリエリアに格納することとしてもよい。また、参照画像信号を揮発性のメモリエリアに格納する場合、電源をＯＦＦにした際に登録した参照画像信号が消去されても、電源を再びＯＮにした際に、参照画像信号を再登録して動作させるようにしてもよい。また、ユーザの指示に応じて、参照画像の表示／非表示を切り替えることとしてもよい。 In addition, by storing the reference image signal in the non-volatile memory area of the
なお、撮像装置の工場での調整時に、代表的な色情報をデフォルトとして複数登録しておき、ユーザが所望の色情報を選択できるようにしてもよいし、このデフォルトを削除して、ユーザが新たな色情報を登録するようにしてもよい。また、参照色情報及びテーブルは参照色情報設定部に格納され、参照画像信号は画像メモリに格納される場合を例に説明したが、参照色情報、テーブル、参照画像信号の格納先はこれに限られない。 It should be noted that a plurality of representative color information may be registered as defaults at the time of adjustment of the image pickup apparatus at the factory so that the user can select desired color information. New color information may be registered. In addition, the reference color information and the table are stored in the reference color information setting unit and the reference image signal is stored in the image memory. However, the reference color information, the table, and the reference image signal are stored in this location. Not limited.
各実施の形態にかかる撮像装置は、具体的な対応に限られず適宜変更可能である。例えば、各実施の形態にかかる撮像装置は、いずれもユーザによりシャッター釦が操作されて静止画を取得するデジタルスチルカメラである場合を例に説明したが、撮像釦が操作されている間所定のタイミングで画像が取得されつづけるデジタルビデオカメラとしても適用可能である。この場合、被写体が移動してもフォーカス追従を行うことができる。また、各実施の形態にかかる撮像装置は、監視カメラ、車載カメラ、ウェブカメラに適用してもよい。この場合、ユーザによりシャッター釦を操作することが難しい場合があり得るが、シャッター釦を所定のタイミングで自動的に操作したり、遠隔操作する等してもよい。 The imaging device according to each embodiment is not limited to a specific correspondence and can be changed as appropriate. For example, although the imaging apparatus according to each embodiment has been described as an example of a digital still camera in which a shutter button is operated by a user to acquire a still image, a predetermined amount is obtained while the imaging button is operated. The present invention can also be applied to a digital video camera in which images are continuously acquired at timing. In this case, focus tracking can be performed even if the subject moves. In addition, the imaging device according to each embodiment may be applied to a monitoring camera, an in-vehicle camera, and a web camera. In this case, it may be difficult for the user to operate the shutter button, but the shutter button may be automatically operated at a predetermined timing, or remotely operated.
また、各実施の形態にかかる撮像装置は、システムコントローラを個別に備える例であったが、これをパーソナルコンピュータや携帯電話端末の制御ＣＰＵに代用させてなる撮像システムに適用することも可能である。その他、各構成要素同士は、任意の組み合わせが可能であり、例えば、撮影光学系及び撮像素子とその他の構成が物理的に分離されたシステム例、撮影光学系、撮像素子、画像処理部と、その他の構成が物理的に分離されたシステム例などさまざまな組み合わせを考えて良い。 In addition, the imaging apparatus according to each embodiment is an example in which a system controller is individually provided. However, the imaging apparatus can be applied to an imaging system in which a control CPU of a personal computer or a mobile phone terminal is used instead. . In addition, each component can be arbitrarily combined, for example, a system example in which the imaging optical system and the imaging device and other configurations are physically separated, an imaging optical system, an imaging device, an image processing unit, Various combinations such as a system example in which other configurations are physically separated may be considered.
また、各実施の形態にかかる撮像装置は、主に色情報を参照情報として被写体を追従させる機能を有するものとして説明したが、色情報単独ではなく、被写体の輝度値やコントラストのレベルと色情報とを組み合わせ、参照情報として用いてもよい。また、ウェーブレット変換や離散コサイン変換（ＤＣＴ）などを用いた被写体の高周波成分を特徴とするパターン情報を参照情報に加えてもよい。これにより、色情報のマッチングだけでなく、レベルやパターンマッチングを行うことができるため、ユーザが意図する被写体への追従性をさらに向上させることができる。 In addition, although the imaging apparatus according to each embodiment has been described as having a function of following a subject mainly using color information as reference information, the brightness value of the subject, the level of contrast, and the color information are not single color information. And may be used as reference information. Further, pattern information characterized by a high-frequency component of a subject using wavelet transform, discrete cosine transform (DCT), or the like may be added to the reference information. Thereby, not only the color information matching but also the level and pattern matching can be performed, so that the followability to the subject intended by the user can be further improved.
また、各実施の形態にかかる撮像装置において、参照色情報を抽出するタイミングは、ホワイトバランス補正の前後、Ｒ，Ｇ，Ｂゲイン補正の前後、またはγ補正後のいずれであってもよい。 In the imaging apparatus according to each embodiment, the timing for extracting the reference color information may be before or after white balance correction, before or after R, G, B gain correction, or after γ correction.
また、各実施の形態にかかる撮像装置における表示部のエリア枠は７×７個に分割して表示させた例を用いて説明したが、この分割数に係らずさらに細かく分割してもよいし、粗くしてもよい。また、メニュー釦の操作によってユーザが任意に分割数を設定できるようにしてもよいし、予め設定されたエリア枠のうち複数のエリア枠を選択して一つのエリア枠として設定できるようにしてもよい。 Moreover, although the area frame of the display unit in the imaging device according to each embodiment has been described using an example of being divided and displayed in 7 × 7, it may be divided more finely regardless of the number of divisions. , May be rough. Also, the user may arbitrarily set the number of divisions by operating the menu button, or may select a plurality of area frames from preset area frames and set them as one area frame. Good.
撮像装置は、いわゆる一眼レフレックスカメラシステムのように、撮像装置本体と、撮像光学系を含む撮像光学部とに分離可能な構成としてもよい。この場合、撮像装置本体は、撮像素子と、画像分割部と、色情報算出部と、参照色情報設定部と、エリア選択部と、合焦情報算出部とを含む構成になる。ただし、レンズ駆動部は、撮像装置本体側にあっても、撮像光学部側にあってもいずれでもよい。 The imaging device may be configured to be separable into an imaging device body and an imaging optical unit including an imaging optical system, as in a so-called single-lens reflex camera system. In this case, the imaging apparatus main body includes an imaging element, an image dividing unit, a color information calculation unit, a reference color information setting unit, an area selection unit, and a focusing information calculation unit. However, the lens driving unit may be on the imaging apparatus main body side or on the imaging optical unit side.
レンズ駆動部が撮像光学部側にある場合は、撮像装置本体のシステムコントローラから撮像光学部のレンズ駆動部に、シリアル通信などによる電気的な指令によってレンズ駆動部を動作させ、フォーカスレンズを移動制御させる。また、レンズ駆動部が撮像装置本体側にある場合は、撮像装置本体のレンズ駆動部と撮像光学部の光軸方向に可動するフォーカスレンズを、直接的あるいは間接的に光軸方向に移動させるメカ連動機構などで結合させることによって、フォーカスレンズを移動制御させる。フォーカスレンズを光軸方向に間接的に移動制御させる機構には、例えば、カムや減速機構、回転駆動を直線駆動に変換する機構などがある。 When the lens drive unit is on the imaging optical unit side, the lens drive unit is operated by an electrical command such as serial communication from the system controller of the imaging device body to the lens drive unit of the imaging optical unit, and the focus lens is controlled to move Let Further, when the lens driving unit is on the image pickup apparatus main body side, a mechanism for moving the focus lens movable in the optical axis direction of the lens driving unit and the imaging optical unit of the image pickup apparatus main body directly or indirectly in the optical axis direction. The focus lens is moved and controlled by being coupled by an interlocking mechanism or the like. Examples of the mechanism that indirectly controls the movement of the focus lens in the optical axis direction include a cam, a speed reduction mechanism, and a mechanism that converts rotational drive into linear drive.
本発明は、デジタルスチルカメラ、デジタルビデオカメラ等の撮像装置に好適である。 The present invention is suitable for an imaging apparatus such as a digital still camera and a digital video camera.
１１ レンズ鏡筒
１２ ズームレンズ
１２ａ ズームレンズ
１２ｂ ズームレンズ
１３ フォーカスレンズ群
１４ ＣＣＤ
１５、５５、５６、５７ 画像処理部
１６ 画像メモリ
１７ 表示部
１８ メモリーカード
１９ 操作部
１９ａ シャッター釦
１９ｂ カーソルキー
１９ｃ 決定釦
１９ｄ メニュー釦
２０ 補助光源
２１ レンズ駆動部
３０、５０、６０、７０ システムコントローラ
３１ 画像分割部
３２ 合焦情報算出部
３３ レンズ位置制御部
３４ 色情報算出部
３５、４５、４７、４８ 参照色情報設定部
３６、４６ エリア選択部
３７ 輝度判定部
３８ 選択禁止部
５５ａ ＡＧＣ
５５ｂ Ｒ，Ｇ，Ｂゲイン補正部
５５ｃ ホワイトバランス補正部
５５ｄ γ補正部
５５ｅ 画像補整処理部
５５ｆ 特定エリア色補正処理部
５５ｇ サムネイル処理部11
15, 55, 56, 57
55b R, G, B
Claims (13)
Translated fromJapanese焦点調節を行うためのフォーカスレンズ群を含み、前記被写体の光学的な像を形成する撮像光学系と、
前記被写体の光学的な像を撮像して、前記電気的な画像信号に変換する撮像素子と、
前記画像信号を複数のエリアに分割する画像分割部と、
前記撮像素子で生成された画像信号に基づく画像が表示部に表示された状態で、前記分割されたエリアのうちいずれかを選択するユーザの操作を受け付ける操作部と、
前記操作部で受け付けた操作により選択されたエリアに含まれる画像信号に基づいて、参照色情報を設定する参照色情報設定部と、
各前記エリア毎に前記画像信号から色情報をそれぞれ算出する色情報算出部と、
前記参照色情報と、前記色情報算出部により算出された各前記色情報とを比較し、前記エリア毎に算出された前記色情報が前記参照色情報の所定の許容幅内に含まれる場合に、前記参照色情報の前記許容幅内に含まれる前記色情報を有する少なくとも１つの前記エリアを選択するエリア選択部と、
前記エリア選択部によって少なくとも１つの前記エリアが選択された場合には、選択された前記エリアに対して前記撮像光学系の合焦情報を算出し、前記エリア選択部によって前記エリアが選択されなかった場合には、所定の処理に従って前記撮像光学系の合焦情報を算出する合焦情報算出部と、
前記合焦情報に基づいて、前記フォーカスレンズ群を光軸方向に駆動するレンズ駆動部とを備え、
前記色情報および前記参照色情報は、いずれも、色相に関する情報および彩度に関する情報の内の少なくとも一方からなり、
前記色情報算出部による前記色情報の算出と、前記エリア選択部によるエリアの選択と、前記合焦情報算出部による前記合焦情報の算出と、前記レンズ駆動部による前記フォーカスレンズ群の駆動とを継続的に行う、撮像装置。An imaging device that outputs an electrical image signal of a subject image,
An imaging optical system that includes a focus lens group for performing focus adjustment and forms an optical image of the subject;
An image sensor that captures an optical image of the subject and converts it into the electrical image signal;
An image dividing unit for dividing the image signal into a plurality of areas;
An operation unit that receives a user operation to select one of the divided areas in a state where an image based on an image signal generated by the imaging element is displayed on the display unit;
A reference color information setting unit for setting reference color information based on an image signal included in an area selected by an operation received by the operation unit;
A color information calculation unit for calculating color information from the image signal for each area;
The reference color information is compared with each color information calculated by the color information calculation unit, and the color information calculated for eacharea is included within a predetermined allowable width of the reference color information. An area selection unit that selects at least one ofthe areashaving the color information included in the allowable width of the reference color information ;
When at least one of the areas is selected by the area selecting unitis to the area selectedby calculating the focus information of the imaging opticalsystem, the area is not selected by the area selection unit In this case, a focus information calculation unitthat calculates focus information of the imaging optical system according to a predetermined process ,
A lens driving unit that drives the focus lens group in the optical axis direction based on the focusing information;
The color information and the reference color information are bothRi Do from at least one of the information about the information and saturation regardinghue,
Calculation of the color information by the color information calculator, selection of an area by the area selector, calculation of the focus information by the focus information calculator, and driving of the focus lens group by the lens driver An imaging devicethat continuously performs
前記合焦情報算出部は、補正された前記画像信号に基づいて、前記合焦情報を算出する、請求項１に記載の撮像装置。An image processing unit including a correction unit that corrects an image signal output from the image sensor based on the reference color information;
The imaging apparatus according to claim 1, wherein the focus information calculation unit calculates the focus information based on the corrected image signal.
前記算出した輝度が所定の値より大きいかどうかを判定する輝度判定部と、
前記輝度判定部が算出した輝度が所定の値より大きいエリアを、前記エリア選択部が選択することを禁止する選択禁止部とを備える、請求項１に記載の撮像装置。The color information calculation unit calculates the luminance from the image signal for each area, and further,
A luminance determination unit for determining whether the calculated luminance is greater than a predetermined value;
The imaging apparatus according to claim 1, further comprising: a selection prohibition unit that prohibits the area selection unit from selecting an area in which the luminance calculated by the luminance determination unit is greater than a predetermined value.
前記色情報算出部は、前記補助光の色に応じて前記算出した前記色情報を補正する、請求項１に記載の撮像装置。An auxiliary light source for projecting auxiliary light onto the subject when the lens driving unit drives the focus lens group;
The imaging apparatus according to claim 1, wherein the color information calculation unit corrects the calculated color information according to a color of the auxiliary light.
前記選択されたエリアについて、前記参照色情報に基づき、前記表示部により表示されるべき前記画像信号の色を補正する特定エリア色補正処理部をさらに備える、請求項１に記載の撮像装置。A display unit for displaying an image based on the image signal;
The imaging apparatus according to claim 1, further comprising: a specific area color correction processing unit that corrects a color of the image signal to be displayed by the display unit based on the reference color information for the selected area.
前記撮像光学部は、
前記撮像光学系を含み、
前記撮像装置本体は、
前記撮像素子と、前記画像分割部と、前記色情報算出部と、前記参照色情報設定部と、前記エリア選択部と、前記合焦情報算出部と、レンズ駆動部とを含む、請求項１に記載の撮像装置。The imaging device is separable into an imaging device main body and an imaging optical unit,
The imaging optical unit is
Including the imaging optical system;
The imaging device body is
The image pickup device, the image dividing unit, the color information calculating unit, the reference color information setting unit, the area selecting unit, the focusing information calculating unit, and a lens driving unit. The imaging device described in 1.
前記撮像光学部は、
前記撮像光学系と、レンズ駆動部とを含み、
前記撮像装置本体は、
前記撮像素子と、前記画像分割部と、前記色情報算出部と、前記参照色情報設定部と、前記エリア選択部と、前記合焦情報算出部とを含む、請求項１に記載の撮像装置。The imaging device is separable into an imaging device main body and an imaging optical unit,
The imaging optical unit is
Including the imaging optical system and a lens driving unit;
The imaging device body is
The imaging device according to claim 1, comprising: the imaging device, the image dividing unit, the color information calculation unit, the reference color information setting unit, the area selection unit, and the focus information calculation unit. .
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2005214736AJP5318321B2 (en) | 2004-08-05 | 2005-07-25 | Imaging device |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2004229530 | 2004-08-05 | ||
| JP2004229530 | 2004-08-05 | ||
| JP2005214736AJP5318321B2 (en) | 2004-08-05 | 2005-07-25 | Imaging device |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2006072332A JP2006072332A (en) | 2006-03-16 |
| JP2006072332A5 JP2006072332A5 (en) | 2008-09-04 |
| JP5318321B2true JP5318321B2 (en) | 2013-10-16 |
Family
ID=36152965
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2005214736AExpired - LifetimeJP5318321B2 (en) | 2004-08-05 | 2005-07-25 | Imaging device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5318321B2 (en) |
Families Citing this family (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5271165B2 (en)* | 2009-06-15 | 2013-08-21 | 富士フイルム株式会社 | Imaging apparatus and imaging control method |
| JP5409201B2 (en) | 2009-08-28 | 2014-02-05 | キヤノン株式会社 | Focus detection apparatus and focus detection method |
| JP2011160379A (en) | 2010-02-04 | 2011-08-18 | Sony Corp | Image processing device and method, and program therefor |
| JP6172973B2 (en)* | 2013-03-05 | 2017-08-02 | オリンパス株式会社 | Image processing device |
| KR102057581B1 (en)* | 2013-04-16 | 2019-12-19 | 삼성전자 주식회사 | Apparatus and method for automatically focusing an object in device having a camera |
| JP6421032B2 (en)* | 2014-12-26 | 2018-11-07 | オリンパス株式会社 | Focus detection apparatus, focus detection method, and focus detection program |
Family Cites Families (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2668160B2 (en)* | 1990-11-30 | 1997-10-27 | シャープ株式会社 | Auto focus device |
| JPH09127408A (en)* | 1996-09-13 | 1997-05-16 | Minolta Co Ltd | Image sensor and distance measuring instrument using it |
| JPH11327030A (en)* | 1998-05-15 | 1999-11-26 | Canon Inc | Camera control device and method, and storage medium |
| JP4011738B2 (en)* | 1998-05-26 | 2007-11-21 | キヤノン株式会社 | Optical device |
| JP4020527B2 (en)* | 1999-03-16 | 2007-12-12 | オリンパス株式会社 | Electronic camera |
| JP2002090858A (en)* | 2000-09-20 | 2002-03-27 | Olympus Optical Co Ltd | In-finder display device |
| JP2002182106A (en)* | 2000-12-18 | 2002-06-26 | Ricoh Co Ltd | Focus control method of digital still video camera |
| JP3877544B2 (en)* | 2001-05-11 | 2007-02-07 | 三洋電機株式会社 | Digital camera |
| JP2003134520A (en)* | 2001-10-19 | 2003-05-09 | Minolta Co Ltd | Digital camera |
| JP2003241065A (en)* | 2002-02-15 | 2003-08-27 | Fuji Photo Optical Co Ltd | Autofocusing system |
| JP3973462B2 (en)* | 2002-03-18 | 2007-09-12 | 富士フイルム株式会社 | Image capture method |
| JP4122865B2 (en)* | 2002-07-02 | 2008-07-23 | コニカミノルタオプト株式会社 | Autofocus device |
| JP4039147B2 (en)* | 2002-07-03 | 2008-01-30 | コニカミノルタオプト株式会社 | Imaging device |
| JP4225040B2 (en)* | 2002-11-22 | 2009-02-18 | ソニー株式会社 | Monitoring system and method, program, and recording medium |
- 2005
- 2005-07-25JPJP2005214736Apatent/JP5318321B2/ennot_activeExpired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| JP2006072332A (en) | 2006-03-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10992854B2 (en) | Image processing apparatus, imaging apparatus, image processing method, and storage medium | |
| US10122930B2 (en) | Display control apparatus and control method thereof | |
| KR20070068980A (en) | camera | |
| US10477113B2 (en) | Imaging device and control method therefor | |
| JP6833801B2 (en) | Imaging equipment, imaging methods, programs and recording media | |
| CN106101519B (en) | Observation device | |
| JP2015004960A (en) | Imaging device and display method of captured image | |
| US10587811B2 (en) | Display control apparatus and control method for the same | |
| CN1731269B (en) | Imaging apparatus | |
| JP4982997B2 (en) | Image processing device | |
| JP6133151B2 (en) | Focus adjustment device | |
| US10652453B2 (en) | Electronic apparatus and control method thereof | |
| US9177395B2 (en) | Display device and display method for providing image display in first color mode and second color mode | |
| JP2013126177A (en) | Display controller, imaging apparatus, and display control program | |
| JP5378283B2 (en) | Imaging apparatus and control method thereof | |
| JP2016080918A (en) | Image blur correction apparatus and control method thereof | |
| JP5318321B2 (en) | Imaging device | |
| JP4645413B2 (en) | Imaging device | |
| JP4760302B2 (en) | Imaging device | |
| JP5903658B2 (en) | Imaging device | |
| JP5403087B2 (en) | Image processing device | |
| JP2007142702A (en) | Image processing device | |
| JP7418083B2 (en) | Display control device, its control method, and its program | |
| JP5040669B2 (en) | Imaging device | |
| JP4977996B2 (en) | Imaging device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed | Free format text:JAPANESE INTERMEDIATE CODE: A523 Effective date:20080718 | |
| A621 | Written request for application examination | Free format text:JAPANESE INTERMEDIATE CODE: A621 Effective date:20080718 | |
| A977 | Report on retrieval | Free format text:JAPANESE INTERMEDIATE CODE: A971007 Effective date:20110225 | |
| A131 | Notification of reasons for refusal | Free format text:JAPANESE INTERMEDIATE CODE: A131 Effective date:20110617 | |
| A521 | Request for written amendment filed | Free format text:JAPANESE INTERMEDIATE CODE: A523 Effective date:20110812 | |
| RD02 | Notification of acceptance of power of attorney | Free format text:JAPANESE INTERMEDIATE CODE: A7422 Effective date:20110826 | |
| A131 | Notification of reasons for refusal | Free format text:JAPANESE INTERMEDIATE CODE: A131 Effective date:20120410 | |
| A521 | Request for written amendment filed | Free format text:JAPANESE INTERMEDIATE CODE: A523 Effective date:20120606 | |
| A02 | Decision of refusal | Free format text:JAPANESE INTERMEDIATE CODE: A02 Effective date:20130128 | |
| A521 | Request for written amendment filed | Free format text:JAPANESE INTERMEDIATE CODE: A523 Effective date:20130425 | |
| A911 | Transfer to examiner for re-examination before appeal (zenchi) | Free format text:JAPANESE INTERMEDIATE CODE: A911 Effective date:20130508 | |
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) | Free format text:JAPANESE INTERMEDIATE CODE: A01 Effective date:20130626 | |
| A61 | First payment of annual fees (during grant procedure) | Free format text:JAPANESE INTERMEDIATE CODE: A61 Effective date:20130710 | |
| R150 | Certificate of patent or registration of utility model | Ref document number:5318321 Country of ref document:JP Free format text:JAPANESE INTERMEDIATE CODE: R150 Free format text:JAPANESE INTERMEDIATE CODE: R150 |