JP4418344B2 - camera - Google Patents

Description

Translated fromJapanese

本発明は、動く被写体を画面内で追尾して合焦を行う追尾ＡＦ装置を備えたカメラと、その画像処理に関する。  The present invention relates to a camera equipped with a tracking AF device that tracks a moving subject within a screen and focuses it, and image processing thereof.

撮影レンズのピント位置を被写体に常に合焦させる連続ＡＦは、動画撮影だけでなく静止画撮影でも便利な機能である。ＡＦ自体は画面内の一定位置の情報を検出して動作を行うので、被写体に対して常に合焦状態を維持させるような上記連続ＡＦの場合に、被写体が画面内を移動すると、狙いの被写体と異なる部分にピントが合ってしまい、合焦エラーを起こしてしまうという問題がある。  Continuous AF that always focuses the photographic lens on the subject is a convenient function not only for moving image shooting but also for still image shooting. Since the AF itself operates by detecting information at a certain position in the screen, if the subject moves within the screen in the above-described continuous AF in which the subject is always kept in focus, the target subject There is a problem that a focus error is caused by focusing on a different part.

そこで、被写体のコントラスト情報を検出して移動する被写体を追尾して、この移動に合わせてＡＦの検出エリアを移動させるいわゆる追尾ＡＦに関する提案がいろいろとなされている。  Accordingly, various proposals have been made regarding so-called tracking AF in which the contrast information of the subject is detected to track the moving subject and the AF detection area is moved in accordance with the movement.

その１つとして、追尾ＡＦの精度をさらに向上させるために、画面上における複数の動き検出領域において検出された動きベクトル情報に、前記各動き検出領域の前記画面内における位置に応じて異なる重み付けを施すことによって動き補正の対象とする領域を設定し、重み付けを施された複数の動きベクトル情報から代表動きベクトル情報を演算し、画像の動きを補正するようにした発明が提案されている（特許文献１参照）。  As one of them, in order to further improve the accuracy of tracking AF, the motion vector information detected in a plurality of motion detection areas on the screen is weighted differently depending on the position of each motion detection area in the screen. An invention has been proposed in which a region to be subjected to motion correction is set by performing calculation, representative motion vector information is calculated from a plurality of weighted motion vector information, and image motion is corrected (patent) Reference 1).

この発明では、カメラコストのために追尾用信号は、追尾専用の撮像素子からの画像信号ではなく、撮影用画像信号が追尾用信号として利用されている。追尾専用の撮像回路を備えると、電気回路のコストアップや内部スペース増加につながるからである。
動体追尾ＡＦは、撮影画像出カの信号により、（コントラストの）パターン検出及びそれの追尾によって実現しているが、信号にノイズが多かったり、コントラストが少なかったり、手ぶれが存在するような場合には、被写体検出で誤検出してしまう可能性がある。従って、精度向上には例えばノイズが少なく、コントラストの大きい画像信号を得る必要があるが、撮影用の画像信号を利用するので、追尾用にのみ最適化させることは出来ない。
特許第２７７０９５７In the present invention, because of the camera cost, the tracking signal is not an image signal from a tracking-dedicated imaging device, but a shooting image signal is used as the tracking signal. This is because the provision of an imaging circuit dedicated for tracking leads to an increase in the cost of the electric circuit and an increase in internal space.
The moving object tracking AF is realized by (contrast) pattern detection and tracking based on the output signal of the captured image, but when the signal is noisy, the contrast is low, or there is camera shake. May be erroneously detected by subject detection. Therefore, to improve accuracy, for example, it is necessary to obtain an image signal with little noise and high contrast. However, since the image signal for photographing is used, it cannot be optimized only for tracking.
Patent No. 2770957

本発明は、表示／追尾用の画像信号に対して適切な画像処理を行い精度のよい追尾ＡＦのできる画像処理手段を備えたカメラを提供することを目的とする。It is an object of the present invention to provide acamera including an image processing unit that can perform appropriate image processing on a display / tracking image signal and perform accurate tracking AF.

本発明の一局面に係るカメラは、被写体画像を撮影する撮像手段と、前記撮像手段の画像出力に対して画像処理を行う画像処理手段と、前記画像処理された画像をモニタ画像として表示する画像表示手段と、前記画像処理された画像に基づいて画面内を移動する被写体の位置を追尾する追尾手段と、合焦エリアを一定にする固定モードと、合焦エリアを前記追尾手段による追尾に合わせて移動させる追尾モードのいずれか選択されたＡＦモードに従って前記撮像手段の焦点を調整するＡＦ手段と、備え前記画像処理手段は、前記ＡＦモードとして前記追尾モードが選択された場合には、前記追尾手段用の画像処理として追尾精度を上げるような画像処理を施し、前記画像表示手段は、前記ＡＦモードとして前記追尾モードが選択された場合には、前記追尾手段用に追尾精度を上げるような画像処理された画像をモニター画像として表示することを特徴とする。A camera according to one aspect of the present invention includesan imaging unit that captures a subject image, an image processing unit that performs image processing on an image output of the imaging unit, and an image that displays the image processed image as a monitor image Display means, tracking means for tracking the position of a subject moving within the screen based on the image processed image, a fixed mode for keeping the focusing area constant, and matching the focusing area with tracking by the tracking means An AF unit that adjusts the focus of the imaging unit according to an AF mode selected from any of the tracking modes to be moved, and the image processing unit, when the tracking mode is selected as the AF mode, the tracking unit Image processing for increasing tracking accuracy as image processing for the means, and the image display means, when the tracking mode is selected as the AF mode , Anddisplaying the processed image, such as to raise the tracking accuracy for the tracking means as a monitor image.

本発明によれば、表示／ 追尾用の画像信号に対して適切な画像処理を行い精度のよい追尾ＡＦのできる画像処理手段を備えたカメラを提供することができる。According to the present invention,it is possible to provide a camera including an image processing unit capable ofperforming appropriate image processing on a display / tracking image signal andperforming accurate tracking AF.

図面を参照して本発明の実施の形態を説明する。
図１は、本発明の実施形態に係るカメラの概略構成を示すブロック図である。図１を参照して、本発明の実施形態に係るカメラの動作を説明する。
被写体像は、レンズ１１を介して、ＣＣＤ１２で電気信号に変換される。ＣＣＤ１２で電気信号に変換された被写体像は、撮像回路１３で増幅処理等されて、Ａ／Ｄコンバータ１４でデジタル信号に変換される。デジタル信号に変換された画像信号（以下、「画像情報」とも称する。なお、被写体像は静止画像のみではなく動画像も含むものとする）は、補正回路１５で、色相やノイズなどについての補正処理が行われる。補正回路１５は、バス１６を介して、ＦＩＦＯメモリ２１、フレームメモリ２７、記録バッファ３１及び第２のＣＰＵ４０と接続されている。ＦＩＦＯメモリ２１は、入力した情報を入力した順番にオンスクリーン回路２２に出力する。オンスクリーン回路２２は、ＦＩＦＯメモリ２１から出力された信号をビデオ信号に変換して、ビデオ出力回路２３とＴＦＴ液晶駆動回路２４に出力する。ビデオ出力回路２３は、ビデオ出力端子２３ａから図示しない外部表示装置にビデオ信号を出力するための回路（インターフェース）である。また、ＴＦＴ液晶駆動回路２４は、オンスクリーン回路２２から出力されたビデオ信号に基づいて、画像や動画をＴＦＴパネル２５に表示するための回路である。そして、ＴＦＴパネル２５には、被写体の構図等の確認のために補正回路１５で処理された画像がモニター画像として表示される。なお、ＴＦＴパネル２５は、詳細は後述する第１のＣＰＵから制御されるバックライトユニット２６により背面より光が液晶面に照射されている。なお、フレームメモリ２７は、画像信号を処理するための作業用メモリである。Embodiments of the present invention will be described with reference to the drawings.
FIG. 1 is a block diagram showing a schematic configuration of a camera according to an embodiment of the present invention. The operation of the camera according to the embodiment of the present invention will be described with reference to FIG.
The subject image is converted into an electrical signal by theCCD 12 via thelens 11. The subject image converted into an electrical signal by theCCD 12 is amplified by theimaging circuit 13 and converted into a digital signal by the A /D converter 14. An image signal converted into a digital signal (hereinafter also referred to as “image information”. Note that the subject image includes not only a still image but also a moving image) is corrected by thecorrection circuit 15 for hue, noise, and the like. Done. Thecorrection circuit 15 is connected to theFIFO memory 21, theframe memory 27, therecording buffer 31, and thesecond CPU 40 via the bus 16. TheFIFO memory 21 outputs the input information to the on-screen circuit 22 in the input order. The on-screen circuit 22 converts the signal output from theFIFO memory 21 into a video signal and outputs the video signal to the video output circuit 23 and the TFT liquid crystal drive circuit 24. The video output circuit 23 is a circuit (interface) for outputting a video signal from thevideo output terminal 23a to an external display device (not shown). The TFT liquid crystal driving circuit 24 is a circuit for displaying an image or a moving image on the TFT panel 25 based on the video signal output from the on-screen circuit 22. On the TFT panel 25, an image processed by thecorrection circuit 15 for confirming the composition of the subject is displayed as a monitor image. The TFT panel 25 is irradiated with light from the back surface by abacklight unit 26 controlled by a first CPU, which will be described in detail later. Theframe memory 27 is a working memory for processing image signals.

また、記録バッファ３１は、画像情報を着脱可能な記録媒体３３に記憶したり、記憶媒体３３から読み出したりする際の、バッファメモリであり、記録媒体Ｉ／Ｆ３２を介して、記録媒体との画像情報入出力を行う。第２のＣＰＵ４０は第１のＣＰＵ５０と連携しながら様々な処理を行うが、基本的に、画像処理と、記録媒体の制御を行う。第２のＣＰＵ４０は、例えば、画像圧縮機能４１と、画像伸張機能４２と、フレームメモリコントロール機能４３と、記録媒体アクセス機能４４とを備えている。これらの機能により、例えば、記録媒体３３に画像を記録する場合には、画像圧縮機能３１で画像情報を、例えば、フレームメモリ２７を作業用メモリとして、フレームメモリコントロール機能４３で制御しながら、ＪＰＥＧ圧縮する。そして、記録媒体アクセス機能４４によって記録媒体３３にアクセスして、記録媒体３３の所定位置に圧縮された画像情報を記録する。また、記録媒体３３から画像情報を読み出して、例えば、ＴＦＴパネル２５に表示する場合には、記録媒体アクセス機能４４により記録媒体３３をアクセスして所望の画像情報を、記録媒体３３から読み出す。記録媒体３３から読み出された画像情報は、画像伸張機能４２により、画像圧縮の場合と同様にフレームメモリ２７を作業用のメモリとして、伸張されてＦＩＦＯメモリ２１に出力される。以降の動作は、上記した場合と同様であるので、説明を省略する。  Therecording buffer 31 is a buffer memory when image information is stored in or read from theremovable recording medium 33, and the image with the recording medium is recorded via the recording medium I /F 32. Input / output information. Thesecond CPU 40 performs various processes in cooperation with thefirst CPU 50, but basically performs image processing and control of the recording medium. Thesecond CPU 40 includes, for example, animage compression function 41, animage expansion function 42, a framememory control function 43, and a recordingmedium access function 44. With these functions, for example, when an image is recorded on therecording medium 33, image information is controlled by theimage compression function 31, for example, JPEG is controlled by the framememory control function 43 using theframe memory 27 as a working memory. Compress. Then, the recordingmedium access function 44 accesses therecording medium 33 to record the compressed image information at a predetermined position on therecording medium 33. Further, when image information is read from therecording medium 33 and displayed on the TFT panel 25, for example, therecording medium 33 is accessed by the recordingmedium access function 44 and desired image information is read from therecording medium 33. The image information read from therecording medium 33 is decompressed by theimage decompression function 42 using theframe memory 27 as a working memory, and output to theFIFO memory 21 as in the case of image compression. Subsequent operations are the same as those described above, and a description thereof will be omitted.

第１のＣＰＵ５０は、全体の動作を制御するものである。第１のＣＰＵ５０は、システムコントロール機能５１として、ＩＳＯ感度制御機能５２と、被写体追尾機能５３と、ＣＣＤシャッター制御機能５４と、鏡枠絞り制御機能５５と、ノイズキャンセラ機能５６と、コントラスト調整機能５７と、シャープネス調整機能５８とを備えている。また、第１のＣＰＵ５０は、システムコントロール機能５１に加えて、ＡＦ（オートフォーカス）制御を行うＡＦ制御機能５９も備えている。
ＡＦ制御機能５９は、レンズ１１を移動させながら連続して撮影を行わせて、この撮影で得られ、補正回路１５で補正処理された画像信号についてそれぞれのコントラスト量の比較を行い、そのコントラスト量のピーク位置を示す画像が撮影されたレンズ１１の位置を合焦位置とみなし、その位置にレンズ１１を移動させるように制御するものである。そして、ＡＦ制御機能５９は、コントラスト量の比較に際して、フレームメモリ２７から画面内の所定のＡＦ領域についての画像信号を抽出して比較する。
ＡＦ制御機能５９は、ＡＦ領域として、通常のＡＦがオンされている場合には、画面の中央に設定し、追尾ＡＦがオンされている場合には、後述するように被写体の移動方向と量に基づいて、ＡＦ設定領域５１５で画面内の被写体移動位置に設定される。Thefirst CPU 50 controls the entire operation. Thefirst CPU 50 includes, as asystem control function 51, an ISOsensitivity control function 52, asubject tracking function 53, a CCDshutter control function 54, a lens frameaperture control function 55, anoise canceller function 56, and acontrast adjustment function 57. And asharpness adjustment function 58. In addition to thesystem control function 51, thefirst CPU 50 also includes anAF control function 59 that performs AF (autofocus) control.
TheAF control function 59 continuously shoots while moving thelens 11, compares the contrast amounts of the image signals obtained by this shooting and corrected by thecorrection circuit 15, and the contrast amount The position of thelens 11 where the image showing the peak position is taken as the in-focus position, and thelens 11 is controlled to move to that position. Then, theAF control function 59 extracts and compares an image signal for a predetermined AF area in the screen from theframe memory 27 when comparing the contrast amount.
TheAF control function 59 sets the AF area to the center of the screen when normal AF is turned on, and when the tracking AF is turned on, the moving direction and amount of the subject as will be described later. Is set to the subject movement position in the screen in the AF setting area 515.

システムコントロール機能５１の各機能について説明する。まず、ＩＳＯ感度制御機能５２は、ＣＣＤ１２のＩＳＯ感度を制御する。被写体追尾機能５３は、動く被写体を追尾する。ＣＣＤシャッター制御機能５４はＣＣＤシャッターの露光時間を制御する。鏡枠絞り制御機能５５は、鏡枠絞りの量を制御する。ノイズキャンセラ機能５６は、画像情報の中のノイズをキャンセルするための制御を行う。このノイズキャンセラ処理は、例えば、メディアンフィルタなどのフィルタ処理を行い、不確定なノイズ成分を除去する処理である。コントラスト調整機能５７とシャープネス調整機能５８は、それぞれコントラストとシャープネスを調整する。コントラストの調整処理は、例えば、γ補正の補正値を変更し、暗いところと明るいところとのメリハリを調整する処理であって、シャープネスの調整処理は、例えば、エッジ強調処理のレベルを変更し、画像のエッジ部分をシャープにする処理である。なお、上記の機能において、ノイズのキャンセルや、コントラスト、シャープネス調整は、フレームメモリコントロール機能４３を介して、フレームメモリ上のデータに対して行われる。  Each function of thesystem control function 51 will be described. First, the ISOsensitivity control function 52 controls the ISO sensitivity of theCCD 12. Thesubject tracking function 53 tracks a moving subject. The CCDshutter control function 54 controls the exposure time of the CCD shutter. The lens framediaphragm control function 55 controls the amount of the lens frame diaphragm. Thenoise canceller function 56 performs control for canceling noise in the image information. The noise canceller process is a process for removing an indefinite noise component by performing a filter process such as a median filter, for example. Acontrast adjustment function 57 and asharpness adjustment function 58 adjust contrast and sharpness, respectively. The contrast adjustment process is, for example, a process of changing the correction value of γ correction to adjust the sharpness between a dark place and a bright place, and the sharpness adjustment process is, for example, changing the level of the edge enhancement process, This is a process for sharpening the edge portion of an image. In the above function, noise cancellation, contrast, and sharpness adjustment are performed on the data in the frame memory via the framememory control function 43.

第１のＣＰＵ５０には、様々な回路が接続されている。例えば、アクチュエータ駆動回路６１は、アクチュエータ６２を駆動してレンズ１１を駆動する。レンズバリア開閉検出手段６３は、レンズバリアの開閉状態を検出する。ＥＥＰＲＯＭ６４は、カメラの設定条件などを記憶し、カメラの電源をオフしたあとでも、記憶を保持している。接続検出手段６５は、カメラと図示しない他の機器との接続状態を検出する。外部データＩ／Ｆ（ＵＳＢ）は、図示しない外部機器とのデータをＵＳＢ接続で行うためのインターフェースである。操作部としてのキーマトリクス６７は、ユーザからの操作を受け付ける。ＬＣＤパネル７２は、ＬＣＤ表示回路７１を介して、カメラの状態や、設定条件などを表示する。また、カメラの電源は通常電池７５であり、電池７５からの電力が電源回路７７を介してカメラの各部に供給される。また、電池７５の状態は電池状態検出回路７６で検出されて、電池７５の残量などに応じて、必要な制御が第１のＣＰＵ５０によってなされる。また、電池７５の残量が著しく低下した場合や電池交換時には、バックアップ電源７８から電力が供給されて、図示しない揮発メモリに記憶された内容の保持などがなされる。  Various circuits are connected to thefirst CPU 50. For example, theactuator drive circuit 61 drives theactuator 62 to drive thelens 11. The lens barrier open / close detection means 63 detects the open / close state of the lens barrier. The EEPROM 64 stores camera setting conditions and the like, and retains the memory even after the camera is turned off. The connection detection means 65 detects the connection state between the camera and another device (not shown). The external data I / F (USB) is an interface for performing data connection with an external device (not shown) by USB connection. Akey matrix 67 as an operation unit receives an operation from a user. TheLCD panel 72 displays the camera state, setting conditions, and the like via the LCD display circuit 71. Further, the power source of the camera is normally abattery 75, and power from thebattery 75 is supplied to each part of the camera via thepower supply circuit 77. Further, the state of thebattery 75 is detected by the batterystate detection circuit 76, and necessary control is performed by thefirst CPU 50 in accordance with the remaining amount of thebattery 75 and the like. Further, when the remaining amount of thebattery 75 is remarkably lowered or when the battery is replaced, power is supplied from the backup power supply 78, and contents stored in a volatile memory (not shown) are retained.

上記の構成において、図２を参照して、本発明の本実施形態に係るカメラの追尾機能に関する説明を行う。
キーマトリクス６７は十字キーやジョグダイヤルを含む検出領域指示手段６７１を備えている。検出領域指示手段６７１で指示された検出領域は、被写体追尾機能５３の被写体コントラスト検出領域設定機能５３１に送られて、被写体の特徴点（すなわち、コントラスト）の検出領域を設定する。次に、被写体コントラスト検出機能５３２は、被写体コントラスト検出領域設定機能５３１で設定された検出領域内における被写体のコントラストを検出する。被写体移動方向判別機能５３３は、被写体コントラスト検出領域の周囲を取り囲むような領域を監視領域に設定し、設定されたコントラスト変化を所定時間おきに監視し、監視領域の中で、検出された被写体コントラストの全部又は一部と同様なコントラストのパターンが出現した場合に、その方向に被写体が移動したと判断する。被写体移動量判別機能５３４は、同様に被写体コントラストの全部又は一部と同様なコントラストパターンが出現した監視領域の座標から移動量を判別する。そして、最終的に、被写体の移動方向と移動量に基づいて、ＡＦ領域決定部５３５でＡＦ領域を決定する。In the above configuration, the tracking function of the camera according to this embodiment of the present invention will be described with reference to FIG.
Thekey matrix 67 includes detection area instruction means 671 including a cross key and a jog dial. The detection area designated by the detection area instruction means 671 is sent to the subject contrast detectionarea setting function 531 of thesubject tracking function 53 to set the detection area of the feature point (that is, contrast) of the subject. Next, the subjectcontrast detection function 532 detects the contrast of the subject in the detection area set by the subject contrast detectionarea setting function 531. The subject movementdirection determination function 533 sets a region surrounding the periphery of the subject contrast detection region as a monitoring region, monitors the set contrast change every predetermined time, and detects the detected subject contrast in the monitoring region. When a contrast pattern similar to all or a part of the image appears, it is determined that the subject has moved in that direction. The subject movementamount determination function 534 similarly determines the movement amount from the coordinates of the monitoring area where the same contrast pattern as the whole or part of the subject contrast appears. Finally, the AFarea determination unit 535 determines the AF area based on the moving direction and movement amount of the subject.

このような、追尾機能において、本発明の実施形態では、被写体が暗いときにノイズが多くなるのを防いで、ノイズを抑えることにより、追尾機能の精度を上げるようにしたことを特徴としている。このために、
（１） コントラストやシャープネスを強調すること。
（２） ノイズキャンセラ処理を強くすること。
を主眼としている。以下、各実施形態を説明する。In such a tracking function, the embodiment of the present invention is characterized in that the accuracy of the tracking function is improved by preventing noise from increasing when the subject is dark and suppressing the noise. For this,
(1) Emphasize contrast and sharpness.
(2) Strengthen noise canceller processing.
Is the main focus. Each embodiment will be described below.

（第１の実施形態）
図３は、第１の実施形態に係る動作を説明するためのフローチャートである。第１の実施形態では、自動追尾ＡＦをオン（すなわち、自動追尾時）にした場合に、ＡＦ動作時にコントラスト調整機能５７やシャープネス調整機能５８によるコントラストやシャープネスを強調する処理を行うようにしている。
図３に示すように、自動追尾を行う場合には、カメラ電源をオンにして（ステップＳ３１）、自動追尾ＡＦをオンにする（ステップＳ３２）。そして、自動追尾がオンかどうかを判定して（ステップＳ３３）、自動追尾がオンであれば、コントラストの強調処理及びシャープネスの強調処理の少なくとも一方をオンとする（ステップＳ３４）。これにより、追尾動作時に、コントラストの強調処理及びシャープネスの強調処理の少なくとも一方の処理がオンとなる。そして、撮影待機状態になる（ステップＳ３５）。なお、ステップＳ３３において、自動追尾ＡＦがオフであれば、コントラストの強調処理及びシャープネスの強調処理は行わずに、そのまま撮影待機状態になる。撮影待機状態では、ＡＦを連続的に動作させた状態で、設定されたコントラスト強調処理及びシャープネスの強調処理でモニター画像が表示される。但し、実際の撮影時のコントラスト強調処理及びシャープネスの強調処理は自動追尾のオンオフによっては左右されない。(First embodiment)
FIG. 3 is a flowchart for explaining the operation according to the first embodiment. In the first embodiment, when automatic tracking AF is turned on (that is, during automatic tracking), processing for enhancing contrast and sharpness by thecontrast adjustment function 57 andsharpness adjustment function 58 is performed during AF operation. .
As shown in FIG. 3, when performing automatic tracking, the camera power supply is turned on (step S31), and automatic tracking AF is turned on (step S32). Then, it is determined whether or not automatic tracking is on (step S33). If automatic tracking is on, at least one of contrast enhancement processing and sharpness enhancement processing is turned on (step S34). Thereby, at the time of the tracking operation, at least one of the contrast enhancement processing and the sharpness enhancement processing is turned on. Then, a shooting standby state is entered (step S35). In step S33, if the auto tracking AF is off, the contrast enhancement process and the sharpness enhancement process are not performed, and the camera enters a shooting standby state. In the shooting standby state, the monitor image is displayed by the set contrast enhancement processing and sharpness enhancement processing while the AF is continuously operated. However, the contrast enhancement process and the sharpness enhancement process at the time of actual photographing are not affected by on / off of the automatic tracking.

本実施形態では、自動追尾時にコントラストの強調処理及びシャープネスの強調処理の少なくとも一方の処理を行うようにすることで、ノイズの影響を低減することができるので、追尾精度を上げることができる。  In this embodiment, by performing at least one of contrast enhancement processing and sharpness enhancement processing during automatic tracking, the influence of noise can be reduced, so that tracking accuracy can be increased.

（第２の実施形態）
図４は、第２の実施形態に係る動作を説明するためのフローチャートである。第２の実施形態では、追尾動作時のノイズキャンセラ機能５６によるノイズキャンセラ処理を強くしている。
図４に示すように、自動追尾を行う場合には、カメラ電源をオンにして（ステップＳ４１）、自動追尾ＡＦをオンにする（ステップＳ４２）。そして、自動追尾がオンかどうかを判定して（ステップＳ４３）、自動追尾がオンであれば、ノイズキャンセラ処理を強くする（ステップＳ４４）。そして、撮影待機状態になる（ステップＳ４５）。なお、ステップＳ４３において、自動追尾ＡＦがオフであれば、ノイズキャンセラ処理の設定は変更せずに、そのまま撮影待機状態になる。(Second Embodiment)
FIG. 4 is a flowchart for explaining the operation according to the second embodiment. In the second embodiment, the noise canceller processing by thenoise canceller function 56 during the tracking operation is strengthened.
As shown in FIG. 4, when automatic tracking is performed, the camera power is turned on (step S41), and automatic tracking AF is turned on (step S42). Then, it is determined whether or not automatic tracking is turned on (step S43). If automatic tracking is turned on, the noise canceller processing is strengthened (step S44). Then, a shooting standby state is entered (step S45). In step S43, if the automatic tracking AF is off, the setting of the noise canceller process is not changed, and the shooting standby state is set as it is.

本実施形態においても、第１の実施形態と同様に、ノイズキャンセラ処理を強くして、ノイズの影響を抑えることにより、追尾精度を上げることができる。  Also in the present embodiment, as in the first embodiment, the tracking accuracy can be improved by strengthening the noise canceller process and suppressing the influence of noise.

次に、図５及び図６を参照して、本発明において、静止画撮影の場合と動画撮影の場合における追尾モードの適用について説明する。まず、図５を参照して、静止画撮影の場合における追尾モードの適用について説明する。
静止画像撮影処理モードにおいて（ステップＳ５１）、ＡＦ動作を連続させながら、被写体をモニター表示させて、シャッターがオンになるまで、待機状態を維持する（ステップＳ５２及びステップＳ５３のＮｏ）。シャッターがオンになったら（ステップＳ５３のＹｅｓ）、自動追尾ＡＦがオンになっているかどうか判定する（ステップＳ５４）。ステップＳ５４において、ＡＦ動作を停止させ、自動追尾ＡＦがオンであれば、コントラストやシャープネスの強調処理をオフにしたり、ノイズキャンセラ処理を弱くしたりして（ステップＳ５５）、撮影処理が行われる（ステップＳ５６）。ステップＳ５４において、自動追尾ＡＦがオフであれば、そのまま撮影処理が行われる（ステップＳ５６）。上記強調処理は、自動追尾ＡＦの追尾精度向上には寄与するが、この強調処理されたままで実際の撮影を行うと、最適な画質が得られない場合があるので、実際の撮影時に強調処理がなされている場合には、その時点でいったん解除するのが望ましいからである。また、モニター画像は画角などの確認用なので、多少の画質劣化は許容される。
そして、撮影処理後に、自動追尾ＡＦ設定がオンかどうかを判定し（ステップＳ５７）、オンであれば、再度コントラストやシャープネスの強調処理をオンにしたり、ノイズキャンセラ処理を強くしたりして（ステップＳ５８）、自動追尾ＡＦを開始する。そして、撮影待機状態に入る（ステップＳ５９）。
上記のように、静止画撮影モードの場合には、被写体（すなわち、動体）の追尾は、撮影前のフレーミング時に行われる処理であって、撮影時には、被写体の追尾は必要がないので、コントラストやシャープネスの強調処理を行ったり、ノイズキャンセラ処理を強くしたりする必要はない。従って、上記のように、撮影時にはそれらの処理をオフにしておき、撮影が終了したら、追尾モードに設定されているときには、コントラストやシャープネスの強調処理をオンにしたり、ノイズキャンセラ処理を強くしたりするようにしている。Next, with reference to FIGS. 5 and 6, application of the tracking mode in the case of still image shooting and moving image shooting in the present invention will be described. First, the application of the tracking mode in the case of still image shooting will be described with reference to FIG.
In the still image shooting processing mode (step S51), the subject is displayed on the monitor while the AF operation is continued, and the standby state is maintained until the shutter is turned on (No in step S52 and step S53). When the shutter is turned on (Yes in step S53), it is determined whether or not the automatic tracking AF is turned on (step S54). If the AF operation is stopped in step S54 and the automatic tracking AF is on, the contrast and sharpness enhancement processing is turned off or the noise canceller processing is weakened (step S55), and the photographing processing is performed (step S55). S56). If the automatic tracking AF is off in step S54, the photographing process is performed as it is (step S56). The above enhancement processing contributes to the improvement of the tracking accuracy of automatic tracking AF. However, when actual shooting is performed with this enhancement processing performed, the optimum image quality may not be obtained. If it has been done, it is desirable to release it at that time. Further, since the monitor image is used for confirming the angle of view or the like, some image quality deterioration is allowed.
Then, after the shooting process, it is determined whether or not the automatic tracking AF setting is on (step S57). If the auto tracking AF setting is on, the contrast or sharpness enhancement process is turned on again or the noise canceller process is strengthened (step S58). ), And starts automatic tracking AF. Then, the photographing standby state is entered (step S59).
As described above, in the still image shooting mode, tracking of a subject (that is, a moving object) is a process performed during framing before shooting, and tracking of the subject is not necessary during shooting. There is no need to perform sharpness enhancement processing or to increase noise canceller processing. Therefore, as described above, these processes are turned off at the time of shooting, and after shooting is finished, when the tracking mode is set, the contrast and sharpness enhancement processes are turned on, and the noise canceller process is strengthened. I am doing so.

次に、図６を参照して、動画撮影の場合における追尾モードの適用について説明する。動画像撮影処理モードにおいて（ステップＳ６１）、シャッターがオンになるまで、待機状態を維持する（ステップＳ６２及びステップＳ６３のＮｏ）。シャッターがオンになったら（ステップＳ６３のＹｅｓ）、撮影処理を行い（ステップＳ６４）、再び撮影待機状態になって、処理を終了する（ステップＳ６５）。
このように、動画撮影モードの場合には、静止画の撮影の場合とは異なり、被写体を追尾しながら動画を撮影することが考えられるので、例えば、動画追尾ＡＦがオンの場合には、被写体（動画）追尾ＡＦをオンにしたまま撮影を行うようにしている。なお、動画追尾ＡＦがオフの場合にも、撮影時に動画追尾ＡＦをオンすることなく、そのまま動画撮影を行うようにしている。Next, application of the tracking mode in the case of moving image shooting will be described with reference to FIG. In the moving image shooting processing mode (step S61), the standby state is maintained until the shutter is turned on (No in step S62 and step S63). When the shutter is turned on (Yes in step S63), the photographing process is performed (step S64), the photographing standby state is again entered, and the process is terminated (step S65).
In this way, in the video shooting mode, unlike in the case of still image shooting, it is conceivable to shoot a video while tracking the subject. For example, when the video tracking AF is on, the subject (Movie) Shooting is performed with tracking AF turned on. Even when moving image tracking AF is off, moving image shooting is performed without turning on moving image tracking AF during shooting.

上記のように、本発明の実施形態によれば、
１．追尾に適した画像処理を行わせるようにするので、追尾精度が向上する。
２．静止画像の撮影時と静止画像の撮影終了時（や追尾ＡＦ時）とで、異なる画像処理をするように制御するので、安定した追尾精度と良好な撮影画質が両立できる
３．追尾時において、コントラストやシャープネスの強調処理を行うことにより、画像のコントラストが強くなるので、追尾精度が向上する（すなわち、被写体位置の判断が高まる）。As mentioned above, according to embodiments of the present invention,
1. Since image processing suitable for tracking is performed, tracking accuracy is improved.
2. Control is performed so that different image processing is performed at the time of still image shooting and at the end of still image shooting (or during tracking AF), so that stable tracking accuracy and good image quality can be achieved at the same time.
3. By performing contrast and sharpness enhancement processing at the time of tracking, the contrast of the image becomes stronger, so that tracking accuracy is improved (that is, determination of the subject position is increased).

４．追尾時において、強いノイズキャンセラ処理を行うことにより、ノイズが低減するので、追尾精度が向上する。  4). Since noise is reduced by performing strong noise canceller processing at the time of tracking, tracking accuracy is improved.

本発明は、上記各実施の形態に限ることなく、その他、実施段階ではその要旨を逸脱しない範囲で種々の変形を実施し得ることが可能である。
上記の実施形態では、待機状態にて、ＡＦを連続作動させた状態でも似た画像を表示させるように制御をする説明をしてきたが、必ずしもこれに限らない。例えば、シャッターの１段目が押された場合に、ＡＦ動作を開始させるように構成しても良い。また、モニター画像の表示は必ずしも必要でなく、例えば撮影前にモニター画像を表示させないように制御しても当然良い。
さらに、上記各実施形態には、種々の段階の発明が含まれており、開示される複数の構成要件における適宜な組合せにより種々の発明が抽出され得る。The present invention is not limited to the above-described embodiments, and various modifications can be made without departing from the scope of the invention at the stage of implementation.
In the above-described embodiment, the description has been given of performing control so that a similar image is displayed even in a state where the AF is continuously operated in the standby state, but the present invention is not necessarily limited thereto. For example, the AF operation may be started when the first stage of the shutter is pressed. In addition, display of the monitor image is not necessarily required, and for example, control may be performed so that the monitor image is not displayed before shooting.
Further, the above embodiments include inventions at various stages, and various inventions can be extracted by appropriately combining a plurality of disclosed constituent elements.

また、上記各実施形態は、プログラムに従ったＣＰＵ５０の制御処理によって実現されるが、つまりこれは、上記プログラム自体が上述した実施形態を実現することになり、このプログラム自体が本発明を構成する。  Further, each of the above embodiments is realized by the control process of theCPU 50 according to the program. That is, this means that the above program itself realizes the above-described embodiment, and this program itself constitutes the present invention. .

なお、これまでの実施形態では、本発明をカメラ製品に搭載した例で説明したが、カメラ単体製品以外でも携帯電話やＰＤＡのカメラ部分にも当然適用可能であって、これらのカメラ部分もこれまで説明してきた「カメラ」の範疇に含まれる。  In the above embodiments, the present invention has been described as an example in which the present invention is mounted on a camera product. However, the present invention can naturally be applied to a camera part of a mobile phone or a PDA other than a single camera product. It is included in the category of “camera” described above.

また、例えば各実施形態に示される全構成要件から幾つかの構成要件が削除されても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果で述べられている効果が得られる場合には、この構成要件が削除された構成が発明として抽出され得る。  In addition, for example, even if some structural requirements are deleted from all the structural requirements shown in each embodiment, the problem described in the column of the problem to be solved by the invention can be solved, and the effect described in the effect of the invention Can be obtained as an invention.

本発明の実施形態に係るカメラの概略構成を示すブロック図。1 is a block diagram showing a schematic configuration of a camera according to an embodiment of the present invention.本発明の本実施形態に係るカメラの追尾機能に関するブロック図。The block diagram regarding the tracking function of the camera which concerns on this embodiment of this invention.第１の実施形態に係る動作を説明するためのフローチャート。The flowchart for demonstrating the operation | movement which concerns on 1st Embodiment.第２の実施形態に係る動作を説明するためのフローチャート。The flowchart for demonstrating the operation | movement which concerns on 2nd Embodiment.静止画撮影の場合における追尾モードの適用方法に関するフローチャート。The flowchart regarding the application method of tracking mode in the case of still image photography.動画撮影の場合における追尾モードの適用方法に関するフローチャート。The flowchart regarding the application method of tracking mode in the case of video recording.

符号の説明Explanation of symbols

１１…レンズ、１２…ＣＣＤ、１３…撮像回路、１４…Ａ／Ｄコンバータ、１５…補正回路、１６…バス、２１…ＦＩＦＯメモリ、２２…オンスクリーン回路、２３…ビデオ出力回路、２３ａ…ビデオ出力端子、２４…ＴＦＴ液晶駆動回路、２５…ＴＦＴパネル、２６…バックライトユニット、２７…フレームメモリ、３１…記録バッファ、３２…記録媒体Ｉ／Ｆ、３３…記録媒体、４０…第２のＣＰＵ、４１…画像圧縮機能、４２…画像伸張機能、４３…フレームメモリコントロール機能、４４…記録媒体アクセス機能、５０…第１のＣＰＵ、５１…システムコントロール機能、５２…ＩＳＯ感度制御機能、５３…被写体追尾機能、５４…ＣＣＤシャッター制御機能、５５…鏡枠絞り制御機能、５６…ノイズキャンセラ機能、５７…コントラスト調整機能、５８…シャープネス調整機能、５９…ＡＦ制御機能、６１…アクチュエータ駆動回路、６２…アクチュエータ、６３…レンズバリア開閉検出手段、６４…ＥＥＰＲＯＭ、６５…接続検出手段、６７…キーマトリクス、７１…ＬＣＤ表示回路、７２…ＬＣＤパネル、７５…電池、７６…電池状態検出回路、７７…電源回路、７８…バックアップ電源、５３１…被写体コントラスト検出領域設定機能、５３２…被写体コントラスト検出機能、５３３…被写体移動方向判別機能、５３４…被写体移動量判別機能、５３５…ＡＦ領域決定部、６７１…検出領域指示手段。  DESCRIPTION OFSYMBOLS 11 ... Lens, 12 ... CCD, 13 ... Imaging circuit, 14 ... A / D converter, 15 ... Correction circuit, 16 ... Bus, 21 ... FIFO memory, 22 ... On-screen circuit, 23 ... Video output circuit, 23a ... Video output Terminals 24 ... TFT liquid crystal drive circuit 25 ...TFT panel 26 ...Backlight unit 27 ...Frame memory 31 ... Recordingbuffer 32 ... Recording medium I /F 33 ... Recordingmedium 40 ... Second CPU DESCRIPTION OFSYMBOLS 41 ... Image compression function, 42 ... Image expansion function, 43 ... Frame memory control function, 44 ... Recording medium access function, 50 ... First CPU, 51 ... System control function, 52 ... ISO sensitivity control function, 53 ... Subject tracking 54: CCD shutter control function, 55: Lens frame aperture control function, 56: Noise canceller function, 57: Control Strike adjustment function, 58 ... sharpness adjustment function, 59 ... AF control function, 61 ... actuator drive circuit, 62 ... actuator, 63 ... lens barrier open / close detection means, 64 ... EEPROM, 65 ... connection detection means, 67 ... key matrix, 71 ... LCD display circuit, 72 ... LCD panel, 75 ... battery, 76 ... battery state detection circuit, 77 ... power supply circuit, 78 ... backup power supply, 531 ... subject contrast detection area setting function, 532 ... subject contrast detection function, 533 ... subject Movement direction determination function, 534... Subject movement amount determination function, 535... AF area determination unit, 671.

Claims (6)

Translated fromJapanese

被写体画像を撮影する撮像手段と、
前記撮像手段の画像出力に対して画像処理を行う画像処理手段と、
前記画像処理された画像をモニタ画像として表示する画像表示手段と、
前記画像処理された画像に基づいて画面内を移動する被写体の位置を追尾する追尾手段と、
合焦エリアを一定にする固定モードと、合焦エリアを前記追尾手段による追尾に合わせて移動させる追尾モードのいずれか選択されたＡＦモードに従って前記撮像手段の焦点を調整するＡＦ手段と、備え
前記画像処理手段は、前記ＡＦモードとして前記追尾モードが選択された場合には、前記追尾手段用の画像処理として追尾精度を上げるような画像処理を施し、
前記画像表示手段は、前記ＡＦモードとして前記追尾モードが選択された場合には、前記追尾手段用に追尾精度を上げるような画像処理された画像をモニター画像として表示することを特徴とするカメラ。Imaging means for capturing a subject image;
Image processing means for performing image processing on the image output of the imaging means;
Image display means for displaying the image processed image as a monitor image;
Tracking means for tracking the position of a subject moving within the screen based on the image processed image;
An AF unit that adjusts the focus of the imaging unit according to an AF mode that is selected from a fixed mode that keeps the focusing area constant and a tracking mode that moves the focusing area according to the tracking by the tracking unit;
When the tracking mode is selected as the AF mode, the image processing means performs image processing that increases tracking accuracy as image processing for the tracking means,
The image display means, when the tracking mode is selected as the AF mode, displays an image processed image for improving the tracking accuracy for the tracking means as a monitor image . 前記追尾モードが選択されている場合において、前記画像処理手段は、前記ＡＦ手段による焦点調整後の静止画像を記録する時には前記追尾精度を上げる画像処理を行わないようにすることを特徴とする請求項１に記載のカメラ。Claims in a case where the tracking mode is selected, the image processingmeans, characterized inthat it does not perform image processing to raise the tracking accuracy when recording a still image after the focusing bythe AF unit Item 14. The camera according to Item 1. 前記画像処理手段は、前記追尾精度を上げる画像処理として、コントラストの強調処理、シャープネスの強調処理及び強いノイズキャンセラ処理の少なくとも１つの処理を行うことを特微とする請求項１または請求項２に記載のカメラ。Wherein the image processing means, asthe image processing to increase the tracking accuracy, enhancement of contrast, wherein the performing at least one process enhancement and strong noise canceller processing sharpness toclaim 1 or claim 2 wherein there Camera. 前記画像処理手段は、画像出力の信号に対するコントラスト処理を含み、前記追尾精度を上げる画像処理として、コントラストの強調処理をすることを特徴とする請求項１または請求項２に記載のカメラ。3. The camera according to claim 1, wherein the image processing unit includes a contrast process for an image output signal, and performs a contrast enhancement processas theimage process for improving the tracking accuracy . 前記画像処理手段は、画像出力の信号に対するシャープネス処理を含み、前記追尾精度を上げる画像処理として、シャープネスの強調処理をすることを特徴とする請求項１または請求項２に記載のカメラ。The camera according to claim 1, wherein the image processing unit includes a sharpness process for an image output signal, and performs a sharpness enhancement processas theimage process for increasing the tracking accuracy . 前記画像処理手段は、画像出力の信号に対するノイズキャンセラ処理を含み、前記追尾精度を上げる画像処理として、強いノイズキャンセラ処理をすることを特徴とする請求項１または請求項２に記載のカメラ。The camera according to claim 1, wherein the image processing unit includes a noise canceller process for an image output signal, and performs a strong noise canceller processas theimage process for increasing the tracking accuracy .

Images