JP4914680B2 - Image display device - Google Patents
Image display deviceDownload PDFInfo
- Publication number
- JP4914680B2 JP4914680B2JP2006240384AJP2006240384AJP4914680B2JP 4914680 B2JP4914680 B2JP 4914680B2JP 2006240384 AJP2006240384 AJP 2006240384AJP 2006240384 AJP2006240384 AJP 2006240384AJP 4914680 B2JP4914680 B2JP 4914680B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- display
- lesion
- images
- bleeding
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Endoscopes (AREA)
- Processing Or Creating Images (AREA)
Description
Translated fromJapanese本発明は、患者等の被検体の臓器内部を時系列に沿って撮像した一連の画像を表示する画像表示装置に関するものである。 The present invention relates to an image display device that displays a series of images obtained by imaging the inside of an organ of a subject such as a patient in time series.
従来から、内視鏡分野においては、撮像機能と無線通信機能とを備えた飲込み型のカプセル型内視鏡が提案され、このようなカプセル型内視鏡を被検体の臓器内部に導入して臓器内部の画像群を取得する被検体内情報取得システムが開発されている。カプセル型内視鏡は、臓器内部の観察（検査）のために患者等の被検体の口から飲込まれる。その後、カプセル型内視鏡は、被検体から自然排出されるまでの間、胃や小腸等の臓器の内部を蠕動等によって移動するとともに、例えば０．５秒間隔で被検体の臓器内部の画像（以下、被検体内の画像という場合がある）を時系列に沿って順次撮像する。 Conventionally, in the field of endoscope, a swallowable capsule endoscope having an imaging function and a wireless communication function has been proposed, and such a capsule endoscope is introduced into an organ of a subject. In-subject information acquisition systems have been developed that acquire an image group inside an organ. The capsule endoscope is swallowed from the mouth of a subject such as a patient for observation (examination) inside the organ. Thereafter, the capsule endoscope moves inside the organ such as the stomach and the small intestine by peristalsis or the like until it is spontaneously discharged from the subject and, for example, images inside the organ of the subject at intervals of 0.5 seconds. (Hereinafter, it may be called the image in a subject.) Is imaged sequentially along a time series.
カプセル型内視鏡が被検体の臓器内部を移動する間、このカプセル型内視鏡によって撮像された臓器内部の画像は、順次無線通信によって外部の受信装置に送信される。この受信装置は、受信アンテナおよび記憶媒体を有し、かかるカプセル型内視鏡から送信された臓器内部の画像を受信し、受信した臓器内部の画像を記憶媒体に順次保存するよう機能する。被検体は、かかる受信装置を携帯することによって、カプセル型内視鏡を飲込んでから自然排出するまでの間に亘り、自由に行動できる。 While the capsule endoscope moves inside the organ of the subject, the images inside the organ imaged by the capsule endoscope are sequentially transmitted to an external receiving device by wireless communication. The receiving apparatus has a receiving antenna and a storage medium, and functions to receive an image inside the organ transmitted from the capsule endoscope and sequentially store the received image inside the organ in the storage medium. The subject can act freely by carrying such a receiving apparatus from swallowing the capsule endoscope to spontaneous discharge.
カプセル型内視鏡が被検体から自然排出された後、医師または看護師等のユーザにおいては、かかる受信装置の記憶媒体に保存された臓器内部の画像群を画像表示装置に取り込ませ、この画像表示装置のディスプレイに臓器内部の画像群を順次表示させる。ユーザは、かかる画像表示装置に表示させた被検体内の画像群を順次観察し、この被検体の診断を行うことができる（例えば、特許文献１参照）。 After the capsule endoscope is naturally ejected from the subject, a user such as a doctor or nurse causes the image display device to capture an image group inside the organ stored in the storage medium of the receiving device. The image group inside the organ is sequentially displayed on the display of the display device. The user can observe the image groups in the subject displayed on the image display device in order and diagnose the subject (see, for example, Patent Document 1).
このような画像表示装置には、カプセル型内視鏡が時系列に沿って撮像した臓器内部の画像と臓器内部の画像群全体の時間位置を示すタイムバーとを表示し、かかる臓器内部の画像群の中に出血部位の画像（以下、出血画像という）が含まれる場合、かかる出血部画像の時間位置を示すマークをタイムバー上に付するものがある（例えば、特許文献２参照）。この特許文献２に記載された画像表示装置は、臓器内部の画像群の色情報を検出し、検出した色情報をもとに、この臓器内部の画像群の中から出血画像を検出する。かかる画像表示装置は、このように臓器内部の画像群の中から検出した出血画像に対応するタイムバー上の位置に、この出血画像の時間位置を示すマーク（以下、病変マークという）を表示する。医師または看護師等のユーザは、かかるタイムバー上に表示された病変マークを視認することによって、臓器内部の画像群に含まれる出血画像が被検体内の何れの臓器において撮像されたものであるかを容易に推測することができる。 In such an image display device, an image inside the organ taken in time series by the capsule endoscope and a time bar indicating the time position of the whole image group inside the organ are displayed, and the image inside the organ is displayed. When an image of a bleeding site (hereinafter referred to as a bleeding image) is included in a group, there is a mark that indicates a time position of the bleeding part image on the time bar (for example, see Patent Document 2). The image display device described in
ところで、上述したタイムバーは、一般に、直線状に配列された画素群によって形成される。かかるタイムバーを形成する画素群内の１画素は、画像表示装置に順次表示される臓器内部の画像群に含まれる所定画像数毎の連続画像群を代表する。例えば、直線状に配列された１０００個の画素によってタイムバーが形成され、かかる１０００画素のタイムバーが、カプセル型内視鏡によって撮像された６万枚の臓器内部の画像群全体の時間位置を示す場合、かかる１０００画素のタイムバーの１画素は、６万枚の臓器内部の画像群に含まれる６０枚の連続画像群を代表する。 Incidentally, the above-described time bar is generally formed by a group of pixels arranged in a straight line. One pixel in the pixel group forming such a time bar represents a continuous image group for each predetermined number of images included in an image group inside an organ displayed sequentially on the image display device. For example, a time bar is formed by 1000 pixels arranged in a straight line, and the time bar of 1000 pixels indicates the time position of the entire image group inside 60,000 organs captured by the capsule endoscope. When shown, one pixel of the 1000-pixel time bar represents 60 consecutive image groups included in 60,000 organ internal image groups.
このようなタイムバー上の時間位置（すなわちタイムバーの１画素に対応する位置）に表示される病変マークは、かかるタイムバーの１画素に代表される６０枚の連続画像群内の１以上の出血画像を代表する。すなわち、このような病変マークは、かかる６０枚の連続画像群に少なくとも１枚の出血画像が含まれる場合、その出血画像数によらず、同様に表示される。このため、かかる病変マークによって、臓器内部の画像群に含まれる出血画像の時間位置を理解することは可能だが、臓器内部の画像群の全体的な時間位置における出血画像数の分布を理解することは困難であるという問題点があった。 A lesion mark displayed at such a time position on the time bar (that is, a position corresponding to one pixel of the time bar) is one or more of 60 consecutive image groups represented by one pixel of the time bar. Represents a bleeding image. That is, such a lesion mark is displayed in the same manner regardless of the number of bleeding images when at least one bleeding image is included in the group of 60 consecutive images. For this reason, it is possible to understand the time position of the bleeding image included in the image group inside the organ with such a lesion mark, but to understand the distribution of the number of bleeding images at the entire time position of the image group inside the organ. There was a problem that it was difficult.
本発明は、上記事情に鑑みてなされたものであって、時系列に沿って撮像された臓器内部の画像群に含まれる出血画像等の病変画像の時間位置を理解できるとともに、臓器内部の画像群の全体的な時間位置における病変画像数の分布を容易に理解できる画像表示装置を提供することを目的とする。 The present invention has been made in view of the above circumstances, and is capable of understanding the time position of a lesion image such as a bleeding image included in an image group inside an organ imaged along a time series, and also an image inside the organ. An object of the present invention is to provide an image display device that can easily understand the distribution of the number of lesion images at the entire time position of a group.
上述した課題を解決し、目的を達成するために、請求項１にかかる画像表示装置は、時系列に沿って被検体内を撮像した画像群を表示する画像表示装置において、前記画像群に含まれる病変画像を検出する画像検出手段と、前記画像群の全体的な時間位置を示すタイムバーに沿って該タイムバー上に前記病変画像の時間位置を示す病変マークを表示するマーク表示手段と、前記タイムバーを形成する時間軸方向の画素数と前記画像群の画像数とをもとに前記タイムバーの単位画素当りの画像数を算出し、該単位画素当りの画像数の画像が連続する前記画像群内の連続画像群毎に前記病変画像の病変画像数を計数し、１以上の前記病変画像を含む前記連続画像群毎に、前記病変画像数の計数結果に応じた表示態様をもつ前記病変マークを表示する制御を行う表示制御手段と、を備えたことを特徴とする。 In order to solve the above-described problem and achieve the object, an image display device according to claim 1 is an image display device that displays an image group obtained by imaging the inside of a subject in time series, and is included in the image group. Image detection means for detecting a lesion image to be detected, mark display means for displaying a lesion mark indicating a time position of the lesion image on the time bar along a time bar indicating an overall time position of the image group, The number of images per unit pixel of the time bar is calculated based on the number of pixels in the time axis direction forming the time bar and the number of images in the image group, and images having the number of images per unit pixel are continuous. The number of lesion images of the lesion image is counted for each successive image group in the image group, and each of the successive image groups including one or more lesion images has a display mode according to the count result of the number of lesion images. Display the lesion mark And display control means for controlling, characterized by comprising a.
また、請求項２にかかる画像表示装置は、上記の発明において、前記表示制御手段は、前記病変画像数に応じて前記病変マークの表示色を変化させることを特徴とする。 According to a second aspect of the present invention, in the above invention, the display control means changes the display color of the lesion mark according to the number of lesion images.
また、請求項３にかかる画像表示装置は、上記の発明において、前記表示制御手段は、前記病変画像数の増大に伴って前記病変マークの表示色を濃くすることを特徴とする。 According to a third aspect of the present invention, in the above invention, the display control unit darkens the display color of the lesion mark as the number of the lesion images increases.
また、請求項４にかかる画像表示装置は、上記の発明において、前記表示制御手段は、前記病変画像数の増大に伴って前記病変マークの表示サイズを大きくすることを特徴とする。 According to a fourth aspect of the present invention, in the above invention, the display control means increases the display size of the lesion mark as the number of the lesion images increases.
また、請求項５にかかる画像表示装置は、上記の発明において、前記表示制御手段は、前記病変画像数の増大に伴って前記時間軸に直交する前記病変マークの画素数を増大させることを特徴とする。 The image display device according to
また、請求項６にかかる画像表示装置は、上記の発明において、前記病変マークの表示色は、前記病変画像の示す病変に対応する色であることを特徴とする。 According to a sixth aspect of the present invention, in the above invention, the display color of the lesion mark is a color corresponding to the lesion indicated by the lesion image.
この発明によれば、タイムバーの時間軸に沿って表示した１以上の病変マークの表示位置によって、被検体内の画像群の全体的な時間位置内における病変画像の時間位置を示すことができるとともに、かかる１以上の病変マークの表示態様（例えば表示色または表示サイズ）によって、この全体的な時間位置内における病変画像数の分布を示すことができる。この結果、時系列に沿って撮像された臓器内部の画像群に含まれる病変画像の時間位置を理解できるとともに、臓器内部の画像群の全体的な時間位置における病変画像数の分布を容易に理解可能な画像表示装置を実現できるという効果を奏する。 According to this invention, the time position of the lesion image within the overall time position of the image group in the subject can be indicated by the display position of one or more lesion marks displayed along the time axis of the time bar. In addition, the distribution of the number of lesion images within this overall time position can be shown by the display mode (for example, display color or display size) of the one or more lesion marks. As a result, it is possible to understand the time positions of the lesion images included in the images inside the organ taken in time series, and to easily understand the distribution of the number of lesion images at the entire time positions of the images inside the organ. There is an effect that a possible image display device can be realized.
以下、図面を参照して、本発明にかかる画像表示装置の好適な実施の形態を詳細に説明する。なお、この実施の形態によって本発明が限定されるものではない。 DESCRIPTION OF EXEMPLARY EMBODIMENTS Hereinafter, exemplary embodiments of an image display device according to the invention will be described in detail with reference to the drawings. Note that the present invention is not limited to the embodiments.
（実施の形態１）
図１は、本発明の実施の形態１にかかる画像表示装置を有する被検体内情報取得システムの一構成例を例示する模式図である。図１に示すように、本発明の実施の形態１にかかる被検体内情報取得システムは、被検体１内の画像を撮像するカプセル型内視鏡２と、カプセル型内視鏡２によって撮像された被検体１内の画像を受信する受信装置３と、受信装置３に受信された被検体１内の画像を表示する画像表示装置４と、かかる受信装置３と画像表示装置４との間のデータの受け渡しを行うための携帯型記録媒体５とを備える。(Embodiment 1)
FIG. 1 is a schematic view illustrating a configuration example of an in-vivo information acquiring system including an image display device according to the first embodiment of the present invention. As shown in FIG. 1, the in-subject information acquisition system according to the first embodiment of the present invention is captured by a
カプセル型内視鏡２は、被検体内の画像（具体的には臓器内部の画像）を撮像するためのものである。このようなカプセル型内視鏡２は、被検体１の内部に導入され、時系列に沿って被検体１内の画像を順次撮像する撮像機能と、撮像した被検体１内の画像群を外部の受信装置３に無線送信する無線通信機能とを有する。具体的には、カプセル型内視鏡２は、被検体１の口から飲込まれた後、この被検体１の臓器内部を蠕動等によって移動する。これと同時に、カプセル型内視鏡２は、所定間隔、例えば０．５秒間隔で被検体１内の画像を逐次撮像し、撮像した被検体１内の画像を含む無線信号を受信装置３に逐次送信する。 The
受信装置３は、例えば被検体１の体表上に分散配置された複数の受信アンテナ３ａ〜３ｈを有し、かかる複数の受信アンテナ３ａ〜３ｈの少なくとも一つを介してカプセル型内視鏡２からの無線信号を受信する。そして、受信装置３は、受信したカプセル型内視鏡２からの無線信号をもとに、被検体１内の画像群を取得する。また、受信装置３は、携帯型記録媒体５が着脱可能に挿着され、カプセル型内視鏡２によって撮像された被検体１内の画像群を携帯型記録媒体５に格納する。この場合、受信装置３は、かかる被検体１内の画像群に含まれる各画像の撮像時刻または受信時刻等を示す時間情報をこの画像群内の各画像に対応付けて携帯型記録媒体５に格納する。 The receiving device 3 includes, for example, a plurality of receiving
受信アンテナ３ａ〜３ｈは、例えばループアンテナを用いて実現され、上述した受信装置３に接続される。受信アンテナ３ａ〜３ｈは、図１に示すように、被検体１の体表上の所定位置、例えば被検体１内におけるカプセル型内視鏡２の移動経路（すなわち消化管）に対応する位置に分散配置される。かかる受信アンテナ３ａ〜３ｈは、被検体１の臓器内部に導入されたカプセル型内視鏡２からの無線信号を捕捉し、補足した無線信号を受信装置３に伝送する。なお、受信アンテナ３ａ〜３ｈは、被検体１に着用させるジャケットの所定位置に分散配置されてもよい。この場合、受信アンテナ３ａ〜３ｈは、被検体１がこのジャケットを着用することによって、被検体１内におけるカプセル型内視鏡２の移動経路に対応する被検体１の体表上の所定位置に配置される。このような受信アンテナは、被検体１に対して１以上配置されればよく、その配置数は、特に８つに限定されない。 The
携帯型記録媒体５は、コンパクトフラッシュ（登録商標）等の携帯可能な記録メディアである。携帯型記録媒体５は、受信装置３および画像表示装置４に対して着脱可能であって、両者に対する挿着時にデータの出力および記録が可能な構造を有する。具体的には、携帯型記録媒体５は、受信装置３に挿着された場合、受信装置３に受信された被検体１内の画像群および各画像の時間情報等の各種データを逐次格納する。一方、携帯型記録媒体５は、画像表示装置４に挿着された場合、被検体１内の画像群および各画像の時間情報等の保存データを画像表示装置４に出力する。この場合、かかる携帯型記録媒体５の保存データは、画像表示装置４に取り込まれる。このようにして、携帯型記録媒体５は、かかる受信装置３と画像表示装置４との間のデータの受け渡しを行う。また、携帯型記録媒体５は、カプセル型内視鏡２を導入する被検体１に関する患者情報等が画像表示装置４によって書き込まれる。 The
画像表示装置４は、カプセル型内視鏡２が撮像した被検体１内の画像等を表示するためのものである。具体的には、画像表示装置４は、上述した携帯型記録媒体５の保存データを取り込むことによって、カプセル型内視鏡２によって撮像された被検体１内の画像群等の各種データを取得し、かかる被検体１内の画像群に含まれる各画像を表示するワークステーション等のような構成を有する。このような画像表示装置４は、医師または看護師等のユーザが被検体１内の画像を観察（検査）して被検体１を診断するための処理機能を有する。この場合、ユーザは、画像表示装置４に被検体１内の画像を順次表示させて被検体１内の生体部位、例えば食道、胃、小腸、および大腸等を観察（検査）し、これをもとに、被検体１を診断できる。 The image display device 4 is for displaying an image or the like in the subject 1 captured by the
つぎに、本発明の実施の形態１にかかる画像表示装置４の構成について説明する。図２は、本発明の実施の形態１にかかる画像表示装置４の一構成例を模式的に示すブロック図である。図２に示すように、この実施の形態１にかかる画像表示装置４は、各種情報を入力する入力部１１と、被検体１内の画像およびＧＵＩ（Graphical User Interface）等を画面表示する表示部１２と、携帯型記録媒体５の保存データ（被検体１内の画像群等）を読み取るカードインターフェース（Ｉ／Ｆ）１３とを有する。また、画像表示装置４は、被検体１の画像群等の各種データを保存する記憶部１４と、画像表示装置４の各構成部を制御する制御部１５とを有する。 Next, the configuration of the image display device 4 according to the first embodiment of the present invention will be described. FIG. 2 is a block diagram schematically illustrating a configuration example of the image display device 4 according to the first embodiment of the present invention. As shown in FIG. 2, the image display apparatus 4 according to the first embodiment includes an
入力部１１は、キーボードおよびマウス等の入力デバイスを用いて実現され、ユーザによる入力操作によって、制御部１５に各種情報を入力する。例えば、入力部１１は、制御部１５に対して指示する各種指示情報、被検体１に関する患者情報等を制御部１５に入力する。なお、かかる入力部１１によって入力される患者情報は、例えば被検体１の患者名、性別、生年月日、および患者ＩＤ等である。 The
表示部１２は、ＣＲＴディスプレイまたは液晶ディスプレイ等の画像表示が可能なディスプレイを用いて実現され、制御部１５によって表示指示された各種情報等を表示する。具体的には、表示部１２は、被検体１の臓器内部を観察（検査）して被検体１を診断するための各種情報、例えば、カプセル型内視鏡２が撮像した被検体１内の画像群等を表示する。また、表示部１２は、かかる被検体１内の画像群を観察するための各種ＧＵＩを表示する。このような表示部１２は、かかる被検体１内の画像群に含まれる各画像を表示するための主表示領域１００と、主表示領域１００に表示される被検体１内の画像群の全体的な時間位置を示すタイムバー１１０と、現に主表示領域１００に表示される被検体１内の画像（現表示画像）の時間位置を示すスライダ１１１と、かかる被検体１内の画像群に含まれる病変画像の時間位置を示す病変マークを表示するマーク表示部１２０とを有する。さらに、表示部１２は、主表示領域１００に被検体１内の画像を表示する際の各種表示操作を行うための表示操作アイコン群１３０と、主表示領域１００に表示された被検体１内の画像群の中から選択された所望の画像を追加表示するための副表示領域１４０とを有する。 The display unit 12 is realized using a display capable of displaying an image, such as a CRT display or a liquid crystal display, and displays various types of information instructed to be displayed by the
カードＩ／Ｆ１３は、上述した携帯型記録媒体５が着脱可能に挿着され、かかる携帯型記録媒体５の保存データを読み取るとともに、得られた保存データを制御部１５に転送する。また、カードＩ／Ｆ１３は、挿着された携帯型記録媒体５に対し、制御部１５によって書き込み指示された情報、例えば被検体１の患者情報等を書き込む。 The card I / F 13 is removably inserted into the
記憶部１４は、ＲＡＭ、ＥＥＰＲＯＭ、またはハードディスク等の大容量の記録媒体を用いて実現され、制御部１５によって書き込み指示された各種データ等を保存し、制御部１５によって読み出し指示された保存データを制御部１５に送信する。このような記憶部１４は、カプセル型内視鏡２によって撮像された被検体１内の画像群ＰＧ、画像群ＰＧ内の各画像の時間情報、および被検体１の患者情報等を保存する。この場合、かかる記憶部１４に保存される各画像の時間情報は、画像群ＰＧの各画像データに対してそれぞれ付加される。 The storage unit 14 is realized by using a large-capacity recording medium such as a RAM, an EEPROM, or a hard disk, stores various data instructed to be written by the
制御部１５は、画像表示装置４の各構成部を制御する。具体的には、制御部１５は、入力部１１、表示部１２、カードＩ／Ｆ１３、および記憶部１４をそれぞれ制御し、かかる各構成部間の情報の入出力を制御する。このような制御部１５は、カードＩ／Ｆ１３に挿着された携帯型記録媒体５から、被検体１内の画像群ＰＧと、この画像群ＰＧ内の各画像に対応付けられた時間情報とを取得する。制御部１５は、かかる被検体１内の画像群ＰＧと時間情報とを画像毎に対応付けて記憶部１４に保存する。制御部１５は、入力部１１によって入力された指示情報に基づいて、かかる被検体１内の画像群に含まれる各画像を表示部１２の主表示領域１００に表示させる。 The
このような制御部１５は、画像検出部１５ａおよび表示制御部１５ｂを有する。画像検出部１５ａは、被検体１内の画像群ＰＧに含まれる１以上の病変画像を検出する。具体的には、画像検出部１５ａは、被検体１内の画像群ＰＧに含まれる処理対象の画像の色情報を検出し、検出した画像の色情報をもとに、この処理対象の画像が病変画像であるか否かを判断する。画像検出部１５ａは、この処理対象の画像が病変画像であると判断した場合、病変画像である旨を示すサイン（病変フラグ）をこの処理対象の画像（すなわち病変画像）に付加する。このようにして、画像検出部１５ａは、被検体１内の画像群ＰＧに含まれる病変画像を検出する。かかる病変フラグが付加された病変画像は、画像群ＰＧの一部として記憶部１４に保存される。画像検出部１５ａは、このような病変画像の検出処理を画像群ＰＧの全画像について実行する。なお、かかる画像検出部１５ａによって検出される画像の色情報として、例えば、画像の平均色、画像を形成する赤（Ｒ）、緑（Ｇ）、青（Ｂ）の各色要素の値（Ｒ値、Ｇ値、Ｂ値）等が挙げられる。 Such a
表示制御部１５ｂは、記憶部１４に保存された被検体１内の画像群ＰＧに含まれる各画像を表示部１２の主表示領域１００に表示する制御を行う。この場合、かかる画像群ＰＧ内に病変画像が含まれていれば、表示制御部１５ｂは、かかる被検体１内の病変画像を表示部１２の主表示領域１００に表示する制御を行う。また、表示制御部１５ｂは、かかる主表示領域１００に表示された画像群ＰＧの中から選択された所望の画像を表示部１２の副表示領域１４０に追加表示する制御を行う。この場合、表示制御部１５ｂは、このように選択された所望の画像を縮小した縮小画像（例えばサムネイル画像）を副表示領域１４０に表示させる。 The
また、表示制御部１５ｂは、かかる画像群ＰＧに含まれる１以上の病変画像の時間位置を示す病変マークを表示部１２のマーク表示部１２０に表示する制御を行う。この場合、表示制御部１５ｂは、複数の画素によって形成されるタイムバー１１０の時間軸方向の画素数と主表示領域１００に表示される画像群ＰＧの画像数とをもとにタイムバー１１０の単位画素当りの画像数を算出し、この単位画素当りの画像数の画像が連続する画像群ＰＧ内の連続画像群毎に、上述した画像検出部１５ａによって検出された病変画像の病変画像数を計数する。そして、表示制御部１５ｂは、かかる画像群ＰＧ内の連続画像群であって１以上の病変画像を含む連続画像群毎に、この病変画像数の計数結果に応じた表示態様をもつ病変マークをマーク表示部１２０に表示する制御を行う。このような表示制御部１５ｂは、この病変画像数の計数結果に応じて例えば病変マークの表示色を変化させ、かかる病変画像数に応じた表示色の病変マークをマーク表示部１２０に表示する制御を行う。 Further, the
その他、表示制御部１５ｂは、各種ＧＵＩであるタイムバー１１０、スライダ１１１、および表示操作アイコン群１３０を表示部１２に表示させる。この場合、表示制御部１５ｂは、上述した画像群ＰＧ内の各画像の時間情報をもとに、この画像群ＰＧの全体的な時間位置を示すタイムバー１１０を表示する制御を行い、この画像群ＰＧのうちの現に主表示領域１００に表示されている被検体１内の画像（すなわち現表示画像）に対応するタイムバー１１０上の時間位置にスライダ１１１を表示する制御を行う。 In addition, the
なお、上述した画像検出部１５ａによって検出される病変画像は、被検体１の臓器内部に生じた病変の部位を被写体に含む画像である。かかる病変画像の一例として、例えば出血部位を被写体に含む出血画像が挙げられる。 Note that the lesion image detected by the
つぎに、被検体１内の画像群ＰＧに含まれる病変画像が出血画像である場合を例示して、本発明の実施の形態１にかかる画像表示装置４の表示部１２の表示内容を具体的に説明する。図３は、実施の形態１にかかる画像表示装置４の表示部１２の表示内容を例示する模式図である。表示制御部１５ｂは、制御部１５によって所定のログイン処理が行われた場合、図３に示すようなウィンドウＷを表示部１２に表示させる。 Next, the case where the lesion image included in the image group PG in the subject 1 is a bleeding image is exemplified, and the display contents of the display unit 12 of the image display device 4 according to the first embodiment of the present invention are specifically shown. Explained. FIG. 3 is a schematic view illustrating the display contents of the display unit 12 of the image display device 4 according to the first embodiment. When a predetermined login process is performed by the
図３に示すように、ウィンドウＷには、主表示領域１００と、タイムバー１１０と、スライダ１１１と、マーク表示部１２０と、表示操作アイコン群１３０と、副表示領域１４０とが形成される。また、ウィンドウＷには、副表示領域１４０に表示された複数の縮小画像のスクロール操作を行うためのスクロール操作部１４１と、入力部１１の操作によって各種ＧＵＩのクリック操作またはドラッグ操作等を行うためのカーソルＫと、かかるウィンドウＷを閉じるためのＣｌｏｓｅアイコン１５０とが形成される。 As shown in FIG. 3, a
主表示領域１００は、表示処理対象の被検体１内の画像群ＰＧに含まれる各画像を表示するための画像表示領域である。表示制御部１５ｂは、入力部１１によって入力された指示情報に基づいて、表示処理対象の画像群ＰＧ内の各画像を主表示領域１００に表示する制御を行う。かかる表示制御部１５ｂの制御によって、主表示領域１００は、かかる画像群ＰＧ内の画像Ｐn（フレーム番号ｎ＝１，２，３，…）を表示する。また、表示制御部１５ｂは、かかる主表示領域１００内に、この主表示領域１００の現表示画像（例えば画像Ｐn）の撮像年月日および撮像時刻と、この被検体１の患者情報（患者名、患者ＩＤ、性別、生年月日）とを表示する制御を行う。The
タイムバー１１０およびスライダ１１１は、主表示領域１００の現表示画像の時間位置を示すためのＧＵＩである。タイムバー１１０は、時間軸方向の横サイズＬ（単位は画素）を有するバーであり、主表示領域１００に表示される画像群ＰＧの時間的な長さ（例えば画像群ＰＧの撮像開始からの経過時間）を示す時間スケールが付される。このようなタイムバー１１０は、かかる横サイズＬに相当する画素数（Ｌ画素）の画素群、すなわち、時間軸方向に配列されたＬ画素の画素群によって形成され、画像群ＰＧの全体的な時間位置を示す。この場合、かかるタイムバー１１０を形成するＬ画素の画素群の単位画素（例えば１画素）は、画像数Ｎの画像が連続する画像群ＰＧ内の連続画像群を代表し、かかる画像数Ｎの連続画像群の時間位置に対応する。ここで、かかる画像群ＰＧ内の連続画像群の画像数Ｎは、タイムバー１１０を形成するＬ画素の画素群の単位画素当りの画像数である。表示制御部１５ｂは、画像群ＰＧの全画像数Ａ（単位はフレーム）を上述したＬ画素（すなわちタイムバー１１０を形成する時間軸方向の画素数）によって除算して、かかる単位画素当りの画像数Ｎを算出する。 The
スライダ１１１は、かかるタイムバー１１０に沿って移動し、主表示領域１００の現表示画像に対応するタイムバー１１０上の時間位置を示す。このようなスライダ１１１は、主表示領域１００の現表示画像を含む画像群ＰＧ内の連続画像群であってタイムバーの単位画素によって代表される画像数Ｎの連続画像群の時間位置を示す。なお、かかるスライダ１１１の移動は、表示制御部１５ｂによって制御される。表示制御部１５ｂは、スライダ１１１が主表示領域１００の現表示画像（被検体１内の画像）の時間位置を示すように、かかるタイムバー１１０上におけるスライダ１１１の移動と主表示領域１００の現表示画像の表示切替動作とを制御する。 The
マーク表示部１２０は、画像群ＰＧに含まれる１以上の病変画像の時間位置を示す１以上の病変マークをタイムバー１１０に沿って表示するマーク表示手段として機能する。具体的には、マーク表示部１２０は、時間軸方向の横サイズＬと時間軸方向に対して垂直方向の縦サイズＴ（単位は画素）とを有し、かかる横サイズＬと縦サイズＴとによって規定される矩形領域内に格子状に配列された（Ｌ×Ｔ）画素の画素群によって形成される。このようなマーク表示部１２０は、上述したタイムバー１１０に沿ってバー状に形成され、画像群ＰＧに含まれる１以上の病変画像の時間位置を示す１以上の病変マークをタイムバー１１０上に表示する。この場合、マーク表示部１２０は、表示制御部１５ｂの制御をもとに、出血画像等の病変画像を含む画像数Ｎの連続画像群を代表するタイムバー１１０の単位画素に対応してこの画像数Ｎの連続画像群内の病変画像の時間位置を示す病変マークを表示する。 The
例えば、マーク表示部１２０は、表示制御部１５ｂの制御をもとに、画像群ＰＧに含まれる複数の出血画像に対応するタイムバー１１０上の時間位置に病変マーク群１２０ａ，１２０ｂをそれぞれ表示する。なお、病変マーク１２０ａ，１２０ｂは、上述したタイムバー１１０の単位画素に対応して表示される病変マークをそれぞれ複数含むものである。マーク表示部１２０は、１以上の出血画像を含む画像数Ｎの連続画像群（すなわち主表示領域１００に表示される画像群ＰＧ内の連続画像群）を代表するタイムバー１１０の単位画素毎に、かかる病変マーク群１２０ａ，１２０ｂ内の各病変マークをそれぞれ表示する。この場合、マーク表示部１２０は、例えば出血画像の示す病変（すなわち出血部位）に対応する色（例えば赤色）で病変マーク群１２０ａ，１２０ｂ内の各病変マークを表示する。さらに詳細には、マーク表示部１２０は、かかる画像数Ｎの連続画像群に含まれる出血画像の画像数に応じて各病変マークの表示色（例えば出血部位に対応する赤色）の濃淡を異ならせた病変マーク群１２０ａ，１２０ｂを表示する。 For example, the
このようにマーク表示部１２０が病変マーク群１２０ａ，１２０ｂを表示した状態において、主表示領域１００の現表示画像（被検体１内の画像Ｐn）が出血部位ＢＬを被写体に含む出血画像である場合、スライダ１１１は、この出血画像の時間位置を示す病変マーク群１２０ａ内の病変マークの位置、すなわち、この出血画像を含む画像数Ｎの連続画像群を代表するタイムバー１１０の単位画素に対応する時間位置に移動する。In this state where the
表示操作アイコン群１３０は、被検体１内の画像群ＰＧに含まれる各画像を主表示領域１００に表示する際の表示操作を行うためのＧＵＩである。かかる表示操作アイコン群１３０には、例えば図３に示すように、再生アイコン１３１と、コマ再生アイコン１３２と、頭出しアイコン１３３と、逆再生アイコン１３４と、逆コマ再生アイコン１３５と、頭出しアイコン１３６とが含まれる。なお、再生アイコン１３１は、時系列の順方向に沿って画像群ＰＧの各画像を再生するためのＧＵＩであり、コマ再生アイコン１３２は、時系列の順方向に沿って画像群ＰＧの各画像をコマ送り再生するためのＧＵＩである。逆再生アイコン１３４は、時系列の逆方向に沿って画像群ＰＧの各画像を再生するためのＧＵＩであり、逆コマ再生アイコン１３５は、時系列の逆方向に沿って画像群ＰＧの各画像をコマ送り再生するためのＧＵＩである。また、頭出しアイコン１３３は、画像群ＰＧの最後に撮像した画像を表示するためのＧＵＩであり、逆頭出しアイコン１３６は、画像群ＰＧの最初に撮像した画像を表示するためのＧＵＩである。 The display
つぎに、上述したマーク表示部１２０内の病変マーク群１２０ａを例示し、表示制御部１５ｂの制御に基づいてマーク表示部１２０が表示する病変マークを詳細に説明する。図４は、実施の形態１にかかる画像表示装置４の表示制御部１５ｂがマーク表示部１２０に表示させる病変マークの一具体例を示す模式図である。なお、図４には、マーク表示部１２０によって表示された病変マーク群１２０ａの拡大図が示される。 Next, the
図４に示すように、病変マーク群１２０ａは、例えば、タイムバー１１０を形成する時間軸方向の画素列に沿って表示された５つの病変マークＭ１〜Ｍ５を含むものである。病変マークＭ１〜Ｍ５は、タイムバー１１０の単位画素１１２ａ〜１１２ｅのそれぞれに対応して表示される。このような病変マークＭ１〜Ｍ５は、かかる単位画素１１２ａ〜１１２ｅのそれぞれに代表される画像群ＰＧ内の画像数Ｎの各連続画像群にそれぞれ含まれる１以上の出血画像の時間位置をそれぞれ示す。 As shown in FIG. 4, the
具体的には、病変マークＭ１〜Ｍ５は、時間軸方向に配列された画素群によって形成されるタイムバー１１０の時間軸にそれぞれ直交するバー状のマークであり、かかるタイムバー１１０の時間軸に対して垂直な方向に一次元配列された画素群によってそれぞれ形成される。この場合、かかる病変マークＭ１を形成する画素群は、タイムバー１１０の単位画素１１２ａに対応して一次元配列される。これと同様に、かかる病変マークＭ２〜Ｍ５をそれぞれ形成する各画素群は、タイムバー１１０の単位画素１１２ｂ〜１１２ｅにそれぞれ対応して一次元配列される。また、かかる病変マークＭ１〜Ｍ５のそれぞれを形成する各画素群の画素数は、上述したマーク表示部１２０の縦サイズＴに相当する。 Specifically, the lesion marks M1 to M5 are bar-shaped marks that are respectively orthogonal to the time axis of the
このような病変マークＭ１は、タイムバー１１０の単位画素１１２ａによって代表される画像群ＰＧ内の連続画像群（上述した画像数Ｎの連続画像群）に含まれる１以上の出血画像を代表するとともに、かかる単位画素１１２ａに代表される連続画像群内の出血画像の時間位置を一括して示す。これと同様に、病変マークＭ２〜Ｍ５は、タイムバー１１０の単位画素１１２ｂ〜１１２ｅのそれぞれによって代表される画像数Ｎの各連続画像群内の１以上の出血画像をそれぞれ代表するとともに、かかる単位画素１１２ｂ〜１１２ｅのそれぞれに代表される各連続画像群内の出血画像の時間位置をそれぞれ一括して示す。 Such a lesion mark M1 represents one or more bleeding images included in the continuous image group (continuous image group of the above-described number N of images) in the image group PG represented by the
また、このような病変マークＭ１〜Ｍ５の表示色は、タイムバー１１０の単位画素１１２ａ〜１１２ｅのそれぞれによって代表される画像数Ｎの各連続画像群内の出血画像数に応じて異なる。具体的には、病変マークＭ１〜Ｍ５が出血画像の示す病変（すなわち出血部位）に対応して同系色（例えば赤色系）で表示される場合、かかる病変マークＭ１〜Ｍ５の各表示色は、単位画素１１２ａ〜１１２ｅがそれぞれ代表する画像数Ｎの各連続画像群内の出血画像数の増大に伴って濃くなり、かかる出血画像数の減少に伴って淡くなる。 The display colors of the lesion marks M1 to M5 differ depending on the number of bleeding images in each of the continuous image groups of the number N of images represented by the
このような病変マークＭ１〜Ｍ５は、１以上の出血画像を含む画像群ＰＧ内の画像数Ｎの連続画像群毎に出血画像の時間位置を示すとともに、その表示色（例えば赤色系の濃淡）によって、かかる画像数Ｎの連続画像群毎に出血画像数の分布を示す。以上のことは、上述した病変マーク群１２０ｂについても同様である。 Such lesion marks M1 to M5 indicate the time position of the bleeding image for each of the N consecutive image groups in the image group PG including one or more bleeding images, and the display color thereof (for example, red shades). Shows the distribution of the number of bleeding images for each N consecutive image groups. The same applies to the
なお、このような病変マークを表示するマーク表示部１２０の背景（すなわち横サイズＬと縦サイズＴとによって規定される矩形領域）の明度は、病変マークとウィンドウＷの背景との中間近傍の値であることが望ましく、かかるマーク表示部１２０の背景色は、病変マークに対して補色であることが望ましい。これによって、かかるマーク表示部１２０の背景と病変マークとの境界を明確化することができ、この結果、マーク表示部１２０が医師または看護師等のユーザに視認し易い態様の病変マークを表示できるからである。 Note that the brightness of the background of the
つぎに、被検体１内の画像群ＰＧに病変画像の一例である出血画像が含まれる場合を例示して、この画像群ＰＧ内の出血画像を検出する制御部１５の動作を説明する。図５は、被検体１内の画像群ＰＧに含まれる１以上の出血画像を検出する制御部１５の処理手順を例示するフローチャートである。 Next, the operation of the
図５に示すように、制御部１５は、まず、被検体１内の画像群ＰＧの中から処理対象の画像を読み込む（ステップＳ１０１）。この場合、制御部１５は、カードＩ／Ｆ１３に挿着された携帯型記録媒体５内の画像群ＰＧから処理対象の画像Ｐn（フレーム番号ｎ＝１，２，３，…）を例えば時系列に沿って順次読み込む。As shown in FIG. 5, the
つぎに、制御部１５は、処理対象の画像として読み込んだ被検体１内の画像が出血画像であるか否かを判断する（ステップＳ１０２）。この場合、画像検出部１５ａは、読み込んだ処理対象の画像の色情報を検出し、検出した色情報をもとに、この処理対象の画像が出血画像であるか否かを判断する。具体的には、画像検出部１５ａは、この処理対象の画像の色情報として画像の平均色を検出した場合、検出した画像の平均色が出血画像の平均色に近似していれば、この処理対象の画像を被検体１内の出血画像であると判断する。一方、画像検出部１５ａは、この処理対象の画像の色情報として、画像を形成するＲＧＢの各色要素の値（Ｒ値、Ｇ値、Ｂ値）を検出した場合、検出したＲＧＢの各色要素の値が出血画像の各色要素の数値範囲内であれば、この処理対象の画像を被検体１内の出血画像であると判断する。 Next, the
制御部１５は、この処理対象の画像が出血画像であると判断した場合（ステップＳ１０２，Ｙｅｓ）、この出血画像であると判断した処理対象の画像に対して出血フラグを付加する（ステップＳ１０３）。この場合、画像検出部１５ａは、上述したステップＳ１０２において出血画像であると判断した処理対象の画像（すなわち被検体１内の出血画像）に対して、出血画像である旨を示す出血フラグを付加する。このようにして、画像検出部１５ａは、被検体１内の画像群ＰＧに含まれる出血画像を検出する。なお、かかる被検体１内の出血画像に付加される出血フラグは、上述した病変フラグの一例であって、出血画像である旨を示すサインである。 When the
つぎに、制御部１５は、かかる出血フラグを付加した処理対象の画像（すなわち出血画像）を記憶部１４に保存する（ステップＳ１０４）。この場合、制御部１５は、かかる出血フラグを付加した出血画像を被検体１内の画像群ＰＧの一部として記憶部１４に保存する。 Next, the
その後、制御部１５は、かかる被検体１内の画像群ＰＧに含まれる全画像を処理完了したか否かを判断する（ステップＳ１０５）。具体的には、制御部１５は、カードＩ／Ｆ１３に挿着された携帯型記録媒体５内に未だ読み込んでいない被検体１内の画像が残っている場合、あるいは、記憶部１４に未だ保存していない被検体１内の画像が携帯型記録媒体５内に残っている場合、かかる被検体１内の画像群ＰＧの処理が完了していないと判断し（ステップＳ１０５，Ｎｏ）、上述したステップＳ１０１に戻り、このステップＳ１０１以降の処理手順を繰り返す。 Thereafter, the
制御部１５は、上述したステップＳ１０１〜Ｓ１０５の処理手順を被検体１内の画像群ＰＧに含まれる画像毎に繰り返し行い、かかる出血フラグが付加された出血画像を含む被検体１内の画像群ＰＧを記憶部１４に保存する。 The
一方、制御部１５は、カードＩ／Ｆ１３に挿着された携帯型記録媒体５から被検体１内の画像群ＰＧを全て読み込んだ場合、あるいは、かかる携帯型記録媒体５に保存された被検体１内の画像群ＰＧを全て記憶部１４に保存した場合、かかる画像群ＰＧ内の全画像を処理完了と判断し（ステップＳ１０５，Ｙｅｓ）、かかる画像群ＰＧ内の出血画像の検出処理を終了する。 On the other hand, the
なお、制御部１５は、上述したステップＳ１０２において処理対象の画像が出血画像ではないと判断した場合（ステップＳ１０２，Ｎｏ）、上述したステップＳ１０４に進み、このステップＳ１０４以降の処理手順を繰り返す。この場合、画像検出部１５ａは、ステップＳ１０２において出血画像ではないと判断した被検体１内の画像（すなわち正常な臓器の画像）に対して出血フラグを付加しない。制御部１５は、この出血フラグが付加されていない被検体１内の画像、すなわち正常な臓器の画像を記憶部１４に保存する。すなわち、かかる出血画像ではない被検体１内の画像は、出血フラグが付加されずに、被検体１内の画像群ＰＧの一部として記憶部１４に保存される。 If the
つぎに、被検体１内の画像群ＰＧに病変画像の一例である出血画像が含まれる場合を例示して、かかる画像群ＰＧ内の出血画像の時間位置を示す病変マークを表示する制御を行う制御部１５の動作を説明する。図６は、出血画像の計数結果に応じた表示色をもつ病変マークを表示する制御を行う制御部１５の処理手順の一例を示すフローチャートである。 Next, a case where a bleeding image which is an example of a lesion image is included in the image group PG in the subject 1 is exemplified, and control is performed to display a lesion mark indicating the time position of the bleeding image in the image group PG. The operation of the
制御部１５は、主表示領域１００に表示される被検体１内の画像群ＰＧに含まれる画像数Ｎの連続画像群毎に出血画像数を計数し、画像検出部１５ａによって検出された１以上の出血画像（すなわち出血フラグが付加された画像）を含む画像数Ｎの連続画像群毎に、かかる出血画像数の計数結果に応じた表示色をもつ病変マークをマーク表示部１２０に表示させる。 The
すなわち図６に示すように、制御部１５は、まず、タイムバー１１０の単位画素当りの画像数Ｎを算出する（ステップＳ２０１）。具体的には、表示制御部１５ｂは、主表示領域１００に表示される被検体１内の画像群ＰＧの全画像数Ａ［フレーム］とタイムバー１１０の横サイズＬ［画素］とを検出する。ここで、かかるタイムバー１１０の横サイズＬは、上述したように、タイムバー１１０を形成する時間軸方向の画素群（画素列）の画素数と同値である。表示制御部１５ｂは、かかる全画像数Ａを横サイズＬ（すなわちＬ画素）によって除算し、タイムバー１１０の単位画素当りの画像数Ｎ［フレーム／単位画素］を算出する。なお、かかる単位画素当りの画像数Ｎは、タイムバー１１０の単位画素によって代表される画像群ＰＧ内の連続画像群の画像数である。 That is, as shown in FIG. 6, the
つぎに、制御部１５は、主表示領域１００に表示される被検体１内の画像群ＰＧのフレーム番号ｎを初期化する（ステップＳ２０２）。この場合、表示制御部１５ｂは、この画像群ＰＧに含まれる画像数Ｎの連続画像群内の先頭画像を特定するためのフレーム番号ｎを初期値（例えばｎ＝１）にする。 Next, the
その後、制御部１５は、主表示領域１００に表示される被検体１内の画像群ＰＧの中から、出血画像数の計数処理が行われる処理対象の連続画像群を決定する（ステップＳ２０３）。この場合、表示制御部１５ｂは、現フレーム番号ｎの画像を先頭画像にして画像数Ｎの画像が連続する画像群ＰＧ内の連続画像群（すなわち画像数Ｎの連続画像群）をこの処理対象の連続画像群に決定する。 Thereafter, the
なお、かかる処理対象の連続画像群に決定された画像数Ｎの連続画像群の先頭画像を特定する現フレーム番号ｎは、上述したステップＳ２０２において初期化したフレーム番号または後述するステップＳ２０９において更新したフレーム番号である。 Note that the current frame number n that identifies the top image of the N continuous image groups determined as the processing target continuous image group is the frame number initialized in step S202 described above or updated in step S209 described later. Frame number.
つぎに、制御部１５は、ステップＳ２０３において処理対象の連続画像群に決定した画像数Ｎの連続画像群内の出血フラグを検索する（ステップＳ２０４）。この場合、表示制御部１５ｂは、この画像数Ｎの連続画像群に含まれる各画像をフレーム番号順に順次読み込み、読み込んだ画像毎に出血フラグを検索する。ここで、この画像数Ｎの連続画像群に出血画像が含まれる場合、表示制御部１５ｂは、かかる連続画像群内の出血画像を読み込むとともに、この出血画像に付加された出血フラグを読み込む。表示制御部１５ｂは、このように出血画像とともに出血フラグを読み込むことによって、この出血画像に付加された出血フラグを検出する。すなわち、表示制御部１５ｂは、この画像数Ｎの連続画像群に１以上の出血画像が含まれる場合、この画像数Ｎの連続画像群の中から出血画像数と同数の出血フラグを検出する。 Next, the
続いて、制御部１５は、ステップＳ２０４において検索処理した出血フラグの検索結果をもとに、この画像数Ｎの連続画像群における出血フラグの有無を判断する（ステップＳ２０５）。具体的には、表示制御部１５ｂは、上述したステップＳ２０４において、この画像数Ｎの連続画像群の中から１以上の出血フラグを検出した場合、この画像数Ｎの連続画像群内に出血フラグありと判断する。 Subsequently, the
制御部１５は、このように処理対象の連続画像群である画像数Ｎの連続画像群内に出血フラグありと判断した場合（ステップＳ２０５，Ｙｅｓ）、この処理対象の連続画像群に含まれる出血画像を計数する（ステップＳ２０６）。この場合、表示制御部１５ｂは、この処理対象の連続画像群である画像数Ｎの連続画像群の中から検出した出血フラグを計数する。ここで、かかる出血フラグの検出数は、上述したように、この画像数Ｎの連続画像群内の出血画像数と同数である。したがって、表示制御部１５ｂは、かかる出血フラグの検出数を計数することによって、この画像数Ｎの連続画像群に含まれる出血画像の出血画像数ｘ［フレーム］を得る。 When the
つぎに、制御部１５は、ステップＳ２０６において得られた出血画像数ｘに対応して、この画像数Ｎの連続画像群に含まれる１以上の出血画像の時間位置を示す病変マークの表示色を設定する（ステップＳ２０７）。この場合、表示制御部１５ｂは、この画像数Ｎの連続画像群内の出血画像数ｘを用いて病変マークの色要素を算出し、得られた色要素によって形成される色をこの病変マークの表示色に設定する。 Next, the
具体的には、表示制御部１５ｂは、例えば、この画像数Ｎの連続画像群内の出血画像数ｘを変数として含む次式（１）と次式（２），（３）とに基づいて、この画像数Ｎの連続画像群に含まれる１以上の出血画像の時間位置を示す病変マークの色要素を算出し、得られた色要素によって形成される色をこの病変マークの表示色に設定する。
Ｒ値＝６４＋２×出血画像数ｘ ・・・（１）
Ｇ値＝０ ・・・（２）
Ｂ値＝０ ・・・（３）
Specifically, the
R value = 64 + 2 × the number of bleeding images x (1)
G value = 0 (2)
B value = 0 (3)
ここで、このような式（１）〜（３）に基づいて算出された色要素によって形成される色は、出血画像の示す病変（すなわち出血部位）に対応する赤色系であって、この画像数Ｎの連続画像群内の出血画像数ｘの増大に伴って濃色に変化し、この出血画像数ｘの減少に伴って淡色に変化する。表示制御部１５ｂは、かかる式（１）〜（３）に基づいて病変マークの表示色を設定することによって、この画像数Ｎの連続画像群内の出血画像数ｘに応じてこの病変マークの表示色の濃淡を変化させる。 Here, the color formed by the color elements calculated based on the equations (1) to (3) is a red system corresponding to the lesion (that is, the bleeding site) indicated by the bleeding image, and this image As the number of bleeding images x in the number N of consecutive image groups increases, the color changes to dark, and as the number of bleeding images x decreases, the color changes to light. The
つぎに、制御部１５は、表示部１２に対し、ステップＳ２０７において設定した表示色をもつ病変マークを表示する制御を行う（ステップＳ２０８）。この場合、表示制御部１５ｂは、この画像数Ｎの連続画像群を代表するタイムバー１１０の単位画素に対応するマーク表示部１２０内の時間位置に、この画像数Ｎの連続画像群内の出血画像数ｘに応じた表示色（すなわちステップＳ２０７において設定した表示色）をもつ病変マークを表示する制御を行う。かかる表示制御部１５ｂの制御に基づいて、マーク表示部１２０は、この画像数Ｎの連続画像群を代表するタイムバー１１０の単位画素に対応する時間位置の画素列に、この画像数Ｎの連続画像群内の出血画像数ｘに応じた表示色で病変マークを表示する。 Next, the
続いて、制御部１５は、主表示領域１００に表示される被検体１内の画像群ＰＧのフレーム番号ｎを更新する（ステップＳ２０９）。この場合、表示制御部１５ｂは、現処理対象の連続画像群内の先頭画像を特定する現フレーム番号ｎに対して画像数Ｎ（上述したステップＳ２０１において算出した画像数）を加算し、得られた値にフレーム番号ｎを更新する。このように更新されたフレーム番号ｎは、現処理対象の連続画像群に後続する画像群ＰＧ内の次の連続画像群における先頭画像を特定する。 Subsequently, the
その後、制御部１５は、主表示領域１００に表示される画像群ＰＧの全画像に対して処理完了したか否かを判断する（ステップＳ２１０）。具体的には、表示制御部１５ｂは、上述したステップＳ２０９において更新したフレーム番号ｎが画像群ＰＧの全画像数Ａ以下である場合、この画像群ＰＧに含まれる画像の少なくとも一つは処理未完であると判断し（ステップＳ２１０，Ｎｏ）、上述したステップＳ２０３に戻り、このステップＳ２０３以降の処理手順を繰り返す。 Thereafter, the
一方、表示制御部１５ｂは、上述したステップＳ２０９において更新したフレーム番号ｎが画像群ＰＧの全画像数Ａを超えた場合、この画像群ＰＧの全画像に対して処理完了と判断し（ステップＳ２１０，Ｙｅｓ）、この画像群ＰＧに関する病変マーク表示処理を完了する。この状態において、マーク表示部１２０は、画像群ＰＧに含まれる画像数Ｎの各連続画像群のうちの１以上の出血画像を含む連続画像群毎に、出血画像数ｘに応じた表示色をもつ病変マークを表示する。 On the other hand, when the frame number n updated in step S209 described above exceeds the total number A of images in the image group PG, the
なお、制御部１５は、上述したステップＳ２０５において、この処理対象の連続画像群である画像数Ｎの連続画像群内に出血フラグなしと判断した場合（ステップＳ２０５，Ｎｏ）、ステップＳ２０６〜Ｓ２０８の処理手順を行わずにステップＳ２０９に進む。この場合、表示制御部１５ｂは、上述したステップＳ２０４において、この画像数Ｎの連続画像群の中から出血フラグを検出していない。すなわち、この画像数Ｎの連続画像群には、出血画像が含まれない。表示制御部１５ｂは、この画像数Ｎの連続画像群に出血画像が含まれない場合、この画像数Ｎの連続画像群を代表するタイムバー１１０の単位画素に対応するマーク表示部１２０内の時間位置に、病変マークを表示させない。 If the
つぎに、被検体１内の画像群ＰＧに含まれる出血画像の時間位置を示す病変マークＭ１〜Ｍ５（図３，４参照）を例示して、１以上の出血画像を含む画像群ＰＧ内の連続画像群毎に出血画像数ｘに応じた表示色をもつ病変マークを表示する制御を行う表示制御部１５ｂの動作を具体的に説明する。図７は、出血画像数ｘに応じた表示色をもつ病変マークを表示する制御を行う表示制御部１５ｂの動作を具体的に説明するための模式図である。 Next, the lesion marks M1 to M5 (see FIGS. 3 and 4) indicating the time positions of the bleeding images included in the image group PG in the subject 1 are exemplified, and the images in the image group PG including one or more bleeding images are illustrated. An operation of the
主表示領域１００に表示される被検体１内の画像群ＰＧは、例えば６万フレームの画像を含む画像群（すなわち全画像数Ａが６万フレームである画像群）であり、複数の出血画像を含む。ここで、タイムバー１１０の横サイズＬ（すなわちタイムバー１１０を形成する時間軸方向の画素数）が１０００画素である場合、表示制御部１５ｂは、画像群ＰＧの全画像数Ａ（＝６万フレーム）をタイムバー１１０の横サイズＬ（＝１０００画素）によって除算し、このタイムバー１１０の単位画素当りの画像数Ｎ（＝６０フレーム）を算出する。 The image group PG in the subject 1 displayed in the
その後、表示制御部１５ｂは、かかる単位画素当りの画像数Ｎの画像が連続する画像群ＰＧ内の連続画像群を順次決定し、かかる画像数Ｎの連続画像群毎に出血画像数ｘを計数する。そして、表示制御部１５ｂは、１以上の出血画像を含む画像数Ｎの連続画像群毎に、出血画像数ｘに応じた表示色をもつ病変マークを表示する制御を行う。 Thereafter, the
具体的には図７に示すように、表示制御部１５ｂは、単位画素当りの画像数Ｎ（＝６０フレーム）の画像が連続する６０フレームの連続画像群Ｇｒ１を画像群ＰＧの中から決定する。なお、この連続画像群Ｇｒ１は、タイムバー１１０の単位画素１１２ａによって代表される。すなわち、この連続画像群Ｇｒ１の時間位置は、この単位画素１１２ａに対応する。 Specifically, as shown in FIG. 7, the
表示制御部１５ｂは、この連続画像群Ｇｒ１に対して出血フラグの検索処理を行い、この出血フラグの検索結果をもとに連続画像群Ｇｒ１の出血画像数ｘを計数する。例えば、この連続画像群Ｇｒ１に１０フレームの出血画像が含まれる場合、表示制御部１５ｂは、この連続画像群Ｇｒ１の中から１０個の出血フラグを検出し、この出血フラグの検出数（＝１０）を連続画像群Ｇｒ１の出血画像数ｘとして計数する。このようにして、表示制御部１５ｂは、この連続画像群Ｇｒ１の出血画像数ｘ＝１０を得る。 The
この連続画像群Ｇｒ１に１０フレームの出血画像が含まれる場合、表示制御部１５ｂは、この連続画像群Ｇｒ１の出血画像数ｘ＝１０に応じた病変マークの表示色を設定する。具体的には、表示制御部１５ｂは、上述した式（１）〜（３）に基づいて、出血画像数ｘ＝１０に応じた色要素（Ｒ値＝８４、Ｇ値＝０、Ｂ値＝０）を算出し、得られた色要素によって形成される病変マークの表示色を設定する。 When the continuous image group Gr1 includes 10 frames of bleeding images, the
表示制御部１５ｂは、このように設定した表示色（Ｒ値＝８４、Ｇ値＝０、Ｂ値＝０）をもつ病変マークＭ１を単位画素１１２ａに対応するマーク表示部１２０内の時間位置に表示する制御を行う。かかる表示制御部１５ｂの制御に基づいて、マーク表示部１２０は、単位画素１１２ａに対応する時間位置に病変マークＭ１を表示する。 The
その後、表示制御部１５ｂは、上述した連続画像群Ｇｒ１の場合と略同様に、タイムバー１１０の単位画素当りの画像数Ｎの画像が連続する画像群ＰＧ内の連続画像群Ｇｒ２〜Ｇｒ５を順次決定し、決定した連続画像群Ｇｒ２〜Ｇｒ５の各出血画像数ｘをそれぞれ計数する。そして、表示制御部１５ｂは、上述した病変マークＭ１の場合と略同様に、かかる連続画像群Ｇｒ２〜Ｇｒ５の各出血画像数ｘに応じた各表示色をそれぞれもつ病変マークＭ２〜Ｍ５を表示する制御を行う。 Thereafter, the
具体的には、連続画像群Ｇｒ２〜Ｇｒ５は、上述した画像数Ｎ＝６０フレームの画像が連続する画像群ＰＧ内の６０フレームの連続画像群であり、１以上の出血画像をそれぞれ含む。また、連続画像群Ｇｒ２〜Ｇｒ５は、上述した連続画像群Ｇｒ１の後に順次連続する。すなわち、連続画像群Ｇｒ２は連続画像群Ｇｒ１に後続し、連続画像群Ｇｒ３は連続画像群Ｇｒ２に後続し、連続画像群Ｇｒ４は連続画像群Ｇｒ３に後続し、連続画像群Ｇｒ５は連続画像群Ｇｒ４に後続する。このような連続画像群Ｇｒ２〜Ｇｒ５は、タイムバー１１０の単位画素１１２ｂ〜１１２ｅにそれぞれ代表される。すなわち、かかるタイムバー１１０の単位画素１１２ｂ〜１１２ｅは、連続画像群Ｇｒ２〜Ｇｒ５の各時間位置にそれぞれ対応する。 Specifically, the continuous image groups Gr2 to Gr5 are continuous image groups of 60 frames in the image group PG in which the above-mentioned image number N = 60 frames are continuous, and each include one or more bleeding images. Further, the continuous image groups Gr2 to Gr5 are sequentially continued after the above-described continuous image group Gr1. That is, the continuous image group Gr2 follows the continuous image group Gr1, the continuous image group Gr3 follows the continuous image group Gr2, the continuous image group Gr4 follows the continuous image group Gr3, and the continuous image group Gr5 is the continuous image group Gr4. Followed by. Such continuous image groups Gr2 to Gr5 are represented by
また、表示制御部１５ｂは、連続画像群Ｇｒ２〜Ｇｒ５内の各出血フラグの検出数を順次計数し、連続画像群Ｇｒ２の出血画像数ｘ＝２５、連続画像群Ｇｒ３の出血画像数ｘ＝５０、連続画像群Ｇｒ４の出血画像数ｘ＝１５、および連続画像群Ｇｒ５の出血画像数ｘ＝５を順次取得する。このような表示制御部１５ｂは、上述した式（１）〜（３）に基づいて、連続画像群Ｇｒ２の出血画像数ｘ＝２５に応じた病変マークＭ２の表示色（Ｒ値＝１１４、Ｇ値＝０、Ｂ値＝０）と、連続画像群Ｇｒ３の出血画像数ｘ＝５０に応じた病変マークＭ３の表示色（Ｒ値＝１６４、Ｇ値＝０、Ｂ値＝０）と、連続画像群Ｇｒ４の出血画像数ｘ＝１５に応じた病変マークＭ４の表示色（Ｒ値＝９４、Ｇ値＝０、Ｂ値＝０）と、連続画像群Ｇｒ５の出血画像数ｘ＝５に応じた病変マークＭ５の表示色（Ｒ値＝７４、Ｇ値＝０、Ｂ値＝０）とを順次設定する。 Further, the
表示制御部１５ｂは、かかる出血画像数ｘに応じた表示色をもつ病変マークＭ２〜Ｍ５を単位画素１１２ｂ〜１１２ｅにそれぞれ対応するマーク表示部１２０内の各時間位置に順次表示する制御を行う。かかる表示制御部１５ｂの制御に基づいて、マーク表示部１２０は、単位画素１１２ｂ〜１１２ｅにそれぞれ対応する各時間位置に病変マークＭ２〜Ｍ５を順次表示する。 The
ここで、かかる表示制御部１５ｂの制御に基づいて表示される病変マークＭ１〜Ｍ５は、連続画像群Ｇｒ１〜Ｇｒ５のそれぞれに含まれる各出血画像群をそれぞれ代表し、タイムバー１１０の単位画素１１２ａ〜１１２ｅに対応するマーク表示部１２０内の各画素列によってそれぞれ形成される。また、病変マークＭ１は、連続画像群Ｇｒ１の出血画像数ｘ＝１０に応じた表示色（Ｒ値＝８４、Ｇ値＝０、Ｂ値＝０）を有し、病変マークＭ２は、連続画像群Ｇｒ２の出血画像数ｘ＝２５に応じた表示色（Ｒ値＝１１４、Ｇ値＝０、Ｂ値＝０）を有し、病変マークＭ３は、連続画像群Ｇｒ３の出血画像数ｘ＝５０に応じた表示色（Ｒ値＝１６４、Ｇ値＝０、Ｂ値＝０）を有する。病変マークＭ４は、連続画像群Ｇｒ４の出血画像数ｘ＝１５に応じた表示色（Ｒ値＝９４、Ｇ値＝０、Ｂ値＝０）を有し、病変マークＭ５は、連続画像群Ｇｒ５の出血画像数ｘ＝５に応じた表示色（Ｒ値＝７４、Ｇ値＝０、Ｂ値＝０）を有する。 Here, the lesion marks M1 to M5 displayed based on the control of the
かかる病変マークＭ１〜Ｍ５の各表示色は、出血画像の示す出血部位に対応する赤色（すなわち出血部位を連想し易い色）であり、上述した連続画像群Ｇｒ１〜Ｇｒ５の各出血画像数ｘの増大に伴って濃くなる。具体的には、出血画像数ｘ＝５０の出血画像を代表する病変マークＭ３の表示色は、５０フレーム未満の出血画像を代表する病変マークＭ１，Ｍ２，Ｍ４，Ｍ５に比して濃い赤色である。出血画像数ｘ＝２５の出血画像を代表する病変マークＭ２の表示色は、２５フレーム未満の出血画像を代表する病変マークＭ１，Ｍ４，Ｍ５に比して濃い赤色である。出血画像数ｘ＝１５の出血画像を代表する病変マークＭ４の表示色は、１５フレーム未満の出血画像を代表する病変マークＭ１，Ｍ５に比して濃い赤色である。出血画像数ｘ＝１０の出血画像を代表する病変マークＭ１の表示色は、１０フレーム未満の出血画像を代表する病変マークＭ５に比して濃い赤色である。 Each display color of the lesion marks M1 to M5 is red corresponding to the bleeding site indicated by the bleeding image (that is, a color that easily associates the bleeding site), and the number x of each bleeding image in the continuous image group Gr1 to Gr5 described above. It becomes darker as it increases. Specifically, the display color of the lesion mark M3 representing the bleeding image having the number of bleeding images x = 50 is darker red than the lesion marks M1, M2, M4, and M5 representing the bleeding image of less than 50 frames. is there. The display color of the lesion mark M2 representing the bleeding image with the number of bleeding images x = 25 is dark red compared to the lesion marks M1, M4, and M5 representing the bleeding image of less than 25 frames. The display color of the lesion mark M4 representing the bleeding image having the number of bleeding images x = 15 is dark red compared to the lesion marks M1 and M5 representing the bleeding image of less than 15 frames. The display color of the lesion mark M1 representing the bleeding image with the number of bleeding images x = 10 is dark red compared to the lesion mark M5 representing the bleeding image of less than 10 frames.
このような病変マークＭ１〜Ｍ５は、連続画像群Ｇｒ１〜Ｇｒ５のそれぞれに含まれる出血画像の各時間位置をタイムバー１１０に沿って示すとともに、各表示色（具体的には赤色）の濃さによって、連続画像群Ｇｒ１〜Ｇｒ５の各出血画像数の分布をタイムバー１１０に沿って示すことができる。この場合、病変マークＭ１〜Ｍ５は、各病変マーク間での表示色の濃さの違いによって、連続画像群Ｇｒ１〜Ｇｒ５間で比較される出血画像数の多少を示すことができる。 Such lesion marks M1 to M5 indicate the time positions of the bleeding images included in each of the continuous image groups Gr1 to Gr5 along the
医者または看護師等のユーザは、タイムバー１１０に沿って表示された病変マークＭ１〜Ｍ５の表示位置によって、画像群ＰＧの全体的な時間位置内の何れの時間位置に出血画像が分布しているかを理解できる。これと同時に、ユーザは、かかる病変マークＭ１〜Ｍ５の表示色によって、画像群ＰＧの全体的な時間位置における出血画像数の分布を容易に理解できるとともに、かかる出血画像の時間位置の間で比較される出血画像数の多少を容易に理解できる。 A user such as a doctor or a nurse distributes a bleeding image at any time position in the overall time position of the image group PG depending on the display positions of the lesion marks M1 to M5 displayed along the
なお、上述した表示制御部１５ｂは、図３に示した表示操作アイコン群１３０の操作によって入力される表示指示情報をもとに、主表示領域１００に画像群ＰＧ内の画像Ｐn（フレーム番号ｎ＝１，２，３，…）を表示する制御を行う。具体的には、入力部１１は、上述した表示操作アイコン群１３０のうちの所望のアイコンをクリック操作することによって、かかる所望のアイコンに対応する表示指示情報を制御部１５に入力する。表示制御部１５ｂは、かかる入力部１１によって入力された表示指示情報に基づいて、画像群ＰＧ内の画像Ｐnを主表示領域１００に表示する制御を行う。Note that the
例えば、表示制御部１５ｂは、再生アイコン１３１のクリック操作が行われた場合、主表示領域１００に被検体１内の画像Ｐnを時系列の順方向に沿って順次表示させ、コマ再生アイコン１３２のクリック操作が行われた場合、その都度、主表示領域１００に被検体１内の画像Ｐnを時系列の順方向に沿って１フレームずつ表示させる。また、表示制御部１５ｂは、逆再生アイコン１３４のクリック操作が行われた場合、主表示領域１００に被検体１内の画像Ｐnを時系列の逆方向に沿って順次表示させ、逆コマ再生アイコン１３５のクリック操作が行われた場合、その都度、主表示領域１００に被検体１内の画像Ｐnを時系列の逆方向に沿って１フレームずつ表示させる。For example, when the reproduction icon 131 is clicked, the
一方、表示制御部１５ｂは、頭出しアイコン１３３のクリック操作が行われた場合、被検体１内の画像群ＰＧのうちの最後に撮像された画像を主表示領域１００に表示させる。また、表示制御部１５ｂは、逆頭出しアイコン１３６のクリック操作が行われた場合、被検体１内の画像群ＰＧのうちの最初に撮像された画像を主表示領域１００に表示させる。 On the other hand, when the cue icon 133 is clicked, the
以上、説明したように、本発明の実施の形態１では、時系列に沿って臓器内部を撮像した被検体内の画像群に含まれる１以上の出血画像を検出し、この被検体内の画像群の全体的な時間位置を示すタイムバーを形成する時間軸方向の画素数をこの被検体内の画像群の全画像数によって除算して、このタイムバーの単位画素当りの画像数を算出し、この被検体内の画像群内においてこの単位画素当りの画像数の画像が連続する連続画像群毎に出血画像数を計数し、１以上の出血画像を含む連続画像群毎に、連続画像群内の出血画像の時間位置を示す病変マークをこの連続画像群の出血画像数に応じた表示色（例えば出血画像数に応じて異なる濃さの表示色）で表示するように構成した。このため、かかるタイムバーに沿って表示された１以上の病変マークの表示位置によって、被検体内の画像群の全体的な時間位置内における出血画像の時間位置を示すことができるとともに、かかる１以上の病変マークの表示色によって、この全体的な時間位置内における出血画像数の分布を示すことができる。この結果、時系列に沿って撮像された臓器内部の画像群に含まれる出血画像等の病変画像の時間位置を理解できるとともに、臓器内部の画像群の全体的な時間位置における病変画像数の分布を容易に理解できる画像表示装置を実現することができる。 As described above, in the first embodiment of the present invention, one or more bleeding images included in an image group in a subject obtained by imaging the inside of an organ in time series are detected, and the image in the subject is detected. Divide the number of pixels in the time axis direction to form the time bar indicating the overall time position of the group by the total number of images in the image group in the subject to calculate the number of images per unit pixel of this time bar. The number of bleeding images is counted for each continuous image group in which the number of images per unit pixel is continuous in the image group in the subject, and the continuous image group is included for each continuous image group including one or more bleeding images. The lesion mark indicating the time position of the bleeding image is displayed in a display color corresponding to the number of bleeding images in the continuous image group (for example, a display color having a different density depending on the number of bleeding images). For this reason, the time position of the bleeding image within the overall time position of the image group in the subject can be indicated by the display position of one or more lesion marks displayed along the time bar. The distribution of the number of bleeding images within this overall time position can be indicated by the display color of the lesion mark. As a result, the time position of a lesion image such as a bleeding image included in an image group inside the organ imaged in time series can be understood, and the distribution of the number of lesion images at the entire time position of the image group inside the organ An image display device that can easily understand the above can be realized.
この実施の形態１にかかる画像表示装置を用いることによって、ユーザは、被検体内の画像群に含まれる１以上の病変画像の時間位置を理解でき、かかる時間位置をもとに、病変画像が撮像された被検体内の臓器を容易に推測できる。これに加えて、ユーザは、被検体内の画像群の全体的な時間位置における病変画像数の分布を容易に理解でき、この被検体内の画像群に含まれる病変画像の実際の画像数に近似する病変画像数を容易に推測することができる。 By using the image display apparatus according to the first embodiment, the user can understand the time positions of one or more lesion images included in the image group in the subject, and the lesion images are obtained based on the time positions. The organ in the imaged subject can be easily estimated. In addition, the user can easily understand the distribution of the number of lesion images in the entire time position of the image group in the subject, and the actual number of lesion images included in the image group in the subject. The number of approximate lesion images can be easily estimated.
（実施の形態２）
つぎに、本発明の実施の形態２について説明する。上述した実施の形態１では、タイムバー１１０の単位画素当りの画像数Ｎの画像が連続する連続画像群毎に計数した出血画像数ｘに応じて病変マークの表示色を変化させていたが、この実施の形態２では、かかる出血画像数ｘに応じて病変マークの表示サイズを変化させている。(Embodiment 2)
Next, a second embodiment of the present invention will be described. In Embodiment 1 described above, the display color of the lesion mark is changed according to the number x of bleeding images counted for each continuous image group in which the number N of images per unit pixel of the
図８は、本発明の実施の形態２にかかる画像表示装置の一構成例を模式的に示すブロック図である。図８に示すように、この実施の形態２にかかる画像表示装置２０は、上述した実施の形態１にかかる画像表示装置４の制御部１５に代えて制御部２５を有する。かかる画像表示装置２０において、表示部１２のマーク表示部１２０は、画像群ＰＧ内の画像数Ｎの連続画像群毎に計数された出血画像数ｘに応じて表示色を変化させた病変マークに代えて、かかる出血画像数ｘに応じて表示サイズを変化させた病変マークを表示する。また、本発明の実施の形態２にかかる被検体内情報取得システムは、上述した実施の形態１にかかる被検体内情報取得システム（図１参照）の画像表示装置４に代えて画像表示装置２０を有する。その他の構成は実施の形態１と同じであり、同一構成部分には同一符号を付している。 FIG. 8 is a block diagram schematically illustrating a configuration example of an image display apparatus according to the second embodiment of the present invention. As illustrated in FIG. 8, the
制御部２５は、１以上の出血画像を含む画像群ＰＧ内の画像数Ｎの連続画像群毎に出血画像数ｘに応じた表示サイズの病変マークを表示する制御を行うマーク表示制御機能以外、上述した実施の形態１にかかる画像表示装置４の制御部１５と同様の機能を有する。このような制御部２５は、実施の形態１にかかる画像表示装置４の制御部１５と同様に画像検出部１５ａを有し、上述した表示制御部１５ｂに代えて表示制御部２５ｂを有する。 In addition to the mark display control function, the
表示制御部２５ｂは、被検体１内の画像群ＰＧに含まれる１以上の病変画像（例えば出血画像）の時間位置を示す病変マークを表示部１２のマーク表示部１２０に表示する制御を行う。具体的には、表示制御部２５ｂは、上述した実施の形態１の表示制御部１５ｂと同様に、タイムバー１１０の単位画素当りの画像数Ｎを算出し、かかる画像数Ｎの画像が連続する画像群ＰＧ内の連続画像群毎に出血画像数ｘを計数する。表示制御部２５ｂは、かかる画像数Ｎの連続画像群毎に計数した出血画像数ｘが１以上である場合、すなわち、かかる画像数Ｎの連続画像群に１以上の出血画像が含まれる場合、その都度、この１以上の出血画像を含む連続画像群の出血画像数ｘに応じた表示サイズをもつ病変マークをマーク表示部１２０に表示させる。この場合、表示制御部２５ｂは、出血画像の示す出血部位に対応する赤色系（出血部位を連想し易い色）を病変マークの表示色に設定し、この赤色系の表示色をもつ病変マークの表示サイズを出血画像数ｘの増大に伴って大きくする。 The
なお、表示制御部２５ｂは、このように出血画像数ｘに応じて表示サイズを変化させた病変マークをマーク表示部１２０に表示させるマーク表示制御機能以外、上述した実施の形態１の表示制御部１５ｂと同様の機能を有する。 The
つぎに、被検体１の画像群ＰＧに含まれる病変画像が出血画像である場合を例示して、本発明の実施の形態２にかかる画像表示装置２０の表示部１２の表示内容を具体的に説明する。図９は、実施の形態２にかかる画像表示装置２０の表示部１２の表示内容を例示する模式図である。 Next, the case where the lesion image included in the image group PG of the subject 1 is a bleeding image is exemplified, and the display content of the display unit 12 of the
図９に示すように、この画像表示装置２０の表示部１２に表示されるウィンドウＷにおいて、マーク表示部１２０は、画像数Ｎの連続画像群の出血画像数ｘに応じた表示色をもつ１以上の病変マーク（例えば上述した病変マーク群１２０ａ，１２０ｂ）に代えて、かかる出血画像数ｘに応じた表示サイズをもつ１以上の病変マークを含む病変マーク群２２０ａ，２２０ｂを表示する。なお、かかる病変マーク群２２０ａ，２２０ｂを表示するマーク表示部１２０は、上述した実施の形態１の場合と同様に、時間軸方向の横サイズＬ［画素］と時間軸方向に対して垂直方向の縦サイズＴ［画素］とによって規定される矩形領域内に格子状に配列された（Ｌ×Ｔ）画素の画素群によって形成される。かかるマーク表示部１２０を含むウィンドウＷの他の表示内容は、上述した実施の形態１の場合と同じである。 As shown in FIG. 9, in the window W displayed on the display unit 12 of the
病変マーク群２２０ａ，２２０ｂは、タイムバー１１０の単位画素に対応して表示される病変マークをそれぞれ複数含むものである。かかる病変マーク群２２０ａ，２２０ｂに含まれる複数の病変マークのそれぞれは、マーク表示部１２０内の縦方向の画素列（すなわちタイムバー１１０の時間軸に直交する方向の画素列）に含まれる１以上の画素によって形成され、画像群ＰＧ内の画像数Ｎの連続画像群毎に表示制御部２５ｂが計数した出血画像数ｘに応じた表示サイズをもつ。 The
つぎに、上述したマーク表示部１２０内の病変マーク群２２０ａを例示し、表示制御部２５ｂの制御に基づいてマーク表示部１２０が表示する病変マークを詳細に説明する。図１０は、実施の形態２にかかる画像表示装置２０の表示制御部２５ｂがマーク表示部１２０に表示させる病変マークの一具体例を示す模式図である。なお、図１０には、マーク表示部１２０によって表示された病変マーク群２２０ａの拡大図が示される。 Next, the
図１０に示すように、病変マーク群２２０ａは、例えば、タイムバー１１０を形成する時間軸方向の画素列に沿って表示された５つの病変マークＭ６〜Ｍ１０を含むものである。病変マークＭ６〜Ｍ１０は、タイムバー１１０の単位画素１１２ａ〜１１２ｅのそれぞれに対応して表示される。このような病変マークＭ６〜Ｍ１０は、かかる単位画素１１２ａ〜１１２ｅのそれぞれに代表される画像群ＰＧ内の画像数Ｎの各連続画像群にそれぞれ含まれる１以上の出血画像の時間位置をそれぞれ示す。 As shown in FIG. 10, the
具体的には、病変マークＭ６〜Ｍ１０は、時間軸方向の垂直方向に一次元配列されたマーク表示部１２０内の画素群（すなわちタイムバー１１０の時間軸に直交する方向の画素列）に含まれる１以上の画素によってそれぞれ形成される。この場合、かかる病変マークＭ６を形成する１以上の画素は、タイムバー１１０の単位画素１１２ａに対応してマーク表示部１２０の一底辺から時間軸方向の垂直方向（すなわちマーク表示部１２０の縦方向）に配列される。これと同様に、かかる病変マークＭ７〜Ｍ１０をそれぞれ形成する１以上の各画素は、タイムバー１１０の単位画素１１２ｂ〜１１２ｅにそれぞれ対応してマーク表示部１２０の一底辺から時間軸方向の垂直方向に配列される。 Specifically, the lesion marks M6 to M10 are included in a pixel group in the
このような病変マークＭ６は、タイムバー１１０の単位画素１１２ａによって代表される画像群ＰＧ内の連続画像群（上述した画像数Ｎの連続画像群）に含まれる１以上の出血画像を代表するとともに、かかる単位画素１１２ａに代表される連続画像群内の出血画像の時間位置を一括して示す。これと同様に、病変マークＭ７〜Ｍ１０は、タイムバー１１０の単位画素１１２ｂ〜１１２ｅのそれぞれによって代表される画像数Ｎの各連続画像群内の１以上の出血画像をそれぞれ代表するとともに、かかる単位画素１１２ｂ〜１１２ｅのそれぞれに代表される各連続画像群内の出血画像の時間位置をそれぞれ一括して示す。 Such a lesion mark M6 represents one or more bleeding images included in the continuous image group (continuous image group of the above-described number N of images) in the image group PG represented by the
また、このような病変マークＭ６〜Ｍ１０の表示サイズは、タイムバー１１０の単位画素１１２ａ〜１１２ｅのそれぞれによって代表される画像数Ｎの各連続画像群内の出血画像数ｘに応じて異なる。具体的には、かかる病変マークＭ６〜Ｍ１０の各表示サイズは、単位画素１１２ａ〜１１２ｅがそれぞれ代表する画像数Ｎの各連続画像群内の出血画像数ｘの増大に伴って大きくなり、かかる出血画像数ｘの減少に伴って小さくなる。すなわち、タイムバー１１０の時間軸に直交する病変マークＭ６〜Ｍ１０の各画素数は、単位画素１１２ａ〜１１２ｅがそれぞれ代表する画像数Ｎの各連続画像群内の出血画像数ｘの増大に伴って増大し、かかる出血画像数ｘの減少に伴って減少する。この場合、かかる病変マークＭ６〜Ｍ１０の各画像数の上限値は、マーク表示部１２０の縦サイズＴ［画素］と同値である。 The display sizes of such lesion marks M6 to M10 differ according to the number x of bleeding images in each continuous image group of the number N of images represented by the
このような病変マークＭ６〜Ｍ１０は、１以上の出血画像を含む画像群ＰＧ内の画像数Ｎの連続画像群毎に出血画像の時間位置を示すとともに、その表示サイズ（縦サイズＴを上限値として変化する病変マークの画素数）によって、かかる画像数Ｎの連続画像群毎に出血画像数の分布を示す。以上のことは、上述した病変マーク群２２０ｂについても同様である。 Such lesion marks M6 to M10 indicate the time position of the bleeding image for each of the N consecutive image groups in the image group PG including one or more bleeding images, and display the size (vertical size T as the upper limit value). Distribution of the number of bleeding images for each continuous image group of the number N of images. The same applies to the
なお、上述したように出血画像数ｘに応じて表示サイズが変化する病変マーク（例えば病変マークＭ６〜Ｍ１０）の表示色は、所望の色であってもよいが、出血画像の示す出血部位に対応する赤色系であることが望ましい。何故ならば、かかる病変マークの表示色を赤色系にすることによって、出血画像の示す出血部位を連想し易くなるからである。 As described above, the display color of a lesion mark (for example, lesion marks M6 to M10) whose display size changes in accordance with the number x of bleeding images may be a desired color, but the bleeding color indicated by the bleeding image The corresponding red color is desirable. This is because by making the display color of the lesion mark red, it is easier to associate the bleeding site indicated by the bleeding image.
また、このような病変マークを表示するマーク表示部１２０の背景（すなわち横サイズＬと縦サイズＴとによって規定される矩形領域）の明度は、病変マークとウィンドウＷの背景との中間近傍の値であることが望ましく、かかるマーク表示部１２０の背景色は、病変マークに対して補色であることが望ましい。これによって、かかるマーク表示部１２０の背景と病変マークとの境界を明確化することができ、この結果、マーク表示部１２０が医師または看護師等のユーザに視認し易い態様の病変マークを表示できるからである。 Further, the brightness of the background of the
つぎに、被検体１内の画像群ＰＧに病変画像の一例である出血画像が含まれる場合を例示して、かかる画像群ＰＧ内の出血画像の時間位置を示す病変マークを表示する制御を行う制御部２５の動作を説明する。図１１は、出血画像の計数結果に応じた表示サイズをもつ病変マークを表示する制御を行う制御部２５の処理手順の一例を示すフローチャートである。 Next, a case where a bleeding image which is an example of a lesion image is included in the image group PG in the subject 1 is exemplified, and control is performed to display a lesion mark indicating the time position of the bleeding image in the image group PG. The operation of the
制御部２５は、上述したステップＳ２０１〜Ｓ２１０の処理手順（図６参照）と略同様の処理手順を行って、主表示領域１００に表示される被検体１内の画像群ＰＧに含まれる画像数Ｎの連続画像群毎に出血画像数ｘを計数し、かかる出血画像数ｘの計数結果に応じた表示サイズをもつ病変マークをマーク表示部１２０に表示させる。この場合、制御部２５は、上述したステップＳ２０７，Ｓ２０８の処理手順に代えて、処理対象の連続画像群である画像数Ｎの連続画像群の出血画像数ｘに応じた病変マークの表示サイズを設定し、この設定した表示サイズをもつ病変マークをマーク表示部１２０に表示させる。 The
具体的には図１１に示すように、表示制御部２５ｂは、上述したステップＳ２０１〜Ｓ２０４と同様に、タイムバー１１０の単位画素当りの画像数Ｎを算出し（ステップＳ３０２）、被検体１内の画像群ＰＧのフレーム番号ｎを初期化し（ステップＳ３０２）、この画像数Ｎの画像が連続する画像群ＰＧ内の連続画像群を処理対象の連続画像群に決定し（ステップＳ３０３）、この処理対象の連続画像群である画像数Ｎの連続画像群内の出血フラグを検索する（ステップＳ３０４）。 Specifically, as shown in FIG. 11, the
続いて、表示制御部２５ｂは、上述したステップＳ３０５，Ｓ３０６と同様に、この画像数Ｎの連続画像群における出血フラグの有無を判断し（ステップＳ３０５）、出血フラグありと判断した場合（ステップ３０５，Ｙｅｓ）、この画像数Ｎの連続画像群に含まれる出血画像を計数し（ステップＳ３０６）、この処理対象の画像群である画像数Ｎの連続画像群の出血画像数ｘを得る。 Subsequently, the
つぎに、表示制御部２５ｂは、ステップＳ３０６において得られた出血画像数ｘに対応して、この画像数Ｎの連続画像群に含まれる１以上の出血画像の時間位置を示す病変マークの表示サイズを設定する（ステップＳ３０７）。かかる表示制御部２５ｂは、この画像数Ｎの連続画像群内の出血画像数ｘを用いて、病変マークを形成する画素列の画素数を算出し、得られた画素数をこの病変マークの表示サイズに設定する。 Next, the
具体的には、表示制御部２５ｂは、例えば、この処理対象の連続画像群の画像数Ｎ、この画像数Ｎの連続画像群内の出血画像数ｘ、およびマーク表示部１２０の縦サイズＴを変数として含む次式（４）に基づいて、この画像数Ｎの連続画像群に含まれる１以上の出血画像の時間位置を示す病変マークの表示サイズＴx［画素］を算出する。この表示サイズＴxは、この病変マークを形成する画素列の画素数である。表示制御部２５ｂは、得られた表示サイズＴxをこの病変マークの表示サイズに設定する。
表示サイズＴx＝10＋（縦サイズＴ−10）×（出血画像数ｘ／画像数Ｎ）・・・（４）
Specifically, for example, the
Display size Tx = 10 + (vertical size T−10) × (number of bleeding images x / number of images N) (4)
ここで、この式（４）に基づいて算出された表示サイズＴx（すなわち病変マークの画素数）は、この画像数Ｎの連続画像群内の出血画像数ｘの増大に伴って増大し、この出血画像数ｘの減少に伴って減少する。表示制御部２５ｂは、かかる式（４）に基づいて病変マークの表示サイズを設定することによって、この画像数Ｎの連続画像群内の出血画像数ｘに応じてこの病変マークの表示サイズを変化させる。Here, the display size Tx (that is, the number of pixels of the lesion mark) calculated based on the equation (4) increases as the number of bleeding images x in the continuous image group of the number N of images increases. It decreases as the number of bleeding images x decreases. The
つぎに、表示制御部２５ｂは、表示部１２に対し、ステップＳ３０７において設定した表示サイズをもつ病変マークを表示する制御を行う（ステップＳ３０８）。具体的には、表示制御部２５ｂは、この画像数Ｎの連続画像群を代表するタイムバー１１０の単位画素に対応するマーク表示部１２０内の時間位置に、この画像数Ｎの連続画像群内の出血画像数ｘに応じた表示サイズＴxをもつ病変マークを表示する制御を行う。かかる表示制御部２５ｂの制御に基づいて、マーク表示部１２０は、この画像数Ｎの連続画像群を代表するタイムバー１１０の単位画素に対応する時間位置に、この表示サイズＴxの画素列によって形成される病変マークを表示する。Next, the
その後、表示制御部２５ｂは、上述したステップＳ２０９と同様に、主表示領域１００に表示される被検体１内の画像群ＰＧのフレーム番号ｎを更新する（ステップＳ３０９）。そして、表示制御部２５ｂは、上述したステップＳ２１０と同様に、この画像群ＰＧの全画像に対して処理完了したか否かを判断し（ステップＳ３１０）、この画像群ＰＧに含まれる画像の少なくとも一つは処理未完であると判断した場合（ステップＳ３１０，Ｎｏ）、上述したステップＳ３０３に戻り、このステップＳ３０３以降の処理手順を繰り返す。 Thereafter, the
一方、表示制御部２５ｂは、この画像群ＰＧの全画像に対して処理完了と判断した場合（ステップＳ３１０，Ｙｅｓ）、この画像群ＰＧに関する病変マーク表示処理を完了する。この状態において、マーク表示部１２０は、画像群ＰＧに含まれる画像数Ｎの各連続画像群のうちの１以上の出血画像を含む連続画像群毎に、出血画像数ｘに応じた表示サイズＴxをもつ病変マークを表示する。On the other hand, when the
なお、表示制御部２５ｂは、上述したステップＳ３０５において出血フラグなしと判断した場合（ステップＳ３０５，Ｎｏ）、ステップＳ３０６〜Ｓ３０８の処理手順を行わずにステップＳ３０９に進む。この場合、表示制御部２５ｂは、上述したステップＳ３０４において、この画像数Ｎの連続画像群の中から出血フラグを検出していない。すなわち、この画像数Ｎの連続画像群には、出血画像が含まれない。表示制御部２５ｂは、この画像数Ｎの連続画像群に出血画像が含まれない場合、この画像数Ｎの連続画像群を代表するタイムバー１１０の単位画素に対応するマーク表示部１２０内の時間位置に、病変マークを表示させない。 If the
つぎに、被検体１内の画像群ＰＧに含まれる出血画像の時間位置を示す病変マークＭ６〜Ｍ１０（図９，１０参照）を例示して、１以上の出血画像を含む画像群ＰＧ内の連続画像群毎に出血画像数ｘに応じた表示サイズをもつ病変マークを表示する制御を行う表示制御部２５ｂの動作を具体的に説明する。図１２は、出血画像数ｘに応じた表示サイズＴxをもつ病変マークを表示する制御を行う表示制御部２５ｂの動作を具体的に説明するための模式図である。Next, the lesion marks M6 to M10 (see FIGS. 9 and 10) indicating the time positions of the bleeding images included in the image group PG in the subject 1 are exemplified, and the images in the image group PG including one or more bleeding images are illustrated. An operation of the
主表示領域１００に表示される被検体１内の画像群ＰＧは、例えば６万フレームの画像を含む画像群（すなわち全画像数Ａが６万フレームである画像群）であり、複数の出血画像を含む。ここで、タイムバー１１０の横サイズＬ（すなわちタイムバー１１０を形成する時間軸方向の画素数）が１０００画素である場合、表示制御部２５ｂは、画像群ＰＧの全画像数Ａ（＝６万フレーム）をタイムバー１１０の横サイズＬ（＝１０００画素）によって除算し、このタイムバー１１０の単位画素当りの画像数Ｎ（＝６０フレーム）を算出する。なお、このタイムバー１１０の縦サイズＴ（すなわち病変マークの表示サイズの上限値）は、例えば１３０画素である。 The image group PG in the subject 1 displayed in the
その後、表示制御部２５ｂは、かかる単位画素当りの画像数Ｎの画像が連続する画像群ＰＧ内の連続画像群を順次決定し、かかる画像数Ｎの連続画像群毎に出血画像数ｘを計数する。そして、表示制御部２５ｂは、１以上の出血画像を含む画像数Ｎの連続画像群毎に、出血画像数ｘに応じた表示サイズＴxをもつ病変マークを表示する制御を行う。Thereafter, the
具体的には図１２に示すように、表示制御部２５ｂは、単位画素当りの画像数Ｎ（＝６０フレーム）の画像が連続する６０フレームの連続画像群Ｇｒ１を画像群ＰＧの中から決定する。なお、この連続画像群Ｇｒ１は、上述した実施の形態１の場合と同様に、タイムバー１１０の単位画素１１２ａによって代表される。 Specifically, as shown in FIG. 12, the
表示制御部２５ｂは、上述した実施の形態１の場合と同様に、この連続画像群Ｇｒ１の中から１０個の出血フラグを検出し、この出血フラグの検出数（＝１０）を連続画像群Ｇｒ１の出血画像数ｘとして計数する。このようにして、表示制御部２５ｂは、この連続画像群Ｇｒ１の出血画像数ｘ＝１０を得る。 As in the case of the first embodiment described above, the
この連続画像群Ｇｒ１に１０フレームの出血画像が含まれる場合、表示制御部２５ｂは、この連続画像群Ｇｒ１の出血画像数ｘ＝１０に応じた病変マークの表示サイズを設定する。具体的には、表示制御部２５ｂは、上述した式（４）に基づいて、出血画像数ｘ＝１０に応じた表示サイズＴ10（＝３０画素）を算出し、この連続画像群Ｇｒ１内の出血画像の時間位置を示す病変マークの表示サイズとして、この得られた表示サイズＴ10を設定する。When the continuous image group Gr1 includes 10 frames of bleeding images, the
表示制御部２５ｂは、このように設定した表示サイズＴ10（＝３０画素）をもつ病変マークＭ６を単位画素１１２ａに対応するマーク表示部１２０内の時間位置に表示する制御を行う。かかる表示制御部２５ｂの制御に基づいて、マーク表示部１２０は、単位画素１１２ａに対応する時間位置に病変マークＭ６を表示する。The
その後、表示制御部２５ｂは、上述した実施の形態１の場合と同様に、タイムバー１１０の単位画素当りの画像数Ｎ（＝６０）の画像が連続する画像群ＰＧ内の連続画像群Ｇｒ２〜Ｇｒ５を順次決定し、決定した連続画像群Ｇｒ２〜Ｇｒ５の各出血画像数ｘをそれぞれ計数する。そして、表示制御部２５ｂは、上述した病変マークＭ６の場合と略同様に、かかる連続画像群Ｇｒ２〜Ｇｒ５の各出血画像数ｘに応じた各表示サイズＴxをそれぞれもつ病変マークＭ７〜Ｍ１０を表示する制御を行う。After that, the
なお、連続画像群Ｇｒ２〜Ｇｒ５は、上述した実施の形態１の場合と同様に、タイムバー１１０の単位画素１１２ｂ〜１１２ｅにそれぞれ代表される６０フレームの連続画像群であり、１以上の出血画像をそれぞれ含む。 Note that the continuous image groups Gr2 to Gr5 are 60 frames of continuous image groups represented by the
表示制御部２５ｂは、上述した実施の形態１の場合と同様に、連続画像群Ｇｒ２の出血画像数ｘ＝２５、連続画像群Ｇｒ３の出血画像数ｘ＝５０、連続画像群Ｇｒ４の出血画像数ｘ＝１５、および連続画像群Ｇｒ５の出血画像数ｘ＝５を順次取得する。このような表示制御部２５ｂは、上述した式（４）に基づいて、連続画像群Ｇｒ２の出血画像数ｘ＝２５に応じた病変マークＭ７の表示サイズＴ25（＝６０画素）と、連続画像群Ｇｒ３の出血画像数ｘ＝５０に応じた病変マークＭ８の表示サイズＴ50（＝１１０画素）と、連続画像群Ｇｒ４の出血画像数ｘ＝１５に応じた病変マークＭ９の表示サイズＴ15（＝４０画素）と、連続画像群Ｇｒ５の出血画像数ｘ＝５に応じた病変マークＭ１０の表示サイズＴ5（＝２０画素）とを順次設定する。As in the case of the first embodiment described above, the
表示制御部２５ｂは、かかる出血画像数ｘに応じた表示サイズＴxをもつ病変マークＭ７〜Ｍ１０を単位画素１１２ｂ〜１１２ｅにそれぞれ対応するマーク表示部１２０内の各時間位置に順次表示する制御を行う。かかる表示制御部２５ｂの制御に基づいて、マーク表示部１２０は、単位画素１１２ｂ〜１１２ｅにそれぞれ対応する各時間位置に病変マークＭ７〜Ｍ１０を順次表示する。The
ここで、かかる表示制御部２５ｂの制御に基づいて表示される病変マークＭ６〜Ｍ１０は、連続画像群Ｇｒ１〜Ｇｒ５のそれぞれに含まれる各出血画像群をそれぞれ代表する。また、表示サイズＴ10（＝３０画素）をもつ病変マークＭ６は、単位画素１１２ａに対応するマーク表示部１２０内の時間位置において、マーク表示部１２０の一底辺からマーク表示部１２０の縦方向に配列された３０画素の画素列によって形成される。表示サイズＴ25（＝６０画素）をもつ病変マークＭ７は、単位画素１１２ｂに対応するマーク表示部１２０内の時間位置において、マーク表示部１２０の一底辺からマーク表示部１２０の縦方向に配列された６０画素の画素列によって形成される。表示サイズＴ50（＝１１０画素）をもつ病変マークＭ８は、単位画素１１２ｃに対応するマーク表示部１２０内の時間位置において、マーク表示部１２０の一底辺からマーク表示部１２０の縦方向に配列された１１０画素の画素列によって形成される。表示サイズＴ15（＝４０画素）をもつ病変マークＭ９は、単位画素１１２ｄに対応するマーク表示部１２０内の時間位置において、マーク表示部１２０の一底辺からマーク表示部１２０の縦方向に配列された４０画素の画素列によって形成される。表示サイズＴ5（＝２０画素）をもつ病変マークＭ１０は、単位画素１１２ｅに対応するマーク表示部１２０内の時間位置において、マーク表示部１２０の一底辺からマーク表示部１２０の縦方向に配列された２０画素の画素列によって形成される。Here, the lesion marks M6 to M10 displayed based on the control of the
かかる病変マークＭ６〜Ｍ１０の各表示サイズＴxは、上述した連続画像群Ｇｒ１〜Ｇｒ５の各出血画像数ｘの増大に伴って増大する。具体的には、出血画像数ｘ＝５０の出血画像を代表する病変マークＭ８の表示サイズＴ50は、５０フレーム未満の出血画像を代表する病変マークＭ６，Ｍ７，Ｍ９，Ｍ１０に比して大きい。出血画像数ｘ＝２５の出血画像を代表する病変マークＭ７の表示サイズＴ25は、２５フレーム未満の出血画像を代表する病変マークＭ６，Ｍ９，Ｍ１０に比して大きい。出血画像数ｘ＝１５の出血画像を代表する病変マークＭ９の表示サイズＴ15は、１５フレーム未満の出血画像を代表する病変マークＭ６，Ｍ１０に比して大きい。出血画像数ｘ＝１０の出血画像を代表する病変マークＭ６の表示サイズＴ10は、１０フレーム未満の出血画像を代表する病変マークＭ１０に比して大きい。Each display size Tx of the lesion marks M6 to M10 increases as the number x of bleeding images in the continuous image groups Gr1 to Gr5 described above increases. Specifically, the display size T50 of the lesion mark M8 representing bleeding image bleeding image number x = 50 is larger than the lesion mark M6, M7, M9, M10 representing a bleeding image of less than 50 frames . The display size T25 of the lesion mark M7 representing the bleeding image having the number of bleeding images x = 25 is larger than the lesion marks M6, M9, and M10 representing the bleeding image of less than 25 frames. Display size T15 of the lesion mark M9 representing bleeding image bleeding image number x = 15 is larger than the lesion mark M6, M10 representing a bleeding image of less than 15 frames. Display size T10 lesions mark M6 representing bleeding image bleeding image number x = 10 is larger than the lesion mark M10 representing the bleeding image of less than 10 frames.
このような病変マークＭ６〜Ｍ１０は、連続画像群Ｇｒ１〜Ｇｒ５のそれぞれに含まれる出血画像の各時間位置をタイムバー１１０に沿って示すとともに、各表示サイズＴxによって、連続画像群Ｇｒ１〜Ｇｒ５の各出血画像数の分布をタイムバー１１０に沿って示すことができる。この場合、病変マークＭ６〜Ｍ１０は、各病変マーク間での表示サイズＴxの違いによって、連続画像群Ｇｒ１〜Ｇｒ５間で比較される出血画像数の多少を示すことができる。Such lesions mark M6~M10, along with indicating the respective time position of the bleeding images included in each of the successive image group Gr1~Gr5 along the
医者または看護師等のユーザは、タイムバー１１０に沿って表示された病変マークＭ６〜Ｍ１０の表示位置によって、画像群ＰＧの全体的な時間位置内の何れの時間位置に出血画像が分布しているかを理解できる。これと同時に、ユーザは、かかる病変マークＭ６〜Ｍ１０の表示サイズによって、画像群ＰＧの全体的な時間位置における出血画像数の分布を容易に理解できるとともに、かかる出血画像の時間位置の間で比較される出血画像数の多少を容易に理解できる。 A user such as a doctor or a nurse distributes a bleeding image at any time position in the overall time position of the image group PG depending on the display positions of the lesion marks M6 to M10 displayed along the
以上、説明したように、本発明の実施の形態２では、上述した病変マークの表示色に代えて、タイムバーの単位画素当りの画像数の画像が連続する連続画像群毎に計数した出血画像数に応じて病変マークの表示サイズを変化させ、かかる出血画像数に応じた表示サイズをもつ病変マークを表示するようにし、その他の構成を上述した実施の形態１と同様にした。このため、上述した実施の形態１の作用効果を享受するとともに、時系列に沿って撮像された臓器内部の画像群の全体的な時間位置内における病変画像数の分布を一層視認し易い表示態様で表示することができ、かかる病変画像数の分布をさらに容易に理解できる画像表示装置を実現することができる。 As described above, in the second embodiment of the present invention, instead of the lesion mark display color described above, the bleeding image counted for each continuous image group in which the number of images per unit pixel of the time bar is continuous. The display size of the lesion mark is changed according to the number, and the lesion mark having the display size according to the number of bleeding images is displayed, and other configurations are the same as those in the first embodiment. For this reason, while enjoying the operational effects of the first embodiment described above, a display mode that makes it easier to visually recognize the distribution of the number of lesion images within the entire time position of the internal image group imaged along the time series And an image display device that can more easily understand the distribution of the number of lesion images.
なお、本発明の実施の形態１では、上述した式（１）〜（３）に基づいて出血画像数ｘに応じた病変マークの表示色を設定していたが、かかる式（１）〜（３）は、出血画像数ｘに応じた病変マークの表示色を形成する各色要素（Ｒ値、Ｇ値、Ｂ値）の計算式の一例であり、本発明を限定するものではない。 In the first embodiment of the present invention, the display color of the lesion mark corresponding to the bleeding image number x is set based on the above-described equations (1) to (3). However, the equations (1) to ( 3) is an example of a calculation formula for each color element (R value, G value, B value) that forms the display color of the lesion mark corresponding to the number x of bleeding images, and does not limit the present invention.
具体的には、かかる病変マークの表示色を形成するＲ値の計算式は、上述した式（１）に限らず、出血画像数ｘに例示される病変画像数を変数として含み、かかる病変画像数に応じて０〜２５５の範囲内のＲ値が得られるものであればよい。この場合、かかるＲ値の計算式の各項の係数および定数は、所望の数値であってもよいが、病変画像数の変化に伴う赤色の濃さの変化が人間の視覚的にリニアな変化になるように設定されることが望ましい。 Specifically, the formula for calculating the R value that forms the display color of the lesion mark is not limited to the above-described equation (1), but includes the number of lesion images exemplified by the number x of bleeding images as a variable. Any R value in the range of 0 to 255 can be obtained depending on the number. In this case, the coefficient and constant of each term of the R value calculation formula may be any desired numerical value, but the change in the red color density due to the change in the number of lesion images is a human linear change. It is desirable to set so that
また、本発明の実施の形態１では、出血画像の示す出血部位に対応して病変マークの表示色を赤色（すなわち１≦Ｒ値≦２５５、Ｇ値＝０、Ｂ値＝０）に設定し、出血画像数ｘの変化に伴って病変マークの表示色（赤色）の濃さを変化させていたが、これに限らず、病変マークの表示色は、３つの色要素Ｒ、Ｇ、Ｂのうちの少なくとも２つを組み合わせて形成される色に設定し、出血画像数ｘに例示される病変画像数の変化に伴って、かかる病変マークの表示色の色相、明度、または彩度等の色情報を変化させてもよい。この場合、３つの色要素の値（Ｒ値、Ｇ値、Ｂ値）の少なくとも２つを１以上の数値に設定し、かかる少なくとも２つの色要素の値を病変画像数の変化に伴って１〜２５５の範囲内の数値にそれぞれ変化させればよい。 In the first embodiment of the present invention, the display color of the lesion mark is set to red (that is, 1 ≦ R value ≦ 255, G value = 0, B value = 0) corresponding to the bleeding site indicated by the bleeding image. The density of the lesion mark display color (red) is changed in accordance with the change in the number x of bleeding images. However, the display color of the lesion mark is not limited to this, and the display color of the lesion mark includes three color elements R, G, and B. A color formed by combining at least two of them, and a color such as hue, brightness, or saturation of the display color of the lesion mark as the number of lesion images exemplified in the number of bleeding images x changes Information may be changed. In this case, at least two of the three color element values (R value, G value, B value) are set to one or more numerical values, and the value of at least two color elements is set to 1 as the number of lesion images changes. What is necessary is just to change to the numerical value within the range of -255, respectively.
さらに、本発明の実施の形態１では、病変マークの表示色を形成する色要素の値（Ｒ値）を出血画像数ｘに対して線形変化させていたが、これに限らず、病変マークの表示色を形成する色要素の値（Ｒ値、Ｇ値、またはＢ値）を出血画像数ｘ等の病変画像数に対して非線形変化させてもよい。この場合、かかる病変マークの表示色を形成する色要素の値の算出式は、病変画像数を変数として含む多次元関数によって形成すればよい。また、３つの色要素Ｒ、Ｇ、Ｂのうちの少なくとも２つを組み合わせて形成される色を病変マークの表示色として設定する場合、Ｒ値、Ｇ値、Ｂ値の各計算式のうちの少なくとも２つは、病変画像数を変数として含む多次元関数によって形成すればよい。さらには、かかる多次元関数は、病変画像数の変化に伴う病変マークの表示色の変化（例えば色相、明度、彩度、色の濃さ等の変化）が人間の視覚的にリニアな変化になるように設定されることが望ましい。 Furthermore, in Embodiment 1 of the present invention, the value (R value) of the color element that forms the display color of the lesion mark is linearly changed with respect to the number x of bleeding images. The value (R value, G value, or B value) of the color element forming the display color may be nonlinearly changed with respect to the number of lesion images such as the number of bleeding images x. In this case, the color element value calculation formula for forming the display color of the lesion mark may be formed by a multidimensional function including the number of lesion images as a variable. Further, when a color formed by combining at least two of the three color elements R, G, and B is set as the display color of the lesion mark, At least two may be formed by a multidimensional function including the number of lesion images as a variable. Furthermore, such a multidimensional function is such that a change in the display color of a lesion mark (for example, a change in hue, brightness, saturation, color density, etc.) accompanying a change in the number of lesion images is a human linear change. It is desirable to set so that
また、本発明の実施の形態２では、上述した式（４）に基づいて出血画像数ｘに応じた病変マークの表示サイズＴxを設定していたが、かかる式（４）は、出血画像数ｘに応じた病変マークの表示サイズＴxを算出する計算式の一例であり、本発明を限定するものではない。In the second embodiment of the present invention, the lesion mark display size Tx corresponding to the number x of bleeding images is set based on the above-described equation (4). However, the equation (4) represents the bleeding image. It is an example of a calculation formula for calculating the display size Tx of the lesion mark according to the number x, and does not limit the present invention.
具体的には、かかる病変マークの表示サイズＴxの計算式は、上述した式（４）に限らず、出血画像数ｘに例示される病変画像数を変数として含み、かかる病変画像数に応じて０画素〜Ｔ画素（マーク表示部１２０の縦サイズＴに相当）の範囲内の画素数が得られるものであればよい。この場合、かかる表示サイズＴxの計算式の各項の係数および定数は、所望の数値であってもよいが、病変画像数の変化に伴う表示サイズＴxの変化が人間の視覚的にリニアな変化になるように設定されることが望ましい。Specifically, the calculation formula of the display size Tx of the lesion mark is not limited to the above-described formula (4), but includes the number of lesion images exemplified as the bleeding image number x as a variable, and depends on the number of lesion images. The number of pixels within the range of 0 pixel to T pixel (corresponding to the vertical size T of the mark display unit 120) may be obtained. In this case, the coefficient and constant of each term of the calculation formula for the display size Tx may be any desired numerical value, but the change in the display size Tx accompanying the change in the number of lesion images is visually linear for humans. It is desirable to set so as to be a change.
また、本発明の実施の形態２では、病変マークの表示サイズＴxを出血画像数ｘに対して線形変化させていたが、これに限らず、病変マークの表示サイズＴxを出血画像数ｘ等の病変画像数に対して非線形変化させてもよい。この場合、かかる病変マークの表示サイズＴxの算出式は、病変画像数を変数として含む多次元関数によって形成すればよい。さらには、かかる多次元関数は、病変画像数の変化に伴う病変マークの表示サイズＴxの変化が人間の視覚的にリニアな変化になるように設定されることが望ましい。In
さらに、本発明の実施の形態１，２では、病変画像の示す病変（すなわち病変画像の被写体に含まれる病変）として、出血部位を例示したが、これに限らず、かかる病変画像の示す病変は、出血部位の他に、褪色調部位、発赤部位、凝固血部位、糜爛部位、潰瘍部位等の体内に発生し得る各種病変であってもよい。また、かかる病変画像の時間位置を示す病変マークの表示色は、この病変画像の示す病変（出血部位、褪色調部位、発赤部位、凝固血部位、糜爛部位、潰瘍部位等）に対応する色であることが望ましい。具体的には、病変画像の示す病変が出血部位、発赤部位、または凝固血部位である場合、かかる病変画像の時間位置を示す病変マークの表示色は赤色系であることが望ましい。また、病変画像の示す病変が褪色調部位、糜爛部位、または潰瘍部位である場合、かかる病変画像の時間位置を示す病変マークの表示色は白色または灰色系であることが望ましい。 Further, in
また、本発明の実施の形態１，２では、携帯型記録媒体５から被検体１内の画像群ＰＧを取り込む際に、この画像群ＰＧ内の１以上の病変画像を検出していたが、これに限らず、かかる携帯型記録媒体５から取り込んだ画像群ＰＧを記憶部１４に保存し、その後、この記憶部１４内の画像群ＰＧに含まれる１以上の病変画像を検出してもよい。 In
１ 被検体
２ カプセル型内視鏡
３ 受信装置
３ａ〜３ｈ 受信アンテナ
４，２０ 画像表示装置
５ 携帯型記録媒体
１１ 入力部
１２ 表示部
１３ カードＩ／Ｆ
１４ 記憶部
１５，２５ 制御部
１５ａ 画像検出部
１５ｂ，２５ｂ 表示制御部
１００ 主表示領域
１１０ タイムバー
１１１ スライダ
１１２ａ〜１１２ｅ 単位画素
１２０ マーク表示部
１２０ａ，１２０ｂ，２２０ａ，２２０ｂ 病変マーク群
１３０ 表示操作アイコン群
１３１ 再生アイコン
１３２ コマ再生アイコン
１３３ 頭出しアイコン
１３４ 逆再生アイコン
１３５ 逆コマ再生アイコン
１３６ 逆頭出しアイコン
１４０ 副表示領域
１４１ スクロール操作部
１５０ Ｃｌｏｓｅアイコン
ＢＬ 出血部位
Ｇｒ１〜Ｇｒ５ 連続画像群
Ｋ カーソル
Ｍ１〜Ｍ１０ 病変マーク
ＰＧ 画像群
Ｐn 画像
Ｗ ウィンドウDESCRIPTION OF SYMBOLS 1
DESCRIPTION OF SYMBOLS 14 Memory |
Claims (6)
Translated fromJapanese前記画像群に含まれる病変画像を検出する画像検出手段と、
前記画像群の全体的な時間位置を示すタイムバーに沿って該タイムバー上に前記病変画像の時間位置を示す病変マークを表示するマーク表示手段と、
前記タイムバーを形成する時間軸方向の画素数と前記画像群の画像数とをもとに前記タイムバーの単位画素当りの画像数を算出し、該単位画素当りの画像数の画像が連続する前記画像群内の連続画像群毎に前記病変画像の病変画像数を計数し、１以上の前記病変画像を含む前記連続画像群毎に、前記病変画像数の計数結果に応じた表示態様をもつ前記病変マークを表示する制御を行う表示制御手段と、
を備えたことを特徴とする画像表示装置。In an image display device that displays an image group obtained by imaging the inside of a subject along a time series,
Image detecting means for detecting a lesion image included in the image group;
Mark display means for displaying a lesion mark indicating a time position of the lesion image on the time bar along a time bar indicating an overall time position of the image group;
The number of images per unit pixel of the time bar is calculated based on the number of pixels in the time axis direction forming the time bar and the number of images in the image group, and images having the number of images per unit pixel are continuous. The number of lesion images of the lesion image is counted for each successive image group in the image group, and each of the successive image groups including one or more lesion images has a display mode according to the count result of the number of lesion images. Display control means for performing control to display the lesion mark;
An image display device comprising:
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2006240384AJP4914680B2 (en) | 2006-09-05 | 2006-09-05 | Image display device |
| US11/888,871US8900124B2 (en) | 2006-08-03 | 2007-08-02 | Image display device |
| CN2007101431724ACN101116608B (en) | 2006-08-03 | 2007-08-03 | Image display device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2006240384AJP4914680B2 (en) | 2006-09-05 | 2006-09-05 | Image display device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2008061704A JP2008061704A (en) | 2008-03-21 |
| JP4914680B2true JP4914680B2 (en) | 2012-04-11 |
Family
ID=39284947
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2006240384AExpired - Fee RelatedJP4914680B2 (en) | 2006-08-03 | 2006-09-05 | Image display device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4914680B2 (en) |
Families Citing this family (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5379442B2 (en)* | 2008-10-14 | 2013-12-25 | オリンパスメディカルシステムズ株式会社 | Image display device |
| JP5818520B2 (en)* | 2011-06-06 | 2015-11-18 | 株式会社東芝 | Medical image processing system |
| CN102985012B (en)* | 2011-06-14 | 2015-08-05 | 株式会社东芝 | Medical image display apparatus and medical image displaying method |
| EP2600311A1 (en)* | 2011-11-30 | 2013-06-05 | Thomson Licensing | Method and apparatus for visualizing a data set |
| JP5911294B2 (en)* | 2011-12-22 | 2016-04-27 | 株式会社東芝 | Medical image processing system |
| JP6633383B2 (en)* | 2015-12-17 | 2020-01-22 | 株式会社Ａｚｅ | Image diagnosis support apparatus and control method thereof, program and storage medium |
| WO2017115442A1 (en)* | 2015-12-28 | 2017-07-06 | オリンパス株式会社 | Image processing apparatus, image processing method, and image processing program |
| JP6334584B2 (en)* | 2016-02-24 | 2018-05-30 | 株式会社東芝 | Display control apparatus, display control method, and program |
| WO2017199408A1 (en)* | 2016-05-19 | 2017-11-23 | オリンパス株式会社 | Image processing device, operation method for image processing device, and operation program for image processing device |
| WO2019039259A1 (en) | 2017-08-25 | 2019-02-28 | 富士フイルム株式会社 | Diagnosis assistance system, endoscope system, processor, and diagnosis assistance method |
| EP3682791B1 (en) | 2017-09-15 | 2023-12-20 | FUJIFILM Corporation | Medical image processing device |
| EP3795062A4 (en) | 2018-05-17 | 2021-06-16 | FUJIFILM Corporation | ENDOSCOPE DEVICE, ENDOSCOPE OPERATING PROCEDURE, AND PROGRAM |
| JP7130043B2 (en)* | 2018-08-23 | 2022-09-02 | 富士フイルム株式会社 | MEDICAL IMAGE PROCESSING APPARATUS, ENDOSCOPE SYSTEM, AND METHOD OF OPERATION OF MEDICAL IMAGE PROCESSING APPARATUS |
| WO2020066670A1 (en)* | 2018-09-27 | 2020-04-02 | Hoya株式会社 | Electronic endoscope system and data processing device |
| JP7648540B2 (en)* | 2019-12-26 | 2025-03-18 | 富士フイルム株式会社 | Medical image processing device, operation method, program, and recording medium |
| JP7658724B2 (en)* | 2020-06-29 | 2025-04-08 | キヤノンメディカルシステムズ株式会社 | Surgery support system and operation method of the support system |
| WO2023175916A1 (en)* | 2022-03-18 | 2023-09-21 | オリンパスメディカルシステムズ株式会社 | Medical assistance system and image display method |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH11328209A (en)* | 1998-05-18 | 1999-11-30 | Canon Inc | Image retrieval apparatus and method |
| JP4493386B2 (en)* | 2003-04-25 | 2010-06-30 | オリンパス株式会社 | Image display device, image display method, and image display program |
| JP4189811B2 (en)* | 2003-09-30 | 2008-12-03 | 日本電気株式会社 | Image detection apparatus, image detection method, and image detection program |
| ES2360701T3 (en)* | 2003-10-02 | 2011-06-08 | Given Imaging Ltd. | SYSTEM AND PROCEDURE FOR THE PRESENTATION OF DATA FLOWS. |
| JP4537803B2 (en)* | 2004-08-27 | 2010-09-08 | オリンパス株式会社 | Image display device |
| JP4804739B2 (en)* | 2004-11-10 | 2011-11-02 | オリンパス株式会社 | Image display device, image display method, and image display program |
- 2006
- 2006-09-05JPJP2006240384Apatent/JP4914680B2/ennot_activeExpired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2008061704A (en) | 2008-03-21 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4914680B2 (en) | Image display device | |
| JP5005981B2 (en) | Image display device | |
| US8900124B2 (en) | Image display device | |
| US8233037B2 (en) | Image display apparatus | |
| US9042664B2 (en) | Image display apparatus | |
| US8216129B2 (en) | Image display apparatus, endoscope system using the same, and image display method | |
| US20090040235A1 (en) | Image processing apparatus, computer program product, and image processing method | |
| JP5327641B2 (en) | Image information display processing device | |
| CN101711662B (en) | Image display apparatus and image display method | |
| EP2181642A1 (en) | Image processing apparatus, image processing program, and image processing method | |
| EP1952751B1 (en) | Device for displaying in vivo image, receiving device, and image display system and method using them | |
| JP4891646B2 (en) | Image display device | |
| EP1787574B1 (en) | Image display device, image display method, and image display program | |
| JP5231160B2 (en) | Image display device, image display method, and image display program | |
| JP5341257B2 (en) | Image processing apparatus, method of operating image processing apparatus, image processing program, and endoscope system | |
| JP4789961B2 (en) | Image display device | |
| JP2007075158A (en) | Image display device | |
| WO2012042966A1 (en) | Image display device, image display method, and image display program | |
| JP4594834B2 (en) | Image display device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination | Free format text:JAPANESE INTERMEDIATE CODE: A621 Effective date:20090819 | |
| A977 | Report on retrieval | Free format text:JAPANESE INTERMEDIATE CODE: A971007 Effective date:20111129 | |
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) | Free format text:JAPANESE INTERMEDIATE CODE: A01 Effective date:20120104 | |
| A01 | Written decision to grant a patent or to grant a registration (utility model) | Free format text:JAPANESE INTERMEDIATE CODE: A01 | |
| A61 | First payment of annual fees (during grant procedure) | Free format text:JAPANESE INTERMEDIATE CODE: A61 Effective date:20120123 | |
| R151 | Written notification of patent or utility model registration | Ref document number:4914680 Country of ref document:JP Free format text:JAPANESE INTERMEDIATE CODE: R151 | |
| FPAY | Renewal fee payment (event date is renewal date of database) | Free format text:PAYMENT UNTIL: 20150127 Year of fee payment:3 | |
| S111 | Request for change of ownership or part of ownership | Free format text:JAPANESE INTERMEDIATE CODE: R313111 | |
| R350 | Written notification of registration of transfer | Free format text:JAPANESE INTERMEDIATE CODE: R350 | |
| S531 | Written request for registration of change of domicile | Free format text:JAPANESE INTERMEDIATE CODE: R313531 | |
| R350 | Written notification of registration of transfer | Free format text:JAPANESE INTERMEDIATE CODE: R350 | |
| R250 | Receipt of annual fees | Free format text:JAPANESE INTERMEDIATE CODE: R250 | |
| LAPS | Cancellation because of no payment of annual fees |