【0001】[0001]
【発明の属する技術分野】本発明は、手術を支援する情
報を表示する手術支援情報表示装置に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an operation support information display device for displaying information for supporting an operation.
【0002】[0002]
【従来の技術】術者は、手術を効率的且つ確実に行うた
めに、手術前にX線コンピュータ断層撮影装置(CTス
キャナ)、磁気共鳴映像装置(MRI)、ガンマカメラ
やSPECT等の核医学診断装置、超音波診断装置、X
線診断装置等で事前に撮影して集めた画像を基にして、
綿密な手術計画を立てる必要がある。この手術計画の立
案を支援する画像処理装置がある。2. Description of the Related Art In order to perform an operation efficiently and reliably, an operator needs to perform nuclear medicine such as an X-ray computed tomography apparatus (CT scanner), a magnetic resonance imaging apparatus (MRI), a gamma camera, and a SPECT before the operation. Diagnostic device, ultrasonic diagnostic device, X
Based on images collected in advance by using a line diagnostic device,
You need to plan your surgery carefully. There is an image processing device that supports the planning of this operation plan.
【0003】また、手術中において、術者に、上述の事
前に撮影した画像や手術計画で作成された手術支援情報
を提示し、術者が治療対象の位置等や治療方法の確認を
行えるようにする手術支援情報表示装置がある。[0003] In addition, during the operation, the operator is presented with the previously photographed images and the operation support information created in the operation plan, so that the operator can confirm the position of the treatment target and the treatment method. There is an operation support information display device.
【0004】また、特公平6−85784号公報、特開
平6−205793号公報においては、予め格納してお
いた被検体の内部構造に関するデータに基づいた3次元
像を、観察位置及び向きに応じて前記被検体の直視像と
合成して観察することが可能な手術用3次元ビューアシ
ステムが記載されている。In Japanese Patent Publication No. 6-85784 and Japanese Patent Laid-Open Publication No. Hei 6-205793, a three-dimensional image based on data on the internal structure of a subject stored in advance is formed according to the observation position and orientation. There is described a surgical three-dimensional viewer system that can be combined with a direct-view image of the subject and observed.
【0005】しかしながら、従来は、必要な手術支援情
報を個々に選択して表示させるため、手術中にそのよう
な操作を行うことは非常に煩わしく、また、手術時間が
術後の予後に影響を及ぼしてしまうことから、少しでも
短い時間で手術を行いたいという要望があり、その操作
の負担を極力少なくすることが課題であった。However, conventionally, it is very troublesome to perform such an operation during the operation because the necessary operation support information is individually selected and displayed, and the operation time affects the prognosis after the operation. Therefore, there is a demand for performing an operation in a short time as much as possible, and it has been a problem to reduce the burden of the operation as much as possible.
【0006】[0006]
【発明が解決しようとする課題】本発明の目的は、手術
支援情報表示装置において、手術中に必要とされる手術
支援情報を簡単な操作で選択し、表示させることを実現
することにある。SUMMARY OF THE INVENTION It is an object of the present invention to provide an operation support information display apparatus which can select and display operation support information required during an operation by a simple operation.
【0007】[0007]
【課題を解決するための手段】(1)本発明による手術
支援情報表示装置は、手術を構成する手術ステージに関
連付けて手術支援情報を記憶する手術支援情報記憶手段
と、操作者が手術の手術ステージを指定する手術ステー
ジ指定手段と、前記手術支援情報記憶手段に記憶されて
いる手術支援情報のうち、前記手術ステージ指定手段に
より指定された手術ステージに関連付けられている手術
支援情報を選択的に表示する表示手段とを具備すること
を特徴としている。(1) A surgical support information display device according to the present invention includes a surgical support information storage unit that stores surgical support information in association with a surgical stage that constitutes a surgical operation, and an operator that performs a surgical operation. Operation stage designating means for designating a stage, and, among the surgical support information stored in the surgical support information storage means, selectively select the surgical support information associated with the surgical stage designated by the surgical stage designating means. Display means for displaying.
【0008】(2)本発明は、(1)の装置において、
手術支援情報を操作者の指示に従って作成する手術支援
情報作成手段をさらに備えることを特徴としている。(2) The present invention relates to the apparatus of (1),
It is characterized by further comprising a surgery support information creating means for creating surgery support information in accordance with an instruction of an operator.
【0009】(3)本発明は、(2)の装置において、
手術支援情報作成手段は、前記表示された医用画像上に
図形と文字との少なくとも一方を書き込む機能を有する
ことを特徴としている。(3) The present invention relates to the apparatus of (2),
The surgery support information creating means has a function of writing at least one of a graphic and a character on the displayed medical image.
【0010】(4)本発明は、(2)の装置において、
手術支援情報作成手段は、3次元図形の作成機能を有す
ることを特徴としている。(4) The present invention relates to the apparatus of (2),
The operation support information creating means has a feature of creating a three-dimensional figure.
【0011】(5)本発明は、(1)の装置において、
術中の患者に関する画像を撮影するリアルタイム画像撮
影手段と、前記リアルタイム画像撮影手段の撮影位置、
撮影方向、撮影した画像の拡大率、焦点距離を含む位置
合わせ情報に基づいて、前記リアルタイム画像撮影手段
により撮影した前記術中の患者に関する画像に、前記手
術支援情報記憶手段が記憶している手術支援情報を位置
整合する手段とをさらに備えることを特徴としている。(5) The present invention provides the apparatus of (1),
Real-time image capturing means for capturing an image of a patient during surgery, and a capturing position of the real-time image capturing means,
The surgery support information stored in the surgery support information storage unit is stored in the image of the patient during the operation taken by the real-time image taking unit based on the positioning information including the imaging direction, the magnification of the taken image, and the focal length. Means for aligning information.
【0012】(6)本発明は、手術計画の立案を支援す
るために、患者に対する手術器具の進入ルートを表す円
筒を、前記患者に関する3次元画像上に重ねて表示する
手術支援情報表示装置において、前記円筒と同軸であっ
て、半径の異なる他の円筒を前記円筒と共に前記3次元
画像上に重ねて表示する機能を備えていることを特徴と
している。(6) The present invention relates to a surgical support information display device for displaying a cylinder representing an approach route of a surgical instrument to a patient on a three-dimensional image of the patient in order to assist in planning an operation plan. And a function of superimposing and displaying another cylinder having a different radius, which is coaxial with the cylinder, on the three-dimensional image together with the cylinder.
【0013】(7)本発明は、手術計画の立案を支援す
るために、患者に対する手術器具の進入ルートを表す円
筒を、前記患者に関する3次元画像上に重ねて表示する
手術支援情報表示装置において、前記3次元画像から抽
出した生体内構造物の中で前記円筒の中心軸に対して最
も近い部分と前記円筒の中心軸との距離に、前記円筒の
半径を設定する機能を備えていることを特徴としてい
る。(7) The present invention relates to an operation support information display device for displaying a cylinder representing an approach route of a surgical instrument to a patient on a three-dimensional image of the patient in order to assist in planning an operation plan. A function of setting a radius of the cylinder at a distance between a portion closest to the center axis of the cylinder and a center axis of the cylinder in the in-vivo structure extracted from the three-dimensional image. It is characterized by.
【0014】(8)本発明は、手術計画の立案を支援す
るために、患者に対する手術器具の進入ルートを表す円
筒を、前記患者に関する3次元画像上に重ねて表示する
手術支援情報表示装置において、前記3次元画像から抽
出した生体内構造物の中で前記円筒の中心軸に対して最
も近い部分と前記円筒の中心軸との距離とを半径とする
円を、前記生体内構造物の投影像と共に表示する機能を
備えていることを特徴としている。(8) The present invention relates to a surgery support information display device for displaying a cylinder representing an approach route of a surgical instrument to a patient on a three-dimensional image of the patient in order to assist in planning an operation plan. And projecting a circle having a radius between a portion closest to the center axis of the cylinder and a distance between the center axis of the cylinder in the in-vivo structure extracted from the three-dimensional image, It is characterized by having a function of displaying with an image.
【0015】(9)本発明は、手術計画の立案を支援す
るために、患者に対する手術器具の進入ルートを表す円
筒を、前記患者に関する3次元画像上に重ねて表示する
手術支援情報表示装置において、前記3次元画像から抽
出した生体内構造物の中で、前記円筒の内部に入り込ん
でいる生体内構造物だけを選択的に表示する機能を備え
ていることを特徴としている。(9) The present invention relates to an operation support information display device for displaying a cylinder representing a route of a surgical instrument for a patient on a three-dimensional image of the patient in order to assist in planning an operation plan. And a function of selectively displaying only the in-vivo structure that has entered the inside of the cylinder among the in-vivo structures extracted from the three-dimensional image.
【0016】(10)本発明は、手術計画の立案を支援
するために、患者に対する手術器具の進入ルートを表す
円筒を、前記患者に関する3次元画像上に重ねて表示す
る手術支援情報表示装置において、前記円筒の表面上の
点各々と前記3次元画像から抽出した生体内構造物の中
の最も近い部分との距離に応じてピクセル値を与えた前
記円筒の展開図を表示する機能を備えていることを特徴
としている。(10) The present invention relates to an operation support information display device for displaying a cylinder representing an approach route of a surgical instrument for a patient on a three-dimensional image of the patient in order to assist in planning an operation plan. Having a function of displaying a developed view of the cylinder in which pixel values are given according to the distance between each point on the surface of the cylinder and the closest part of the in-vivo structure extracted from the three-dimensional image. It is characterized by having.
【0017】[0017]
【発明の実施の形態】以下、図面を参照して、本発明に
よる手術支援情報表示装置を、好ましい実施形態により
詳細に説明する。本実施形態の特徴の1つとしては、手
術支援情報を手術ステージを関連付けて保存しておくこ
とにある。一般的に、手術の工程は、複数の手術ステー
ジに分けることができる。その一例として、次の表1
に、脳手術の場合の手術ステージ分けを示している。DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS A preferred embodiment of the present invention will be described in detail with reference to the accompanying drawings. One of the features of the present embodiment is that the operation support information is stored in association with the operation stage. Generally, a surgical procedure can be divided into a plurality of surgical stages. As an example, the following Table 1
Fig. 2 shows the operation stage classification in the case of brain surgery.
【0018】[0018]
【表1】[Table 1]
【0019】上記特徴により、手術中に術者は手術ステ
ージを指定するという簡単な操作で、必要な手術支援情
報全てを一度に表示させることができ、これにより操作
負担が軽減され、手術の効率化を図ることができるもの
である。With the above features, the operator can display all necessary operation support information at a time by a simple operation of designating the operation stage during the operation, thereby reducing the operation load and the operation efficiency. Can be achieved.
【0020】ここで、本実施形態に係る手術支援情報表
示装置のシステム構成について説明する。図1に示すよ
うに、本実施形態に係る手術支援情報表示装置は、バス
11を中心として、CPU10、2種類の手術支援情報
保存部1,2等が枝状に接続されて構成されている。一
方の手術支援情報保存部1には、光磁気ディスク等の大
規模記憶媒体が装備されており、主にデータ量の大きな
画像情報が保存される。他方の手術支援情報保存部2に
は、半導体メモリや磁気ディスク等に主にデータ量の比
較的小さいグラフィック情報が保存される。Here, the system configuration of the operation support information display device according to the present embodiment will be described. As shown in FIG. 1, the operation support information display device according to the present embodiment includes a bus 11, a CPU 10, two types of operation support information storage units 1, 2, and the like connected in a branch shape. . The surgery support information storage unit 1 is equipped with a large-scale storage medium such as a magneto-optical disk, and mainly stores image information having a large data amount. The other operation support information storage unit 2 mainly stores graphic information having a relatively small data amount in a semiconductor memory, a magnetic disk, or the like.
【0021】画像情報としては、手術前にX線コンピュ
ータ断層撮影装置(CTスキャナ)、磁気共鳴映像装置
(MRI)、ガンマカメラやSPECT等の核医学診断
装置、超音波診断装置、X線診断装置、電子内視鏡等で
撮影された画像の他に、その画像に対して画像処理を施
した例えばディジタルサブトラクションアンギオ画像
(DSA、血管抽出画像)、骨を抽出した骨画像や脳表
面画像等の処理画像、さらに、手術のアプローチ(手術
のエントリからターゲットまでのルート)を表す円筒、
腫瘍などの領域を模擬的に表す領域、進入していく際に
目印となる構造物の位置を示すランドマーク、さらにコ
メントや矢印等を重畳した画像といった手術時に参照す
べき様々な画像が含まれる。なお、この画像を参照画像
と称して、手術中に種々Tけんびきょう9で撮影された
リアルタイムの画像と区別するものとする。Before the operation, the image information includes an X-ray computed tomography apparatus (CT scanner), a magnetic resonance imaging apparatus (MRI), a nuclear medicine diagnostic apparatus such as a gamma camera and SPECT, an ultrasonic diagnostic apparatus, and an X-ray diagnostic apparatus. In addition to images captured by an electronic endoscope or the like, image processing is performed on the images, such as digital subtraction angio images (DSA, blood vessel extraction images), bone images from which bones have been extracted, and brain surface images. A cylinder representing the processed image, plus the surgical approach (route from surgical entry to target),
Includes various images that should be referred to during surgery, such as a region that simulates a region such as a tumor, landmarks that indicate the position of a structure that serves as a marker when entering, and images that are superimposed with comments and arrows. . Note that this image is referred to as a reference image and is distinguished from a real-time image captured at various times during the operation.
【0022】グラフィック情報には、手術のアプローチ
(手術のエントリからターゲットまでのルート)を表す
円筒、腫瘍などの領域を模擬的に表す領域、進入してい
く際に目印となる構造物の位置を示すランドマーク、さ
らに画像情報へのコメントや矢印等のグラフィックであ
り、これは手術中に手術顕微鏡9でリアルタイムで撮影
された画像に重畳される。The graphic information includes a cylinder representing a surgical approach (route from a surgical entry to a target), a region simulating a region such as a tumor, and a position of a structure which serves as a landmark when approaching. These are landmarks shown, and graphics such as comments and arrows for image information, which are superimposed on images taken in real time by the operation microscope 9 during surgery.
【0023】これら手術支援情報保存部1,2に保存さ
れた手術支援情報に対しては、手術支援情報作成・登録
部3において、個別に手術ステージが関連付けられてい
る。例えば、手術支援情報の識別コードと手術ステージ
の識別コードとの対応表として手術支援情報作成・登録
部3に登録される。このように手術支援情報に手術ステ
ージを関連付けたことにより、手術中に操作者が手術ス
テージ指定部8を介して所望する手術ステージを指定す
ると、CPU10の制御に従って、その指定した手術ス
テージに関連付けられている手術支援情報が手術支援情
報保存部1,2から選択的に読み出され、表示部7に表
示されるようになっている。The surgery support information stored in the surgery support information storage units 1 and 2 is individually associated with a surgery stage in the surgery support information creation / registration unit 3. For example, it is registered in the surgery support information creation / registration unit 3 as a correspondence table between the identification code of the surgery support information and the identification code of the surgery stage. By associating the operation stage with the operation support information as described above, when the operator specifies a desired operation stage via the operation stage designating section 8 during the operation, the operation is associated with the specified operation stage under the control of the CPU 10. The operation support information is selectively read out from the operation support information storage units 1 and 2 and displayed on the display unit 7.
【0024】上述したようにグラフィック情報のランド
マーク等を、術中に手術顕微鏡9等でリアルタイムに撮
影されたリアルタイム画像に対して重畳するためには、
位置、向き及び大きさを整合することが必要とされる。
このうち位置合わせは位置合わせ処理部4で位置計測部
5で計測した患者及び手術顕微鏡9の向き及び位置に基
づいて行われる。この位置合わせの手法としては、既存
の任意の手法が採用され、例えば、頭部定位装置を使っ
てもよいし、光学式の位置計測方式を採用してもよい。As described above, in order to superimpose a landmark or the like of graphic information on a real-time image photographed in real time by the operation microscope 9 or the like during the operation,
There is a need to match position, orientation and size.
Of these, the positioning is performed based on the direction and position of the patient and the surgical microscope 9 measured by the position measuring unit 5 by the positioning processing unit 4. As an alignment method, an existing arbitrary method is adopted. For example, a head localization device may be used, or an optical position measurement method may be adopted.
【0025】手術支援情報表示処理部6では、位置計測
部5で計測された手術顕微鏡9の位置及び向きと、手術
顕微鏡9の顕微鏡の焦点距離、拡大・縮小率とから、手
術顕微鏡9の画像に重畳するように、コメントや図形の
画面内での拡大/縮小、回転、移動を行うものである。
表示部7は、術中の手術顕微鏡像及び手術支援情報を表
示する。The operation support information display processing unit 6 obtains an image of the operation microscope 9 from the position and orientation of the operation microscope 9 measured by the position measurement unit 5, the focal length of the operation microscope 9, and the enlargement / reduction ratio. This is to enlarge / reduce, rotate, and move comments and graphics on the screen so as to be superimposed.
The display unit 7 displays an intraoperative surgical microscope image and surgical support information.
【0026】手術ステージ指定部8は、上述したよう
に、操作者(術者又はその補助者)が、術者が所望する
手術ステージを指定するための入力手段である。この入
力手段としては、様々な形態が考えられる。As described above, the operation stage designating section 8 is an input means for the operator (the operator or his assistant) to specify the operation stage desired by the operator. Various forms can be considered as the input means.
【0027】音声認識手段を用いる場合 この場合、手術ステージ指定部8は、音声認識装置であ
り、操作者が“手術ステージ1”,“手術ステージ2”
のように音声を発すると、その音声から指定された手術
ステージ番号を認識する。In the case where voice recognition means is used In this case, the operation stage designating section 8 is a voice recognition device, and the operator operates the "operation stage 1" and the "operation stage 2".
When a voice is issued as in the above, the designated operation stage number is recognized from the voice.
【0028】スイッチを用いる場合 この場合、手術ステージ指定部8は、スイッチであり、
スイッチ操作により手術ステージを指定できるようにな
っている。さらにそのスイッチとしてはフットスイッチ
が好ましい。In the case of using a switch In this case, the operation stage designating section 8 is a switch,
The operation stage can be designated by a switch operation. Further, the switch is preferably a foot switch.
【0029】視線入力手段を用いる場合 この場合、手術ステージ指定部8は、アイカメラを有す
る。例えば、表示画面に手術ステージアイコンが表示さ
れていて、アイカメラを装着した操作者が所望とする手
術ステージの手術ステージアイコンを注目すると、その
手術ステージが指定されるようになっている。In the case of using the line-of-sight input means In this case, the operation stage designating section 8 has an eye camera. For example, a surgical stage icon is displayed on the display screen, and when the operator wearing the eye camera pays attention to a desired surgical stage, the surgical stage is designated.
【0030】手術中に画像を取得するものとしては、手
術顕微鏡9の他に、X線コンピュータ断層撮影装置(C
Tスキャナ)、磁気共鳴映像装置(MRI)、ガンマカ
メラやSPECT等の核医学診断装置、超音波診断装
置、X線診断装置、電子内視鏡が考えられるが、ここで
は、手術顕微鏡9を例に説明している。この手術顕微鏡
9は、図18に示すように、位置計測用のLEDが複数
位置に付けられており、光学式の位置計測方式によりピ
ックアップしたLEDの位置から、位置計測部5により
手術顕微鏡9の位置及び向きが計測できるようになって
いる。また、手術顕微鏡9の拡大率、及び焦点距離のデ
ータは、手術支援情報表示処理部6に送られる。また、
手術顕微鏡9にはビデオカメラが取り付けられており、
手術顕微鏡像は表示部7に表示される。In order to acquire images during the operation, in addition to the operation microscope 9, an X-ray computed tomography apparatus (C
T scanner), a magnetic resonance imaging apparatus (MRI), a nuclear medicine diagnostic apparatus such as a gamma camera or SPECT, an ultrasonic diagnostic apparatus, an X-ray diagnostic apparatus, and an electronic endoscope. Has been described. As shown in FIG. 18, the operation microscope 9 has LEDs for position measurement at a plurality of positions, and the position measurement unit 5 uses the position measurement unit 5 to determine the position of the LED picked up by the optical position measurement method. The position and orientation can be measured. The data of the magnification and the focal length of the operation microscope 9 are sent to the operation support information display processing unit 6. Also,
A video camera is attached to the operation microscope 9,
The surgical microscope image is displayed on the display unit 7.
【0031】次に、以上のように構成された本実施形態
に係る手術支援情報表示装置の動作について説明する。
図2に本手術支援情報表示装置を使った一連の動作の流
れを示している。術前においては、手術支援情報を作成
するステップ(S11)と、作成した手術支援情報を手
術ステージを関連付けて登録するステップ(S12)と
からなる。術中においては、手術支援情報として登録し
た参照画像やグラフィックを、術中に手術顕微鏡9でリ
アルタイムに撮影されたリアルタイム画像に対して位置
合わせをするステップ(S21)が含まれる。この位置
合わせにより、手術支援情報をリアルタイム画像と同じ
座標系上のデータに変換し、手術支援情報をリアルタイ
ム画像に重畳することを可能としている。さらに、術中
のステップとしては、術者による手術の進行に応じてそ
の時々で術者が所望する手術ステージを術者自身で又は
補助者を介して指定するステップ(S22)と、指定さ
れた手術ステージに関連付けられている手術支援情報を
表示するステップ(S23)とがある。以下に、各ステ
ップについて詳細に説明する。Next, the operation of the operation support information display apparatus according to the present embodiment configured as described above will be described.
FIG. 2 shows a flow of a series of operations using the present operation support information display apparatus. Before the operation, the procedure includes a step of creating operation support information (S11) and a step of registering the created operation support information in association with an operation stage (S12). During the operation, a step (S21) of aligning the reference image or the graphic registered as the operation support information with the real-time image taken in real time by the operation microscope 9 during the operation is included. By this alignment, the surgery support information is converted into data on the same coordinate system as the real-time image, and the surgery support information can be superimposed on the real-time image. Further, as the intraoperative steps, a step (S22) of specifying an operation stage desired by the operator at each time according to the progress of the operation by the operator, by the operator himself or via an assistant (S22), There is a step (S23) of displaying operation support information associated with the stage. Hereinafter, each step will be described in detail.
【0032】(手術支援情報の作成;S11)手術支援
情報の作成時には、表示部7の画面が、手術支援情報作
成・登録部3により図3、図4に示すような手術支援情
報作成登録画面に切り替わる。この画面上で、操作者に
より手術のアプローチ(手術器具を進入させるルート
(エントリー(刺入位置)からターゲット(到達点)ま
でのルート))を表す円筒、腫瘍などの領域を模擬的に
表す領域、進入していく際に目印となる構造物の位置を
示すランドマーク、さらに画像情報へのコメントや矢印
等のグラフィックや参照画像が作成される。作成された
円筒、領域、ランドマーク、画像情報や矢印及びコメン
トは、手術支援情報保存部2に保存される。(Creation of Surgery Support Information; S11) At the time of creation of the surgery support information, the screen of the display unit 7 is displayed by the surgery support information creation / registration unit 3 as shown in FIGS. Switch to On this screen, an area simulating an area such as a cylinder or a tumor representing a surgical approach (a route (a route from an entry (insertion position) to a target (an arrival point)) for a surgical instrument to enter) by an operator. In addition, landmarks indicating the positions of the structures serving as markers when entering the vehicle, and graphics and reference images such as comments and arrows for image information are created. The created cylinder, region, landmark, image information, arrow, and comment are stored in the surgery support information storage unit 2.
【0033】ここで、手術のアプローチ等の作成手順に
ついて詳細に説明する。 「手術アプローチを表す円筒の作成」図5にアプローチ
円筒の模式図を示している。手術支援情報作成・登録部
3を介してアプローチ円筒キーをマウスでクリックする
と、手術支援情報作成・登録部3は、アプローチ円筒作
成モードの画面になる。画像選択メニューで下敷きとな
る画像データ(CT、MR、核医学などの3次元画像)
を選択して表示し、断面位置指定スクロールバーを操作
して任意断面を表示させながら、ターゲットと、被検体
に手術器具を刺し入れるエントリー、及び円筒の半径
(例えば手術器具の最大径)を指定すると、アプローチ
円筒が重畳される。ターゲットは、ターゲットキーをク
リックした後にマウスで位置を指定して設定する。Here, the procedure for creating the surgical approach and the like will be described in detail. "Creation of a cylinder representing a surgical approach" FIG. 5 is a schematic view of an approach cylinder. When the approach cylinder key is clicked on with the mouse via the operation support information creation / registration unit 3, the operation assistance information creation / registration unit 3 is switched to an approach cylinder creation mode screen. Underlying image data in the image selection menu (3D images such as CT, MR and nuclear medicine)
Select and display, and operate the cross-section position specification scroll bar to display an arbitrary cross-section, specify the target, the entry for inserting the surgical instrument into the subject, and the radius of the cylinder (for example, the maximum diameter of the surgical instrument) Then, the approach cylinder is superimposed. The target is set by clicking the target key and specifying the position with the mouse.
【0034】エントリーはエントリーキーをクリックし
た後にマウスで位置を指定して設定する。円筒半径は半
径指定部で設定する。登録キーをクリックすると、この
アプローチ円筒データが手術支援情報保存部2に保存さ
れ、また手術支援情報作成・登録部3に手術ステージが
関連付けられる。オペレータは、手術計画時には、手術
器具が周辺の血管等の重要構造物を侵襲しないように、
ルートを模索することができ、また、手術時には、この
アプローチ円筒のガイダンス受けて、手術器具を被検体
に刺し入れ、円筒から外れないように、周辺の血管や臓
器等を注意深く奥に挿入し、最終的にターゲットに手術
器具を到達させることが容易になる。The entry is set by clicking the entry key and specifying the position with the mouse. The cylinder radius is set in the radius designation section. When the registration key is clicked, this approach cylinder data is stored in the operation support information storage unit 2, and the operation stage is associated with the operation support information creation / registration unit 3. When planning the operation, the operator must ensure that the surgical instruments do not invade surrounding structures such as blood vessels.
It is possible to search for the route, and at the time of surgery, with the guidance of this approach cylinder, insert the surgical instrument into the subject, carefully insert the surrounding blood vessels and organs, etc. so as not to come off the cylinder, Ultimately, it becomes easier for the surgical instrument to reach the target.
【0035】さらに、このアプローチ円筒に関しては、
以下のように様々な発展が考えられる。図6に示すよう
に、エントリーターゲット軸を中心として、半径の異な
る複数の円筒C1,C2,C3を同時表示させるように
してもよい。この場合、オペレーションはそれぞれの円
筒に意味付け、例えば円筒C1は手術器具が通過する最
小の範囲を表し、また円筒C2は、例えば手術器具の小
さなぶれにより、軽微な侵襲が生じるおそれのあるやや
大きい範囲を表し、さらに円筒C3は、例えば手術器具
の大きなぶれや患者のモーションによって、重大な侵襲
が生じるおそれのある大きな範囲を表すといった意味を
与えて、複数の円筒C1,C2,C3を活用すること
で、最適な手術器具の進入ルートを模索することが容易
になる。Further, regarding this approach cylinder,
Various developments are possible as follows. As shown in FIG. 6, a plurality of cylinders C1, C2, and C3 having different radii may be displayed simultaneously around the entry target axis. In this case, the operation means each cylinder, for example cylinder C1 represents the smallest area through which the surgical instrument can pass, and cylinder C2 may be slightly larger, for example, a minor invasion of the surgical instrument may cause a minor invasion. The plurality of cylinders C1, C2, and C3 are used to represent a range, and to give a meaning that the cylinder C3 represents a large area in which significant invasion may occur due to, for example, a large shake of a surgical instrument or motion of a patient. This makes it easy to find an optimal route for entering a surgical instrument.
【0036】なお、画像及び円筒等は、3次元で表示す
るので、血管等の重要構造物と円筒との位置関係が分か
り難い、つまり血管が円筒の内側にあるのか、又は血管
が円筒の外側にあるのか分かり難いときがある。さら
に、円筒をどの方向に動かせば、血管から遠ざけること
ができるのか、分かり難いときがある。このような不具
合を軽減するために、図7に示すように、まず、手術支
援情報作成・登録部3で画像からしきい値処理等で自動
抽出された血管等の重要構造物の中で、エントリーター
ゲット軸に最も接近している部分が特定され、この最接
近部分とエントリーターゲット軸との距離が求められ、
この距離を半径とする円筒C12を自動設定し、図8に
示すように、この円筒C12を円筒C1と共に表示する
ようにしてもよい。Since the image and the cylinder are displayed in three dimensions, it is difficult to understand the positional relationship between the important structures such as blood vessels and the cylinder, that is, whether the blood vessel is inside the cylinder or the blood vessel is outside the cylinder. Sometimes it's hard to tell what is in there. Further, it is sometimes difficult to understand in which direction the cylinder can be moved to keep it away from the blood vessel. In order to reduce such inconvenience, as shown in FIG. 7, first, in the important structures such as blood vessels automatically extracted from the image by the threshold processing or the like in the surgery support information creating / registering unit 3, The part closest to the entry target axis is identified, and the distance between this closest part and the entry target axis is determined.
The cylinder C12 having the radius as the distance may be automatically set, and the cylinder C12 may be displayed together with the cylinder C1, as shown in FIG.
【0037】また、図9(a)に示すように、円筒C1
の端面に、最接近部分を点PPとして投影し、これと共
に、最接近部分とエントリーターゲット軸との距離dを
半径とする円CIを表示するようにしても良い。さら
に、図9(b)に示すように、円筒C1の端面に、最接
近部分を含む血管等の重要構造物を投影し、これと共に
円C1,CIを表示するようにしても良い。Further, as shown in FIG.
May be projected as a point PP on the end face, and a circle CI having a radius equal to the distance d between the closest approach portion and the entry target axis may be displayed. Further, as shown in FIG. 9B, an important structure such as a blood vessel including the closest part may be projected on the end face of the cylinder C1, and the circles C1 and CI may be displayed together with the important structure.
【0038】また、図10(a)、図10(b)に示す
ように、手術支援情報作成・登録部3で画像からしきい
値処理等で自動抽出された血管等の重要構造物の中で円
筒C1の内側に入る血管等の重要構造物をピックアップ
し、このピックアップした重要構造物だけを円筒C1と
共に表示し、一方、ピックアップされなかった円筒C1
の外にある重要構造物は表示しないようにしてもよい。
この場合、オペレータは、手術計画段階で、重要構造物
が全て表示されないように、円筒を動かすことで、最適
な手術器具の進入ルートを模索することが容易になる。As shown in FIGS. 10 (a) and 10 (b), in the important structures such as blood vessels automatically extracted from the image by the threshold processing or the like by the operation support information creation / registration unit 3, FIG. Picks up important structures such as blood vessels that enter the inside of the cylinder C1, and displays only the picked up important structures together with the cylinder C1, while the cylinder C1 not picked up.
The important structures outside of may be not displayed.
In this case, the operator moves the cylinder so that all the important structures are not displayed at the operation planning stage, thereby making it easier to find an optimal route for entering the surgical instrument.
【0039】さらに、手術支援情報作成・登録部3で、
次のような展開図を作成表示するようにしてもよい。図
11に示すように、円筒C1を中心とした3次元の座標
系において、円筒C1の表面上の複数点各々の座標、例
えば高さがhでX軸に対する角度がθの点Pの座標は、
円筒半径rとすると、 P=(XP、YP、ZP) =(r・ cosθ,r・ sinθ,h) として与えられる。図12には、展開図の2次元座標系
を示している。円筒C1上の点Pは、 P′=(XP′、YP′) ((h+r)・ cosθ,(h+r)・ sinθ) によって、展開図の点P′に座標変換される。Further, the operation support information creating / registering unit 3
The following development view may be created and displayed. As shown in FIG. 11, in a three-dimensional coordinate system centered on the cylinder C1, coordinates of a plurality of points on the surface of the cylinder C1, for example, coordinates of a point P having a height h and an angle θ with respect to the X axis are θ. ,
Assuming a cylindrical radius r, P = (XP , YP , ZP ) = (r · cos θ, r · sin θ, h). FIG. 12 shows a two-dimensional coordinate system of the development view. Point P on the cylinder C1is, P '= (X P' , Y P ') ((h + r) · cosθ, (h + r) · sinθ) by, point P developed view' are coordinate conversion.
【0040】従って、円筒C1の表面の中で、高い場所
ほど展開図の周縁寄りに、低い場所ほど展開図の中央寄
りにプロットされる。この展開図の点各々の値(ピクセ
ル値)としては、図11に示すように、円筒C1表面上
の各点から、その点毎に最も接近している重要構造物ま
での最短距離に従って与えられる。ここでは、ルックア
ップテーブルに従って最短距離に対応するカラー情報
(RGB)が与えられる。例えば、最短距離がプラス
(重要構造物が円筒C1の外側)のときには、青系色を
割り当て、距離Dが短いほど、つまり重要構造物がエン
トリーターゲット軸に近いほど、高い彩度を、逆に距離
Dが長いほど、つまり重要構造物がエントリーターゲッ
ト軸から遠いほど、低い彩度を与える。一方、最短距離
がマイナス(重要構造物が円筒C1の内側)のときに
は、警戒色の赤系を割り当て、距離Dが長いほど、つま
り重要構造物がエントリーターゲット軸に近いほど、高
い彩度を、逆に距離Dが長いほど、つまり重要構造物が
エントリーターゲット軸から遠いほど、低い彩度を与え
る。Therefore, in the surface of the cylinder C1, the higher the position, the closer to the periphery of the developed view, and the lower the position, the closer to the center of the developed view. As shown in FIG. 11, the value (pixel value) of each point in the developed view is given according to the shortest distance from each point on the surface of the cylinder C1 to the closest important structure for each point. . Here, color information (RGB) corresponding to the shortest distance is provided according to a look-up table. For example, when the shortest distance is plus (the important structure is outside the cylinder C1), a bluish color is assigned, and the shorter the distance D, that is, the closer the important structure is to the entry target axis, the higher the saturation. The longer the distance D, that is, the farther the important structure is from the entry target axis, the lower the saturation. On the other hand, when the shortest distance is minus (the important structure is inside the cylinder C1), a reddish warning color is assigned, and the longer the distance D, that is, the closer the important structure is to the entry target axis, the higher the saturation. The longer the distance D, that is, the farther the important structure is from the entry target axis, the lower the saturation.
【0041】図13に、このようにして作成された展開
図の一例を示している。重要構造物は互いに重なり合う
ことがないので、オペレータは重要構造物を個々に視認
することができる。しかも、オペレータは、重要構造物
が円筒の内か、あるいは外にあるのかを、色相によって
把握し、しかもその遠近を彩度で認識することができ
る。なお、この展開図は、それ単体でというよりも、図
5乃至図10の表示に対して補足的に使うことで、効果
的であると考えられる。FIG. 13 shows an example of a developed view created in this way. Since the important structures do not overlap each other, the operator can visually recognize the important structures individually. In addition, the operator can grasp whether the important structure is inside or outside the cylinder based on the hue, and can recognize the distance from the cylinder based on the saturation. It should be noted that this developed view is considered to be more effective when used in addition to the display of FIGS. 5 to 10 rather than by itself.
【0042】「領域図形の作成」手術支援情報作成・登
録部3の領域キーをマウスでクリックすると、手術支援
情報作成部は、領域作成モードの画面となる。画像選択
メニューで下敷きとなる画像データを選択して表示し、
断面位置指定スクロールバーを操作して任意断面を表示
させ、その断面上で腫瘍等の領域の輪郭をマウスをドラ
ッグしながらトレースする。腫瘍が写っている全ての断
面においてトレース操作を繰り返して領域範囲を示す図
形を作成する。ダブルクリックした時点で1つの領域の
図形が完成する。ダブルクリックしたときにその図形の
名前を入力するダイアログが表示されるので操作者はそ
のダイアログで図形の名前を設定する。名前を設定する
と、作成した領域のデータが手術支援情報保存部2に保
存され、また手術支援情報作成・登録部3に手術ステー
ジが関連付けられる。[Creation of Area Graphic] When the area key of the operation support information creation / registration section 3 is clicked with a mouse, the operation support information creation section is switched to an area creation mode screen. Select and display the underlying image data in the image selection menu,
An arbitrary cross section is displayed by operating the cross section position designation scroll bar, and the outline of a region such as a tumor is traced on the cross section while dragging a mouse. The tracing operation is repeated on all the sections in which the tumor is shown to create a graphic indicating the area range. At the time of double-clicking, a figure of one area is completed. When double-clicking, a dialog for inputting the name of the figure is displayed. The operator sets the name of the figure in the dialog. When the name is set, the data of the created region is stored in the surgery support information storage unit 2, and the surgery stage is associated with the surgery support information creation / registration unit 3.
【0043】「ランドマークの作成」手術支援情報作成
・登録部3のランドマークキーをマウスでクリックする
と、図14に示すランドマーク作成モードの画面にな
る。画像選択メニューで下敷きとなる画像データを選択
して表示し、断面位置指定スクロールバーを操作して任
意断面を表示させ、設定位置をマウスでクリックする
と、その位置にランドマークを作成する。設定位置をマ
ウスでクリックしたときに名前を入力するダイアログが
表示されるので操作者はそのダイアログでランドマーク
の名前を設定する。名前を設定すると、作成したランド
マークが手術支援情報保存部2に保存され、また手術支
援情報作成・登録部3に手術ステージが関連付けられ
る。[Creation of Landmark] When the landmark key of the operation support information creation / registration unit 3 is clicked with a mouse, a screen for a landmark creation mode shown in FIG. 14 is displayed. By selecting and displaying the underlying image data from the image selection menu, operating the section position designation scroll bar to display an arbitrary section, and clicking a set position with a mouse, a landmark is created at that position. When the setting position is clicked with the mouse, a dialog for inputting the name is displayed. The operator sets the name of the landmark in the dialog. When the name is set, the created landmark is stored in the operation support information storage unit 2, and the operation stage is associated with the operation support information creation / registration unit 3.
【0044】「画像編集」手術支援情報作成・登録部3
を介して画像キーをマウスでクリックすると、図15に
示すように、画像編集モードの画面になる。画像選択リ
ストで矢印及びコメントを書き込む画像を選択して表示
し、その画像上で、矢印及びコメントを書き込む。矢印
キーをクリックした後、マウスで画像上の点を指定する
とそこに矢印が作成される。コメントキーをクリックす
ると、文字入力エリアが表示されるのでそこにコメント
を入力する。コメント位置はドラッグして移動すること
が可能である。画像登録キーをクリックすると作成した
画像データが手術支援情報保存部2に保存される。クリ
ックしたときに名前を入力するダイアログが表示される
ので操作者はそのダイアログで画像データの名前を設定
する。[Image Editing] Surgery Support Information Creation / Registration Unit 3
When the image key is clicked with the mouse via the, a screen of an image editing mode is displayed as shown in FIG. An image to which an arrow and a comment are to be written is selected and displayed in the image selection list, and an arrow and a comment are written on the image. After clicking the arrow key, specify the point on the image with the mouse, and the arrow will be created there. Click the comment key to display a character input area where you can enter a comment. The comment position can be moved by dragging. When the image registration key is clicked, the created image data is stored in the operation support information storage unit 2. When clicked, a dialog for inputting a name is displayed. The operator sets the name of the image data in the dialog.
【0045】以上のような操作で、手術支援情報が手術
支援情報保存部1,2に次のようなファイルで保存され
る。 stage.info;手術ステージ登録情報ファイ
ル:各手術ステージに表示する情報名 アプローチ.data;円筒データファイル:Targ
et、Entryの座標、円筒半径 動脈瘤1.data;領域データファイル:トレース閉
曲線の画素座標 腫瘤.data;領域データファイル:トレース閉曲線
の画素座標 ランドマーク1.data;領域データファイル:ラン
ドマークの座標 DSA画像1.data;領域データファイル:画像デ
ータ、矢印座標、コメント (手術支援情報の登録;S12)手術ステージ登録画面
を図16に示す。この登録画面には、ステップS11で
作成した全ての手術支援情報とステージ番号とが対応表
として表示される。手術支援情報作成・登録部3を介し
て操作者が各手術ステージにおいて、表示する手術支援
情報の欄をマウスでクリックすると、そこに黒丸が表示
される。手術支援情報作成・登録部3を介して登録キー
をクリックすると、各手術ステージについて、黒丸のつ
いている手術支援情報がどれかという情報(手術ステー
ジ登録情報)が手術支援情報作成・登録部3に保存され
る。With the above operation, the operation support information is stored in the operation support information storage units 1 and 2 as the following files. stage. info; Surgery stage registration information file: Information name displayed on each surgery stage Approach. data; cylindrical data file: Targ
et, Entry coordinates, cylindrical radius Aneurysm data; area data file: pixel coordinates of closed trace curve Tumor. data; area data file: pixel coordinates of the trace closed curve landmark 1. data; area data file: coordinates of landmark DSA image data; area data file: image data, arrow coordinates, comment (Registration of surgery support information; S12) FIG. 16 shows a surgery stage registration screen. On this registration screen, all the operation support information and the stage numbers created in step S11 are displayed as a correspondence table. When the operator clicks the column of the operation support information to be displayed at each operation stage with the mouse via the operation support information creation / registration unit 3, a black circle is displayed there. When the registration key is clicked via the operation support information creation / registration unit 3, information (operation stage registration information) indicating which operation support information is marked with a black circle for each operation stage is stored in the operation support information creation / registration unit 3. Will be saved.
【0046】次に、術中の操作とシステム動作について
説明する。 (術中患者と参照画像との位置合わせ;S21)手術支
援情報保存部1に保存されている参照画像には患者に付
けられた位置合わせ用マーカが写し込まれている。この
マーカ位置はしきい値処理等により自動抽出しても良い
し、操作者が画像を見ながら手動で指定してもよい。Next, intraoperative operation and system operation will be described. (Registration between Intraoperative Patient and Reference Image; S21) The reference image stored in the operation support information storage unit 1 includes a positioning marker attached to the patient. This marker position may be automatically extracted by threshold processing or the like, or may be manually designated by an operator while viewing the image.
【0047】手術の時点で患者を固定した後、画像撮影
時に患者に付けられた位置合わせ用マーカの位置(術中
マーカ座標)を位置計測部5で計測する。位置合わせ処
理部4は、術中マーカ座標と手術支援情報保存部1の画
像に写し込まれているマーカの座標とを基に、同じマー
カに対する位置誤差が最少になるように位置合わせを行
い、そのときの求められる座標変換行列を用いて、手術
支援情報保存部2に保存されている手術支援情報の3次
元図形データ(円筒、領域、ランドマーク)を術中の座
標系の座標に変換する。After the patient is fixed at the time of the operation, the position of the positioning marker (intraoperative marker coordinates) attached to the patient at the time of imaging is measured by the position measuring unit 5. The positioning processing unit 4 performs positioning based on the intraoperative marker coordinates and the coordinates of the markers projected on the image of the operation support information storage unit 1 so that a position error with respect to the same marker is minimized. The three-dimensional graphic data (cylinder, area, landmark) of the surgery support information stored in the surgery support information storage unit 2 is converted into coordinates of the intraoperative coordinate system using the coordinate conversion matrix obtained at that time.
【0048】(ステージの指定;S22)手術ステージ
指定部8の音声認識手段或いはフットスイッチ利用し
て、操作者(術者又は補助者)が手術ステージを指定す
る。(Specification of Stage; S22) The operator (operator or assistant) specifies the operation stage using the voice recognition means or the foot switch of the operation stage specifying section 8.
【0049】(手術支援情報の表示;S23)手術ステ
ージが指定されると、手術支援情報表示処理部6は、手
術支援情報作成・登録部3の手術支援情報と手術ステー
ジとの対応表を参照し、手術ステージ指定部8で指定さ
れた手術ステージに登録されている3次元図形データ
(円筒、領域、ランドマーク)等の手術支援情報を探索
する。そして、手術支援情報表示処理部6は、位置計測
部5で計測される手術顕微鏡9の位置及び向き、及び手
術顕微鏡9から手術支援情報表示処理部6に入力される
手術顕微鏡9の顕微鏡の焦点距離、拡大・縮小率のデー
タを基に、探索した3次元図形データに対して、手術顕
微鏡9の術野像に重畳するように拡大・縮小、回転を行
う。(Display of Surgery Support Information; S23) When a surgery stage is designated, the surgery support information display processing unit 6 refers to the correspondence table between the surgery support information and the surgery stage in the surgery support information creation / registration unit 3. Then, operation support information such as three-dimensional graphic data (cylinder, area, landmark) registered in the operation stage specified by the operation stage specifying unit 8 is searched. Then, the operation support information display processing unit 6 is configured to control the position and orientation of the operation microscope 9 measured by the position measurement unit 5 and the focal point of the microscope of the operation microscope 9 input from the operation microscope 9 to the operation support information display processing unit 6. Based on the data of the distance and the enlargement / reduction ratio, the searched three-dimensional graphic data is enlarged / reduced / rotated so as to be superimposed on the operation field image of the operation microscope 9.
【0050】表示部7は、手術顕微鏡像9及び手術支援
情報表示処理部6で処理された3次元コンピュータグラ
フィックを手術顕微鏡像9に重畳して表示し、また、指
定された手術ステージに画像情報が登録されている場合
は手術支援情報保存部2から呼び出して表示部7の一部
に表示する(図17参照)。The display section 7 displays the surgical microscope image 9 and the three-dimensional computer graphic processed by the surgical support information display processing section 6 so as to be superimposed on the surgical microscope image 9 and displays image information on a designated surgical stage. Is registered from the operation support information storage unit 2 and displayed on a part of the display unit 7 (see FIG. 17).
【0051】以上のように、本実施形態によると、操作
者は手術ステージを指定すれば、その手術ステージに関
連付けられた手術支援情報が表示される。この手術ステ
ージを指定する作業は、従来のような手術支援情報を個
別に選択する作業よりも格段に簡易である。従って、操
作者の作業負担は、大幅に軽減され得る。As described above, according to the present embodiment, when the operator designates a surgery stage, surgery support information associated with the surgery stage is displayed. The operation of specifying the operation stage is much simpler than the operation of individually selecting operation support information as in the related art. Therefore, the workload of the operator can be greatly reduced.
【0052】本発明は、上述した実施形態に限定される
ことなく、種々変形して実施可能である。The present invention is not limited to the above embodiment, but can be implemented in various modifications.
【0053】[0053]
【発明の効果】本発明によると、手術ステージを指定す
れば、その手術ステージに関連付けられた手術支援情報
が表示される。この手術ステージを指定する作業は、従
来のような手術支援情報を個別に選択する作業よりも格
段に簡易である。従って、操作者の作業負担は、大幅に
軽減され得る。According to the present invention, if an operation stage is designated, operation support information associated with the operation stage is displayed. The operation of specifying the operation stage is much simpler than the operation of individually selecting operation support information as in the related art. Therefore, the workload of the operator can be greatly reduced.
【0054】本発明によると、生体構造物と手術器具の
進入ルートとの距離関係が非常に分かり易くなるため、
進入ルートを高精度で設定できる上に、その作業負担を
大幅に軽減することができる。According to the present invention, the distance relationship between the biological structure and the approach route of the surgical instrument becomes very easy to understand.
The approach route can be set with high accuracy, and the work load can be greatly reduced.
【図1】本発明の一実施形態に係る手術支援情報表示装
置のブロック図。FIG. 1 is a block diagram of a surgery support information display device according to an embodiment of the present invention.
【図2】本実施形態に係る手術支援情報表示装置の動作
説明図。FIG. 2 is an explanatory diagram of the operation of the surgery support information display device according to the embodiment.
【図3】本実施形態において、手術支援情報(コメン
ト、図形等)の作成・登録のための作業画面を示す図。FIG. 3 is a diagram showing a work screen for creating and registering surgery support information (comments, graphics, etc.) in the embodiment.
【図4】本実施形態において、手術支援情報(画像)の
作成・登録のための初期画面を示す図。FIG. 4 is a diagram showing an initial screen for creating and registering surgery support information (image) in the embodiment.
【図5】本実施形態において、アプローチ円筒の基本的
な形態を示す図。FIG. 5 is a diagram showing a basic form of an approach cylinder in the embodiment.
【図6】本実施形態において、アプローチ円筒の第1形
態を示す図。FIG. 6 is a diagram showing a first form of an approach cylinder in the embodiment.
【図7】本実施形態において、アプローチ円筒の第2形
態の補足図。FIG. 7 is a supplementary view of the second embodiment of the approach cylinder in the embodiment.
【図8】本実施形態において、アプローチ円筒の第2形
態を示す図。FIG. 8 is a diagram showing a second form of the approach cylinder in the embodiment.
【図9】本実施形態において、アプローチ円筒の第3形
態を示す図。FIG. 9 is a diagram showing a third form of the approach cylinder in the embodiment.
【図10】本実施形態において、アプローチ円筒の第4
形態を示す図。FIG. 10 shows a fourth embodiment of the approach cylinder according to the present invention.
FIG.
【図11】本実施形態において、アプローチ円筒の座標
系を示す図。FIG. 11 is a diagram showing a coordinate system of an approach cylinder in the embodiment.
【図12】本実施形態において、アプローチ円筒の展開
図の座標系を示す図。FIG. 12 is a diagram showing a coordinate system of a development view of an approach cylinder in the embodiment.
【図13】本実施形態において、アプローチ円筒の展開
図の一例を示す図。FIG. 13 is a view showing an example of a development view of an approach cylinder in the embodiment.
【図14】本実施形態において、図形作成中の画面例を
示す図。FIG. 14 is a view showing an example of a screen during graphic creation in the embodiment.
【図15】本実施形態において、画像作成中の画面例を
示す図。FIG. 15 is a view showing an example of a screen during image creation in the embodiment.
【図16】図1の手術支援情報作成・登録部に登録され
た手術支援情報と手術ステージとの関連テーブルの一例
を示す図。FIG. 16 is a diagram showing an example of an association table between the surgery support information registered in the surgery support information creation / registration unit of FIG. 1 and a surgery stage.
【図17】本実施形態において、手術中の表示画面例を
示す図。FIG. 17 is a view showing an example of a display screen during surgery in the embodiment.
【図18】本実施形態において、位置合わせの原理図。FIG. 18 is a view showing the principle of positioning in the embodiment.
1…手術支援情報保存部(画像)、 2…手術支援情報保存部(コメント、図形等)、 3…手術支援情報作成・登録部、 4…位置合わせ処理部、 5…位置計測部、 6…手術支援情報表示処理部、 7…表示部、 8…手術ステージ指定部、 9…手術顕微鏡、 10…CPU、 11…バス。 1 ... Surgery support information storage unit (image), 2 ... Surgery support information storage unit (comments, graphics, etc.) 3 ... Surgery support information creation / registration unit Surgery support information display processing unit, 7: display unit, 8: operation stage designation unit, 9: operation microscope, 10: CPU, 11: bus.
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP15176699AJP2000333971A (en) | 1999-05-31 | 1999-05-31 | Surgery support information display device |
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP15176699AJP2000333971A (en) | 1999-05-31 | 1999-05-31 | Surgery support information display device |
| Publication Number | Publication Date |
|---|---|
| JP2000333971Atrue JP2000333971A (en) | 2000-12-05 |
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP15176699APendingJP2000333971A (en) | 1999-05-31 | 1999-05-31 | Surgery support information display device |
| Country | Link |
|---|---|
| JP (1) | JP2000333971A (en) |
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001293007A (en)* | 2000-04-12 | 2001-10-23 | Olympus Optical Co Ltd | Surgical navigation apparatus |
| JP2003180701A (en)* | 2001-06-14 | 2003-07-02 | Depuy Products Inc | Online bone fracture management system and associated method |
| WO2005094713A1 (en)* | 2004-03-30 | 2005-10-13 | National University Corporation Hamamatsu University School Of Medicine | Operation supporting device, method, and program |
| JP2006252286A (en)* | 2005-03-11 | 2006-09-21 | Gifu Univ | Medical information processing apparatus and medical information processing method synchronized with standard treatment program |
| JP2006277486A (en)* | 2005-03-30 | 2006-10-12 | Gifu Univ | Medical video information processing apparatus and medical video information processing program |
| JP2008522283A (en)* | 2004-11-24 | 2008-06-26 | アイディーエックス・インベストメント・コーポレーション | Manual therapy workflow management |
| JP2012533333A (en)* | 2009-07-15 | 2012-12-27 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | Visualization of surgical trajectory |
| JP2014071658A (en)* | 2012-09-28 | 2014-04-21 | Nippon Koden Corp | Operation support system |
| JP2015170024A (en)* | 2014-03-05 | 2015-09-28 | 株式会社東芝 | Medical accident prevention system |
| JP2022521066A (en)* | 2019-02-15 | 2022-04-05 | ネオシス・インコーポレイテッド | How to register an imaging scan in a coordinate system, and related systems |
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001293007A (en)* | 2000-04-12 | 2001-10-23 | Olympus Optical Co Ltd | Surgical navigation apparatus |
| JP2003180701A (en)* | 2001-06-14 | 2003-07-02 | Depuy Products Inc | Online bone fracture management system and associated method |
| US8388539B2 (en) | 2004-03-30 | 2013-03-05 | National University Corporation Hamamatsu University School Of Medicine | Operation supporting device, method, and program |
| WO2005094713A1 (en)* | 2004-03-30 | 2005-10-13 | National University Corporation Hamamatsu University School Of Medicine | Operation supporting device, method, and program |
| JP2008522283A (en)* | 2004-11-24 | 2008-06-26 | アイディーエックス・インベストメント・コーポレーション | Manual therapy workflow management |
| JP2006252286A (en)* | 2005-03-11 | 2006-09-21 | Gifu Univ | Medical information processing apparatus and medical information processing method synchronized with standard treatment program |
| JP2006277486A (en)* | 2005-03-30 | 2006-10-12 | Gifu Univ | Medical video information processing apparatus and medical video information processing program |
| JP2012533333A (en)* | 2009-07-15 | 2012-12-27 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | Visualization of surgical trajectory |
| US9993311B2 (en) | 2009-07-15 | 2018-06-12 | Koninklijke Philips N.V. | Visualizing surgical trajectories |
| JP2014071658A (en)* | 2012-09-28 | 2014-04-21 | Nippon Koden Corp | Operation support system |
| JP2015170024A (en)* | 2014-03-05 | 2015-09-28 | 株式会社東芝 | Medical accident prevention system |
| JP2022521066A (en)* | 2019-02-15 | 2022-04-05 | ネオシス・インコーポレイテッド | How to register an imaging scan in a coordinate system, and related systems |
| US12251169B2 (en) | 2019-02-15 | 2025-03-18 | Neocis Inc. | Method of registering an imaging scan with a coordinate system and associated systems |
| Publication | Publication Date | Title |
|---|---|---|
| US10706610B2 (en) | Method for displaying an object | |
| JP4822634B2 (en) | A method for obtaining coordinate transformation for guidance of an object | |
| US11026747B2 (en) | Endoscopic view of invasive procedures in narrow passages | |
| US9990744B2 (en) | Image registration device, image registration method, and image registration program | |
| US8049777B2 (en) | Insertion support system for specifying a location of interest as an arbitrary region and also appropriately setting a navigation leading to the specified region | |
| JP4607399B2 (en) | Three-dimensional image display device and display method | |
| JP2019115664A (en) | Use of augmented reality to assist navigation during medical procedures | |
| US20110245660A1 (en) | Projection image generation apparatus and method, and computer readable recording medium on which is recorded program for the same | |
| US8965072B2 (en) | Image display apparatus and image display system | |
| US20070167714A1 (en) | System and Method For Bronchoscopic Navigational Assistance | |
| CN107854177A (en) | A kind of ultrasound and CT/MR image co-registrations operation guiding system and its method based on optical alignment registration | |
| JP6952740B2 (en) | How to assist users, computer program products, data storage media, and imaging systems | |
| JP6493885B2 (en) | Image alignment apparatus, method of operating image alignment apparatus, and image alignment program | |
| JP2010274044A (en) | Surgery support apparatus, surgery support method, and surgery support program | |
| JP3910239B2 (en) | Medical image synthesizer | |
| CN106068098B (en) | Region visualization for ultrasound guided procedures | |
| JP7635469B2 (en) | Automatic registration of preoperative volumetric image data using search images | |
| US10102638B2 (en) | Device and method for image registration, and a nontransitory recording medium | |
| JP2000333971A (en) | Surgery support information display device | |
| US20230215059A1 (en) | Three-dimensional model reconstruction | |
| CN1827046A (en) | image processing device | |
| JP5652994B2 (en) | X-ray diagnostic equipment | |
| CN116958486A (en) | Medical image processing method and system based on convolutional neural network | |
| US10631948B2 (en) | Image alignment device, method, and program | |
| JP5100041B2 (en) | Image processing apparatus and image processing program |
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination | Free format text:JAPANESE INTERMEDIATE CODE: A621 Effective date:20060516 | |
| A977 | Report on retrieval | Free format text:JAPANESE INTERMEDIATE CODE: A971007 Effective date:20080516 | |
| A131 | Notification of reasons for refusal | Free format text:JAPANESE INTERMEDIATE CODE: A131 Effective date:20080610 | |
| A02 | Decision of refusal | Free format text:JAPANESE INTERMEDIATE CODE: A02 Effective date:20081014 |