本発明は、眼科検査システム及び眼科検査装置に関する。 The present invention relates to an ophthalmic examination system and an ophthalmic examination apparatus.
眼科検査装置は、医療機関、眼鏡店、健康診断や検診の会場、患者宅などにおいて、眼の検査(特性の測定、撮影等)に用いられる。眼科検査装置の典型的な例として以下が挙げられる。
・提示された視標に対する応答に基づき視力を測定する視力検査装置
・眼球の屈折特性を測定する眼屈折検査装置(レフラクトメータ、ケラトメータ)
・眼圧を測定するための眼圧計
・角膜の特性(角膜厚、細胞分布等)を得るためのスペキュラーマイクロスコープ
・ハルトマン−シャックセンサを用いて眼球の収差情報を得るウェーブフロントアナライザ
・視野障害を検出するための視野計やマイクロペリメータ
・光干渉を利用して眼底や前眼部の断面像や3次元データ、解析データを得るための光干渉断層計(OCT)
・眼底を写真撮影するための眼底カメラ
・共焦点光学系を用いたレーザ走査により眼底の画像を得るための走査型レーザ検眼鏡(Scanning Laser Ophthalmoscope、SLO)
・2以上の機能を組み合わせた複合機The ophthalmic examination apparatus is used for eye examination (measurement of characteristics, photographing, etc.) in medical institutions, eyeglass stores, venues for health examinations and examinations, patient homes, and the like. The following is a typical example of an ophthalmic examination apparatus.
・ A visual acuity test device that measures visual acuity based on the response to the presented target ・ An eye refraction test device that measures the refractive characteristics of the eyeball (refractometer, keratometer)
-Tonometer for measuring intraocular pressure-Specular microscope for obtaining corneal characteristics (corneal thickness, cell distribution, etc.)-Wavefront analyzer that obtains aberration information of the eyeball using a Hartmann-Shack sensor Perimeter and microperimeter for detection ・ Optical coherence tomography (OCT) to obtain cross-sectional images, three-dimensional data, and analysis data of the fundus and anterior segment using optical interference
-Fundus camera for photographing the fundus-Scanning laser opthalmoscope (SLO) for obtaining images of the fundus by laser scanning using a confocal optical system
・ Multifunction machines that combine two or more functions
多くの眼科検査では、検者が被検者に指示を出したり眼科検査装置の操作を行ったりする。近年、眼科検査装置の設置場所と異なる場所にいる検者が被検者や眼科検査装置に指示を出しつつ検査を行う遠隔検査が普及してきている(例えば特許文献1−6を参照)。遠隔検査では、検者から被検者に対して視覚的指示や聴覚的指示が与えられる。 In many ophthalmic examinations, the examiner gives instructions to the subject or operates the ophthalmic examination apparatus. In recent years, remote inspection has been widespread in which an examiner in a place different from the place where the ophthalmic examination apparatus is installed performs an examination while giving instructions to the subject or the ophthalmic examination apparatus (see, for example, Patent Documents 1-6). In the remote examination, a visual instruction and an audio instruction are given from the examiner to the subject.
遠隔検査では、検者の意図を被検者に伝えることが困難な場合や、被検者が不安を感じる場合がある。特に、被検者の傍に付き添って検査をサポートする検者がいない場合には、このような問題は顕著である。また、被検者の性別、年齢、使用言語等は様々であるが、このような被検者の属性に応じて検者の意図を伝達することは、従来の技術では困難であった。 In remote examination, it may be difficult to convey the examiner's intention to the subject, or the subject may feel anxious. In particular, such a problem is remarkable when there is no examiner who supports the examination along with the subject. In addition, although the gender, age, language used, etc. of the subject vary, it has been difficult to transmit the examiner's intention according to the subject's attributes according to the conventional technique.
本発明の目的は、遠隔検査において検者の意図を被検者に好適に伝達することにある。 An object of the present invention is to suitably transmit an examiner's intention to a subject in a remote examination.
実施形態の眼科検査システムは、眼科検査装置と、眼科検査装置に指示を送信するために検者により使用される検査指示装置とを含む。検査指示装置は、検査に関する指示情報を入力するための第1入力部と、第1入力部により入力された指示情報を眼科検査装置に送信する第1通信部とを備える。眼科検査装置は、被検眼に適用される光学素子と被検眼を検査するための検査光束を光学素子を介して被検眼に投射する投射系とを含む検査光学系と、表示部とこの表示部から出力された表示光束を光学素子を介して被検眼に導く導光系とを含む情報提示光学系と、検査指示装置から送信された指示情報を受信する第2通信部と、所定のキャラクタ画像を表示部に表示させ、第2通信部により受信された指示情報に基づいてキャラクタ画像の動作を制御する制御部とを備える。 The ophthalmic examination system according to the embodiment includes an ophthalmic examination apparatus and an examination instruction apparatus used by an examiner to transmit an instruction to the ophthalmic examination apparatus. The examination instruction apparatus includes a first input unit for inputting instruction information regarding the examination, and a first communication unit that transmits the instruction information input by the first input unit to the ophthalmic examination apparatus. An ophthalmic examination apparatus includes an inspection optical system including an optical element applied to an eye to be examined and a projection system for projecting an examination light beam for examining the eye to be examined via the optical element, a display unit, and the display unit An information presentation optical system including a light guide system that guides the display light beam output from the optical element to the eye to be inspected, a second communication unit that receives instruction information transmitted from the examination instruction device, and a predetermined character image Is displayed on the display unit, and the control unit controls the movement of the character image based on the instruction information received by the second communication unit.
実施形態によれば、遠隔検査において検者の意図を被検者に好適に伝達することが可能である。 According to the embodiment, the intention of the examiner can be suitably transmitted to the subject in the remote examination.
本発明の典型的な実施形態の幾つかの例を説明する。なお、この明細書にて引用された文献の内容や公知技術を実施形態に援用することができる。 Several examples of exemplary embodiments of the present invention are described. In addition, the content of the literature referred in this specification and well-known technique can be used for embodiment.
実施形態の眼科検査システムは、各種の施設に設置された眼科検査装置や可搬型の眼科検査装置を用いた遠隔検査に用いられる。実施形態における遠隔検査では、眼科検査装置が設置された施設にて検査をアシストする検者(内部検者)と、当該施設の外部から検査をアシストする検者(外部検者)とが関与する。典型的には、内部検者は、タブレット端末やウェアラブルデバイス(例えば無線型イヤフォン)を用いて、当該施設内にて検査を受けている全て又は一部の被検者の状況を把握して指示を送る。外部検者は、眼科検査装置を用いた検査を管理するための施設(管理センタ)に設置された情報処理装置を用いて、現在検査を受けている全て又は一部の被検者の状況を把握して指示を送る。被検者は、内部検者及び/又は外部検者からの指示に基づいて検査を進めることができる。 The ophthalmic examination system according to the embodiment is used for remote examination using an ophthalmic examination apparatus or a portable ophthalmic examination apparatus installed in various facilities. In the remote examination in the embodiment, an examiner (internal examiner) assisting the examination at the facility where the ophthalmic examination apparatus is installed and an examiner (external examiner) assisting the examination from outside the facility are involved. . Typically, an internal examiner uses a tablet terminal or wearable device (for example, a wireless earphone) to grasp and give instructions on the status of all or some of the subjects who are being examined in the facility. Send. The external examiner uses the information processing device installed in the facility (management center) for managing the examination using the ophthalmic examination apparatus to check the status of all or some of the subjects who are currently undergoing the examination. Know and send instructions. The subject can proceed with the examination based on instructions from the internal examiner and / or the external examiner.
なお、眼科検査装置が設置される施設の例として、医療機関、眼鏡店、健康診断会場、検診会場、患者の自宅、福祉施設、公共施設、検診車などがある。つまり、眼科検査装置が設置される施設には、医療機関等の固定型施設と、検診車等の移動型施設との少なくとも一方が含まれてよい。また、検者から被検者に送られる指示には、検査の進め方に関する支援や、眼科検査装置の操作や、被検者への助言などが含まれてよい。 Examples of facilities where the ophthalmic examination apparatus is installed include medical institutions, spectacle stores, health examination venues, examination venues, patient homes, welfare facilities, public facilities, and examination cars. That is, the facility where the ophthalmic examination apparatus is installed may include at least one of a fixed facility such as a medical institution and a mobile facility such as a medical examination car. In addition, the instruction sent from the examiner to the subject may include support regarding how to proceed with the examination, operation of the ophthalmic examination apparatus, advice to the subject, and the like.
また、遠隔検査の態様は上記のものには限定されない。例えば、管理センタの外(例えば検者の自宅)に設置された検査指示装置(検者端末)から管理センタを介して眼科検査装置に指示を送信するように構成することができる。 Moreover, the aspect of remote inspection is not limited to the above. For example, an instruction can be transmitted from an examination instruction device (examiner terminal) installed outside the management center (for example, the examiner's home) to the ophthalmic examination apparatus via the management center.
眼科検査装置は、被検眼の検査に用いられる任意の装置であってよく、眼科測定装置としての機能及び眼科撮影装置としての機能の少なくとも一方を備えてよい。眼科測定装置は、被検眼の特性を測定するための装置であり、その例として、視力検査装置(視標呈示装置、フォロプタ等)、眼屈折検査装置(レフラクトメータ、ケラトメータ等)、眼圧計、スペキュラーマイクロスコープ、ウェーブフロントアナライザ、視野計、マイクロペリメータなどがある。また、眼科撮影装置は、被検眼を画像化するための装置であり、その例として、OCT、眼底カメラ、SLOなどがある。更に、眼科検査装置は、測定データや撮影画像を解析するためのアプリケーションを備えていてもよい。 The ophthalmic examination apparatus may be any apparatus used for examining the eye to be examined, and may have at least one of a function as an ophthalmologic measurement apparatus and a function as an ophthalmologic imaging apparatus. An ophthalmological measurement device is a device for measuring the characteristics of an eye to be examined. Examples thereof include a visual acuity test device (a target presentation device, a phoropter, etc.), an eye refraction test device (refractometer, a keratometer, etc.) Specular microscope, wave front analyzer, perimeter, micro perimeter, etc. An ophthalmologic photographing apparatus is an apparatus for imaging an eye to be examined, and examples thereof include OCT, a fundus camera, and SLO. Further, the ophthalmic examination apparatus may include an application for analyzing measurement data and captured images.
〈眼科検査システムの構成〉
実施形態に係る眼科検査システムの構成の例を説明する。図1Aに例示された眼科検査システム1は、検査が行われるN個の施設(第1施設〜第N施設)のそれぞれと管理センタとを結ぶネットワーク(通信回線N)を利用して構築されている。<Configuration of ophthalmic examination system>
An example of the configuration of the ophthalmic examination system according to the embodiment will be described. The ophthalmic examination system 1 illustrated in FIG. 1A is constructed using a network (communication line N) that connects each of N facilities (first facility to N-th facility) to be examined and a management center. Yes.
各施設(第n施設:n=1〜N、Nは1以上の整数)には、眼科検査装置2−in(in=1〜Kn、Knは1以上の整数)が設置されている。つまり、各施設(第n施設)には、1以上の眼科検査装置2−inが設置されている。眼科検査装置2−inは、眼科検査システム1の一部を構成する。なお、眼科以外の検査を実施可能な検査装置が眼科検査システム1に含まれていてもよい。Each facility (the n Property: n = 1 to N, N is an integer of 1 or more), the ophthalmologic examination apparatus2-i n (i n = 1~K n, K n is an integer of 1 or more) is installed ing. That is, each facility (n-th facility) is 1 or more ophthalmologic examination apparatus 2-in are installed. Ophthalmologic examination apparatus 2-in constitutes a part of the ophthalmic examination system 1. Note that the ophthalmic examination system 1 may include an examination apparatus capable of conducting examinations other than ophthalmology.
本例の眼科検査装置2−inは、被検者(被検眼)の検査を実施する「検査装置」としての機能と、各種データ処理や外部装置との通信を行う「コンピュータ」としての機能の双方を備えている。他の例において、検査装置とコンピュータとを別々に設けることが可能である。この場合、検査装置とコンピュータとは互いに通信可能に構成されてよい。更に、検査装置の数とコンピュータの数とはそれぞれ任意であり、例えば単一のコンピュータと複数の検査装置とを設けることができる。Ophthalmologic examination apparatus 2-in in this example, functions as a "computer" as a function of a "check device" carrying out the inspection of the subject (the subject's eye), the communication with the various data processing and an external apparatus It has both. In another example, the inspection device and the computer can be provided separately. In this case, the inspection apparatus and the computer may be configured to be able to communicate with each other. Further, the number of inspection devices and the number of computers are arbitrary, and for example, a single computer and a plurality of inspection devices can be provided.
更に、各施設(第n施設)には、内部検者により使用される情報処理装置(内部検者端末3−n)が設置されている。内部検者端末3−nは、当該施設において使用されるコンピュータであり、例えば、タブレット端末やスマートフォン等のモバイル端末、当該施設に設置されたサーバ(施設内サーバ等)であってよい。更に、内部検者端末3−nは、無線型イヤフォン等のウェアラブルデバイスを含んでいてもよい。なお、内部検者端末3−nは、当該施設においてその機能を使用可能なコンピュータであれば十分であり、例えば、当該施設の外に設置されたコンピュータ(クラウドサーバ等)であってもよい。実施形態において、内部検者端末3−nを検査指示装置として用いることが可能である。 Furthermore, an information processing device (internal examiner terminal 3-n) used by an internal examiner is installed in each facility (n-th facility). The internal examiner terminal 3-n is a computer used in the facility, and may be, for example, a mobile terminal such as a tablet terminal or a smartphone, or a server (such as an in-facility server) installed in the facility. Furthermore, the internal examiner terminal 3-n may include a wearable device such as a wireless earphone. The internal examiner terminal 3-n may be a computer that can use the function in the facility, and may be a computer (a cloud server or the like) installed outside the facility, for example. In the embodiment, the internal examiner terminal 3-n can be used as an examination instruction apparatus.
眼科検査装置2−inと内部検者端末3−nとは、第n施設内に構築されたネットワーク(施設内LAN等)や、広域ネットワーク(インターネット等)や、近距離通信技術を介して通信を行えるように構成されてよい。The ophthalmologic examination apparatus 2-in and internal examiner terminal 3-n, and a network (Institutional LAN, etc.) that are built into the n site, a wide area network (such as the Internet) or via a short-range communication technology You may be comprised so that communication can be performed.
眼科検査装置2−inは、サーバとしての機能を備えていてよい。この構成が適用される場合、眼科検査装置2−inと内部検者端末3−nとが直接に通信を行うように構成することができる。この場合、内部検者端末3−nと管理サーバ4との間で通信を行う機能を設ける必要はない。つまり、管理サーバ4と内部検者端末3−nとの間の通信を眼科検査装置2−inを経由して行うように構成することが可能である。Ophthalmologic examination apparatus 2-in may have a function as a server. If this configuration is applied, it is possible and ophthalmologic examination apparatus 2-in and internal examiner terminal 3-n is configured to communicate directly. In this case, it is not necessary to provide a function for performing communication between the internal examiner terminal 3-n and the management server 4. In other words, it is possible to configure to perform via the ophthalmologic examination apparatus 2-in the communication between the management server 4 and the internal examiner terminal 3-n.
管理センタには管理サーバ4が設置されている。管理サーバ4は、外部検者により使用される外部検者端末5m(m=1〜M、Mは1以上の整数)とネットワーク(LAN、広域ネットワーク等)を介して通信が可能である。更に、管理サーバ4は、第1〜第N施設に設置された眼科検査装置2−inの少なくとも一部と広域ネットワークを介して通信が可能である。A management server 4 is installed in the management center. The management server 4 can communicate with an external examiner terminal 5m (m = 1 to M, M is an integer of 1 or more) used by an external examiner via a network (LAN, wide area network, etc.). Further, the management server 4 can communicate via at least a portion and a wide area network of the first to N facilities installed ophthalmic examination apparatus 2-in.
管理サーバ4は、例えば、眼科検査装置2−inと外部検者端末5mとの間の通信を中継する機能と、この通信の内容を記録する機能とを備える。また、管理サーバ4は、眼科検査装置2−inと外部検者端末5mとを対応付ける機能、つまり、眼科検査装置2−inのそれぞれに検者を割り当てる機能を備える。眼科検査装置2−inと外部検者端末5mとの間の対応付けは、一対一対応、多対一対応、及び、一対多対応のいずれでもよい。また、管理サーバ4は、眼科検査装置2−inと外部検者端末5mとの間の通信の内容に既定のミスが発生したことを検知し、これを記録するとともに、外部検者端末5m等に警告を通知するよう構成されていてよい。The management server 4 includes, for example, the function of relaying communication between the ophthalmologic examination apparatus 2-in and the external examiner terminal 5 m, and a function of recording the contents of the communication. The management server 4 is provided with functions for associating the ophthalmologic examination apparatus 2-in and the external examiner terminal 5 m, i.e., the ability to assign examiner to each of the ophthalmic examination apparatus 2-in. Correspondence between the ophthalmologic examination apparatus 2-in and the external examiner terminal 5m is one-to-one correspondence, many-to-one correspondence, and may be any of one-to-many correspondence. Further, the management server 4 detects that the default miss the contents of the communication between the ophthalmologic examination apparatus 2-in and the external examiner terminal 5m occurs, and records this, external examiner terminal 5m Or the like.
管理サーバ4は、1以上のコンピュータを含む。管理サーバ4が複数のコンピュータを含む場合の例を図1Bに示す。図1Bに示す管理サーバ4は、マスターサーバ6とR個のローカルサーバ7−rとを含む(Rは2以上の整数)。マスターサーバ6と各ローカルサーバ7−rとは、通信回線Nを介して通信が可能である。マスターサーバ6は、第1〜第N施設のそれぞれに設置された装置(眼科検査装置2−inが含まれる。内部検者端末3−nが更に含まれてもよい。)と通信回線Nを介して通信が可能である。マスターサーバ6は、管理センタ以外の場所に設置されていてよい。また、マスターサーバ6は、2以上の情報処理装置を含んでいてよい。The management server 4 includes one or more computers. An example in which the management server 4 includes a plurality of computers is shown in FIG. 1B. The management server 4 shown in FIG. 1B includes a master server 6 and R local servers 7-r (R is an integer of 2 or more). The master server 6 and each local server 7-r can communicate with each other via the communication line N. The master server 6, the first to N facility device installed in each of (the ophthalmologic examination apparatus 2-in is included. Internal examiner terminal 3-n may be further included.) And the communication line N Can be communicated through. The master server 6 may be installed at a place other than the management center. The master server 6 may include two or more information processing devices.
本例では2以上の管理センタが設けられていてよい。ローカルサーバ7−rは、例えば、いずれかの管理センタに設置され、当該管理センタ内の外部検者端末5mを管理する。マスターサーバ6は、2以上のローカルサーバ7−rを管理する。 In this example, two or more management centers may be provided. For example, the local server 7-r is installed in one of the management centers and manages the external examiner terminal 5m in the management center. The master server 6 manages two or more local servers 7-r.
管理サーバ4の構成については後述する。管理サーバ4が複数のコンピュータを含む場合、後述の管理サーバ4の構成要素が複数のコンピュータに分散配置される。また、任意の構成要素を2以上のコンピュータに重複的に設けることができる。それにより、例えば分散処理や冗長化が実現される。 The configuration of the management server 4 will be described later. When the management server 4 includes a plurality of computers, components of the management server 4 described later are distributed and arranged on the plurality of computers. Moreover, arbitrary components can be provided redundantly in two or more computers. Thereby, for example, distributed processing and redundancy are realized.
外部検者端末5mは、眼科検査装置2−inを用いて実施されている検査を指導・管理する検者により使用されるコンピュータを含む。実施形態において、外部検者端末5mを検査指示装置として用いることが可能である。以下の実施形態では、外部検者端末5及び内部検者端末3−nの双方を検査指示装置として使用可能な例を説明するが、これらの一方のみを検査指示装置として使用可能な例や、これらの少なくとも一方と他のコンピュータとを検査指示装置として使用可能な例や、他のコンピュータのみを検査指示装置として使用可能な例を適用することも可能である。External examiner terminal 5m includes a computer used by the examiner to guide and manage the checks carried out using ophthalmologic examination apparatus 2-in. In the embodiment, the external examiner terminal 5m can be used as an examination instruction apparatus. In the following embodiment, an example in which both the external examiner terminal 5 and the internal examiner terminal 3-n can be used as an examination instruction apparatus, but only one of these can be used as an examination instruction apparatus, It is also possible to apply an example in which at least one of these and another computer can be used as an inspection instruction device, or an example in which only another computer can be used as an inspection instruction device.
〈眼科検査装置の構成〉
眼科検査装置2−inの構成について説明する。図2に例示された眼科検査装置2は、図1Aに示す複数の眼科検査装置2−inのそれぞれに相当する。同様に、内部検者端末3−nのそれぞれを内部検者端末3と記載し、外部検者端末5mのそれぞれを外部検者端末5と記載することがある。<Configuration of ophthalmic examination apparatus>
Description will be given of a configuration of an ophthalmologic examination apparatus2-i n. Ophthalmologic examination apparatus illustrated in Figure 2. 2 corresponds to each of the plurality of ophthalmologic examination apparatus 2-in shown in FIG. 1A. Similarly, each of the internal examiner terminals 3-n may be referred to as an internal examiner terminal 3, and each of the external examiner terminals 5m may be referred to as an external examiner terminal 5.
眼科検査装置2は、制御部20と、検査部21と、検査状況情報生成部22aと、通信要求生成部22bと、ユーザインターフェイス(UI)部23と、通信部24とを備える。これら構成要素は、一体的に(つまり単一の筐体内に)設けられていてもよいし、2以上の筐体内に分散配置されていてもよい。前者の例として、レフラクトメータ、ケラトメータ、眼圧計、スペキュラーマイクロスコープ、ウェーブフロントアナライザ、視野計、マイクロペリメータ、OCT、眼底カメラ、SLOなどがある。後者の例として、視標呈示装置とフォロプタとを含む視力検査装置がある。また、制御部20の一部又は全部をパーソナルコンピュータや携帯端末に設けることができる。また、ユーザインターフェイス部23の一部又は全部を、パーソナルコンピュータ、携帯端末、テレビ受像機、スマートテレビなどに設けることができる。 The ophthalmic examination apparatus 2 includes a control unit 20, an examination unit 21, an examination status information generation unit 22 a, a communication request generation unit 22 b, a user interface (UI) unit 23, and a communication unit 24. These components may be provided integrally (that is, in a single housing), or may be distributed in two or more housings. Examples of the former include a refractometer, a keratometer, a tonometer, a specular microscope, a wavefront analyzer, a perimeter, a microperimeter, an OCT, a fundus camera, and an SLO. As an example of the latter, there is a visual acuity inspection device including a visual target presenting device and a phoropter. Further, part or all of the control unit 20 can be provided in a personal computer or a portable terminal. Further, part or all of the user interface unit 23 can be provided in a personal computer, a portable terminal, a television receiver, a smart television, or the like.
〈制御部20〉
制御部20は、各種の制御や演算を実行する。制御部20はプロセッサを含む。なお、本明細書において「プロセッサ」は、例えば、CPU(Central Processing Unit)、GPU(Graphics Processing Unit)、ASIC(Application Specific Integrated Circuit)、プログラマブル論理デバイス(例えば、SPLD(Simple Programmable Logic Device)、CPLD(Complex Programmable Logic Device)、FPGA(Field Programmable Gate Array))等の回路を意味する。制御部20は、例えば、記憶回路や記憶装置に格納されているコンピュータプログラムを読み出し実行することで、実施形態に係る機能を実現する。制御部20は、更に、RAM、ROM、ハードディスクドライブ、ソリッドステートドライブなどを含んでいてよい。<Control unit 20>
The control unit 20 executes various controls and calculations. The control unit 20 includes a processor. In this specification, the “processor” is, for example, a CPU (Central Processing Unit), a GPU (Graphics Processing Unit), an ASIC (Application Specific Integrated Circuit), or a programmable logic device (eg, SPLD (Simple LD). It means a circuit such as (Complex Programmable Logic Device) or FPGA (Field Programmable Gate Array). For example, the control unit 20 reads and executes a computer program stored in a storage circuit or a storage device, thereby realizing the functions according to the embodiment. The control unit 20 may further include a RAM, a ROM, a hard disk drive, a solid state drive, and the like.
〈出力制御部201〉
制御部20は出力制御部201を備える。出力制御部201は、内部検者端末3又は外部検者端末5から眼科検査装置2に送信された情報を出力するための制御を行う。出力される情報の例として視覚情報と音声情報がある。視覚情報は、視覚系により認識される情報であり、文字列情報(テキスト情報)や画像情報を含む。文字列情報は、例えば、検者の指示を表す文字メッセージを含む。画像情報は、例えば、検者の顔や手の動画像や、検者の指示を表すマークを含む。出力制御部201は、後述のLCD214や表示装置231を制御することにより視覚情報を出力させる。音声情報は、聴覚系により認識される情報であり、警告音や音声メッセージを含む。出力制御部201は、後述の音声出力装置233を制御することにより聴覚情報を出力させる。出力制御部201が実行する処理の具体例は後述される。<Output control unit 201>
The control unit 20 includes an output control unit 201. The output control unit 201 performs control for outputting information transmitted from the internal examiner terminal 3 or the external examiner terminal 5 to the ophthalmic examination apparatus 2. Examples of output information include visual information and audio information. The visual information is information recognized by the visual system, and includes character string information (text information) and image information. The character string information includes, for example, a character message representing the examiner's instruction. The image information includes, for example, a moving image of the examiner's face and hand, and a mark representing the examiner's instruction. The output control unit 201 outputs visual information by controlling an LCD 214 and a display device 231 described later. The voice information is information recognized by the auditory system and includes a warning sound and a voice message. The output control unit 201 outputs auditory information by controlling an audio output device 233 described later. A specific example of processing executed by the output control unit 201 will be described later.
〈キャラクタ制御部202〉
出力制御部201にはキャラクタ制御部202が設けられている。キャラクタ制御部202は、上記の視覚情報の出力を制御し、特に、被検者に向けた指示をキャラクタ(キャラクタ画像)を用いて表現するための制御を行う。被検者に向けた指示は、外部検者、内部検者及び眼科検査装置2のいずれかからの指示である。キャラクタは、人や動物や仮想生物やロボット等の画像であり、いわゆるアバターを含んでよい。アバターとは、指示の発信元(外部検者、内部検者、眼科検査装置2等)の分身となるキャラクタである。<Character control unit 202>
The output control unit 201 is provided with a character control unit 202. The character control unit 202 controls the output of the visual information, and particularly performs control for expressing an instruction directed to the subject using a character (character image). The instruction directed to the subject is an instruction from any of the external examiner, the internal examiner, and the ophthalmic examination apparatus 2. The character is an image of a person, an animal, a virtual creature, a robot, or the like, and may include a so-called avatar. An avatar is a character that is a part of an instruction source (external examiner, internal examiner, ophthalmic examination apparatus 2, etc.).
キャラクタを制御する技術としては、例えば、特表2006−520053号公報、特開2016−1885号公報、特開2014−149836号公報、特開2015−210547号公報等に記載されている。キャラクタ制御部202は、これらに代表される公知技術を用いて制御を実行する。キャラクタ制御部202には、そのためのプロセッサ及びコンピュータプログラムが含まれる。キャラクタ制御部202が実行する処理の例については後述する。 Techniques for controlling characters are described in, for example, JP-T-2006-520053, JP-A-2006-1885, JP-A-2014-149836, JP-A-2015-210547, and the like. The character control unit 202 performs control using known techniques represented by these. The character control unit 202 includes a processor and a computer program for that purpose. An example of processing executed by the character control unit 202 will be described later.
〈検査部21〉
検査部21は、制御部20による制御を受けて被検眼の検査を実行する。検査部21は、眼科検査装置2の種別に応じた構成を備える。検査部21の構成は、公知の構成の少なくとも一部であってよく、或いは公知の構成を含んでよい。検査部21は、以下のような光学系と、図示しない機構(アクチュエータ、動力伝達機構等)を含む。<Inspection unit 21>
The examination unit 21 performs examination of the eye to be examined under the control of the control unit 20. The inspection unit 21 has a configuration corresponding to the type of the ophthalmic examination apparatus 2. The configuration of the inspection unit 21 may be at least a part of a known configuration, or may include a known configuration. The inspection unit 21 includes the following optical system and mechanisms (not shown) (actuators, power transmission mechanisms, etc.).
検査部21が被検眼Eの特性を測定する機能を備える場合、検査部21は、例えば、被検眼に光を投射するための光学系を少なくとも備え、被検眼に投射された光の戻り光を検出するための光学系を更に備える。更に、検査部21は、被検眼に固視標を投影するための光学系や、アライメントを行うための光学系や、フォーカシングを行うための光学系など、各種機能の光学系を備えていてよい。また、検査部21は、戻り光の検出結果(画像信号、映像信号等)を処理するためのプロセッサを含んでよい。 When the inspection unit 21 has a function of measuring the characteristics of the eye E, the inspection unit 21 includes, for example, at least an optical system for projecting light to the eye to be examined, and returns light returned to the eye to be examined. An optical system for detection is further provided. Furthermore, the examination unit 21 may include an optical system having various functions such as an optical system for projecting a fixation target onto the eye to be examined, an optical system for performing alignment, and an optical system for performing focusing. . Further, the inspection unit 21 may include a processor for processing the return light detection result (image signal, video signal, etc.).
検査部21が被検眼Eを撮影する機能を備える場合、検査部21は、例えば、被検眼に光を投射するための光学系と、被検眼に投射された光の戻り光を検出するための光学系とを含む。更に、検査部21は、測定機能の場合と同様に、各種の光学系を含んでよい。また、検査部21は、戻り光の検出結果(画像信号、映像信号等)を処理するためのプロセッサを含んでよい。 When the inspection unit 21 has a function of photographing the eye E, the inspection unit 21 detects, for example, an optical system for projecting light to the eye to be examined and return light of the light projected on the eye to be examined. And an optical system. Further, the inspection unit 21 may include various optical systems as in the case of the measurement function. Further, the inspection unit 21 may include a processor for processing the return light detection result (image signal, video signal, etc.).
以上のような光学系は検査光学系211に相当する。検査光学系211は、光学素子212と投射系213とを含む。光学素子212は、投射系213から出力された光束を被検眼Eに導くために被検眼Eに適用される。光学素子212は、例えば、レンズ(対物レンズ等)、プリズム(対物プリズム等)、凹面鏡(放物面鏡等)、ガラス板などの各種光学素子のいずれかを含んでよい。 The above optical system corresponds to the inspection optical system 211. The inspection optical system 211 includes an optical element 212 and a projection system 213. The optical element 212 is applied to the eye E to guide the light beam output from the projection system 213 to the eye E. The optical element 212 may include any of various optical elements such as a lens (objective lens, etc.), a prism (objective prism, etc.), a concave mirror (parabolic mirror, etc.), and a glass plate.
投射系213は、被検眼Eを検査するための光束(検査光束)を光学素子212を介して被検眼Eに投射する。投射系213にはLCD214が設けられている。LCD214は、制御部20の制御を受けて動作する。LCD214は、検査に用いられる情報(検査情報:視標、固視標等)を表示する機能と、内部検者端末3又は外部検者端末5から送信された情報を表示する機能とを担う。後者は情報提示光学系の機能であり、LCD214は情報提示光学系の表示部に相当する。更に、投射系213は、内部検者端末3又は外部検者端末5から送信された情報に相当するLCD214からの光束(表示光束)を光学素子212を介して被検眼Eに導く導光系の機能を奏する。つまり、本実施形態の検査部21では、検査光学系と情報提示光学系とが共通の構成となっている。これに対し、検査光学系と情報提示光学系とを別々に構成することも可能であり、その例は後述される。 The projection system 213 projects a light beam (inspection light beam) for inspecting the eye E onto the eye E through the optical element 212. The projection system 213 is provided with an LCD 214. The LCD 214 operates under the control of the control unit 20. The LCD 214 has a function of displaying information (examination information: visual target, fixation target, etc.) used for the inspection and a function of displaying information transmitted from the internal examiner terminal 3 or the external examiner terminal 5. The latter is a function of the information presentation optical system, and the LCD 214 corresponds to a display unit of the information presentation optical system. Further, the projection system 213 is a light guide system that guides a light beam (display light beam) from the LCD 214 corresponding to information transmitted from the internal examiner terminal 3 or the external examiner terminal 5 to the eye E through the optical element 212. Play a function. That is, in the inspection unit 21 of the present embodiment, the inspection optical system and the information presentation optical system have a common configuration. On the other hand, the inspection optical system and the information presentation optical system can be configured separately, and an example thereof will be described later.
〈検査状況情報生成部22a〉
検査状況情報生成部22aは、被検眼Eの検査の状況を表す検査状況情報を生成する。検査状況情報は、検査の進行状況(検査のフェーズ)、検査の途中結果(例えば、視力検査における視標の呈示履歴)、検査時間(例えば、検査開始時刻、経過時間)などを含む。眼科検査装置2が被検眼Eや被検者を撮影する機能を備える場合、検査状況情報は、被検眼E等の撮影画像(静止画像、動画像)を含んでよい。また、検査状況情報は、音声入力装置234を介して入力された被検者の音声情報を含んでよい。生成された検査状況情報は、例えば、内部検者端末3及び/又は外部検者端末5に送信され、検者によって参照される。また、本実施形態では、生成された検査状況情報は通信要求生成部22bに送られる。検査状況情報生成部22aは、例えば、プロセッサと、検査を実施するためのコンピュータプログラム又はこれを監視するコンピュータプログラムとを含む。<Inspection status information generation unit 22a>
The examination status information generation unit 22a generates examination status information indicating the examination status of the eye E. The inspection status information includes the progress of the inspection (inspection phase), the intermediate result of the inspection (for example, the presentation history of the target in the visual acuity test), the inspection time (for example, the inspection start time, elapsed time), and the like. When the ophthalmic examination apparatus 2 has a function of photographing the eye E or the subject, the examination status information may include a photographed image (still image, moving image) of the eye E or the like. Further, the examination status information may include voice information of the subject input via the voice input device 234. The generated examination status information is transmitted to the internal examiner terminal 3 and / or the external examiner terminal 5, for example, and is referred to by the examiner. In the present embodiment, the generated inspection status information is sent to the communication request generation unit 22b. The inspection status information generation unit 22a includes, for example, a processor and a computer program for performing an inspection or a computer program for monitoring the computer program.
なお、眼科検査装置2から内部検者端末3及び/又は外部検者端末5に向けて送信される情報の全てが検査状況情報生成部22aにより処理される必要はない。例えば、被検眼Eの動画像や被検者の音声情報をそのまま内部検者端末3及び/又は外部検者端末5に向けて送信することができる。それにより、被検眼Eの状態や被検者の状態や被検者のリクエストを実質的にタイムラグなく検者に提供することができる。 Note that not all information transmitted from the ophthalmic examination apparatus 2 toward the internal examiner terminal 3 and / or the external examiner terminal 5 needs to be processed by the examination status information generation unit 22a. For example, the moving image of the eye E and the voice information of the subject can be transmitted to the internal examiner terminal 3 and / or the external examiner terminal 5 as they are. Thereby, the state of the eye E, the state of the subject, and the request of the subject can be provided to the examiner substantially without time lag.
〈通信要求生成部22b〉
通信要求生成部22bは、内部検者及び/又は外部検者を読み出すための要求(通信要求)を生成する。通信要求生成部22bは、被検者からの指示に対応して通信要求を生成する処理と、検査状況情報生成部22aにより生成された検査状況情報に基づいて通信要求を生成する処理との少なくとも一方を実行可能に構成される。<Communication request generator 22b>
The communication request generation unit 22b generates a request (communication request) for reading out an internal examiner and / or an external examiner. The communication request generation unit 22b includes at least a process for generating a communication request in response to an instruction from the subject and a process for generating a communication request based on the examination status information generated by the examination status information generation unit 22a. One is configured to be executable.
被検者からの指示はユーザインターフェイス部23を用いて入力される。指示の入力は、例えば、後述の操作装置232及び/又は音声入力装置234を介して行われる。具体例として、被検者は、操作装置232を用いて、内部検者及び/又は外部検者を呼び出すための所定の操作(ボタンの押下、レバーの傾倒など)を行う。また、被検者は、後述の表示装置231により表示されているソフトウェアキーを操作装置242を用いて操作することにより、或いは、タッチパネルディスプレイに表示されているソフトウェアキーを指で操作することにより、呼び出し要求を入力することができる。また、検査内容を把握していない旨のメッセージや、内部検者及び/又は外部検者の指示を必要とする旨のメッセージを被検者が発声すると、その音声情報を音声入力装置234により検出することができる。本例によれば、被検者の要望に応じてアシストを提供することが可能である。 An instruction from the subject is input using the user interface unit 23. The instruction is input via, for example, an operation device 232 and / or a voice input device 234 described later. As a specific example, the subject uses the operation device 232 to perform a predetermined operation (such as pressing a button or tilting a lever) for calling an internal examiner and / or an external examiner. Further, the subject operates a software key displayed on the display device 231 described later using the operation device 242 or operates a software key displayed on the touch panel display with a finger. A call request can be entered. In addition, when the subject utters a message that the examination content is not grasped or a message that the instruction of the internal examiner and / or the external examiner is necessary, the voice information is detected by the voice input device 234. can do. According to this example, it is possible to provide assistance according to the request of the subject.
検査状況情報に基づき通信要求を生成する場合の例を説明する。検査状況情報生成部22aは、検査状況を監視しつつ検査状況情報を逐次に生成する。通信要求生成部22bは、生成された検査状況情報が所定の条件に該当するか否か判定する。所定の条件としては、例えば、検査が進行していないこと、検査の途中結果(例えば、視力検査における視標の呈示履歴)が不適当であること、検査開始からの経過時間が長いこと、瞼が閉じている時間が長いこと、被検眼Eの固視が不適用であることなどがある。検査が進行していないことは、例えば、検査フェーズが所定時間以上移行していないこと(例えば同じ視標が提示されていること)を検出することによって認識される。検査の途中結果が不適当であることは、例えば、視標の提示順序が不適当であること(例えば、応答内容が収束していかないこと)を検出することによって認識される。瞼が閉じていることや被検眼Eの固視状態は、被検眼Eの撮影画像を解析することにより認識される。この画像解析は、例えば瞳孔の検出を含む。本例によれば、アシストが必要な状況を自動で検出することが可能である。 An example in which a communication request is generated based on inspection status information will be described. The inspection status information generation unit 22a sequentially generates inspection status information while monitoring the inspection status. The communication request generation unit 22b determines whether the generated inspection status information meets a predetermined condition. The predetermined conditions include, for example, that the examination is not progressing, that the result of the examination is in progress (for example, the target presentation history in the visual acuity test), that the elapsed time from the start of the examination is long, May be closed for a long time, and fixation of the eye E may not be applied. The fact that the examination is not progressing is recognized, for example, by detecting that the examination phase has not shifted for a predetermined time or longer (for example, that the same target is presented). Inappropriate results during the examination are recognized, for example, by detecting that the target presentation order is inappropriate (for example, the response content does not converge). Whether the eyelid is closed or the fixation state of the eye E is recognized by analyzing a captured image of the eye E. This image analysis includes, for example, pupil detection. According to this example, it is possible to automatically detect a situation requiring assistance.
通信要求生成部22bにより生成された通信要求は通信部24によって管理サーバ4及び/又は内部検者端末3に送信される。 The communication request generated by the communication request generation unit 22 b is transmitted to the management server 4 and / or the internal examiner terminal 3 by the communication unit 24.
〈ユーザインターフェイス部23〉
ユーザインターフェイス部23は、被検者(及び内部検者)に向けた情報を出力する機能と、情報入力や操作指示を行うための機能とを備える。ユーザインターフェイス部23は、前者の機能のための表示装置231及び音声出力装置233と、後者の機能のための操作装置232及び音声入力装置234とを含む。<User interface unit 23>
The user interface unit 23 has a function of outputting information for the examinee (and the internal examiner) and a function for inputting information and operating instructions. The user interface unit 23 includes a display device 231 and a voice output device 233 for the former function, and an operation device 232 and a voice input device 234 for the latter function.
表示装置231は、フラットパネルディスプレイ等の表示デバイスを含む。操作装置232は、眼科検査装置2の筐体や外部に設けられたボタン、キー、ジョイスティック、ノブ、操作パネル等の操作デバイスを含む。また、操作装置232は、眼科検査装置2に接続されたパーソナルコンピュータ等の操作デバイス(マウス、キーボード、トラックパッド、ボタン、タッチパネル等)を含んでよい。ユーザインターフェイス部23は、表示装置231と操作装置232とが一体化されたタッチパネル等のデバイスや、グラフィカルユーザインターフェイス(GUI)を含んでよい。また、ユーザインターフェイス部23は、音声入力装置234から入力された被検者の音声に基づき操作や入力を行うためのプロセッサ及びコンピュータプログラムを含んでもよい。 The display device 231 includes a display device such as a flat panel display. The operation device 232 includes operation devices such as buttons, keys, joysticks, knobs, operation panels, and the like provided on the housing of the ophthalmic examination apparatus 2 and outside. The operation device 232 may include an operation device such as a personal computer connected to the ophthalmic examination apparatus 2 (a mouse, a keyboard, a trackpad, a button, a touch panel, etc.). The user interface unit 23 may include a device such as a touch panel in which the display device 231 and the operation device 232 are integrated, or a graphical user interface (GUI). The user interface unit 23 may include a processor and a computer program for performing operations and inputs based on the subject's voice input from the voice input device 234.
音声出力装置233は、例えば、出力される音声情報(音声信号)を処理する回路と、処理された音声情報を出力するスピーカとを含む。また、音声入力装置234は、音声情報を電気信号に変換するマイクロフォンと、この電気信号を処理する回路とを含む。 The audio output device 233 includes, for example, a circuit that processes output audio information (audio signal) and a speaker that outputs the processed audio information. The voice input device 234 includes a microphone that converts voice information into an electric signal and a circuit that processes the electric signal.
〈通信部24〉
通信部24は、管理サーバ4との間でデータ通信を行う。更に、通信部24は、内部検者端末3との間でデータ通信を実行可能であってよい。データ通信の方式は任意である。例えば、通信部24は、インターネットに準拠した通信インターフェイス、LANに準拠した通信インターフェイス、近距離通信に準拠した通信インターフェイスなどを含む。データ通信は有線通信でも無線通信でもよい。通信部24は、管理サーバ4や内部検者端末3以外の外部装置との間でデータ通信が可能であってもよい。通信部24により送受信されるデータは暗号化されてよい。その場合、例えば、制御部20は、送信データを暗号化する暗号化処理部と、受信データを復号化する復号化処理部とを含む。<Communication unit 24>
The communication unit 24 performs data communication with the management server 4. Further, the communication unit 24 may be able to execute data communication with the internal examiner terminal 3. The method of data communication is arbitrary. For example, the communication unit 24 includes a communication interface compliant with the Internet, a communication interface compliant with LAN, a communication interface compliant with near field communication, and the like. Data communication may be wired communication or wireless communication. The communication unit 24 may be capable of data communication with an external device other than the management server 4 and the internal examiner terminal 3. Data transmitted and received by the communication unit 24 may be encrypted. In this case, for example, the control unit 20 includes an encryption processing unit that encrypts transmission data and a decryption processing unit that decrypts reception data.
〈内部検者端末の構成〉
内部検者端末3の構成について説明する。図3に例示された内部検者端末3は、制御部30と、ユーザインターフェイス(UI)部31と、通信部32とを備える。<Configuration of internal examiner terminal>
The configuration of the internal examiner terminal 3 will be described. The internal examiner terminal 3 illustrated in FIG. 3 includes a control unit 30, a user interface (UI) unit 31, and a communication unit 32.
〈制御部30〉
制御部30は、内部検者端末3の各部の制御と、各種の演算処理とを実行する。制御部30はプロセッサを含む。制御部30は、更に、RAM、ROM、ハードディスクドライブ、ソリッドステートドライブなどを含んでいてよい。<Control unit 30>
The control part 30 performs control of each part of the internal examiner terminal 3, and various arithmetic processes. The control unit 30 includes a processor. The control unit 30 may further include a RAM, a ROM, a hard disk drive, a solid state drive, and the like.
〈ユーザインターフェイス部31〉
ユーザインターフェイス部31は、ユーザに向けた情報を出力する機能と、ユーザが情報入力や操作指示を行うための機能とを備える。ユーザインターフェイス部31は、眼科検査装置2のユーザインターフェイス23と同様に、表示装置311、操作装置312、音声出力装置313、及び音声入力装置314を含む。<User interface unit 31>
The user interface unit 31 includes a function for outputting information directed to the user and a function for allowing the user to input information and give an operation instruction. Similar to the user interface 23 of the ophthalmic examination apparatus 2, the user interface unit 31 includes a display device 311, an operation device 312, an audio output device 313, and an audio input device 314.
〈通信部32〉
通信部32は、管理サーバ4及び眼科検査装置2との間でデータ通信を行う。データ通信の方式や暗号化については、眼科検査装置2の通信部24と同様であってよい。<Communication unit 32>
The communication unit 32 performs data communication between the management server 4 and the ophthalmic examination apparatus 2. The data communication method and encryption may be the same as those of the communication unit 24 of the ophthalmic examination apparatus 2.
〈外部検者端末の構成〉
外部検者端末5の構成について説明する。図4に例示された外部検者端末5は、制御部50と、撮影部51と、ユーザインターフェイス(UI)部52と、送信情報生成部53と、通信部54とを備える。<Configuration of external examiner terminal>
The configuration of the external examiner terminal 5 will be described. The external examiner terminal 5 illustrated in FIG. 4 includes a control unit 50, a photographing unit 51, a user interface (UI) unit 52, a transmission information generation unit 53, and a communication unit 54.
〈制御部50〉
制御部50は、外部検者端末5の各部の制御と、各種の演算処理とを実行する。制御部50はプロセッサを含む。制御部50は、更に、RAM、ROM、ハードディスクドライブ、ソリッドステートドライブなどを含んでいてよい。<Control unit 50>
The control part 50 performs control of each part of the external examiner terminal 5, and various arithmetic processes. The control unit 50 includes a processor. The control unit 50 may further include a RAM, a ROM, a hard disk drive, a solid state drive, and the like.
〈撮影部51〉
撮影部51は、検者を動画撮影するために使用され、例えばビデオカメラを含む。撮影対象は、被検者への指示を表現するために用いられる身体部位(例えば、顔、上半身、手など)を含む。<Shooting unit 51>
The imaging unit 51 is used to shoot a video of the examiner and includes, for example, a video camera. The imaging target includes a body part (for example, face, upper body, hand, etc.) used for expressing an instruction to the subject.
〈ユーザインターフェイス部52〉
ユーザインターフェイス部52は、検者に向けた情報を出力する機能と、検者が情報入力や操作指示を行うための機能とを備える。ユーザインターフェイス部52は、眼科検査装置2のユーザインターフェイス23と同様に、表示装置521、操作装置522、音声出力装置523、及び音声入力装置524を含む。<User interface unit 52>
The user interface unit 52 has a function of outputting information directed to the examiner and a function for the examiner to input information and give an operation instruction. Similar to the user interface 23 of the ophthalmic examination apparatus 2, the user interface unit 52 includes a display device 521, an operation device 522, an audio output device 523, and an audio input device 524.
制御部50は、例えば、眼科検査装置2から逐次に送信される検査状況情報を表示し、かつ、被検者への指示を入力するための画面(GUI等)を表示装置521に表示させる。また、制御部50は、被検者の音声情報を音声出力装置523に出力させる。検者は、表示情報や音声情報を参照して指示の内容を決定し、操作装置522を用いてそれを入力する。また、音声による指示は、音声入力装置524を介して入力される。 For example, the control unit 50 displays examination status information sequentially transmitted from the ophthalmic examination apparatus 2 and causes the display device 521 to display a screen (such as a GUI) for inputting an instruction to the subject. Further, the control unit 50 causes the voice output device 523 to output the voice information of the subject. The examiner determines the content of the instruction with reference to the display information and audio information, and inputs it using the operation device 522. In addition, a voice instruction is input via the voice input device 524.
〈送信情報生成部53〉
送信情報生成部53は、検者がユーザインターフェイス52を用いて入力した内容(指示)に基づいて、眼科検査装置2を使用している被検者に向けた情報(送信情報)を生成する。送信情報生成部53は、例えば、プロセッサと、上記画面(GUI)に連係して実行される送信情報生成プログラムとを含む。<Transmission information generation unit 53>
The transmission information generation unit 53 generates information (transmission information) for the subject using the ophthalmic examination apparatus 2 based on the contents (instructions) input by the examiner using the user interface 52. The transmission information generation unit 53 includes, for example, a processor and a transmission information generation program that is executed in association with the screen (GUI).
なお、外部検者端末5から眼科検査装置2に向けて送信される情報の全てが送信情報生成部53に処理される必要はない。例えば、検者の動画像や音声情報をそのまま眼科検査装置2に向けて送信することができる。それにより、検者の指示を実質的にタイムラグなく被検者に提供することができる。 Note that not all information transmitted from the external examiner terminal 5 toward the ophthalmic examination apparatus 2 need be processed by the transmission information generation unit 53. For example, the examiner's moving image and audio information can be transmitted to the ophthalmic examination apparatus 2 as they are. As a result, the examiner's instruction can be provided to the subject with substantially no time lag.
〈通信部54〉
通信部54は、管理サーバ4との間でデータ通信を行う。データ通信の方式や暗号化については、眼科検査装置2の通信部24と同様であってよい。<Communication unit 54>
The communication unit 54 performs data communication with the management server 4. The data communication method and encryption may be the same as those of the communication unit 24 of the ophthalmic examination apparatus 2.
〈管理サーバの構成〉
管理サーバ4の構成について説明する。図5に例示された管理サーバ4は、制御部40と、通信確立部41と、制御管理部42と、通信部43とを備える。これら構成要素の少なくとも1つは、例えば、図1Bに示すマスターサーバ6及びローカルサーバ7−rに分散配置されたハードウェア及びソフトウェアの協働によって実現される。<Management server configuration>
The configuration of the management server 4 will be described. The management server 4 illustrated in FIG. 5 includes a control unit 40, a communication establishment unit 41, a control management unit 42, and a communication unit 43. At least one of these components is realized by, for example, cooperation of hardware and software distributed in the master server 6 and the local server 7-r illustrated in FIG. 1B.
〈制御部40〉
制御部40は、管理サーバ4の各部の制御を実行する。例えば、制御部40の一部(マスター制御部)はマスターサーバ6に設けられており、このマスター制御部が各ローカルサーバ7−rの制御を行う。制御部40は、その他の演算処理を実行可能であってよい。制御部40はプロセッサを含む。制御部40は、更に、RAM、ROM、ハードディスクドライブ、ソリッドステートドライブなどを含んでいてよい。<Control unit 40>
The control unit 40 executes control of each unit of the management server 4. For example, a part of the control unit 40 (master control unit) is provided in the master server 6, and this master control unit controls each local server 7-r. The control unit 40 may be capable of executing other arithmetic processes. The control unit 40 includes a processor. The control unit 40 may further include a RAM, a ROM, a hard disk drive, a solid state drive, and the like.
制御部40は、通信制御部401と転送制御部402とを含む。 The control unit 40 includes a communication control unit 401 and a transfer control unit 402.
通信制御部401は、眼科検査装置2、内部検者端末3及び外部検者端末5の間の通信の確立に関する制御を実行する。例えば、通信制御部401は、眼科検査装置2、内部検者端末3及び外部検者端末5のうちから後述の選択部412により選択された装置のそれぞれに向けて、通信を確立するための制御信号を送る。 The communication control unit 401 executes control related to establishment of communication among the ophthalmic examination apparatus 2, the internal examiner terminal 3, and the external examiner terminal 5. For example, the communication control unit 401 controls to establish communication toward each of the devices selected by the selection unit 412 described later from the ophthalmic examination apparatus 2, the internal examiner terminal 3, and the external examiner terminal 5. Send a signal.
転送制御部402は、通信確立部41(及び通信制御部401)により通信が確立された装置の間における情報のやりとりに関する制御を行う。例えば、転送制御部402は、通信確立部41(及び通信制御部401)により通信が確立された少なくとも2つの装置のうちの1つの装置から送信された情報を他の装置に転送する。具体例として、眼科検査装置2と外部検者端末5との間の通信が確立された場合、転送制御部402は、眼科検査装置2(又は外部検者端末5)から送信された情報を外部検者端末5(又は眼科検査装置2)に転送する。このとき、転送制御部402は、眼科検査装置2等から送信された情報を加工して得られた情報を外部検者端末5等に送信するようにしてもよい。例えば、転送制御部402は、眼科検査装置2等から送信された情報の一部を抽出して外部検者端末5等に送信することができる。また、眼科検査装置2等から送信された情報(例えば被検眼Eの画像データ)を管理サーバ4又は他の装置によって解析し、その解析結果(及び元の情報)を外部検者端末5等に送信するようにしてもよい。なお、情報の加工は、このような抽出や解析には限定されず、任意のデータ処理を含んでいてよい。 The transfer control unit 402 performs control related to the exchange of information between devices established by the communication establishment unit 41 (and the communication control unit 401). For example, the transfer control unit 402 transfers information transmitted from one of the at least two devices whose communication has been established by the communication establishment unit 41 (and the communication control unit 401) to another device. As a specific example, when communication between the ophthalmic examination apparatus 2 and the external examiner terminal 5 is established, the transfer control unit 402 transmits information transmitted from the ophthalmic examination apparatus 2 (or the external examiner terminal 5) to the outside. The data is transferred to the examiner terminal 5 (or the ophthalmic examination apparatus 2). At this time, the transfer control unit 402 may transmit information obtained by processing the information transmitted from the ophthalmic examination apparatus 2 or the like to the external examiner terminal 5 or the like. For example, the transfer control unit 402 can extract a part of the information transmitted from the ophthalmic examination apparatus 2 or the like and transmit it to the external examiner terminal 5 or the like. Further, information transmitted from the ophthalmic examination apparatus 2 or the like (for example, image data of the eye E to be examined) is analyzed by the management server 4 or another apparatus, and the analysis result (and original information) is transmitted to the external examiner terminal 5 or the like. You may make it transmit. Information processing is not limited to such extraction or analysis, and may include arbitrary data processing.
〈通信確立部41〉
通信確立部41は、眼科検査装置2、内部検者端末3及び外部検者端末5のうちから選択された少なくとも2つの装置の間の通信を確立するための処理を実行する。本実施形態において「通信の確立」とは、例えば、(1)通信が切断された状態から一方向通信を確立すること、(2)通信が切断された状態から双方向通信を確立すること、(3)受信のみが可能な状態から送信も可能な状態に切り替えること、(4)送信のみが可能な状態から受信も可能な状態に切り替えること、のうちの少なくとも1つを含む概念である。具体例として、「通信の確立」には、外部検者端末5を用いて外部検者が検査を監視している状態(受信のみ可能な状態)から、被検者に指示を送信可能な状態に切り替えることが含まれてよい。<Communication establishment unit 41>
The communication establishment unit 41 executes a process for establishing communication between at least two devices selected from the ophthalmic examination apparatus 2, the internal examiner terminal 3, and the external examiner terminal 5. In this embodiment, “establishing communication” means, for example, (1) establishing one-way communication from a disconnected state, (2) establishing two-way communication from a disconnected state, This is a concept including at least one of (3) switching from a state where only reception is possible to a state where transmission is possible, and (4) switching from a state where only transmission is possible to a state where reception is possible. As a specific example, the “establishment of communication” includes a state in which an instruction can be transmitted to the subject from a state in which the external examiner uses the external examiner terminal 5 to monitor the examination (a state in which only the reception is possible). Switching may be included.
更に、通信確立部41は、確立されている通信を切断する処理を実行可能である。本実施形態において「通信の切断」とは、例えば、(1)一方向通信が確立された状態から通信を切断すること、(2)双方向通信が確立された状態から通信を切断すること、(3)双方向通信が確立された状態から一方向通信に切り替えること、(4)送信及び受信が可能な状態から受信のみが可能な状態に切り替えること、(5)送信及び受信が可能な状態から送信のみが可能な状態に切り替えること、のうちの少なくとも1つを含む概念である。具体例として、「通信の切断」には、外部検者端末5を用いて外部検者が被検者に指示を送信可能な状態(送信及び受信が可能な状態)から、検査の監視のみが可能な状態(受信のみ可能な状態)に切り替えることが含まれてよい。 Furthermore, the communication establishment unit 41 can execute processing for disconnecting established communication. In this embodiment, “disconnection of communication” means, for example, (1) disconnecting communication from a state where unidirectional communication is established, (2) disconnecting communication from a state where bidirectional communication is established, (3) Switching from a state where bidirectional communication is established to one-way communication, (4) Switching from a state where transmission and reception are possible to a state where only reception is possible, and (5) a state where transmission and reception are possible This is a concept including at least one of switching to a state in which only transmission is possible. As a specific example, “disconnection of communication” includes only monitoring of an examination from a state in which an external examiner can transmit an instruction to the subject using the external examiner terminal 5 (a state in which transmission and reception are possible). Switching to a possible state (a state in which only reception is possible) may be included.
眼科検査装置2、内部検者端末3、及び外部検者端末5のそれぞれは、他の装置(そのユーザ)を呼び出すための通信要求(呼び出し要求)と、他の2つの装置の間の通信に割り込むための通信要求(割り込み要求)とのうちの少なくとも一方を管理サーバ4に送信することができる。呼び出し要求及び割り込み要求は、手動又は自動で発信される。管理サーバ4(通信部43)は、眼科検査装置2、内部検者端末3、又は外部検者端末5から送信された通信要求を受信する。 Each of the ophthalmic examination apparatus 2, the internal examiner terminal 3, and the external examiner terminal 5 transmits a communication request (call request) for calling another apparatus (its user) and communication between the other two apparatuses. At least one of the communication request (interrupt request) for interruption can be transmitted to the management server 4. The call request and the interrupt request are transmitted manually or automatically. The management server 4 (communication unit 43) receives a communication request transmitted from the ophthalmic examination apparatus 2, the internal examiner terminal 3, or the external examiner terminal 5.
実施形態において、通信確立部41は選択部412を含んでいてよい。選択部412は、受信された通信要求に基づいて、眼科検査装置2、内部検者端末3、及び外部検者端末5のうち、通信要求を送信した装置以外の1以上の装置を選択する。例えば、眼科検査装置2からの通信要求を受けた場合、選択部412は、例えば、この眼科検査装置2が設置されている施設の内部検者端末3と、いずれかの管理センタ(いずれかのローカルサーバ7−r)に設置された外部検者端末5のいずれかとの一方又は双方を選択する。通信確立部41は、選択された内部検者端末3及び/又は外部検者端末5と、通信要求を発信した眼科検査装置2との間の通信を確立する。これにより、眼科検査装置2の被検者の要求に応じて検者を自動で選択して検査支援を提供することができる。 In the embodiment, the communication establishment unit 41 may include a selection unit 412. Based on the received communication request, the selection unit 412 selects one or more devices other than the device that transmitted the communication request among the ophthalmic examination apparatus 2, the internal examiner terminal 3, and the external examiner terminal 5. For example, when receiving a communication request from the ophthalmic examination apparatus 2, the selection unit 412, for example, the internal examiner terminal 3 of the facility where the ophthalmic examination apparatus 2 is installed, and any management center (any One or both of the external examiner terminals 5 installed in the local server 7-r) is selected. The communication establishment unit 41 establishes communication between the selected internal examiner terminal 3 and / or external examiner terminal 5 and the ophthalmic examination apparatus 2 that has transmitted the communication request. Thereby, according to the request | requirement of the subject of the ophthalmic examination apparatus 2, an examiner can be selected automatically and examination assistance can be provided.
通信要求に応じた装置の選択は、例えば、予め設定された属性に基づいて実行される。この属性の例として、検査の種別や、検査のアシストに要求される専門度・熟練度や、言語の種別などがある。本例を実現するために、通信確立部41は、予め作成された属性情報が記憶された記憶部411を含んでいてよい。属性情報には、内部検者端末3及び/又はその使用者(内部検者)の属性と、外部検者端末5及び/又はその使用者(外部検者)の属性とを表す。ここで、内部検者及び外部検者は、例えば、事前に割り当てられた検者IDによって識別される。また、内部検者端末3及び外部検者端末5は、例えば、事前に割り当てられた装置IDやネットワークアドレスによって識別される。典型的な例において、属性情報は、各検者(内部検者及び外部検者のそれぞれ)の属性として、当該検者が支援可能な検査の種別と、当該検者の専門度・熟練度と、当該検者が使用可能な言語の種別とを含む。 The selection of the device according to the communication request is executed based on, for example, a preset attribute. Examples of this attribute include the type of inspection, the degree of specialization / skilledness required for inspection assistance, and the type of language. In order to realize this example, the communication establishment unit 41 may include a storage unit 411 in which attribute information created in advance is stored. The attribute information represents attributes of the internal examiner terminal 3 and / or its user (internal examiner) and attributes of the external examiner terminal 5 and / or its user (external examiner). Here, the internal examiner and the external examiner are identified by, for example, an examiner ID assigned in advance. The internal examiner terminal 3 and the external examiner terminal 5 are identified by, for example, a device ID or a network address assigned in advance. In a typical example, the attribute information includes, as attributes of each examiner (internal examiner and external examiner), the type of examination that can be supported by the examiner, and the degree of expertise and skill of the examiner. And the type of language that can be used by the examiner.
選択部412が属性情報を参照する場合、眼科検査装置2、内部検者端末3、又は外部検者端末5から送信される通信要求は、属性に関する情報を含んでいてよい。例えば、眼科検査装置2から送信される通信要求(例えば呼び出し要求)は、次のいずれかを含んでいてよい:(1)眼科検査装置2により実施されている検査の種別を示す情報;(2)検査支援の難易度を示す情報(検査が困難な被検者又は被検者であることを示す情報、検査の進行状況を示す情報など);(3)被検者の疾患名や年齢等を示す情報;(4)被検者の使用言語を示す情報。選択部412は、受信された通信要求と属性情報とに基づいて、いずれかの内部検者端末3及びいずれかの外部検者端末5の少なくとも一方を選択する。このとき、選択部412は、通信要求に含まれる属性に関する情報と、属性情報に含まれる情報とを照合する。それにより、選択部412は、例えば次のいずれかの検者に対応する内部検者端末3及び/又は外部検者端末5を選択する:(1)当該検査種別の支援が可能な検者;(2)当該難易度の検査の支援が可能な検者;(3)当該疾患や当該年齢の被検者の支援が可能な検者;(4)当該言語の使用が可能な検者。ここで、内部検者と内部検者端末3との対応、及び、外部検者と外部検者端末5との対応は、例えば、システムへのログイン時に検者端末(装置IDが付与されている)に入力された検者IDによってなされる。 When the selection unit 412 refers to the attribute information, the communication request transmitted from the ophthalmologic examination apparatus 2, the internal examiner terminal 3, or the external examiner terminal 5 may include information regarding the attribute. For example, a communication request (for example, a call request) transmitted from the ophthalmic examination apparatus 2 may include any of the following: (1) Information indicating the type of examination performed by the ophthalmic examination apparatus 2; (2 ) Information indicating the degree of difficulty of test support (information indicating that the test is difficult or subject, information indicating the progress of the test, etc.); (3) Disease name, age, etc. of the test subject (4) Information indicating the language used by the subject. The selection unit 412 selects at least one of any of the internal examiner terminals 3 and any of the external examiner terminals 5 based on the received communication request and attribute information. At this time, the selection unit 412 collates the information related to the attribute included in the communication request with the information included in the attribute information. Thereby, the selection unit 412 selects, for example, the internal examiner terminal 3 and / or the external examiner terminal 5 corresponding to any of the following examiners: (1) an examiner capable of supporting the examination type; (2) An examiner who can support the examination of the difficulty level; (3) An examiner who can support the subject of the disease or the age; (4) An examiner who can use the language. Here, the correspondence between the internal examiner and the internal examiner terminal 3 and the correspondence between the external examiner and the external examiner terminal 5 are, for example, an examiner terminal (apparatus ID is given when logging into the system). ) Is made based on the examiner ID entered in ().
〈制御管理部42〉
制御管理部42は、眼科検査装置2による情報出力制御を管理するための処理を実行する。特に、本例の制御管理部42は、検者からの指示に応じて眼科検査装置2が実行した制御を学習し、以降の制御にそれを反映させるための処理を実行する。このような処理を実行するために、制御管理部42は、記憶部421と、検索部422とを備える。<Control management unit 42>
The control management unit 42 executes processing for managing information output control by the ophthalmic examination apparatus 2. In particular, the control management unit 42 of this example learns the control executed by the ophthalmic examination apparatus 2 in response to an instruction from the examiner, and executes a process for reflecting it in the subsequent control. In order to execute such processing, the control management unit 42 includes a storage unit 421 and a search unit 422.
制御管理部42は、眼科検査装置2の検査状況情報生成部22aにより生成された検査状況情報を収集する。具体的には、検査状況情報生成部22aにより生成された検査状況情報の少なくとも一部が、管理サーバ4に送信されて制御管理部42に格納される。 The control management unit 42 collects the examination status information generated by the examination status information generation unit 22 a of the ophthalmic examination apparatus 2. Specifically, at least a part of the inspection status information generated by the inspection status information generation unit 22 a is transmitted to the management server 4 and stored in the control management unit 42.
また、制御管理部42は、検者からの指示内容(指示情報)を収集することができる。具体的には、外部検者端末5(又は内部検者端末3)から眼科検査装置2に向けて送信された指示情報が制御管理部42に格納される。指示情報の例として、外部検者端末5の送信情報生成部53により生成された送信情報や、内部検者端末3により同様に生成された情報がある。 Further, the control management unit 42 can collect instruction contents (instruction information) from the examiner. Specifically, the instruction information transmitted from the external examiner terminal 5 (or the internal examiner terminal 3) to the ophthalmic examination apparatus 2 is stored in the control management unit 42. Examples of the instruction information include transmission information generated by the transmission information generation unit 53 of the external examiner terminal 5 and information similarly generated by the internal examiner terminal 3.
更に、制御管理部42は、検者からの指示情報に応じて眼科検査装置2が実行した制御を表す制御情報を収集することができる。具体的には、制御部20(特に出力制御部201)により実行された制御を表す制御情報が、管理サーバ4に送られて制御管理部42に格納される。なお、制御管理部42は、外部検者端末5(又は内部検者端末3)からの指示情報に基づいて制御情報を生成するよう構成されてよい。或いは、制御管理部42は、外部検者端末5(又は内部検者端末3)からの指示情報を制御情報とみなすよう構成されてよい。 Furthermore, the control management unit 42 can collect control information representing control executed by the ophthalmic examination apparatus 2 in accordance with instruction information from the examiner. Specifically, control information representing control executed by the control unit 20 (particularly, the output control unit 201) is sent to the management server 4 and stored in the control management unit 42. Note that the control management unit 42 may be configured to generate control information based on instruction information from the external examiner terminal 5 (or the internal examiner terminal 3). Alternatively, the control management unit 42 may be configured to regard the instruction information from the external examiner terminal 5 (or the internal examiner terminal 3) as control information.
〈記憶部421〉
制御管理部42は、眼科検査装置2からの検査状況情報(の少なくとも一部)と、外部検者端末5(及び/又は内部検者端末3)からの指示情報に基づき眼科検査装置2により実行された制御を表す制御情報(の少なくとも一部)とを関連付けて、記憶部421に格納する。この処理の例を以下に説明する。<Storage unit 421>
The control management unit 42 is executed by the ophthalmic examination apparatus 2 based on (at least a part of) examination status information from the ophthalmic examination apparatus 2 and instruction information from the external examiner terminal 5 (and / or the internal examiner terminal 3). Control information (at least a part of the control information) representing the control performed is stored in the storage unit 421 in association with it. An example of this processing will be described below.
眼科検査装置2が検査状況情報を生成すると、この検査状況情報は管理サーバ4を経由して外部検者端末5に送られる。外部検者は、この検査状況情報に応じた指示を外部検者端末5に入力する。外部検者端末5は、入力された指示に応じた指示情報を生成する。この指示情報は、管理サーバ4を経由して眼科検査装置2に送られる。眼科検査装置2の出力制御部201は、この指示情報に応じた情報(視覚情報、聴覚情報等)をユーザインターフェイス部23に出力させる。この出力制御の少なくとも一部を表す制御情報は、管理サーバ4に送られる。制御管理部42は、この一連の流れにおける検査状況情報と制御情報(又は指示情報)とを関連付けて記憶部421に格納する。本例によれば、検査の状況に応じて検者が指示した制御の内容が格納される。それにより、検査の状況と検者の指示内容との関係が記憶部421に蓄積される。 When the ophthalmic examination apparatus 2 generates examination status information, this examination status information is sent to the external examiner terminal 5 via the management server 4. The external examiner inputs an instruction according to the examination status information to the external examiner terminal 5. The external examiner terminal 5 generates instruction information corresponding to the input instruction. This instruction information is sent to the ophthalmic examination apparatus 2 via the management server 4. The output control unit 201 of the ophthalmic examination apparatus 2 causes the user interface unit 23 to output information (visual information, auditory information, etc.) corresponding to the instruction information. Control information representing at least a part of the output control is sent to the management server 4. The control management unit 42 associates the inspection status information and control information (or instruction information) in this series of flows and stores them in the storage unit 421. According to this example, the contents of the control instructed by the examiner according to the state of the examination are stored. As a result, the relationship between the examination status and the content of the examiner's instruction is accumulated in the storage unit 421.
制御管理部42は、蓄積される検査状況情報及び/又は制御情報を分類することができる。検査状況情報の分類の例として、被検者の属性(年齢、性別、疾患等)に応じた分類や、検査の種別に応じた分類や、検査の進行状況(検査のフェーズ)に応じた分類や、検査の途中結果(例えば、視力検査における視標の呈示履歴)に応じた分類や、検査時間(例えば、経過時間の長さ)に応じた分類などがある。制御情報の分類の例としては、検査状況情報の上記分類例に加え、検者の専門度・熟練度に応じた分類や、使用言語に応じた分類などがある。 The control management unit 42 can classify the stored examination status information and / or control information. As an example of classification of examination status information, classification according to subject attributes (age, gender, disease, etc.), classification according to examination type, classification according to examination progress (examination phase) In addition, there are a classification according to an intermediate result of an examination (for example, a presentation history of a target in a visual acuity examination), a classification according to an examination time (for example, the length of elapsed time), and the like. Examples of the control information classification include, in addition to the above-described classification examples of examination status information, classification according to the level of expertise and proficiency of the examiner, classification according to the language used, and the like.
〈検索部422〉
検索部422は、眼科検査装置2の検査状況情報生成部22aにより検査状況情報が新たに生成されたときに、この新たな検査状況情報に対応する制御情報を記憶部241から検索する。この検索処理の例を以下に説明する。<Search unit 422>
When the examination status information is newly generated by the examination status information generation unit 22a of the ophthalmic examination apparatus 2, the search unit 422 searches the storage unit 241 for control information corresponding to the new examination status information. An example of this search process will be described below.
眼科検査装置2の検査状況情報生成部22aにより新たな検査状況情報が生成されると、この新たな検査状況情報は管理サーバ4に送られる。制御管理部42は、この新たな検査状況情報に対応する過去の検査状況情報(例えば上記分類におけるいずれかの類)を特定し、特定された過去の検査状況情報に関連付けられた制御情報を記憶部421から取得する。なお、「新たな検査状況情報に対応する制御情報」には、新たな検査状況情報と同一の過去の検査状況情報に関連付けられた制御情報だけでなく、新たな検査状況情報と同一又は類似とみなされる過去の検査状況情報(例えば、新たな検査状況情報が含まれる類)に関連付けられた制御情報も含まれる。 When new examination status information is generated by the examination status information generation unit 22 a of the ophthalmic examination apparatus 2, the new examination status information is sent to the management server 4. The control management unit 42 identifies past examination status information (for example, any class in the above classification) corresponding to the new examination status information, and stores control information associated with the identified past examination status information. Obtained from the unit 421. The “control information corresponding to the new examination status information” includes not only the control information associated with the same previous examination status information as the new examination status information but also the same or similar to the new examination status information. Control information associated with past examination status information (for example, a class including new examination status information) is also included.
〈通信部43〉
通信部43は、眼科検査装置2、内部検者端末3及び外部検者端末5のそれぞれとの間でデータ通信を行う。データ通信の方式や暗号化については、眼科検査装置2の通信部24と同様であってよい。<Communication unit 43>
The communication unit 43 performs data communication with each of the ophthalmic examination apparatus 2, the internal examiner terminal 3, and the external examiner terminal 5. The data communication method and encryption may be the same as those of the communication unit 24 of the ophthalmic examination apparatus 2.
〈使用形態〉
本実施形態の眼科検査システム1の使用形態の典型的な例を説明する。<Usage pattern>
A typical example of the usage pattern of the ophthalmic examination system 1 of the present embodiment will be described.
〈使用形態の第1の例〉
眼科検査システム1の使用形態の第1の例として、被検者からの呼び出しに応じてキャラクタを用いたアシストを提供するための使用形態を図6を参照しつつ説明する。<First example of usage pattern>
As a first example of the usage pattern of the ophthalmic examination system 1, a usage pattern for providing assist using a character in response to a call from a subject will be described with reference to FIG.
(S1:検査開始)
眼科検査装置2を用いた被検眼Eの検査が開始される。なお、眼科検査装置2と、内部検者端末3及び/又は外部検者端末5との間の通信(双方向通信)をこの段階から開始するようにしてもよい。また、検査の開始を受けて、制御部20は、検査状況情報生成部22aに検査状況情報の生成を開始させる。(S1: Start of inspection)
Inspection of the eye E to be examined using the ophthalmic examination apparatus 2 is started. Note that communication (two-way communication) between the ophthalmic examination apparatus 2 and the internal examiner terminal 3 and / or the external examiner terminal 5 may be started from this stage. In response to the start of the inspection, the control unit 20 causes the inspection state information generation unit 22a to start generating inspection state information.
(S2:検者呼び出し要求)
被検者は、検者のアシストが必要なとき、ユーザインターフェイス部23を利用して検者を呼び出す。検者のアシストが必要な場合の例として、検査のやり方が分からないとき、疲れたとき、検査のステップを戻したいときなどがある。また、呼び出し要求を入力するためのユーザインターフェイス部23の利用方法の例として、操作装置232による所定の操作の実施や、音声入力装置234による音声の入力がある。(S2: Examiner call request)
The examinee calls the examiner using the user interface unit 23 when the examiner needs assistance. Examples of cases where the examiner's assistance is necessary include when the user does not know how to perform the inspection, when he / she is tired, or when he / she wants to return to the inspection step. In addition, examples of a method of using the user interface unit 23 for inputting a call request include performing a predetermined operation using the operation device 232 and inputting a voice using the voice input device 234.
(S3:要求・情報の送信)
制御部20は、ステップS2で入力された検者呼び出し要求(通信要求)を所定の情報とともに管理サーバ4に送信するよう通信部24を制御する。検者呼び出し要求とともに送信される情報の例として、眼科検査装置2に予め割り当てられた識別情報(装置ID)、被検者に予め割り当てられた識別情報(被検者ID)、眼科検査装置2が設置された施設に予め割り当てられた識別情報(施設ID)、現時点までに生成された検査状況情報の少なくとも一部、検者呼び出し要求の内容などがある。(S3: Request / information transmission)
The control unit 20 controls the communication unit 24 to transmit the examiner call request (communication request) input in step S2 to the management server 4 together with predetermined information. Examples of information transmitted together with the examiner call request include identification information (device ID) pre-assigned to the ophthalmic examination apparatus 2, identification information pre-assigned to the subject (subject ID), and the ophthalmic examination apparatus 2. Identification information (facility ID) preliminarily assigned to the facility where is installed, at least a part of the examination status information generated up to the present time, the content of the examiner call request, and the like.
(S4:検者端末の選択)
管理サーバ4は、ステップS3で眼科検査装置2から送信された検者呼び出し要求及び情報を通信部43によって受信する。選択部412は、当該被検者をアシストする検者を選択する。つまり、選択部412は、当該被検者が検査を行っている施設に存在する内部検者端末3のいずれか、及び/又は、外部検者端末5のいずれかを選択する。(S4: Selection of examiner terminal)
The management server 4 receives the examiner call request and information transmitted from the ophthalmic examination apparatus 2 in step S <b> 3 by the communication unit 43. The selection unit 412 selects an examiner who assists the subject. That is, the selection unit 412 selects either the internal examiner terminal 3 and / or the external examiner terminal 5 present in the facility where the subject is inspecting.
そのために、選択部412は、例えば、各外部検者端末5の稼動状態(通信の確立情報)を監視する機能を備え、現在稼働していない外部検者端末5(被検者のアシストを現在行っていない検者)のいずれかを選択することができる。それにより、他の被検者に対するアシストを現在行っていない外部検者を、呼び出し要求を送った被検者のアシストに割り当てることができる。このような選択処理は、例えば、各外部検者端末5の稼動状態をフラグの有無等により管理することで実現可能である。 For this purpose, the selection unit 412 has, for example, a function of monitoring the operating state (communication establishment information) of each external examiner terminal 5, and the external examiner terminal 5 that is not currently operating (the subject's assistance is currently provided). One of the examiners who have not gone can be selected. Thereby, an external examiner who is not currently assisting another subject can be assigned to the assist of the subject who sent the call request. Such a selection process can be realized, for example, by managing the operating state of each external examiner terminal 5 based on the presence or absence of a flag or the like.
他の例として、選択部412は、内部検者端末3及び外部検者端末5のうち通信要求に対応する一方の装置の通信が現に確立されているか否か判定し、確立されていない場合には当該一方の装置と眼科検査装置2との間の通信を確立し、確立されている場合には他方の装置と眼科検査装置2との間の通信を確立することができる。具体例として、当該施設内の全ての内部検者端末3が稼働中である場合(つまり他の眼科検査装置2又は外部検者端末5との間の通信が確立されている場合)、選択部412は、稼働中でない外部検者端末5のいずれかを選択することができる。また、当該施設内のいずれかの内部検者端末3が稼働中でない場合、選択部412は、この内部検者端末3を選択することができる。このような構成によれば、内部検者端末3と外部検者端末5の稼働状態を総合的に勘案することで、被検者へのアシストを迅速に提供することができる。なお、本例についても、例えば、各内部検者端末3の稼動状態及び各外部検者端末5の稼動状態をフラグの有無等により管理することで実現可能である。 As another example, the selection unit 412 determines whether the communication of one device corresponding to the communication request among the internal examiner terminal 3 and the external examiner terminal 5 is actually established, and when it is not established Establishes communication between the one apparatus and the ophthalmic examination apparatus 2, and if established, establishes communication between the other apparatus and the ophthalmic examination apparatus 2. As a specific example, when all the internal examiner terminals 3 in the facility are in operation (that is, when communication with another ophthalmic examination apparatus 2 or external examiner terminal 5 is established), the selection unit 412 can select any of the external examiner terminals 5 that are not in operation. Further, when any of the internal examiner terminals 3 in the facility is not in operation, the selection unit 412 can select the internal examiner terminal 3. According to such a configuration, it is possible to quickly provide assistance to the subject by comprehensively considering the operating states of the internal examiner terminal 3 and the external examiner terminal 5. Note that this example can also be realized, for example, by managing the operating state of each internal examiner terminal 3 and the operating state of each external examiner terminal 5 by the presence or absence of a flag or the like.
(S5:通信確立のための制御信号の送信)
通信制御部401は、ステップS4で選択された検者端末(内部検者端末3及び/又は外部検者端末5)に、当該検者端末と眼科検査装置2との間の通信を確立するための制御信号を送信する。図6の例は、外部検者端末5に制御信号が送信される場合を表す。(S5: Transmission of control signal for establishing communication)
The communication control unit 401 establishes communication between the examiner terminal and the ophthalmic examination apparatus 2 to the examiner terminal (internal examiner terminal 3 and / or external examiner terminal 5) selected in step S4. The control signal is transmitted. The example of FIG. 6 represents a case where a control signal is transmitted to the external examiner terminal 5.
(S6:双方向通信の開始)
ステップS5で送信された制御信号により、外部検者端末5と眼科検査装置2との間の双方向通信が確立される。このとき、更に、内部検者端末3と外部検者端末5との間の通信の確立、及び、内部検者端末3と眼科検査装置2との間の通信の確立のうち、少なくとも一方を行うこともできる。なお、前述したように、これ以前の段階で通信を確立するよう構成することも可能である。(S6: Start of bidirectional communication)
Bidirectional communication between the external examiner terminal 5 and the ophthalmic examination apparatus 2 is established by the control signal transmitted in step S5. At this time, at least one of establishment of communication between the internal examiner terminal 3 and the external examiner terminal 5 and establishment of communication between the internal examiner terminal 3 and the ophthalmic examination apparatus 2 is further performed. You can also. As described above, it is also possible to configure to establish communication at an earlier stage.
(S7:撮影開始)
管理サーバ4の転送制御部402は、ステップS3で眼科検査装置2から送信された情報を外部検者端末5に送る。外部検者端末5の制御部50は、撮影部51を制御して検者の動画撮影を開始させる。このとき、検者が発する音声の入力も開始される。撮影部51により逐次に取得されるフレームは、リアルタイムで管理サーバ4を介して眼科検査装置2に転送される。この処理は転送制御部402によって実行される。(S7: Start shooting)
The transfer control unit 402 of the management server 4 sends the information transmitted from the ophthalmic examination apparatus 2 to the external examiner terminal 5 in step S3. The control unit 50 of the external examiner terminal 5 controls the photographing unit 51 to start photographing of the examiner's video. At this time, voice input from the examiner is also started. Frames sequentially acquired by the imaging unit 51 are transferred to the ophthalmic examination apparatus 2 via the management server 4 in real time. This process is executed by the transfer control unit 402.
(S8:キャラクタ表示・音声出力の開始)
眼科検査装置2は、外部検者端末5から逐次に送信されるフレーム及び音声情報を受信する。出力制御部201は、逐次に受信される情報に基づいて、LCD214、表示装置231及び音声出力装置233のうちのいずれかを制御する。(S8: Character display / voice output start)
The ophthalmic examination apparatus 2 receives frames and audio information that are sequentially transmitted from the external examiner terminal 5. The output control unit 201 controls any one of the LCD 214, the display device 231, and the audio output device 233 based on sequentially received information.
本例では、キャラクタ制御部202が、検者の分身となるキャラクタ(アバター)をLCD214に表示させる。複数のキャラクタが準備されている場合、キャラクタ制御部202は、例えば被検者の属性や検者の属性や検査の種別などに応じてキャラクタを選択することができる。更に、出力制御部201が、検者が発した音声や合成音声等を音声出力装置233に出力させる。出力制御部201は、キャラクタの動作と音声の出力とを同期させることができる(つまり、これらを連係させることができる)。また、出力制御部201は、検者の動画像をリアルタイムで表示することができる。このような処理により、検者の指示をキャラクタ等によって被検者に伝達することが可能となる。 In this example, the character control unit 202 causes the LCD 214 to display a character (avatar) serving as an examiner's alternation. When a plurality of characters are prepared, the character control unit 202 can select a character according to, for example, the subject's attributes, the examiner's attributes, the examination type, and the like. Further, the output control unit 201 causes the voice output device 233 to output voices, synthesized voices, and the like produced by the examiner. The output control unit 201 can synchronize the action of the character and the output of the voice (that is, they can be linked). Further, the output control unit 201 can display a moving image of the examiner in real time. By such processing, the examiner's instruction can be transmitted to the subject by a character or the like.
検者は、被検者の音声や操作をリアルタイムで把握することができる。このような双方向の情報のやりとりは、主として管理サーバ4の転送制御部402によって実現される。 The examiner can grasp the voice and operation of the subject in real time. Such bidirectional exchange of information is mainly realized by the transfer control unit 402 of the management server 4.
(S9:情報の表示開始)
検者によるアシスト作業を容易化するために、外部検者端末5の制御部50は、前述した画面(GUI等)を表示装置521に表示させ、眼科検査装置2から管理サーバ4を介して転送された情報(特に検査状況情報)をこの画面に表示させることができる。新たな検査状況情報を受けると、制御部50は表示内容を更新する。それにより、眼科検査装置2を用いて行われている検査の状況を実質的にリアルタイムで把握することができ、視覚情報や音声情報を利用して適切なタイミングで適切なアシストを提供することができる。(S9: Information display start)
In order to facilitate the assisting work by the examiner, the control unit 50 of the external examiner terminal 5 displays the above-described screen (GUI or the like) on the display device 521 and transfers it from the ophthalmic examination device 2 via the management server 4. Information (especially inspection status information) that has been made can be displayed on this screen. Upon receiving new examination status information, the control unit 50 updates the display content. As a result, the status of the examination performed using the ophthalmic examination apparatus 2 can be grasped substantially in real time, and appropriate assistance can be provided at appropriate timing using visual information and audio information. it can.
(S10:指示の入力開始)
検者は、操作装置522(GUI)を利用して指示を入力する。指示の内容の例として、検査の変更、文字列情報の提示、画像情報の提示などがある。また、GUI以外の手段を利用した指示として、身振り手振りによる指示や、音声による指示などがある。(S10: Start inputting instructions)
The examiner inputs an instruction using the operation device 522 (GUI). Examples of the contents of the instruction include change of examination, presentation of character string information, presentation of image information, and the like. In addition, as instructions using means other than the GUI, there are instructions by gestures and instructions by voice.
(S11:情報の生成開始)
送信情報生成部53は、ステップS10で入力された内容(指示)に基づいて、被検者に向けた送信情報を生成する。送信情報の生成は、例えば、検者が指示の入力を行う度に実行される。(S11: Information generation start)
The transmission information generation unit 53 generates transmission information for the subject based on the contents (instruction) input in step S10. The generation of the transmission information is executed each time the examiner inputs an instruction, for example.
(S12:情報の送信開始)
外部検者端末5は、ステップS11で生成された送信情報を管理サーバ4を介して眼科検査装置2に送信する。この処理は転送制御部402によって実現される。(S12: Information transmission start)
The external examiner terminal 5 transmits the transmission information generated in step S11 to the ophthalmic examination apparatus 2 via the management server 4. This process is realized by the transfer control unit 402.
(S13:キャラクタの制御開始)
眼科検査装置2は、ステップS12で外部検者端末5から送信された送信情報を受信する。出力制御部201は、送信情報に基づいて、LCD214に表示されたキャラクタの動作を制御し、かつ、音声出力装置233を制御する。このとき、出力制御部201は、キャラクタの動作と音声の出力とを同期させることができる。更に、出力制御部201は、送信情報に基づく文字列情報や画像情報をLCD214や表示装置231に表示させることができる。(S13: Character control start)
The ophthalmic examination apparatus 2 receives the transmission information transmitted from the external examiner terminal 5 in step S12. The output control unit 201 controls the movement of the character displayed on the LCD 214 and controls the audio output device 233 based on the transmission information. At this time, the output control unit 201 can synchronize the character movement and the voice output. Furthermore, the output control unit 201 can display character string information and image information based on transmission information on the LCD 214 and the display device 231.
キャラクタの制御の例を説明する。ステップS10で説明したように、検者が入力する指示には、操作装置522を用いた指示や、身振り手振りによる指示や、音声による指示などがある。なお、指示の入力方法はこれらに限定されない。 An example of character control will be described. As described in step S <b> 10, the instructions input by the examiner include an instruction using the operation device 522, an instruction by gesture gesture, an instruction by voice, and the like. The instruction input method is not limited to these.
操作装置522を用いた指示は、各種のキー(ハードウェアキー、ソフトウェアキー)を用いた操作である。各キーや各操作内容に対して、キャラクタの制御内容が予め対応付けられている。この対応情報は、眼科検査装置2、外部検者端末5(内部検者端末3)、及び管理サーバ4のうちの少なくとも1つに予め記憶されている。外部検者端末5に記憶されている場合、例えば、制御部50が、操作されたキー(及び/又はその操作内容)に対応する制御内容を特定し、これを送信情報として出力する。眼科検査装置2又は管理サーバ4に対応情報が記憶されている場合、外部検者端末5から発信された送信情報(指示情報)に基づいて、制御部20又は40が制御内容を特定する。キャラクタ制御部202は、この制御内容に基づいて、LCD214に表示されているキャラクタを動かす。例えば、キャラクタ制御部202は、キャラクタとともに表示されているオブジェクト(例えば視標)を指差すようにキャラクタを制御する。音声出力との同期制御が行われる場合、キャラクタ制御部202は、音声出力に合わせてキャラクタの口の部分を動かしたり他の部位又は全身を動かしたりすることができる。 The instruction using the operation device 522 is an operation using various keys (hardware key, software key). The control content of the character is associated with each key and each operation content in advance. This correspondence information is stored in advance in at least one of the ophthalmic examination apparatus 2, the external examiner terminal 5 (internal examiner terminal 3), and the management server 4. When stored in the external examiner terminal 5, for example, the control unit 50 specifies the control content corresponding to the operated key (and / or its operation content), and outputs this as transmission information. When the correspondence information is stored in the ophthalmic examination apparatus 2 or the management server 4, the control unit 20 or 40 specifies the control content based on the transmission information (instruction information) transmitted from the external examiner terminal 5. The character control unit 202 moves the character displayed on the LCD 214 based on this control content. For example, the character control unit 202 controls the character to point at an object (for example, a visual target) displayed together with the character. When synchronization control with voice output is performed, the character control unit 202 can move the mouth portion of the character or move other parts or the whole body in accordance with the voice output.
身振り手振りで指示が入力された場合、撮影部51により得られる動画像に基づいてキャラクタの制御等を行うことができる。例えば、眼科検査装置2、外部検者端末5(内部検者端末3)、及び管理サーバ4のうちの少なくとも1つは、次の要素を備える:検者の動作と制御内容とが対応付けられた対応情報を予め記憶する記憶装置;外部検者端末5からの動画像を解析して検者の動作を検出し、検出された動作に対応する制御内容を対応情報に基づき特定するプロセッサ。動画像を解析して検者の動作を検出する処理は、公知の画像解析技術を利用して実現される。 When an instruction is input by gesture gesture, the character can be controlled based on the moving image obtained by the photographing unit 51. For example, at least one of the ophthalmologic examination apparatus 2, the external examiner terminal 5 (internal examiner terminal 3), and the management server 4 includes the following elements: the action of the examiner and the control content are associated with each other. A storage device that stores the correspondence information in advance; a processor that analyzes a moving image from the external examiner terminal 5 to detect an action of the examiner and specifies control content corresponding to the detected action based on the correspondence information. The process of analyzing the moving image and detecting the examiner's movement is realized using a known image analysis technique.
音声で指示が入力された場合、音声入力装置524を介して入力される音声情報に基づいてキャラクタの制御等を行うことが可能である。例えば、眼科検査装置2、外部検者端末5(内部検者端末3)、及び管理サーバ4のうちの少なくとも1つは、次の要素を備える:所定の文字列と制御内容とが対応付けられた対応情報を予め記憶する記憶装置;外部検者端末5からの音声情報を解析して検者が発声した文字列を特定し、特定された文字列に対応する制御内容を対応情報に基づき特定するプロセッサ。音声情報を解析して文字列を特定する処理は、公知の音声解析技術を利用して実現される。 When an instruction is input by voice, it is possible to control a character based on voice information input via the voice input device 524. For example, at least one of the ophthalmic examination apparatus 2, the external examiner terminal 5 (internal examiner terminal 3), and the management server 4 includes the following elements: a predetermined character string and control content are associated with each other. A storage device that stores the correspondence information in advance; the voice information from the external examiner terminal 5 is analyzed to identify the character string uttered by the examiner, and the control content corresponding to the identified character string is identified based on the correspondence information Processor. The process of analyzing the voice information and specifying the character string is realized using a known voice analysis technique.
ランドルト環を用いた視力検査のための表示の例を図7に示す。本例において、LCD214に表示される検査情報600は、視力検査のためのランドルト環と、ランドルト環に対応する視力値を表す文字列「視力値:0.5」と、ランドルト環の切り欠き部の方向を選択入力するためにランドルト環の周囲に配置された上下左右それぞれの方向の矢印画像とを含む。 An example of a display for visual acuity examination using the Landolt ring is shown in FIG. In this example, the inspection information 600 displayed on the LCD 214 includes a Landolt ring for a visual acuity test, a character string “visual acuity value: 0.5” representing a visual acuity value corresponding to the Landolt ring, and a notch portion of the Landolt ring. In order to selectively input the direction, the arrow image of each of the up, down, left and right directions arranged around the Landolt ring is included.
更に、検査情報600の近傍にはキャラクタ550が表示される。吹き出し560には、キャラクタ550が発する音声を表す文字列等が表示される。吹き出し560に表示される文字列と、音声出力装置233から出力される音声とは、同一でも異なってもよい。被検者や検者やキャラクタ等の属性に応じて文字列(及び音声)を切り替えることができる。例えば、被検者の年齢や検者の性別に応じて、文字列(及び音声)の口調を切り替えることが可能である。 Further, a character 550 is displayed near the inspection information 600. In the balloon 560, a character string representing a voice uttered by the character 550 is displayed. The character string displayed in the balloon 560 and the voice output from the voice output device 233 may be the same or different. The character string (and voice) can be switched according to the attributes of the subject, the examiner, the character, and the like. For example, the tone of a character string (and voice) can be switched according to the age of the subject and the sex of the examiner.
文字列や音声として出力される内容について幾つかの例を以下に示す。検者は、被検眼Eの前眼部像を参照することで、瞼が下がっていることや眼を細めていることを把握し、それを指摘する旨のメッセージや眼を開けるよう促すメッセージを外部検者端末5に入力する。出力制御部201は、入力されたメッセージに応じた文字列や音声を出力するための制御を実行する。それにより、ピンホール効果による視力の向上を防止することや、瞼が瞳孔に掛かることによる視力の低下を防止することができ、視力検査を高確度で行うことが可能となる。なお、眼科検査装置2、管理サーバ4、外部検者端末5等が、前眼部像を解析することにより、上記のようなイベントを検知するよう構成できる。この場合、文字列や音声を自動で出力することや、所定のイベントの発生を検者に報知することが可能である。 Some examples of the contents output as character strings and voices are shown below. By referring to the anterior segment image of eye E to be examined, the examiner grasps that the eyelid is lowered and the eyes are narrowed, and gives a message to point out that or a message to open the eyes Input to the external examiner terminal 5. The output control unit 201 executes control for outputting a character string or a voice corresponding to the input message. Thereby, improvement in visual acuity due to the pinhole effect can be prevented, and a reduction in visual acuity due to the eyelids hitting the pupil can be prevented, and visual acuity examination can be performed with high accuracy. Note that the ophthalmic examination apparatus 2, the management server 4, the external examiner terminal 5, and the like can be configured to detect the event as described above by analyzing the anterior segment image. In this case, it is possible to automatically output a character string or voice, or to notify the examiner of the occurrence of a predetermined event.
被検者が所定時間瞬きをしていないことを把握したとき、検者は、瞬きをするよう促すメッセージを外部検者端末5に入力する。出力制御部201は、このメッセージに応じた文字列や音声を出力するための制御を実行する。それにより、角膜が乾いて視力が低下することを防止することができる。なお、眼科検査装置2、管理サーバ4、外部検者端末5等が、前眼部像を解析することにより、所定時間瞬きを行っていないことを検知するよう構成できる。この場合、文字列や音声を自動で出力することや、所定時間瞬きを行っていないことを検者に報知することが可能である。 When it is determined that the subject has not blinked for a predetermined time, the examiner inputs a message prompting to blink to the external examiner terminal 5. The output control unit 201 executes control for outputting a character string or a voice corresponding to this message. Thereby, it can prevent that a cornea dries and a visual acuity falls. The ophthalmic examination apparatus 2, the management server 4, the external examiner terminal 5, and the like can be configured to detect that blinking has not been performed for a predetermined time by analyzing the anterior segment image. In this case, it is possible to automatically output a character string or voice, or to notify the examiner that blinking has not been performed for a predetermined time.
検査を行っているとき、検査の方法を提示したり、検査の進行を促すための指示を提示したりすることができる。例えば、視力検査において、被検者の応答の正解/不正解に応じたメッセージを出力することができる。また、キャラクタを検査自体に利用することが可能である。例えば、被検者の注意を引きつけるために蛇の形態のキャラクタを回転させ、所定のタイミングでキャラクタからランドルト環に切り替え表示することができる。また、不等像視検査等の両眼視機能検査において、動物の形態のキャラクタを融像視標(固視標)の提示位置に提示し、これを回転させることによって固視を促すことができる。動物の形態のキャラクタは、所定のタイミングで通常の融像視標(固視標)に切り替え表示される。なお、キャラクタから視標に切り替えるためのタイミングの例として、所定時間が経過したタイミングや、被検眼Eがキャラクタを注視したことが前眼部像から検出されたタイミングがある。 When an inspection is being performed, an inspection method can be presented, or an instruction for prompting the progress of the inspection can be presented. For example, in a visual acuity test, a message corresponding to the correct / incorrect answer of the subject's response can be output. It is also possible to use the character for the inspection itself. For example, a character in the form of a snake can be rotated to attract the attention of the subject, and can be switched and displayed from the character to the Landolt ring at a predetermined timing. Further, in a binocular visual function test such as an unequal image test, a character in the form of an animal is presented at a presentation position of a fusion target (fixed target), and the fixation is promoted by rotating the character. it can. A character in the form of an animal is switched to a normal fusion visual target (fixation target) at a predetermined timing. Note that examples of the timing for switching from the character to the target include a timing at which a predetermined time has elapsed and a timing at which it is detected from the anterior eye image that the eye E to be examined gazes at the character.
検査の終了後に検査結果や医学的事項を被検者に説明することがある。そのためにキャラクタを利用することができる。このとき、説明の理解を容易にするための画像や文字列を更に表示することができる。例えば、正視、近視、遠視が発生するメカニズムを表す画像をキャラクタとともに表示しつつ、音声情報で説明を行うことができる。 After the test is completed, the test results and medical items may be explained to the subject. A character can be used for this purpose. At this time, an image or a character string for facilitating understanding of the description can be further displayed. For example, it is possible to explain with voice information while displaying an image representing a mechanism in which normal vision, myopia, and hyperopia occur together with the character.
検査の前に行われる問診をキャラクタを利用して行うことができる。問診では、例えば、視力矯正具(眼鏡、コンタクトレンズ、眼内レンズ等)の使用の有無・頻度や、既往歴などを、キャラクタ、文字列、音声等を組み合わせて被検者に質問することができる。 An interview conducted before the examination can be performed using the character. In an inquiry, for example, a subject may be asked a question about the presence / absence / frequency of use of a vision correction tool (glasses, contact lens, intraocular lens, etc.), past history, etc. in combination with characters, character strings, voices, etc. it can.
外部検者端末5の音声入力装置524により入力された検者の音声を、キャラクタに応じた合成音声に変換して出力することができる。音声の変換は、外部検者端末5、管理サーバ4、又は眼科検査装置2によって実行される。出力制御部201は、検者の音声を変換して得られた合成音声を音声出力装置233に出力させる。 The examiner's voice input by the voice input device 524 of the external examiner terminal 5 can be converted into a synthesized voice corresponding to the character and output. The voice conversion is performed by the external examiner terminal 5, the management server 4, or the ophthalmic examination apparatus 2. The output control unit 201 causes the voice output device 233 to output the synthesized voice obtained by converting the examiner's voice.
外部検者端末5の音声入力装置524により入力された検者の音声を、被検者の属性に応じて変換することができる。例えば、検者の音声を被検者の使用言語に翻訳することができる。言語の変換(翻訳)は、公知の音声解析技術及び翻訳技術を利用して実現される。そのためのハードウェア及びソフトウェアは、外部検者端末5、管理サーバ4及び眼科検査装置2のいずれかに設けられる。出力制御部201は、検者の音声を翻訳して得られた内容を表す合成音声を生成し、これを音声出力装置233に出力させることができる。なお、被検者の使用言語に応じた処理に関する更なる事項については後述する。 The voice of the examiner input by the voice input device 524 of the external examiner terminal 5 can be converted according to the attribute of the subject. For example, the examiner's voice can be translated into the subject's language. Language conversion (translation) is realized by using known speech analysis technology and translation technology. The hardware and software for that purpose are provided in any of the external examiner terminal 5, the management server 4, and the ophthalmic examination apparatus 2. The output control unit 201 can generate synthesized speech representing the content obtained by translating the examiner's speech, and cause the speech output device 233 to output the synthesized speech. In addition, the further matter regarding the process according to a subject's language is mentioned later.
被検眼Eの視力に関する情報(視力値、屈折度数等)が予め取得された場合、出力制御部201は、この情報に基づいて、キャラクタや文字列や画像の表示サイズを調整することができる。出力制御部201は、視力値及び/又は屈折度数と表示サイズとが関連付けられたテーブル情報を予め記憶している。出力制御部201は、被検眼Eの視力値及び/又は屈折度数に関連付けられた表示サイズを選択し、選択された表示サイズでキャラクタ等をLCD214に表示させる。 When information about the visual acuity of the eye E (visual acuity value, refractive power, etc.) is acquired in advance, the output control unit 201 can adjust the display size of the character, character string, and image based on this information. The output control unit 201 stores in advance table information in which visual acuity values and / or refractive powers are associated with display sizes. The output control unit 201 selects a display size associated with the visual acuity value and / or the refractive power of the eye E and causes the LCD 214 to display characters and the like with the selected display size.
〈使用形態の第2の例〉
眼科検査システム1の使用形態の第2の例として、2以上の検者がそれぞれのキャラクタ(アバター)を介して単一の被検者をアシストするための使用形態を図8を参照しつつ説明する。<Second example of usage pattern>
As a second example of the usage pattern of the ophthalmic examination system 1, a usage pattern for assisting a single subject by two or more examiners through respective characters (avatars) will be described with reference to FIG. To do.
本例では、一人の内部検者と一人の外部検者とが単一の被検者をアシストしているが、二人以上の内部検者が単一の被検者をアシストすることや、二人以上の外部検者が単一の被検者をアシストすることや、一人以上の内部検者と二人以上の外部検者とが単一の被検者をアシストすることや、二人以上の内部検者と一人以上の外部検者とが単一の被検者をアシストすることも可能である。 In this example, one internal examiner and one external examiner assist a single subject, but two or more internal examiners can assist a single subject, Two or more external examiners can assist a single subject, one or more internal examiners and two or more external examiners can assist a single subject, or two The above internal examiner and one or more external examiners can assist a single subject.
また、本例では被検者の使用言語に応じて検者を選択する場合について説明するが、検者の選択において参照することが可能な属性の種別は言語には限定されず、任意の属性であってもよい。例えば、被検者が高齢である等の理由で検査を円滑に行えない場合などにおいても、以下と同様の処理を実行することが可能である。なお、上記第1の例と同様のステップや処理については説明を省略することがある。 In this example, the case of selecting an examiner according to the language used by the subject will be described. However, the types of attributes that can be referred to in the selection of the examiner are not limited to languages, and arbitrary attributes It may be. For example, even when the test cannot be performed smoothly because the subject is elderly, for example, the same processing as described below can be executed. Note that description of steps and processes similar to those in the first example may be omitted.
(S21:検査開始)
本例では、日本語以外の言語(例えば英語)を母語とする被検者であって日本語の理解が不十分な被検者が、日本国内の施設に設置された眼科検査装置2を用いて検査を行う場合について説明する。眼科検査装置2を用いた被検眼Eの検査が開始される。(S21: Start of inspection)
In this example, a subject whose mother tongue is a language other than Japanese (for example, English) and has insufficient understanding of Japanese uses the ophthalmic examination apparatus 2 installed in a facility in Japan. The case where the inspection is performed will be described. Inspection of the eye E to be examined using the ophthalmic examination apparatus 2 is started.
なお、この段階(又はそれ以前の問診等の段階)からキャラクタを表示することができる。この段階では検者のアシストは提供されていないので、出力制御部201(キャラクタ制御部202)が検査状況情報に基づき自律的にキャラクタを制御する。このような自律的な制御は、コンピュータプログラムにしたがって実行される。 It should be noted that the character can be displayed from this stage (or an earlier stage such as an inquiry). At this stage, since the examiner's assistance is not provided, the output control unit 201 (character control unit 202) autonomously controls the character based on the inspection status information. Such autonomous control is executed according to a computer program.
(S22:言語を理解不能)
眼科検査装置2は、被検者に向けた検査の説明や指示(自動ナビゲーション)を、予め設定された言語で行う。本例では日本語で説明等を行うように設定されている。本例の被検者は、日本語で行われる自動ナビゲーションを理解できない。(S22: Language cannot be understood)
The ophthalmic examination apparatus 2 gives explanations and instructions (automatic navigation) of examinations to the subject in a preset language. In this example, it is set to explain in Japanese. The subject in this example cannot understand the automatic navigation performed in Japanese.
(S23:検者を呼び出し)
検者のアシストを要求するために被検者が所定の操作や音声入力を行うと、通信要求生成部22bがこれに基づく通信要求(呼び出し要求)を生成し、通信部24がこの通信要求及び所定の情報を管理サーバ4に送信する。或いは、眼科検査装置2の検査状況情報生成部22aが検査状況情報を生成し、通信要求生成部22bがこれに基づく通信要求(呼び出し要求)を生成し、通信部24がこの呼び出し要求及び所定の情報を管理サーバ4に送信する。(S23: Call the examiner)
When the subject performs a predetermined operation or voice input in order to request the examiner's assistance, the communication request generator 22b generates a communication request (call request) based on this, and the communication unit 24 Predetermined information is transmitted to the management server 4. Alternatively, the examination status information generation unit 22a of the ophthalmic examination apparatus 2 generates the examination status information, the communication request generation unit 22b generates a communication request (call request) based on the examination status information, and the communication unit 24 transmits the call request and the predetermined request. Information is transmitted to the management server 4.
(S24:内部検者端末を選択)
管理サーバ4は、ステップS23で眼科検査装置2から送信された検者呼び出し要求及び情報を通信部43によって受信する。この段階では、選択部412は、当該被検者をアシストする検者として、当該被検者が検査を行っている施設に存在する内部検者端末3のいずれかを選択する。(S24: Select internal examiner terminal)
The management server 4 receives the examiner call request and information transmitted from the ophthalmic examination apparatus 2 in step S <b> 23 by the communication unit 43. At this stage, the selection unit 412 selects any one of the internal examiner terminals 3 existing in the facility where the subject is conducting the examination as an examiner who assists the subject.
(S25:通信確立の制御)
通信制御部401は、ステップS24で選択された内部検者端末3に、この内部検者端末3と眼科検査装置2との間の通信を確立するための制御信号を送信する。(S25: Control of communication establishment)
The communication control unit 401 transmits a control signal for establishing communication between the internal examiner terminal 3 and the ophthalmic examination apparatus 2 to the internal examiner terminal 3 selected in step S24.
(S26:アバターの制御開始)
ステップS25の制御によって眼科検査装置2と内部検者端末3との間の通信が確立されると、キャラクタ制御部202は、この内部検者端末3を使用する内部検者のキャラクタ(内部検者アバター)をLCD214に表示させる。内部検者が内部検者端末3を利用して指示を入力すると、その指示内容を含む指示情報が、管理サーバ4を経由して又は直接に、眼科検査装置2に送信される。出力制御部201は、この指示情報に基づいて内部検者アバターの動作を制御する。それにより、内部検者は被検者の状況を確認したり指示を送ったりすることができる。(S26: Start avatar control)
When communication between the ophthalmic examination apparatus 2 and the internal examiner terminal 3 is established by the control in step S25, the character control unit 202 uses the internal examiner's character (internal examiner) who uses the internal examiner terminal 3. Avatar) is displayed on the LCD 214. When the internal examiner inputs an instruction using the internal examiner terminal 3, instruction information including the instruction content is transmitted to the ophthalmic examination apparatus 2 via the management server 4 or directly. The output control unit 201 controls the operation of the internal examiner avatar based on the instruction information. Thereby, the internal examiner can confirm the condition of the subject and send an instruction.
(S27:アシストNG)
この内部検者が状況に対応できる場合、被検者のアシストを継続する(図示省略)。他方、状況に対応できないと判断した場合、内部検者は、外部検者にアシストを依頼するためにステップS28に進む。以下、後者の場合を説明する。(S27: Assist NG)
If this internal examiner can cope with the situation, the subject's assistance is continued (not shown). On the other hand, if it is determined that the situation cannot be handled, the internal examiner proceeds to step S28 in order to request assistance from the external examiner. Hereinafter, the latter case will be described.
(S28:外部検者の呼び出し)
内部検者は、外部検者にアシストを依頼するために、内部検者端末3を用いて所定の操作を行う。この操作は、例えば、被検者の使用言語の選択操作を含んでいてよい。なお、ステップS23において眼科検査装置2から管理サーバ4に送信された呼び出し要求又は情報に、被検者の使用言語(英語)を示す情報が含まれている場合などには、内部検者は使用言語の選択操作を行う必要はない。通信部32は、外部検者を呼び出すための通信要求(及び所定の情報)を管理サーバ4に送信する。(S28: Calling an external examiner)
The internal examiner performs a predetermined operation using the internal examiner terminal 3 in order to request assistance from the external examiner. This operation may include, for example, an operation for selecting the language used by the subject. In addition, when the call request or information transmitted from the ophthalmic examination apparatus 2 to the management server 4 in step S23 includes information indicating the subject's language (English), the internal examiner uses the information. There is no need to select a language. The communication unit 32 transmits a communication request (and predetermined information) for calling an external examiner to the management server 4.
(S29:外部検者端末を選択)
管理サーバ4は、ステップS28で内部検者端末3から送信された通信要求等を通信部43によって受信する。この段階では、選択部412は、属性情報を参照することで、英語を使用可能な外部検者(又は外部検者端末5)を選択する。このとき、英語を使用可能な外部検者それぞれの稼働状態に応じて一の外部検者を選択することができる。(S29: Select external examiner terminal)
The management server 4 receives the communication request or the like transmitted from the internal examiner terminal 3 in step S28 by the communication unit 43. At this stage, the selection unit 412 selects an external examiner (or external examiner terminal 5) who can use English by referring to the attribute information. At this time, one external examiner can be selected according to the operating state of each external examiner who can use English.
(S30:通信確立の制御)
通信制御部401は、ステップS29で選択された外部検者端末5に(又は、ステップS29で選択された外部検者が使用している外部検者端末5に)、この外部検者端末5と眼科検査装置2との間の通信を確立するための制御信号を送信する。(S30: Communication establishment control)
The communication control unit 401 connects the external examiner terminal 5 selected in step S29 (or the external examiner terminal 5 used by the external examiner selected in step S29) with the external examiner terminal 5 and A control signal for establishing communication with the ophthalmic examination apparatus 2 is transmitted.
(S31:双方向通信の開始)
ステップS30で送信された制御信号により、外部検者端末5と眼科検査装置2との間の双方向通信が確立される。このとき、内部検者端末3と外部検者端末5との間の通信を確立することが可能である。また、内部検者端末3と眼科検査装置2との間の通信の確立を継続することも可能である。(S31: Start of bidirectional communication)
Bidirectional communication between the external examiner terminal 5 and the ophthalmic examination apparatus 2 is established by the control signal transmitted in step S30. At this time, communication between the internal examiner terminal 3 and the external examiner terminal 5 can be established. It is also possible to continue establishing communication between the internal examiner terminal 3 and the ophthalmic examination apparatus 2.
(S32:アバターの制御開始)
ステップS31において眼科検査装置2と外部検者端末5との間の双方向通信が開始されると、キャラクタ制御部202は、この外部検者端末5を使用する外部検者のキャラクタ(外部検者アバター)をLCD214に表示させる。それにより、LCD214には、内部検者アバターと外部検者アバターの双方が表示される。内部検者アバターの動作制御は、ステップS26で説明した要領で実行される。(S32: Start avatar control)
When the bidirectional communication between the ophthalmic examination apparatus 2 and the external examiner terminal 5 is started in step S31, the character control unit 202 uses the external examiner's character (external examiner) who uses the external examiner terminal 5. Avatar) is displayed on the LCD 214. Thereby, both the internal examiner avatar and the external examiner avatar are displayed on the LCD 214. The operation control of the internal examiner avatar is executed as described in step S26.
一方、外部検者が外部検者端末5を利用して指示を入力すると、その指示内容を含む指示情報が、管理サーバ4を経由して眼科検査装置2に送信される。出力制御部201は、この指示情報に基づいて外部検者アバターの動作を制御する。それにより、外部検者は、英語を使用しつつ被検者の状況を確認したり指示を送ったりすることができる。内部検者と外部検者は互いに協力して被検者をアシストすることが可能である。 On the other hand, when an external examiner inputs an instruction using the external examiner terminal 5, instruction information including the instruction content is transmitted to the ophthalmic examination apparatus 2 via the management server 4. The output control unit 201 controls the operation of the external examiner avatar based on this instruction information. Thereby, the external examiner can confirm the condition of the subject or send an instruction while using English. The internal examiner and the external examiner can cooperate with each other to assist the subject.
内部検者と外部検者との間のやり取りの少なくとも一部を被検者に提示しないように制御を行うことが可能である。その際、内部検者及び外部検者は、自身が入力した情報が被検者向けであるか他の検者向けであるかを区別するための操作を行うことができる。例えば、他の検者向けの情報を入力するためのソフトウェアキー(及び/又は、被検者向けの情報を入力するためのソフトウェアキー)をGUIに設けることができる。他の検者向けの情報が入力された場合、管理サーバ4(転送制御部402)は、他の検者端末にのみその情報を転送する。例えば、そのような情報が外部検者端末5に入力された場合、転送制御部402は、この情報を内部検者端末3にのみ送信する。他の処理例として、他の検者向けの情報が入力された場合、眼科検査装置2の出力制御部201は、その情報の付帯情報(フラグ等)に基づいて情報の出力の有無を切り替えることができる。例えば、外部検者端末5又は内部検者端末3から入力された情報を受けたとき、出力制御部201は、この情報に所定のフラグ(例えば他の検者向け情報であることを示すフラグ)が付帯されているかを判定し、付帯されていない場合にはこの情報を出力させる制御を実行し、付帯されている場合には当該制御を行わない。 It is possible to perform control so that at least a part of the exchange between the internal examiner and the external examiner is not presented to the subject. At this time, the internal examiner and the external examiner can perform an operation for distinguishing whether the information input by the internal examiner or the external examiner is intended for the subject or another examiner. For example, a software key for inputting information for another examiner (and / or a software key for inputting information for the subject) can be provided in the GUI. When information for other examiners is input, the management server 4 (transfer control unit 402) transfers the information only to other examiner terminals. For example, when such information is input to the external examiner terminal 5, the transfer control unit 402 transmits this information only to the internal examiner terminal 3. As another processing example, when information for another examiner is input, the output control unit 201 of the ophthalmic examination apparatus 2 switches the presence / absence of information output based on the incidental information (flag or the like) of the information. Can do. For example, when receiving information input from the external examiner terminal 5 or the internal examiner terminal 3, the output control unit 201 uses a predetermined flag (for example, a flag indicating information for other examiners) in this information. Is determined to be attached, and if it is not attached, control for outputting this information is executed, and if attached, the control is not performed.
本例によれば、検査を円滑に行えない被検者がいるときに、この被検者に対する直接のコミュニケーションを迅速に開始することができる。それにより、被検者に安心感を与えることができる。この直接のコミュニケーションによって問題が解決されない場合であっても、その解決に適した外部検者を自動で選択して遠隔アシストを提供することが可能である。したがって、様々な属性の内部検者を各施設に常時配置しなくても、様々な被検者に対応することが可能である。更に、複数の検者(例えば内部検者及び外部検者)が共同して被検者のアシストを行うことができる。特に、各検者のアバターを通じて被検者に指示を伝えることができるので、被検者に安心感を与えつつ適切なアシストを提供することが可能である。 According to this example, when there is a subject who cannot perform the examination smoothly, direct communication with the subject can be quickly started. Thereby, a sense of security can be given to the subject. Even if this direct communication does not solve the problem, it is possible to automatically select an external examiner suitable for the solution and provide remote assistance. Therefore, it is possible to deal with various subjects without always arranging internal examiners with various attributes in each facility. Further, a plurality of examiners (for example, an internal examiner and an external examiner) can jointly assist the subject. In particular, since instructions can be transmitted to the subject through each examiner's avatar, it is possible to provide appropriate assistance while giving the subject a sense of security.
〈使用形態の第3の例〉学習内容の利用
眼科検査システム1の使用形態の第3の例では、検者からの指示に応じて実行された制御を学習する処理と、この学習内容を制御に反映させるための処理とを説明する。前者の処理の例を図9に示し、後者の処理の例を図10に示す。<Third example of usage pattern> Use of learning content In the third example of usage pattern of the ophthalmic examination system 1, a process of learning control executed in response to an instruction from an examiner and the learning content are controlled. The process for reflecting the above will be described. An example of the former process is shown in FIG. 9, and an example of the latter process is shown in FIG.
(S41:アシストの開始)
まず、図9を参照しつつ学習処理について説明する。例えば前述した要領で、検者によるアシストが開始される。本例では、外部検者がアシストする場合について説明するが、内部検者がアシストする場合についても同様の処理を行うことができる。(S41: Start of assist)
First, the learning process will be described with reference to FIG. For example, the assist by the examiner is started as described above. In this example, the case where the external examiner assists will be described, but the same processing can be performed when the internal examiner assists.
(S42:検査状況情報等の送信)
眼科検査装置2は、検査状況情報等を管理サーバ4に送信する。前述したように、検査状況情報は、検査の進行状況(検査のフェーズ)、検査の途中結果(例えば、視力検査における視標の呈示履歴)、検査時間(例えば、検査開始時刻、経過時間)などを含むものであり、特に、検査に問題が生じているときに生成されて送信される。(S42: Transmission of inspection status information, etc.)
The ophthalmic examination apparatus 2 transmits examination status information and the like to the management server 4. As described above, the examination status information includes the examination progress status (examination phase), the mid-term examination result (for example, the target presentation history in the vision examination), the examination time (eg, examination start time, elapsed time), etc. In particular, it is generated and transmitted when there is a problem in the inspection.
(S43:検査状況情報の記憶)
管理サーバ4は、ステップS42で眼科検査装置2から送信された検査状況情報を受信する。制御管理部42は、この検査状況情報を眼科検査装置2の装置IDとともに記憶部421に格納する。(S43: Storage of inspection status information)
The management server 4 receives the examination status information transmitted from the ophthalmic examination apparatus 2 in step S42. The control management unit 42 stores this examination status information in the storage unit 421 together with the apparatus ID of the ophthalmic examination apparatus 2.
(S44:検査状況情報等の転送)
転送制御部402は、眼科検査装置2からの検査状況情報等を外部検者端末5に転送する。ステップS43、S44を実行する順序は任意であり、また、これらを並行して実行することも可能である。(S44: Transfer of inspection status information, etc.)
The transfer control unit 402 transfers the examination status information and the like from the ophthalmic examination apparatus 2 to the external examiner terminal 5. The order in which steps S43 and S44 are executed is arbitrary, and these can also be executed in parallel.
(S45:指示の入力)
外部検者端末5は、ステップS44で転送された検査状況情報等を受信し、情報を出力する(情報の表示、音声の出力等)。外部検者は、出力された情報を参照し、指示を入力する。(S45: Instruction input)
The external examiner terminal 5 receives the examination status information transferred in step S44 and outputs the information (information display, audio output, etc.). The external examiner refers to the output information and inputs an instruction.
(S46:指示情報の送信)
外部検者端末5は、ステップS45で入力された指示の内容に応じた指示情報を生成し、管理サーバ4にこれを送信する。(S46: Transmission of instruction information)
The external examiner terminal 5 generates instruction information corresponding to the content of the instruction input in step S45, and transmits this to the management server 4.
(S47:指示情報の記憶)
管理サーバ4は、ステップS46で送信された指示情報を受信する。制御管理部42は、この指示情報を記憶部421に格納する。このとき、制御管理部42は、例えば眼科検査装置2の装置ID等を参照することにより、この指示情報とステップS43で格納された検査状況情報とを互いに関連付ける。このとき、前述したように、検査状況情報の分類等を行うことができる。(S47: Storage of instruction information)
The management server 4 receives the instruction information transmitted in step S46. The control management unit 42 stores this instruction information in the storage unit 421. At this time, the control management unit 42 associates the instruction information with the examination status information stored in step S43 by referring to the apparatus ID of the ophthalmic examination apparatus 2, for example. At this time, as described above, classification of inspection status information can be performed.
(S48:指示情報の転送)
転送制御部402は、外部検者端末5からの指示情報を眼科検査装置2に転送する。ステップS47、S48を実行する順序は任意であり、また、これらを並行して実行することも可能である。(S48: Transfer of instruction information)
The transfer control unit 402 transfers instruction information from the external examiner terminal 5 to the ophthalmic examination apparatus 2. The order in which steps S47 and S48 are executed is arbitrary, and these can also be executed in parallel.
(S49:情報の出力(キャラクタの制御等))
眼科検査装置2は、ステップS48で転送された指示情報を受信する。出力制御部201は、この指示情報に基づいてLCD214、表示装置231、音声出力装置233等を制御する。例えば、キャラクタ制御部202は、指示情報に基づいてキャラクタの動作の制御を実行する。(S49: Information output (character control, etc.))
The ophthalmic examination apparatus 2 receives the instruction information transferred in step S48. The output control unit 201 controls the LCD 214, the display device 231, the audio output device 233, and the like based on this instruction information. For example, the character control unit 202 controls the movement of the character based on the instruction information.
(S50:制御情報の送信)
眼科検査装置2は、ステップS49で実行された制御の内容を示す制御情報を生成し、これを管理サーバ4に送信する。(S50: Transmission of control information)
The ophthalmic examination apparatus 2 generates control information indicating the content of the control executed in step S49 and transmits it to the management server 4.
(S51:制御情報の記憶)
管理サーバ4は、ステップS50で眼科検査装置2から送信された制御情報を受信する。制御管理部42は、この制御情報を記憶部421に格納する。このとき、制御管理部42は、例えば眼科検査装置2の装置ID等を参照することにより、この制御情報とステップS43で格納された検査状況情報と(ステップS47で格納された指示情報と)を互いに関連付ける。このとき、前述したように、検査状況情報の分類等を行うことができる。(S51: Storage of control information)
The management server 4 receives the control information transmitted from the ophthalmic examination apparatus 2 in step S50. The control management unit 42 stores this control information in the storage unit 421. At this time, the control management unit 42 refers to, for example, the device ID of the ophthalmic examination apparatus 2 and the like to obtain the control information, the examination status information stored in step S43 (the instruction information stored in step S47). Associate with each other. At this time, as described above, classification of inspection status information can be performed.
なお、指示情報の記憶(ステップS47)と制御情報の記憶(ステップS51)の一方のみを実行するよう構成してもよい。指示情報の記憶(ステップS47)のみを実行する場合、前述した要領で指示情報から制御情報を生成することができる。 Note that only one of instruction information storage (step S47) and control information storage (step S51) may be executed. When only storing the instruction information (step S47), the control information can be generated from the instruction information in the manner described above.
以上のような処理を繰り返すことにより、検査において発生した状況(イベント等)と、それに対する検者の指示の内容(つまり、その状況に対して眼科検査装置2が実行した制御の内容)との対応関係が蓄積される。蓄積された情報の利用方法の例を図10を参照しつつ以下に説明する。 By repeating the processing as described above, the situation (event or the like) that occurred in the examination and the content of the examiner's instruction for it (that is, the content of the control executed by the ophthalmic examination apparatus 2 for that situation) Correspondences are accumulated. An example of how to use the accumulated information will be described below with reference to FIG.
(S61:アシストの開始)
例えば前述した要領で、検者によるアシストが開始される。なお、以下の処理には検者は登場しないので、図10における外部検者端末5等の記載は省略されている。(S61: Start of assist)
For example, the assist by the examiner is started as described above. In addition, since an examiner does not appear in the following processes, description of the external examiner terminal 5 etc. in FIG. 10 is omitted.
(S62:検査状況情報の送信)
眼科検査装置2は、検査状況情報を管理サーバ4に送信する。(S62: Transmission of inspection status information)
The ophthalmic examination apparatus 2 transmits examination status information to the management server 4.
(S63:制御情報の検索)
管理サーバ4は、ステップS62で眼科検査装置2から送信された検査状況情報を受信する。検索部422は、記憶部421に蓄積されている検査状況情報(又はその類)のうち、眼科検査装置2から今回受信した検査状況情報に相当するものを探索し、探索された検査状況情報(又はその類)に関連付けられた制御情報を取得する。それにより、ステップS62で送信された検査状況情報に対応する制御情報が検索される。(S63: Search for control information)
The management server 4 receives the examination status information transmitted from the ophthalmic examination apparatus 2 in step S62. The search unit 422 searches the examination status information (or the like) stored in the storage unit 421 for information corresponding to the examination status information received this time from the ophthalmic examination apparatus 2, and the searched examination status information ( Or control information associated with the same). Thereby, control information corresponding to the examination status information transmitted in step S62 is retrieved.
なお、新たな検査状況情報に対応する制御情報が検索されない場合、図9のケースと同様に、外部検者端末5にアシストを要求する。そして、外部検者端末5からの指示情報や、この指示情報に応じて眼科検査装置2が実行した制御の内容を表す制御情報とともに、新たな検査状況情報が記憶部421に格納される。 If control information corresponding to the new examination status information is not retrieved, the external examiner terminal 5 is requested to assist as in the case of FIG. Then, new examination status information is stored in the storage unit 421 together with the instruction information from the external examiner terminal 5 and the control information indicating the contents of the control executed by the ophthalmic examination apparatus 2 according to the instruction information.
(S64:制御情報の送信)
管理サーバ4は、ステップS63で検索された制御情報を眼科検査装置2に送信する。(S64: Transmission of control information)
The management server 4 transmits the control information searched in step S63 to the ophthalmic examination apparatus 2.
(S65:情報の出力(キャラクタの制御等))
眼科検査装置2は、ステップS64で送信された制御情報を受信する。出力制御部201は、この制御情報に基づいてLCD214、表示装置231、音声出力装置233等を制御する。例えば、キャラクタ制御部202は、制御情報に基づいてキャラクタの動作の制御を実行する。(S65: Information output (character control, etc.))
The ophthalmic examination apparatus 2 receives the control information transmitted in step S64. The output control unit 201 controls the LCD 214, the display device 231, the audio output device 233, and the like based on this control information. For example, the character control unit 202 executes character motion control based on the control information.
このような処理により、眼科検査装置2を用いた検査中に問題が発生した場合、この問題(又はそれに類する問題)が過去に発生したときに検者が実際に行ったアシストを自動で再現することが可能となる。 By such processing, when a problem occurs during the examination using the ophthalmic examination apparatus 2, the assist actually performed by the examiner when this problem (or a similar problem) has occurred in the past is automatically reproduced. It becomes possible.
〈検査種別に応じた制御モードの切り替え〉
実施形態において、眼科検査装置は複数の検査を実施可能であってよい。この場合、検査の種別に応じてキャラクタ(及び、情報表示、音声出力等)の制御モードを切り替えることができる。以下、このようなモード切り替えを実行可能なシステムの例を説明する。<Switching control mode according to inspection type>
In an embodiment, the ophthalmic examination apparatus may be capable of performing a plurality of examinations. In this case, the control mode of the character (and information display, voice output, etc.) can be switched according to the type of examination. Hereinafter, an example of a system capable of executing such mode switching will be described.
実施形態に係る眼科検査システムに含まれる眼科検査装置の構成の例を図11に示す。なお、本例では、制御モードの切り替えを行うための要素が眼科検査装置に設けられているが、当該要素の一部又は全部を他の装置(例えば管理サーバ)に設けることも可能である。 An example of the configuration of an ophthalmic examination apparatus included in the ophthalmic examination system according to the embodiment is shown in FIG. In this example, an element for switching the control mode is provided in the ophthalmic examination apparatus, but a part or all of the element may be provided in another apparatus (for example, a management server).
図11に示す眼科検査装置2Aは、制御部20にモード切替部220が設けられている点において図2に示す眼科検査装置2と異なる。眼科検査装置2のそれ以外の構成や、内部検者端末3の構成や、管理サーバ4の構成や、外部検者端末5の構成は、上記実施形態と同様であってよい。 An ophthalmic examination apparatus 2A shown in FIG. 11 is different from the ophthalmic examination apparatus 2 shown in FIG. 2 in that a mode switching unit 220 is provided in the control unit 20. Other configurations of the ophthalmic examination apparatus 2, the configuration of the internal examiner terminal 3, the configuration of the management server 4, and the configuration of the external examiner terminal 5 may be the same as those in the above embodiment.
モード切替部220は、制御モードに関する各種の処理を実行する。モード切替部220は、プロセッサ、記憶装置等を含む。モード切替部220にはモード情報記憶部221が設けられている。モード情報記憶部221には、第1制御モード情報が予め記憶されている。第1制御モード情報には、眼科検査装置2Aを用いて実施可能な検査の種別のそれぞれに対して制御モードが対応付けられている。 The mode switching unit 220 executes various processes related to the control mode. The mode switching unit 220 includes a processor, a storage device, and the like. The mode switching unit 220 is provided with a mode information storage unit 221. The mode information storage unit 221 stores first control mode information in advance. In the first control mode information, a control mode is associated with each type of examination that can be performed using the ophthalmic examination apparatus 2A.
典型的な例において、眼科検査装置2Aは、視力検査装置、レフラクトメータ及びケラトメータとして機能するよう構成される。視力検査装置は、視力検査用の視標(ランドルト環等)を眼底に投影する光学系と、投影された視標に対する被検者の応答を受け付ける入力装置と、各種処理を実行するプロセッサとを含む。プロセッサは、眼底に投影される視標を被検者の応答に応じて切り替える処理や、被検者の応答の履歴に基づいて被検眼の視力値を決定する処理などを実行する。レフラクトメータは、リング状光束を眼底に投影する光学系と、このリング状光束の眼底からの戻り光を撮像素子で検出する光学系と、撮像素子からの出力(リング状画像)を解析して被検眼の球面度、乱視度、乱視軸角度等を算出するプロセッサとを備える。ケラトメータは、リング状光束を角膜に投影する光学系と、このリング状光束の角膜からの戻り光を撮像素子で検出する光学系と、撮像素子からの出力(リング状画像)を解析して角膜曲率分布等を求めるプロセッサとを備える。 In a typical example, the ophthalmic examination apparatus 2A is configured to function as a vision examination apparatus, a refractometer, and a keratometer. The visual acuity inspection apparatus includes an optical system that projects a visual target for visual acuity inspection (Landolt ring or the like) onto the fundus, an input device that receives a response of the subject to the projected visual target, and a processor that executes various processes. Including. The processor executes processing for switching the target projected on the fundus according to the response of the subject, processing for determining the visual acuity value of the subject's eye based on the response history of the subject, and the like. The refractometer analyzes an optical system that projects a ring-shaped light beam onto the fundus, an optical system that detects return light from the fundus of the ring-shaped light beam with an image sensor, and an output from the image sensor (ring-shaped image). And a processor for calculating the sphericity, astigmatism, astigmatism axis angle, and the like of the eye to be examined. The keratometer is an optical system that projects a ring-shaped light beam onto the cornea, an optical system that detects the return light of the ring-shaped light beam from the cornea, and an output from the image sensor (ring-shaped image) to analyze the cornea A processor for obtaining a curvature distribution and the like.
第1制御モード情報には、例えば、視力検査装置が用いられるときに適用される視力検査モードにおける制御内容と、レフラクトメータが用いられるときに適用されるレフモードにおける制御内容と、ケラトメータが用いられるときに適用されるケラトモードにおける制御内容とが含まれている。 As the first control mode information, for example, the control content in the visual acuity test mode applied when the visual acuity test device is used, the control content in the reflex mode applied when the refractometer is used, and a keratometer are used. The control contents in the kerato mode that are sometimes applied are included.
眼科検査装置2Aを用いて実施される検査の種別は、例えばユーザインターフェイス23を用いて入力される。なお、所望の検査を選択的に指定することもできるし、複数の検査を所定の順序で行うように指定することもできる。モード切替部220は、指定された検査の種別に対応する制御モードの情報をモード情報記憶部221(第1制御モード情報)から取得し、出力制御部201にこれを送る。 The type of examination performed using the ophthalmic examination apparatus 2A is input using the user interface 23, for example. Note that a desired inspection can be selectively specified, and a plurality of inspections can be specified in a predetermined order. The mode switching unit 220 acquires control mode information corresponding to the designated examination type from the mode information storage unit 221 (first control mode information), and sends it to the output control unit 201.
出力制御部201は、モード切替部220から送られた情報に基づいてLCD214、表示装置231、音声出力装置233等を制御する。例えば、キャラクタ制御部202は、モード切替部220から送られた情報に基づいて、LCD214に表示させるキャラクタの選択や、キャラクタの動作の制御を実行する。このような実施形態によれば、検査の種別に応じてキャラクタの動作制御等を好適に実行することが可能である。 The output control unit 201 controls the LCD 214, the display device 231, the audio output device 233, and the like based on the information sent from the mode switching unit 220. For example, the character control unit 202 performs selection of a character to be displayed on the LCD 214 and control of character movement based on information transmitted from the mode switching unit 220. According to such an embodiment, it is possible to suitably execute character motion control or the like according to the type of inspection.
〈被検者属性に応じた制御モードの切り替え〉
様々な属性の被検者が眼科検査装置を使用する。被検者の属性の典型的な例として、使用言語、疾患の有無、疾患名、性別、年齢等がある。以下、このような被検者属性に応じて制御モードを切り替えることが可能なシステムの例を説明する。<Switching control mode according to patient attributes>
Subjects with various attributes use ophthalmic examination equipment. Typical examples of subject attributes include language used, presence / absence of disease, disease name, sex, age, and the like. Hereinafter, an example of a system capable of switching the control mode according to such a subject attribute will be described.
実施形態に係る眼科検査システムに含まれる管理サーバの構成の例を図12に示す。なお、本例では、制御モードの切り替えを行うための要素が管理サーバに設けられているが、当該要素の一部又は全部を他の装置(例えば眼科検査装置)に設けることも可能である。 An example of the configuration of the management server included in the ophthalmic examination system according to the embodiment is shown in FIG. In this example, an element for switching the control mode is provided in the management server. However, part or all of the element may be provided in another apparatus (for example, an ophthalmic examination apparatus).
図12に示す管理サーバ4Aは、モード管理部44が設けられている点において図5に示す管理サーバ4と異なる。管理サーバ4のそれ以外の構成や、眼科検査装置2の構成や、内部検者端末3の構成や、外部検者端末5の構成は、上記実施形態と同様であってよい。なお、管理サーバ4Aは、図5に示す制御管理部42を備えていてもいなくてもよい。 The management server 4A shown in FIG. 12 is different from the management server 4 shown in FIG. 5 in that a mode management unit 44 is provided. Other configurations of the management server 4, the configuration of the ophthalmic examination apparatus 2, the configuration of the internal examiner terminal 3, and the configuration of the external examiner terminal 5 may be the same as those in the above embodiment. The management server 4A may or may not include the control management unit 42 shown in FIG.
モード管理部44は、眼科検査装置2の制御モードに関する各種の処理を実行する。モード管理部44は、プロセッサ、記憶装置等を含む。モード管理部44には、モード情報記憶部441と、モード情報検索部442と、モード処理部443とが設けられている。 The mode management unit 44 executes various processes related to the control mode of the ophthalmic examination apparatus 2. The mode management unit 44 includes a processor, a storage device, and the like. The mode management unit 44 includes a mode information storage unit 441, a mode information search unit 442, and a mode processing unit 443.
モード情報記憶部441には、第2制御モード情報が予め記憶されている。第2制御モード情報には、被検者属性のそれぞれに対して制御モードが対応付けられている。 The mode information storage unit 441 stores second control mode information in advance. In the second control mode information, a control mode is associated with each subject attribute.
典型的な例として被検者属性が言語の種別を含む場合について説明する。言語の種別には、例えば、日本語、英語、中国語、韓国語、ドイツ語、フランス語、スペイン語等がある。第2制御モード情報には、これら言語それぞれに対応する動作モードにおける制御内容が含まれている。例えば、第2制御モード情報は、次のいずれかを含んでいてよい:各言語に対応する文字列情報や音声情報;各言語に対応する外部検者のID又は外部検者端末のID;各言語に対応する翻訳プロセッサ、翻訳辞書等。図示は省略するが、翻訳プロセッサや翻訳辞書は、管理サーバ4A及び外部検者端末5のいずれかに設けられる。 A case where the subject attribute includes a language type will be described as a typical example. Language types include, for example, Japanese, English, Chinese, Korean, German, French, Spanish and the like. The second control mode information includes the control contents in the operation mode corresponding to each of these languages. For example, the second control mode information may include any of the following: character string information or voice information corresponding to each language; ID of an external examiner or ID of an external examiner terminal corresponding to each language; Translation processor, translation dictionary, etc. corresponding to the language. Although illustration is omitted, the translation processor and the translation dictionary are provided in either the management server 4A or the external examiner terminal 5.
眼科検査装置2を利用する被検者の属性(本例では使用言語)は、例えば眼科検査装置2のユーザインターフェイス23を用いて入力される。また、被検者の状況(検査の状況)を監視している検者が自身の端末を用いて被検者属性を入力することも可能である。また、被検者が入力した音声を解析して言語の種別を特定するように構成してもよい。これらは属性受付部の例である。 The attribute (in this example, the language used) of the subject who uses the ophthalmic examination apparatus 2 is input using the user interface 23 of the ophthalmic examination apparatus 2, for example. It is also possible for an examiner who is monitoring the condition of the subject (examination status) to input subject attributes using his / her terminal. Moreover, you may comprise so that the classification of a language may be specified by analyzing the audio | voice input by the subject. These are examples of the attribute receiving unit.
被検者の使用言語が入力されると、モード情報検索部442は、入力された言語の種別に対応する制御モードの情報をモード情報記憶部441(第2制御モード情報)から取得する。モード処理部443は、取得された制御モードの情報に基づいて、例えば次のような処理を実行する。 When the language used by the subject is input, the mode information search unit 442 acquires control mode information corresponding to the input language type from the mode information storage unit 441 (second control mode information). The mode processing unit 443 executes, for example, the following processing based on the acquired control mode information.
モード情報検索部442により検索された情報に、当該言語に対応する文字列情報や音声情報が含まれている場合、モード処理部443は、検索された情報を眼科検査装置2に送信するように通信部43を制御する。眼科検査装置2の出力制御部201は、管理サーバ4Aから送られた情報に基づいてLCD214、表示装置231、音声出力装置233等を制御する。例えば、キャラクタ制御部202は、この情報に基づいて、LCD214に表示させるキャラクタの選択や、キャラクタの動作の制御を実行する。それにより、眼科検査装置2により出力される情報の言語を被検者の使用言語に自動で切り替えることができる。 When the information retrieved by the mode information retrieval unit 442 includes character string information or voice information corresponding to the language, the mode processing unit 443 transmits the retrieved information to the ophthalmic examination apparatus 2. The communication unit 43 is controlled. The output control unit 201 of the ophthalmic examination apparatus 2 controls the LCD 214, the display device 231, the audio output device 233, and the like based on information transmitted from the management server 4A. For example, based on this information, the character control unit 202 selects a character to be displayed on the LCD 214 and controls the movement of the character. Thereby, the language of the information output by the ophthalmic examination apparatus 2 can be automatically switched to the language used by the subject.
モード情報検索部442により検索された情報に、当該言語に対応する外部検者のID又は外部検者端末のIDが含まれている場合、モード処理部443は、この外部検者端末5に向けてアシスト要求を送るように通信部43を制御する。それにより、被検者の使用言語でアシストを提供可能な外部検者を自動で探索することができる。 When the information searched by the mode information search unit 442 includes the ID of the external examiner or the ID of the external examiner terminal corresponding to the language, the mode processing unit 443 is directed to the external examiner terminal 5. The communication unit 43 is controlled to send an assist request. Thereby, it is possible to automatically search for an external examiner who can provide assistance in the language used by the subject.
モード情報検索部442により検索された情報に、当該言語に対応する翻訳プロセッサ、翻訳辞書等の情報が含まれている場合、モード処理部443は、基準言語(例えば眼科検査装置2が設置されている国や地域における標準言語)と被検者の使用言語との間の翻訳に対応する翻訳プロセッサに処理開始要求を送る。それにより、検者の指示を被検者の使用言語に翻訳して眼科検査装置2から出力することや、被検者の発した音声を基準言語に翻訳して外部検者端末5や内部検者端末3から出力することが可能となる。 When the information searched by the mode information search unit 442 includes information such as a translation processor and a translation dictionary corresponding to the language, the mode processing unit 443 sets the reference language (for example, the ophthalmic examination apparatus 2 is installed). A processing start request is sent to a translation processor corresponding to the translation between the standard language in a certain country or region) and the language used by the subject. As a result, the examiner's instructions are translated into the subject's language and output from the ophthalmic examination apparatus 2, or the speech produced by the subject is translated into the reference language and the external examiner terminal 5 or internal test Can be output from the person terminal 3.
〈眼科検査装置の変形例〉
検査光学系と情報提示光学系とが別々に配置された例を図13に示す。眼科検査装置2Bの検査部21Aにおいて、被検眼Eの検査に用いられる検査光学系は、被検眼Eに適用される光学素子215と、被検眼Eを検査するための検査光束を光学素子215を介して被検眼Eに投射する投射系216とを含む。また、被検者に情報を提示するための情報提示光学系は、LCD217(表示部)と、LCD217から出力された表示光束を光学素子215を介して被検眼Eに導く導光系218とを含む。情報提示光学系によって提示される情報としては、眼科検査装置2Bにより自動で提示される情報や、内部検者端末3から送信された情報(内部検者からの指示等)や、外部検者端末5から送信された情報(外部検者からの指示等)などがある。更に、LCD217には、キャラクタが表示される。LCD217に表示されたキャラクタの動作の制御は、図示しない出力制御部201内のキャラクタ制御部202によって実行される。キャラクタの表示や動作制御については、上記実施形態と同様である。<Modified example of ophthalmic examination apparatus>
FIG. 13 shows an example in which the inspection optical system and the information presentation optical system are separately arranged. In the inspection unit 21A of the ophthalmologic inspection apparatus 2B, the inspection optical system used for the inspection of the eye E includes an optical element 215 applied to the eye E, and an optical beam 215 for an inspection light beam for inspecting the eye E. And a projection system 216 that projects onto the eye E. An information presentation optical system for presenting information to the subject includes an LCD 217 (display unit) and a light guide system 218 that guides the display light beam output from the LCD 217 to the eye E through the optical element 215. Including. Information presented by the information presentation optical system includes information automatically presented by the ophthalmic examination apparatus 2B, information transmitted from the internal examiner terminal 3 (instructions from the internal examiner, etc.), external examiner terminal, etc. 5 (information from an external examiner, etc.). Further, a character is displayed on the LCD 217. Control of the movement of the character displayed on the LCD 217 is executed by the character control unit 202 in the output control unit 201 (not shown). Character display and motion control are the same as in the above embodiment.
検査光学系の光路と情報提示光学系の光路とは、ビームスプリッタ219によって合成される。ビームスプリッタ219は、例えば、ハーフミラー、ダイクロイックミラー又は偏光ビームスプリッタである。なお、検査部21以外の構成要素については図2におけるそれらと同様であってよい。 The optical path of the inspection optical system and the optical path of the information presentation optical system are combined by the beam splitter 219. The beam splitter 219 is, for example, a half mirror, a dichroic mirror, or a polarization beam splitter. Components other than the inspection unit 21 may be the same as those in FIG.
図2のように検査光学系と情報提示光学系とを共通に構成するか、或いは、図13のようにこれらを個別に構成するかは、例えば眼科検査装置が備える機能に応じて決定される。 Whether the inspection optical system and the information presentation optical system are configured in common as shown in FIG. 2 or individually configured as shown in FIG. 13 is determined according to the function of the ophthalmic examination apparatus, for example. .
〈検者端末による情報の提示〉
検者に情報を提示するための構成及び処理について説明する。上記のように、外部検者は、遠隔地から被検者をアシストする。したがって、被検者の状況を適切に把握するための情報を適切なタイミング及び適切なインターフェイスで提示できることが望ましい。なお、内部検者に対する情報の提示についても同様に行うことが可能である。この場合、外部検者端末5における情報の提示と内部検者端末3における情報の提示とを同期させるように管理サーバ4(特に転送制御部402)が制御を行うことができる。<Presentation of information by examiner terminal>
A configuration and processing for presenting information to the examiner will be described. As described above, the external examiner assists the subject from a remote location. Therefore, it is desirable that information for appropriately grasping the condition of the subject can be presented at an appropriate timing and an appropriate interface. It is also possible to present information to the internal examiner in the same manner. In this case, the management server 4 (particularly the transfer control unit 402) can perform control so that presentation of information at the external examiner terminal 5 and presentation of information at the internal examiner terminal 3 are synchronized.
外部検者端末5の制御部50は、図14に示す画面1000を表示装置521に表示させる。画面1000には、提示情報表示領域1010L及び1010Rと、通信内容表示領域1020と、利用状況表示領域1030と、被検者情報表示領域1040と、提示情報操作領域1050とが設けられている。 The control unit 50 of the external examiner terminal 5 displays the screen 1000 shown in FIG. The screen 1000 includes presentation information display areas 1010L and 1010R, a communication content display area 1020, a usage status display area 1030, a subject information display area 1040, and a presentation information operation area 1050.
提示情報表示領域1010L及び1010Rには、それぞれ、被検者の左眼及び右眼に提示されている情報が表示される。本例では、眼科検査装置2は、被検者の左右両眼に同時に情報を提示可能に構成されている。この眼科検査装置2には、例えば、左眼用の検査光学系及び情報提示光学系と、右眼用の検査光学系及び情報提示光学系とが互いに独立に設けられている(例えば、左眼用光学ヘッドと右眼用光学ヘッドとが設けられている)。他の例として、この眼科検査装置2は、単一の検査光学系からの光束を二分割し、一方を左眼に、他方を右眼にそれぞれ導くように構成されていてもよい。更に他の例として、この眼科検査装置2は、単一の情報提示光学系からの光束を二分割し、一方を左眼に、他方を右眼にそれぞれ導くように構成されていてもよい。左右両眼に同時に情報を提示可能な構成はこれらに限定されず、任意の構成であってよい。 In the presentation information display areas 1010L and 1010R, information presented to the left eye and the right eye of the subject is displayed, respectively. In this example, the ophthalmic examination apparatus 2 is configured to be able to present information to the left and right eyes of the subject at the same time. The ophthalmic examination apparatus 2 includes, for example, an examination optical system and an information presentation optical system for the left eye, and an examination optical system and an information presentation optical system for the right eye that are independent of each other (for example, the left eye An optical head for the right eye and an optical head for the right eye). As another example, the ophthalmic examination apparatus 2 may be configured to divide a light beam from a single examination optical system into two parts and guide one to the left eye and the other to the right eye. As yet another example, the ophthalmic examination apparatus 2 may be configured to divide a light beam from a single information presentation optical system into two parts and to guide one to the left eye and the other to the right eye. The configuration capable of simultaneously presenting information to both the left and right eyes is not limited to these, and may be any configuration.
図14に示す提示情報表示領域1010L及び1010Rには、両眼視機能検査用の視標が表示されている。これらは、眼科検査装置2により被検者に現在提示されている視標である。現在提示されている視標を示す情報は、眼科検査装置2から管理サーバ4に送信され、更に、転送制御部402により外部検者端末5に転送される。制御部50は、管理サーバ4から転送された情報に基づいて、眼科検査装置2が現在提示している視標の種別を特定し、特定された視標を表す画像を提示情報表示領域1010L及び1010Rに表示させる。視標を表す画像は、例えばサムネイルとして制御部50内の記憶装置(図示せず)に予め記憶されている。眼科検査装置2により提示される視標が変更されると、上記転送処理をリアルタイムで実行する。それにより、外部検者は、眼科検査装置2により提示されている視標を実質的にリアルタイムで認識することができる。 In the presentation information display areas 1010L and 1010R shown in FIG. 14, a visual target for a binocular visual function test is displayed. These are targets currently presented to the subject by the ophthalmic examination apparatus 2. Information indicating the currently presented optotype is transmitted from the ophthalmic examination apparatus 2 to the management server 4 and further transferred to the external examiner terminal 5 by the transfer control unit 402. Based on the information transferred from the management server 4, the control unit 50 identifies the type of the target currently presented by the ophthalmic examination apparatus 2, and displays an image representing the identified target as a presentation information display area 1010 </ b> L and 1010R is displayed. The image representing the visual target is stored in advance in a storage device (not shown) in the control unit 50 as, for example, a thumbnail. When the target presented by the ophthalmic examination apparatus 2 is changed, the transfer process is executed in real time. Thereby, the external examiner can recognize the visual target presented by the ophthalmic examination apparatus 2 substantially in real time.
提示情報表示領域1010等に、被検者に提示されているキャラクタを表示させることができる。例えば、画面1000を見ている検者(外部検者)のアバターを表示させることができる。更に、眼科検査装置2のキャラクタ制御部202による制御内容を管理サーバ4を介してリアルタイムで取得することにより、提示情報表示領域1010等に表示されているアバターの動作を制御することも可能である。なお、キャラクタが表示される領域は提示情報表示領域1010等には限定されず、他の表示領域であってもよいし、専用の表示領域を設けてもよい。 The character presented to the subject can be displayed in the presentation information display area 1010 or the like. For example, the avatar of the examiner (external examiner) who is looking at the screen 1000 can be displayed. Furthermore, it is also possible to control the operation of the avatar displayed in the presentation information display area 1010 or the like by acquiring the control content by the character control unit 202 of the ophthalmic examination apparatus 2 in real time via the management server 4. . The area where the character is displayed is not limited to the presentation information display area 1010 or the like, and may be another display area, or a dedicated display area may be provided.
通信内容表示領域1020には、検者と被検者との間の通信内容、特に、検者から被検者に提供された支援の内容が表示される。表示される支援の内容は、外部検者により提供された支援の内容、内部検者により提供された支援の内容、及び、被検者からの情報(質問内容、応答内容等)のうちの少なくともいずれかを含んでよい。また、ユーザ(外部検者、内部検者、被検者)毎の情報を通信内容表示領域1020に切り替え表示できるようにしてもよい。また、1以上のユーザからの情報を時系列順に表示させることも可能である。 The communication content display area 1020 displays the communication content between the examiner and the subject, in particular, the content of the support provided from the examiner to the subject. The content of the support displayed is at least one of the content of the support provided by the external examiner, the content of the support provided by the internal examiner, and information (question content, response content, etc.) from the subject. Either may be included. In addition, information for each user (external examiner, internal examiner, examinee) may be switched and displayed in the communication content display area 1020. It is also possible to display information from one or more users in chronological order.
図14に示す例では、管理センタ「A」内の外部検者(画面1000を使用している本人)が発した質問の内容と、それに対する被検者の応答の内容とが、通信内容表示領域1020に表示されている。なお、検者や被検者が発した音声情報を公知の音声認識技術を用いてテキスト化して表示することも可能である。また、所定の操作に対して予め関連付けられたテキスト情報を表示するようにしてもよい。 In the example shown in FIG. 14, the contents of a question issued by an external examiner (the person who uses the screen 1000) in the management center “A” and the contents of the response of the subject to the question are displayed as communication contents. It is displayed in area 1020. In addition, it is also possible to display voice information generated by the examiner or the subject as text using a known voice recognition technique. In addition, text information associated in advance with a predetermined operation may be displayed.
利用状況表示領域1030には、眼科検査装置2が設置されている複数の施設の名称「店舗A」、「店舗B」等が表示されている。更に、これら施設のうちから外部検者又は管理サーバ4等が選択した施設(例えば店舗B)に設置された複数の眼科検査装置2の識別情報「装置1」、「装置2」等が表示されている。 In the usage status display area 1030, names “store A”, “store B”, and the like of a plurality of facilities where the ophthalmic examination apparatus 2 is installed are displayed. Further, identification information “device 1”, “device 2”, etc. of a plurality of ophthalmic examination devices 2 installed in a facility (for example, store B) selected by an external examiner or management server 4 from among these facilities is displayed. ing.
図14に示す例では、施設の名称の左側に提示されたマークが選択の有無を示している。例えば、店舗Aや店舗Cに付された白星マークは、その施設が選択されていないことを示し、店舗Bに付された黒星マークは、その施設が選択されていることを示す。なお、このような星マーク群をラジオボタンとして構成することができる。この場合、外部検者は、これら施設のうちから所望の1つを選択することができる。 In the example shown in FIG. 14, the mark presented on the left side of the facility name indicates whether or not it is selected. For example, a white star mark attached to the store A or the store C indicates that the facility is not selected, and a black star mark attached to the store B indicates that the facility is selected. Such a star mark group can be configured as a radio button. In this case, the external examiner can select a desired one from these facilities.
更に、選択された店舗Bに設置された装置の識別情報の左側に提示されたマークも同様に、外部検者又は管理サーバ4等による選択の有無を示している。図14に示す例では、白丸マークは選択されていないことを示し、黒丸マークは選択されていることを示している。図14に示す例では、この外部検者が支援を担当する眼科検査装置2(被検者)として、店舗Bに設置された識別情報「装置1」の眼科検査装置2が選択されている。なお、このような丸マーク群をラジオボタンとして構成することができる。この場合、外部検者は、これら眼科検査装置2のうちから所望の1つを選択することができる。 Further, the mark presented on the left side of the identification information of the device installed in the selected store B similarly indicates whether or not the external examiner or the management server 4 has selected. In the example shown in FIG. 14, the white circle mark indicates that it is not selected, and the black circle mark indicates that it is selected. In the example illustrated in FIG. 14, the ophthalmic examination apparatus 2 having the identification information “apparatus 1” installed in the store B is selected as the ophthalmic examination apparatus 2 (subject) to which the external examiner is responsible. Such a circle mark group can be configured as a radio button. In this case, the external examiner can select a desired one from these ophthalmic examination apparatuses 2.
眼科検査装置2の識別情報の右側には、時間情報(例えば、支援を開始した時刻、支援開始からの経過時間等)と、眼科検査装置2に関する通信確立状態(通信モード)とが提示されている。 On the right side of the identification information of the ophthalmic examination apparatus 2, time information (for example, the time when support is started, the elapsed time since the start of assistance, etc.) and the communication establishment state (communication mode) related to the ophthalmic examination apparatus 2 are presented. Yes.
ここで通信モードについて説明する。本実施形態では、4つの通信モードを選択的に適用することができる。また、一の通信モードから他の通信モードへの移行を任意に行うことが可能である。 Here, the communication mode will be described. In the present embodiment, four communication modes can be selectively applied. Further, it is possible to arbitrarily change from one communication mode to another communication mode.
通信モード1は、眼科検査装置2による検査を被検者が単独で行っている状態を示す。通信モード1では、内部検者からも外部検者からも被検者は支援を受けておらず、眼科検査装置2は、内部検者端末3との間の通信も、外部検者端末5との間の通信も確立されていない。なお、前述したように、通信モード1が適用されているときであっても、眼科検査装置2からの情報(検査状況情報、画面1000に表示される情報等)を内部検者端末3及び外部検者端末5の少なくとも一方に転送することができる。それにより、眼科検査装置2による検査を監視することができ、検者は、必要に応じて通信要求を発して支援を開始することができる。また、被検者が支援を要請したとき、その要請に迅速に対応することができる。 The communication mode 1 indicates a state where the subject is performing the examination by the ophthalmic examination apparatus 2 alone. In communication mode 1, the subject is not receiving support from either the internal examiner or the external examiner, and the ophthalmic examination apparatus 2 communicates with the internal examiner terminal 3 with the external examiner terminal 5. Communication between the two has not been established. As described above, even when the communication mode 1 is applied, information (examination status information, information displayed on the screen 1000, etc.) from the ophthalmic examination apparatus 2 is transmitted to the internal examiner terminal 3 and the external. It can be transferred to at least one of the examiner terminals 5. Thereby, the examination by the ophthalmic examination apparatus 2 can be monitored, and the examiner can start a support by issuing a communication request as necessary. In addition, when a subject requests assistance, the request can be quickly handled.
通信モード2は、外部検者からの支援を受けながら検査を行っている状態を示す。通信モード2では、眼科検査装置2と外部検者端末5との間の通信が確立されている。なお、前述したように、通信モード2が適用されているときであっても、眼科検査装置2からの情報を内部検者端末3に転送することができる。それにより、内部検者は、例えば、直接アシストする必要が生じたときに迅速に対応することができる。 Communication mode 2 indicates a state in which an examination is performed while receiving support from an external examiner. In the communication mode 2, communication between the ophthalmic examination apparatus 2 and the external examiner terminal 5 is established. As described above, even when the communication mode 2 is applied, information from the ophthalmic examination apparatus 2 can be transferred to the internal examiner terminal 3. Thereby, the internal examiner can respond quickly when, for example, it becomes necessary to assist directly.
通信モード3は、内部検者からの支援を受けながら検査を行っている状態を示す。通信モード3では、眼科検査装置2と内部検者端末3との間の通信が確立されている。なお、前述したように、通信モード3が適用されているときであっても、眼科検査装置2からの情報を外部検者端末5に転送することができる。それにより、外部検者は、例えば、内部検者が手に負えないような状況が発生したときに迅速に対応することができる。 Communication mode 3 indicates a state in which an examination is performed while receiving support from an internal examiner. In the communication mode 3, communication between the ophthalmic examination apparatus 2 and the internal examiner terminal 3 is established. As described above, even when the communication mode 3 is applied, information from the ophthalmic examination apparatus 2 can be transferred to the external examiner terminal 5. Thereby, the external examiner can respond quickly when, for example, a situation occurs that the internal examiner cannot handle.
通信モード4は、内部検者及び外部検者の双方に支援を受けながら検査を行っている状態を示す。通信モード4では、眼科検査装置2、内部検者端末3、及び外部検者端末5の三者間の通信が確立されている。通信モード4は、例えば、内部検者と外部検者とが話し合う必要がある場合や、外部検者が内部検者に教育を施す場合などに適用される。なお、管理サーバ4の転送制御部402は、内部検者と外部検者との間の通信内容を眼科検査装置2に転送しないように制御を行うことが可能である。つまり、転送制御部402は次のような制御を行うことができる:内部検者から外部検者に向けた情報を外部検者端末5のみに転送する:外部検者から内部検者に向けた情報を内部検者端末3のみに転送する;内部検者から被検者に向けた情報を外部検者端末5及び眼科検査装置2に転送する;外部検者から内部検者に向けた情報を内部検者端末3及び眼科検査装置2に転送する;眼科検査装置2から出力された情報を外部検者端末5及び内部検者端末3に転送する。 The communication mode 4 indicates a state in which an examination is performed while receiving support from both an internal examiner and an external examiner. In the communication mode 4, communication among the three of the ophthalmic examination apparatus 2, the internal examiner terminal 3, and the external examiner terminal 5 is established. The communication mode 4 is applied, for example, when the internal examiner and the external examiner need to discuss or when the external examiner provides education to the internal examiner. The transfer control unit 402 of the management server 4 can perform control so as not to transfer the communication content between the internal examiner and the external examiner to the ophthalmic examination apparatus 2. That is, the transfer control unit 402 can perform the following control: Transfer information from the internal examiner to the external examiner only to the external examiner terminal 5: From the external examiner to the internal examiner Information is transferred only to the internal examiner terminal 3; information directed from the internal examiner to the subject is transferred to the external examiner terminal 5 and the ophthalmic examination apparatus 2; information directed from the external examiner to the internal examiner Transfer to the internal examiner terminal 3 and the ophthalmic examination apparatus 2; transfer information output from the ophthalmic examination apparatus 2 to the external examiner terminal 5 and the internal examiner terminal 3.
通信モードの切り替えは、被検者、内部検者、又は外部検者からの通信要求(呼び出し要求、割り込み要求)を受けた管理サーバ4によって実行される。例えば、通信モード1のときに被検者からの呼び出し要求が発生すると、通信モード2、3又は4に切り替えられる。どの通信モードに切り替えられるかは、例えば、被検者による指定や、検査状況情報の内容や、前述した属性などに応じて決定される。 The switching of the communication mode is executed by the management server 4 that has received a communication request (call request, interrupt request) from a subject, an internal examiner, or an external examiner. For example, when a call request from the subject is generated in the communication mode 1, the communication mode is switched to the communication mode 2, 3 or 4. Which communication mode can be switched is determined according to, for example, designation by the subject, the contents of the examination status information, the above-described attributes, and the like.
通信モード1のときに内部検者からの割り込み要求が発生すると、通信モード3又は4に切り替えられる。同様に、通信モード1のときに外部検者からの割り込み要求が発生すると、通信モード2又は4に切り替えられる。また、通信の切断(通信確立状態からの離脱)は、例えば、本人の選択や、被検者の選択や、検査の終了などに応じて行われる。 When an interrupt request from an internal examiner occurs in the communication mode 1, the mode is switched to the communication mode 3 or 4. Similarly, when an interrupt request from an external examiner is generated in the communication mode 1, the mode is switched to the communication mode 2 or 4. Further, the disconnection of communication (withdrawal from the communication established state) is performed according to, for example, the selection of the person, the selection of the subject, or the end of the examination.
被検者情報表示領域1040には、被検者に関する情報が提示される。図14に示す例では、被検者の各眼の測定値(屈折度、乱視度、乱視軸角度、加入度、視力値等)や、各眼の前眼部像や、被検者の顔画像などが表示される。更に、氏名、年齢、性別、疾患名、使用言語、検査困難度など、被検者に関する任意の情報を提示することも可能である。 In the subject information display area 1040, information related to the subject is presented. In the example shown in FIG. 14, the measured values of each eye of the subject (refractive index, astigmatism, astigmatism axis angle, addition power, visual acuity value, etc.), the anterior segment image of each eye, the face of the subject An image is displayed. Furthermore, it is also possible to present arbitrary information regarding the subject such as name, age, sex, disease name, language used, and examination difficulty.
提示情報操作領域1050には、被検者に提示される情報を操作するためのGUI(ソフトウェアキー等)が設けられている。図14に示す例では、被検者に提示される視標を選択するためのGUI(視標の選択肢、度数変更用ダイヤル等)と、各種の操作ボタン(印刷、エクスポート等)とが設けられている。外部検者は、操作装置522を用いることで、提示情報操作領域1050に設けられたソフトウェアキー等を操作する。 The presentation information operation area 1050 is provided with a GUI (software key or the like) for operating information presented to the subject. In the example shown in FIG. 14, a GUI (target option, frequency change dial, etc.) for selecting a target to be presented to the subject, and various operation buttons (print, export, etc.) are provided. ing. The external examiner operates a software key or the like provided in the presentation information operation area 1050 by using the operation device 522.
眼科検査装置2との通信が確立されている検者端末に、被検者に提示されているキャラクタを表示させることができる。例えば、被検者をアシストしている1以上の検者のそれぞれのアバターを表示させることができる。更に、眼科検査装置2のキャラクタ制御部202による制御内容を管理サーバ4を介してリアルタイムで取得することにより、各アバターの動作を制御することも可能である。 The character presented to the subject can be displayed on the examiner terminal in which communication with the ophthalmic examination apparatus 2 is established. For example, each avatar of one or more examiners who are assisting the subject can be displayed. Furthermore, it is also possible to control the operation of each avatar by acquiring the control content by the character control unit 202 of the ophthalmic examination apparatus 2 in real time via the management server 4.
〈作用・効果〉
実施形態の作用及び効果について説明する。<Action and effect>
The operation and effect of the embodiment will be described.
実施形態の眼科検査システムは、眼科検査装置(眼科検査装置2等)と検査指示装置(内部検者端末3、外部検者端末5等)を含む。検査指示装置は、眼科検査装置に指示を送信するために検者により使用される。 The ophthalmic examination system of the embodiment includes an ophthalmic examination apparatus (such as an ophthalmic examination apparatus 2) and an examination instruction apparatus (such as an internal examiner terminal 3 and an external examiner terminal 5). The examination instruction apparatus is used by the examiner to transmit an instruction to the ophthalmic examination apparatus.
検査指示装置は、検査に関する指示情報を入力するための第1入力部(操作装置312、音声入力装置314、撮影部51、操作装置522、音声入力装置524等)と、第1入力部により入力された指示情報を眼科検査装置に向けて送信する第1通信部(通信部32、通信部54等)を備える。 The inspection instruction device is input by a first input unit (operation device 312, voice input device 314, imaging unit 51, operation device 522, voice input device 524, etc.) for inputting instruction information related to the inspection, and the first input unit. A first communication unit (communication unit 32, communication unit 54, etc.) that transmits the instruction information sent to the ophthalmic examination apparatus.
眼科検査装置は、検査光学系(検査光学系211等)と、情報提示光学系(LCD214、投射系213等)と、第2通信部(通信部24等)と、制御部(出力制御部220等)とを備える。検査光学系は、被検眼に適用される光学素子(光学素子212等)と、被検眼を検査するための検査光束を光学素子を介して被検眼に投射する投射系(投射系213等)とを含む。情報提示光学系は、表示部(LCD214等)と、表示部から出力された表示光束を光学素子を介して被検眼に導く導光系(投射系213等)とを含む。第2通信部は、検査指示装置から送信された指示情報を受信する。制御部は、所定のキャラクタ画像を表示部に表示させ、第2通信部により受信された指示情報に基づいてキャラクタ画像の動作を制御する。 The ophthalmic examination apparatus includes an examination optical system (such as the examination optical system 211), an information presentation optical system (such as the LCD 214 and the projection system 213), a second communication unit (such as the communication unit 24), and a control unit (output control unit 220). Etc.). The inspection optical system includes an optical element (such as the optical element 212) applied to the eye to be examined, and a projection system (such as the projection system 213) that projects an inspection light beam for inspecting the eye to be examined via the optical element. including. The information presentation optical system includes a display unit (LCD 214 or the like) and a light guide system (projection system 213 or the like) that guides a display light beam output from the display unit to an eye to be examined via an optical element. The second communication unit receives the instruction information transmitted from the inspection instruction device. The control unit displays a predetermined character image on the display unit, and controls the action of the character image based on the instruction information received by the second communication unit.
このような実施形態によれば、アバター等のキャラクタを利用して検者の意図(指示、アドバイス等)を被検者に伝えることが可能である。よって、遠隔検査において、検者の意図を分かりやすく被検者に伝えることが可能である。また、親しみやすいキャラクタを用いることにより、被検者が感じる不安を低減させることが可能である。 According to such an embodiment, the examiner's intention (instruction, advice, etc.) can be transmitted to the subject using a character such as an avatar. Therefore, in the remote examination, it is possible to convey the examiner's intention to the subject in an easy-to-understand manner. Further, by using a friendly character, it is possible to reduce anxiety felt by the subject.
実施形態において、眼科検査装置は、音声情報を出力する音声出力部(音声出力装置233等)を備えていてよい。更に、制御部は、第2通信部により受信された指示情報に基づく音声情報を音声出力部に出力させることができる。この構成によれば、キャラクタによる視覚的なアシストに加え、音声によって指示やアドバイスを送ることができる。 In the embodiment, the ophthalmic examination apparatus may include an audio output unit (such as an audio output device 233) that outputs audio information. Furthermore, the control unit can cause the audio output unit to output audio information based on the instruction information received by the second communication unit. According to this configuration, in addition to visual assist by the character, instructions and advice can be sent by voice.
実施形態において、制御部は、第2通信部により受信された指示情報に基づく文字列情報及び画像情報の少なくとも一方を表示部に表示させることができる。それにより、キャラクタによるアシストに加え、文字列や画像を利用して指示やアドバイスを送ることができる。 In the embodiment, the control unit can cause the display unit to display at least one of character string information and image information based on the instruction information received by the second communication unit. Thereby, in addition to the assistance by the character, instructions and advice can be sent using the character string and the image.
実施形態の眼科検査システムは、眼科検査装置を用いた検査の状況を表す検査状況情報を生成する情報生成部(検査状況情報生成部22a等)を備えていてよい。更に、制御部は、情報生成部により生成された検査状況情報に基づいてキャラクタ画像の動作を制御することができる。この構成によれば、被検者や検査の状況に応じて迅速にかつ自律的にキャラクタを用いたアシストを提供することができる。 The ophthalmic examination system according to the embodiment may include an information generation unit (such as an examination status information generation unit 22a) that generates examination status information indicating the status of an examination using the ophthalmic examination apparatus. Furthermore, the control unit can control the motion of the character image based on the inspection status information generated by the information generation unit. According to this configuration, it is possible to provide assistance using a character quickly and autonomously according to the subject and the state of the examination.
実施形態の眼科検査システムは、情報生成部(検査状況情報生成部22a等)と、第1記憶部(記憶部421等)と、検索部(検索部422等)とを備えていてよい。情報生成部は、眼科検査装置を用いた検査の状況を表す検査状況情報を生成する。第1記憶部は、情報生成部により生成された検査状況情報と、第2通信部により受信された指示情報に基づき制御部により実行された制御を表す制御情報とを関連付けて記憶する。検索部は、情報生成部により生成された新たな検査状況情報に対応する制御情報を第1記憶部から検索する。更に、眼科検査装置の制御部は、検索部により検索された制御情報に基づいてキャラクタ画像の動作を制御することができる。この構成によれば、実際に検者が行った指示の内容を、被検者や検査の状況に応じて再現することができる。換言すると、実際に検者が行った指示の内容を学習し、キャラクタを自律的に制御することが可能である。 The ophthalmic examination system of the embodiment may include an information generation unit (examination status information generation unit 22a and the like), a first storage unit (storage unit 421 and the like), and a search unit (search unit 422 and the like). The information generation unit generates examination status information that represents the status of an examination using the ophthalmic examination apparatus. The first storage unit stores the examination status information generated by the information generation unit and the control information representing the control executed by the control unit based on the instruction information received by the second communication unit in association with each other. The search unit searches the first storage unit for control information corresponding to the new examination status information generated by the information generation unit. Furthermore, the control unit of the ophthalmic examination apparatus can control the operation of the character image based on the control information searched by the search unit. According to this configuration, the content of the instruction actually given by the examiner can be reproduced according to the subject and the state of the examination. In other words, it is possible to learn the contents of the instruction actually given by the examiner and control the character autonomously.
実施形態の眼科検査システムは、検査指示装置として第1検査指示装置及び第2検査指示装置を含んでいてよい。第1及び第2検査指示装置の例として、1以上の内部検者端末3及び1以上の外部検者端末5がある。眼科検査装置の制御部は、第1キャラクタ画像及び第2キャラクタ画像を表示部に表示させることができる。更に、制御部は、第1検査指示装置からの指示情報に基づいて第1キャラクタ画像の動作を制御し、かつ、第2検査指示装置からの指示情報に基づいて第2キャラクタ画像の動作を制御することができる。この構成によれば、2(以上)の検者による同時アシストを、それぞれの検者に対応するキャラクタを利用して提供することができる。 The ophthalmic examination system of the embodiment may include a first examination instruction apparatus and a second examination instruction apparatus as examination instruction apparatuses. Examples of the first and second inspection instruction devices include one or more internal examiner terminals 3 and one or more external examiner terminals 5. The control unit of the ophthalmic examination apparatus can display the first character image and the second character image on the display unit. Further, the control unit controls the movement of the first character image based on the instruction information from the first inspection instruction apparatus, and controls the movement of the second character image based on the instruction information from the second inspection instruction apparatus. can do. According to this configuration, simultaneous assistance by two (or more) examiners can be provided using the character corresponding to each examiner.
実施形態の眼科検査システムは、第2記憶部(モード情報記憶部221等)と、指定部(ユーザインターフェイス部23等)とを備えていてよい。第2記憶部には、眼科検査装置を用いて実施可能な検査の種別に制御モードが対応付けられた第1制御モード情報が予め記憶される。指定部は、眼科検査装置を用いて実施される検査の種別を指定するための機能を有する。更に、眼科検査装置の制御部は、指定部により指定された検査の種別に対応する制御モードでキャラクタ画像の動作を制御することができる。この構成によれば、検査種別に応じてキャラクタやその動作を切り替えることができるので、被検者に対してより分かりやすく指示やアドバイスを伝えることが可能となる。 The ophthalmic examination system of the embodiment may include a second storage unit (mode information storage unit 221 or the like) and a designation unit (user interface unit 23 or the like). The second storage unit stores in advance first control mode information in which a control mode is associated with a type of examination that can be performed using the ophthalmic examination apparatus. The designation unit has a function for designating the type of examination performed using the ophthalmic examination apparatus. Further, the control unit of the ophthalmic examination apparatus can control the operation of the character image in a control mode corresponding to the examination type designated by the designation unit. According to this configuration, since the character and its movement can be switched according to the examination type, it is possible to convey instructions and advice more easily to the subject.
実施形態の眼科検査システムは、第3記憶部(モード情報記憶部441等)と、属性受付部(ユーザインターフェイス23等)と、制御モード処理部(モード情報検索部442、モード処理部443等)とを備えていてよい。第3記憶部には、被検者属性に制御モードが対応付けられた第2制御モード情報が予め記憶される。属性受付部は、眼科検査装置を利用する被検者の属性を受け付ける。制御モード処理部は、属性受付部により受け付けられた属性に対応する制御モードを第2制御モード情報から取得する。更に、眼科検査装置の制御部は、制御モード処理部により取得された制御モードでキャラクタ画像の動作を制御することができる。この構成によれば、被検者属性(言語、疾患、性別、年齢等)に応じてキャラクタやその動作を切り替えることができるので、被検者に対してより分かりやすく指示やアドバイスを伝えることが可能となる。 The ophthalmic examination system according to the embodiment includes a third storage unit (mode information storage unit 441 and the like), an attribute reception unit (user interface 23 and the like), and a control mode processing unit (mode information search unit 442 and mode processing unit 443 and the like). And may be provided. In the third storage unit, second control mode information in which the control mode is associated with the subject attribute is stored in advance. The attribute receiving unit receives an attribute of a subject who uses the ophthalmic examination apparatus. The control mode processing unit acquires a control mode corresponding to the attribute received by the attribute receiving unit from the second control mode information. Furthermore, the control unit of the ophthalmic examination apparatus can control the operation of the character image in the control mode acquired by the control mode processing unit. According to this configuration, since the character and its operation can be switched according to the subject attributes (language, disease, sex, age, etc.), it is possible to convey instructions and advice to the subject more easily. It becomes possible.
実施形態において、被検者属性は、言語の種別を含んでいてよい。この場合、制御モード処理部は、属性受付部により受け付けられた属性に対応する言語で情報を出力するための処理を行うことができる。制御モード処理部が実行する処理の例として、検者からの指示の翻訳に関する処理、言語に応じて検者を選択する処理、言語に応じた文字列情報や音声情報を出力させる処理などがある。この構成によれば、アシストに使用する言語を被検者の使用言語に合わせることができる。 In the embodiment, the subject attribute may include a language type. In this case, the control mode processing unit can perform processing for outputting information in a language corresponding to the attribute received by the attribute receiving unit. Examples of processing executed by the control mode processing unit include processing relating to translation of instructions from the examiner, processing for selecting an examiner according to the language, processing for outputting character string information and voice information according to the language, and the like. . According to this configuration, the language used for assist can be matched with the language used by the subject.
実施形態において、眼科検査装置は、被検者が情報を入力するための第2入力部(操作装置232、音声入力装置234等)を備えていてよい。この場合、眼科検査装置の第2通信部は、第2入力部により入力された情報を検査指示装置に向けて送信する。検査指示装置の第1通信部は、眼科検査装置から送信された情報を受信する。更に、検査指示装置は、情報出力部(表示装置311、音声出力装置313、表示装置521、音声出力装置523等)と、第1通信部により受信された情報を情報出力部に出力させる出力制御部(制御部30、制御部50等)とを備える。この構成によれば、眼科検査装置と検査指示装置との間で双方向通信が可能となり、インタラクティブなアシストを提供することができる。 In the embodiment, the ophthalmic examination apparatus may include a second input unit (operation device 232, voice input device 234, etc.) for the subject to input information. In this case, the second communication unit of the ophthalmic examination apparatus transmits information input by the second input unit to the examination instruction apparatus. The first communication unit of the examination instruction apparatus receives information transmitted from the ophthalmic examination apparatus. Further, the examination instruction device includes an information output unit (display device 311, audio output device 313, display device 521, audio output device 523) and output control for causing the information output unit to output information received by the first communication unit. Units (control unit 30, control unit 50, etc.). According to this configuration, two-way communication is possible between the ophthalmic examination apparatus and the examination instruction apparatus, and interactive assistance can be provided.
また、実施形態によれば、遠隔検査において発生する様々な状況に対応することが可能となる。例えば、被検者の要望や検者の判断によって迅速に被検者をアシストすることができる。また、検査内容に対する被検者の理解の程度に応じ、適切なタイミングで適切な指示を出すことが可能となる。また、被検者に検者が付き添っていない場合であっても、被検者の様子や検査の進行状況等を実質的にリアルタイムで把握して被検者をアシストすることが可能である。また、アシストを好適に行うために必要な能力を持つ検者(専門性の高い検者、熟練者、外国語を使用可能な検者など)を的確に被検者に割り当てることが可能である。 Further, according to the embodiment, it is possible to cope with various situations that occur in the remote inspection. For example, the subject can be assisted quickly according to the request of the subject or the judgment of the examiner. Further, it is possible to issue an appropriate instruction at an appropriate timing according to the degree of the subject's understanding of the examination content. Further, even when the examiner is not accompanied by the subject, it is possible to assist the subject by grasping the state of the subject and the progress of the examination substantially in real time. In addition, it is possible to accurately assign examiners (highly specialized examiners, experts, examiners who can use foreign languages, etc.) who have the necessary abilities to assist properly. .
〈変形例〉
以上に説明した実施形態は本発明の典型的な例示に過ぎない。よって、本発明の要旨の範囲内における任意の変形(省略、置換、付加等)を適宜に施すことが可能である。<Modification>
The embodiment described above is merely a typical example of the present invention. Therefore, arbitrary modifications (omitted, replacement, addition, etc.) within the scope of the present invention can be made as appropriate.
例えば、外部検者等の熟練者が提供した指示内容を記録し、これを再生できるように構成することができる。指示内容の記録態様は、例えば、録画、録音、テキスト化などがある。 For example, it is possible to record an instruction provided by an expert such as an external examiner and reproduce it. The recording mode of the instruction content includes, for example, recording, recording, and texting.
また、以上に説明した実施形態や変形例を任意に組み合わせることが可能である。 Moreover, it is possible to arbitrarily combine the embodiment and the modification described above.
1 眼科検査システム
2 眼科検査装置
20 制御部
201 出力制御部
202 キャラクタ制御部
21 検査部
214 LCD
24 通信部
3 内部検者端末
4 管理サーバ
5 外部検者端末
51 撮影部
522 操作装置
524 音声入力装置
54 通信部DESCRIPTION OF SYMBOLS 1 Ophthalmic examination system 2 Ophthalmic examination apparatus 20 Control part 201 Output control part 202 Character control part 21 Inspection part 214 LCD
24 communication unit 3 internal examiner terminal 4 management server 5 external examiner terminal 51 imaging unit 522 operation device 524 voice input device 54 communication unit
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016027383AJP2017143992A (en) | 2016-02-16 | 2016-02-16 | Ophthalmologic examination system and ophthalmologic examination apparatus |
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016027383AJP2017143992A (en) | 2016-02-16 | 2016-02-16 | Ophthalmologic examination system and ophthalmologic examination apparatus |
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020074481ADivisionJP2020146469A (en) | 2020-04-20 | 2020-04-20 | Ophthalmologic examination system and ophthalmologic examination device |
| Publication Number | Publication Date |
|---|---|
| JP2017143992Atrue JP2017143992A (en) | 2017-08-24 |
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016027383APendingJP2017143992A (en) | 2016-02-16 | 2016-02-16 | Ophthalmologic examination system and ophthalmologic examination apparatus |
| Country | Link |
|---|---|
| JP (1) | JP2017143992A (en) |
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2019062979A (en)* | 2017-09-28 | 2019-04-25 | 株式会社トプコン | Optometry device, method and program |
| JP2019096158A (en)* | 2017-11-24 | 2019-06-20 | トヨタ自動車株式会社 | Healthcare information system, healthcare device, method, and program |
| JP2020146469A (en)* | 2020-04-20 | 2020-09-17 | 株式会社トプコン | Ophthalmologic examination system and ophthalmologic examination device |
| JP2021501008A (en)* | 2017-10-31 | 2021-01-14 | ウェルチ・アリン・インコーポレーテッド | Vision test |
| CN113729610A (en)* | 2021-09-26 | 2021-12-03 | 广东国瞳智能医疗技术发展有限公司 | Eyesight management system for school-age children |
| WO2022107722A1 (en)* | 2020-11-20 | 2022-05-27 | 株式会社ニデック | Optometry control program and subjective optometry system |
| JP2022089255A (en)* | 2020-12-04 | 2022-06-16 | 株式会社ニデック | Optometry control program and subjective optometry system |
| JP2022532696A (en)* | 2020-04-13 | 2022-07-19 | 北京市商▲湯▼科技▲開▼▲發▼有限公司 | Interaction methods, devices, systems, electronic devices and storage media |
| CN116615133A (en)* | 2020-11-20 | 2023-08-18 | 株式会社尼德克 | Optometry control program and subjective optometry system |
| JP2024016249A (en)* | 2017-12-11 | 2024-02-06 | 1-800 コンタクツ,インコーポレーテッド | Digital eye examination method for remote assessment by doctors |
| WO2025141951A1 (en)* | 2023-12-26 | 2025-07-03 | 株式会社トプコン | Ophthalmic system |
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004337546A (en)* | 2003-05-14 | 2004-12-02 | Eye Power Sports Inc | Method and apparatus for measuring visual ability |
| JP2006155639A (en)* | 2000-06-29 | 2006-06-15 | Toru Takahashi | Community environment providing system and object expression controller |
| JP2006277076A (en)* | 2005-03-28 | 2006-10-12 | Fuji Electric Device Technology Co Ltd | Image interface device |
| JP2008018287A (en)* | 2007-10-10 | 2008-01-31 | Namco Bandai Games Inc | GAME DEVICE AND INFORMATION STORAGE MEDIUM |
| JP2012133699A (en)* | 2010-12-24 | 2012-07-12 | Software Factory:Kk | Driving support device for vehicle |
| JP2013539565A (en)* | 2010-06-22 | 2013-10-24 | マイクロソフト コーポレーション | User tracking feedback |
| JP2014104244A (en)* | 2012-11-29 | 2014-06-09 | Nidek Co Ltd | Visual function evaluation program and visual function evaluation device |
| WO2014177179A1 (en)* | 2013-04-29 | 2014-11-06 | Carl Zeiss Vision International Gmbh | Method and system for determining the refractive properties of an eye of a child |
| WO2014195623A1 (en)* | 2013-06-07 | 2014-12-11 | Essilor International (Compagnie Generale D'optique) | Method for determining at least one value of a parameter for customising a visual compensation device |
| JP2015033472A (en)* | 2013-08-08 | 2015-02-19 | 株式会社トプコン | Ophthalmologic image-capturing apparatus |
| JP2015043967A (en)* | 2013-08-27 | 2015-03-12 | ジョンソン・アンド・ジョンソン・ビジョン・ケア・インコーポレイテッド | Means and method for demonstrating effect of low cylinder astigmatism correction |
| US20150118658A1 (en)* | 2013-10-31 | 2015-04-30 | Dexcom, Inc. | Adaptive interface for continuous monitoring devices |
| JP2016503537A (en)* | 2012-11-06 | 2016-02-04 | 20/20 ビジョン センター リミティド ライアビリティ カンパニー | System and method enabling a customer to take a vision test and an eye health checkup |
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006155639A (en)* | 2000-06-29 | 2006-06-15 | Toru Takahashi | Community environment providing system and object expression controller |
| JP2004337546A (en)* | 2003-05-14 | 2004-12-02 | Eye Power Sports Inc | Method and apparatus for measuring visual ability |
| JP2006277076A (en)* | 2005-03-28 | 2006-10-12 | Fuji Electric Device Technology Co Ltd | Image interface device |
| JP2008018287A (en)* | 2007-10-10 | 2008-01-31 | Namco Bandai Games Inc | GAME DEVICE AND INFORMATION STORAGE MEDIUM |
| JP2013539565A (en)* | 2010-06-22 | 2013-10-24 | マイクロソフト コーポレーション | User tracking feedback |
| JP2012133699A (en)* | 2010-12-24 | 2012-07-12 | Software Factory:Kk | Driving support device for vehicle |
| JP2016503537A (en)* | 2012-11-06 | 2016-02-04 | 20/20 ビジョン センター リミティド ライアビリティ カンパニー | System and method enabling a customer to take a vision test and an eye health checkup |
| JP2014104244A (en)* | 2012-11-29 | 2014-06-09 | Nidek Co Ltd | Visual function evaluation program and visual function evaluation device |
| WO2014177179A1 (en)* | 2013-04-29 | 2014-11-06 | Carl Zeiss Vision International Gmbh | Method and system for determining the refractive properties of an eye of a child |
| WO2014195623A1 (en)* | 2013-06-07 | 2014-12-11 | Essilor International (Compagnie Generale D'optique) | Method for determining at least one value of a parameter for customising a visual compensation device |
| JP2016525916A (en)* | 2013-06-07 | 2016-09-01 | エシロル アンテルナショナル(コンパーニュ ジェネラル ドプテーク) | Method for determining at least one value of a parameter for customizing a vision compensation device |
| JP2015033472A (en)* | 2013-08-08 | 2015-02-19 | 株式会社トプコン | Ophthalmologic image-capturing apparatus |
| JP2015043967A (en)* | 2013-08-27 | 2015-03-12 | ジョンソン・アンド・ジョンソン・ビジョン・ケア・インコーポレイテッド | Means and method for demonstrating effect of low cylinder astigmatism correction |
| US20150118658A1 (en)* | 2013-10-31 | 2015-04-30 | Dexcom, Inc. | Adaptive interface for continuous monitoring devices |
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2022079772A (en)* | 2017-09-28 | 2022-05-26 | 株式会社トプコン | Optometric apparatus, method, and program |
| JP2019062979A (en)* | 2017-09-28 | 2019-04-25 | 株式会社トプコン | Optometry device, method and program |
| JP2021501008A (en)* | 2017-10-31 | 2021-01-14 | ウェルチ・アリン・インコーポレーテッド | Vision test |
| JP7008815B2 (en) | 2017-10-31 | 2022-01-25 | ウェルチ・アリン・インコーポレーテッド | Vision test |
| US11246482B2 (en) | 2017-10-31 | 2022-02-15 | Welch Allyn, Inc. | Visual acuity examination |
| US11232863B2 (en) | 2017-11-24 | 2022-01-25 | Toyota Jidosha Kabushiki Kaisha | Medical information system, medical apparatus, method, and non-transitory computer readable medium |
| JP7013817B2 (en) | 2017-11-24 | 2022-02-01 | トヨタ自動車株式会社 | Medical information systems, medical devices, data communication methods, and programs |
| JP2019096158A (en)* | 2017-11-24 | 2019-06-20 | トヨタ自動車株式会社 | Healthcare information system, healthcare device, method, and program |
| JP7591635B2 (en) | 2017-12-11 | 2024-11-28 | 1-800 コンタクツ,インコーポレーテッド | Digital eye examination method for remote evaluation by a physician |
| JP2024016249A (en)* | 2017-12-11 | 2024-02-06 | 1-800 コンタクツ,インコーポレーテッド | Digital eye examination method for remote assessment by doctors |
| JP2022532696A (en)* | 2020-04-13 | 2022-07-19 | 北京市商▲湯▼科技▲開▼▲發▼有限公司 | Interaction methods, devices, systems, electronic devices and storage media |
| JP2020146469A (en)* | 2020-04-20 | 2020-09-17 | 株式会社トプコン | Ophthalmologic examination system and ophthalmologic examination device |
| JP2022177043A (en)* | 2020-04-20 | 2022-11-30 | 株式会社トプコン | Ophthalmic examination system and ophthalmic examination apparatus |
| WO2022107722A1 (en)* | 2020-11-20 | 2022-05-27 | 株式会社ニデック | Optometry control program and subjective optometry system |
| CN116615133A (en)* | 2020-11-20 | 2023-08-18 | 株式会社尼德克 | Optometry control program and subjective optometry system |
| JPWO2022107722A1 (en)* | 2020-11-20 | 2022-05-27 | ||
| EP4248838A4 (en)* | 2020-11-20 | 2024-09-04 | Nidek Co., Ltd. | OPTOMETRY CONTROL PROGRAM AND SUBJECTIVE OPTOMETRY SYSTEM |
| JP7623603B2 (en) | 2020-11-20 | 2025-01-29 | 株式会社ニデック | Optometry control program and subjective optometry system |
| JP2025061055A (en)* | 2020-11-20 | 2025-04-10 | 株式会社ニデック | Optometry control program and subjective optometry system |
| JP2022089255A (en)* | 2020-12-04 | 2022-06-16 | 株式会社ニデック | Optometry control program and subjective optometry system |
| JP7619026B2 (en) | 2020-12-04 | 2025-01-22 | 株式会社ニデック | Optometry control program and subjective optometry system |
| CN113729610A (en)* | 2021-09-26 | 2021-12-03 | 广东国瞳智能医疗技术发展有限公司 | Eyesight management system for school-age children |
| WO2025141951A1 (en)* | 2023-12-26 | 2025-07-03 | 株式会社トプコン | Ophthalmic system |
| Publication | Publication Date | Title |
|---|---|---|
| JP6660750B2 (en) | Ophthalmic examination system | |
| JP2017143992A (en) | Ophthalmologic examination system and ophthalmologic examination apparatus | |
| JP6869032B2 (en) | Ophthalmic examination system | |
| US9888847B2 (en) | Ophthalmic examination system | |
| US11925415B2 (en) | Slit-lamp microscope and ophthalmic system | |
| US20240164635A1 (en) | Ophthalmic instrument, management method, and management device | |
| WO2019087209A1 (en) | Wearable ophthalmoscope device and a method of capturing fundus image | |
| US11950849B2 (en) | Ophthalmic system, ophthalmic information processing apparatus, and recording medium | |
| US20240374135A1 (en) | Slit-lamp microscope and ophthalmic system | |
| JP6822875B2 (en) | Ophthalmic examination system and ophthalmic examination management device | |
| US12315632B2 (en) | Systems and methods for ophthalmic digital diagnostics via telemedicine | |
| JP2022177043A (en) | Ophthalmic examination system and ophthalmic examination apparatus | |
| JP7162748B2 (en) | SLIT LAMP MICROSCOPE, OPHTHALMIC SYSTEM, CONTROL METHOD FOR SLIT LAMP MICROSCOPE, AND RECORDING MEDIUM | |
| JP7057410B2 (en) | Ophthalmic examination system | |
| JP7150000B2 (en) | ophthalmic examination system | |
| JP6788724B2 (en) | Ophthalmic examination system and ophthalmic examination management server | |
| JP6788723B2 (en) | Ophthalmic examination system and ophthalmic examination management server | |
| JP2020036983A (en) | Ophthalmic examination system and ophthalmic examination management server | |
| JP2020044355A (en) | Ophthalmic examination system and ophthalmic examination management server | |
| US20220211267A1 (en) | Device navigation and capture of media data | |
| JP6829126B2 (en) | Ophthalmic system | |
| US20210121059A1 (en) | Ophthalmic instrument, management device, and method for managing an ophthalmic instrument | |
| JP2023142781A (en) | Ophthalmologic system | |
| CN116615133A (en) | Optometry control program and subjective optometry system |
| Date | Code | Title | Description |
|---|---|---|---|
| RD01 | Notification of change of attorney | Free format text:JAPANESE INTERMEDIATE CODE: A7421 Effective date:20161226 | |
| A621 | Written request for application examination | Free format text:JAPANESE INTERMEDIATE CODE: A621 Effective date:20190130 | |
| A977 | Report on retrieval | Free format text:JAPANESE INTERMEDIATE CODE: A971007 Effective date:20191025 | |
| A131 | Notification of reasons for refusal | Free format text:JAPANESE INTERMEDIATE CODE: A131 Effective date:20191119 | |
| A521 | Request for written amendment filed | Free format text:JAPANESE INTERMEDIATE CODE: A523 Effective date:20200109 | |
| A131 | Notification of reasons for refusal | Free format text:JAPANESE INTERMEDIATE CODE: A131 Effective date:20200317 | |
| A02 | Decision of refusal | Free format text:JAPANESE INTERMEDIATE CODE: A02 Effective date:20200929 |