KR101686833B1 - System Providing Conference Image Among Several User - Google Patents

Abstract

Translated fromKorean

본 발명은 화자 추적이 가능한 다자간 회의 영상 제공 시스템에 관한 것으로, 더욱 상세하게는 화자 인식 수단으로부터 전송된 정보를 분석하고 화자의 위치를 추출하여 360도 카메라가 상기 화자의 위치의 화면을 출력함으로써 화자를 추적하여 영상 제공이 가능한 화자 추적이 가능한 다자간 회의 영상 제공 시스템에 관한 것이다.The present invention relates to a multi-party conference image providing system capable of tracking a speaker, and more particularly, to a multi-way conference image providing system capable of tracking a speaker, And more particularly to a multi-party conference image providing system capable of providing a video by tracking a speaker.

Description

Translated fromKorean

화자 추적이 가능한 다자간 회의 영상 제공 시스템 {System Providing Conference Image Among Several User}{System Providing Conference Image}

본 발명은 화자 추적이 가능한 다자간 회의 영상 제공 시스템에 관한 것으로, 더욱 상세하게는 화자 인식 수단으로부터 전송된 정보를 분석하고 화자의 위치를 추출하여 360도 카메라가 상기 화자의 위치의 화면을 출력함으로써 화자를 추적하여 영상 제공이 가능한 화자 추적이 가능한 다자간 회의 영상 제공 시스템에 관한 것이다.
The present invention relates to a multi-party conference image providing system capable of tracking a speaker, and more particularly, to a multi-way conference image providing system capable of tracking a speaker, And more particularly to a multi-party conference image providing system capable of providing a video by tracking a speaker.

다자간 회의를 하는 경우 참여중인 유저에게 회의 내용을 효율적으로 전달하기 위해 모니터 또는 프로젝터를 이용해 프레젠테이션 데이터를 화면에 출력시켜 회의를 진행하게 된다.In the case of a multi-party conference, the conference data is displayed on the screen by using a monitor or a projector in order to efficiently transmit the contents to the participating users.

그러나, 원격 회의나 회의 내용을 녹화하는 경우 회의실에 설치된 카메라에 의해 촬영된 영상을 전송하거나 녹화할 수 있지만 발표나 발언을 하는 화자를 선별하여 촬영할 수 없기 때문에 원격지에서 회의에 참석하는 경우 화자를 특정하기 어려우므로 효율적인 회의 전달이 불가능한 문제가 있었다.However, when recording a teleconference or a meeting, it is possible to transmit or record the video shot by the camera installed in the conference room. However, since it is not possible to select a speaker who is presenting or speaking, It is difficult to efficiently transmit a conference.

또한, 회의를 녹화하는 경우에도 회의실 전체 영상만 녹화 가능하기 때문에 녹화된 데이터를 시청하는 경우 화자를 명확하게 구분할 수 없기 때문에 회의 내용 을 용이하게 파악할 수 없는 문제가 있었다.
In addition, even when recording a meeting, since only the entire video of the conference room can be recorded, there is a problem that the contents of the conference can not be easily grasped because the speaker can not be clearly distinguished when viewing the recorded data.

상기와 같은 문제점을 해결하기 위해 안출된 것으로서 본 발명의 목적은 화자 인식 수단으로부터 전송된 정보를 분석하고 화자의 위치를 추출하여 360도 카메라가 상기 화자의 위치의 화면을 출력함으로써 화자를 추적하여 영상 제공이 가능한 화자 추적이 가능한 다자간 회의 영상 제공 시스템을 제공하는 데 있다.
The object of the present invention is to solve the above problems, and it is an object of the present invention to provide a method and apparatus for analyzing information transmitted from a speaker recognition unit, extracting a position of a speaker, And to provide a multi-party conference image providing system capable of providing a speaker tracking capable of being provided.

상기와 같은 목적을 달성하기 위해 본 발명에 따른 화자 추적이 가능한 다자간 회의 영상 제공 시스템은 다자간 회의에 참여하는 유저 중 화자의 위치를 추적하는 화자 인식 수단과 다자간 회의에 참여하는 모든 유저를 촬영하는 360도 카메라와 상기 화자 인식 수단으로부터 전송된 정보를 분석하여 화자의 위치를 추출하고, 상기 360도 카메라의 영상 중 화자 위치의 영상을 추출하여 화자의 영상 출력을 제어하는 제어수단 및 상기 추출된 화자의 영상을 출력하는 디스플레이수단을 포함하는 것을 특징으로 한다.In order to accomplish the above object, according to the present invention, there is provided a multi-party conference image providing system capable of tracking a speaker, including a speaker recognition unit for tracking a location of a speaker among users participating in a multi- A control means for extracting a position of a speaker by analyzing information transmitted from the camera and the speaker recognition means, extracting an image of a speaker position in the image of the 360-degree camera to control a video output of the speaker, And display means for outputting an image.

상기 화자 인식 수단은 회의에 참여하는 유저가 앉은 자리의 데스크에 설치된 화자 입력 장치로 구성되고; 상기 화자 입력 장치는 다자간 회의에 참여하는 모든 유저가 앉는 자리에 설치되고, 위치 정보를 내장하고 있으며 제어 수단에 데이터를 전송할 수 있는 근거리 통신 모듈을 포함하여 상기 화자 입력 장치를 화자가 누를 경우 상기 화자 입력 장치에 저장된 위치 정보를 상기 제어 수단으로 전송하여 화자의 위치를 추적하는 것을 특징으로 한다.Wherein the speaker recognizing means comprises a speaker input device installed at a desk where a user participating in a conference is seated; The speaker input device includes a local communication module installed in a place where all users participating in a multi-party conference are located, and includes location information and can transmit data to the control means. When a speaker presses the speaker input device, And the position information stored in the input device is transmitted to the control means to track the position of the speaker.

상기 화자 인식 수단은 화자를 자동으로 추적하여 인식하는 방식으로 음성을 인식하는 복수 개의 방향성 마이크로폰으로 구성되는 것을 특징으로 한다.And the speaker recognizing means comprises a plurality of directional microphones for recognizing a voice in a manner of automatically tracking and recognizing the speaker.

상기 방향성 마이크로폰은 360도 카메라의 외주연에 일정 간격으로 N개의 방향성 마이크로폰이 설치되고; 화자가 말하는 경우 음성의 방향에 설치된 적어도 하나의 방향성 마이크로폰이 활성화되고, 상기 방향성 마이크로폰에 입력된 신호를 분석하여 화자의 방향성을 추적하는 것을 특징으로 한다.Wherein the directional microphone is provided with N directional microphones at regular intervals on the outer periphery of the 360 degree camera; At least one directional microphone installed in the direction of the voice is activated when the speaker speaks, and the directional characteristic of the speaker is tracked by analyzing the signal input to the directional microphone.

상기 제어 수단은 화자 인식 수단으로부터 전송된 정보로부터 화자의 위치를 추출하는 화자위치추출모듈과; 상기 추출된 화자의 위치 정보에 따라 360도 카메라의 영상 중 사이 위치 정보에 매핑된 영상을 추출하여 출력하도록 제어하는 영상제어모듈을 포함하는 것을 특징으로 한다.Wherein the control means comprises: a speaker position extraction module for extracting a speaker's position from the information transmitted from the speaker recognition means; And an image control module for extracting and outputting an image mapped to the inter-location information among the images of the 360-degree camera according to the extracted location information of the speaker.

그리고 상기 디스플레이 수단은 4k2k(UHD) 모니터로 구성되어 FHD(1920 × 1080p) 4개 화면(4채널)을 표시하고, 상기 360도 카메라의 360도 화면을 Local과 Remote 2채널에 표시하고, 회의에 필요한 프레젠테이션 자료를 1채널에 표시하고, 화자 또는 발표자의 자료 유동성을 높이기 위한 모바일 등록을 통한 모바일 영상을 1채널에 표시하여 FHD 4개의 화면을 동시에 표시하도록 구성된 것을 특징으로 한다.
The display means is constituted by a 4k2k (UHD) monitor and displays four screens (four channels) of FHD (1920 x 1080p), displays a 360-degree screen of the 360-degree camera on Local and Remote two channels, And displays the required presentation material on one channel and displays mobile images through mobile registration on the one channel to increase the fluidity of the speaker or the speaker by displaying four FHD screens simultaneously.

상기에서 살펴본 바와 같이, 본 발명에 따른 화자 추적이 가능한 다자간 회의 영상 제공 시스템은 화자 인식 수단으로부터 전송된 정보를 분석하고 화자의 위치를 추출하여 360도 카메라가 상기 화자의 위치의 화면을 출력함으로써 화자를 추적하여 영상 제공이 가능하므로 원격 회의시 회의 내용을 원격지에 효율적으로 전달할 수 있는 탁월한 효과가 발생한다.
As described above, the multi-party conference image providing system according to the present invention analyzes the information transmitted from the speaker recognition means and extracts the position of the speaker, and the 360-degree camera outputs the screen of the speaker's position, So that it is possible to effectively transmit the conference contents to the remote place during the remote conference.

도 1은 본 발명의 바람직한 실시예에 따른 화자 추적이 가능한 다자간 회의 영상 제공 시스템을 개략적으로 도시한 시스템 구성도이다.
도 2는 본 발명의 바람직한 실시예에 따른 화자 입력 장치로 화자를 인식하는 것을 개략적으로 도시한 것이다.
도 3은 본 발명의 바람직한 실시예에 따른 360도 카메라에 방향성 마이크로폰이 배치된 것을 개략적으로 도시한 것이다.
도 4는 도 3의 방향성 마이크로폰을 이용하여 화자의 방향성을 추적하는 것을 개략적으로 도시한 것이다.
도 5는 본 발명의 바람직한 실시예에 따른 디스플레이 수단을 통해 출력되는 4 CH 영상을 개략적으로 도시한 것이다.1 is a system configuration diagram schematically illustrating a multi-party conference image providing system capable of tracking a speaker according to a preferred embodiment of the present invention.
FIG. 2 is a schematic illustration of recognizing a speaker with a speaker input device according to a preferred embodiment of the present invention.
FIG. 3 schematically shows a directional microphone arranged in a 360-degree camera according to a preferred embodiment of the present invention.
FIG. 4 schematically shows tracking of the direction of a speaker using the directional microphone of FIG. 3. FIG.
FIG. 5 is a schematic view of a 4 CH image output through a display unit according to a preferred embodiment of the present invention.

이하, 본 발명의 구체적인 실시예에 대하여 도면을 참조하여 상세하게 설명하기로 한다.Hereinafter, specific embodiments of the present invention will be described in detail with reference to the drawings.

도 1은 본 발명의 바람직한 실시예에 따른 화자 추적이 가능한 다자간 회의 영상 제공 시스템을 개략적으로 도시한 시스템 구성도이다.1 is a system configuration diagram schematically illustrating a multi-party conference image providing system capable of tracking a speaker according to a preferred embodiment of the present invention.

도 1을 참조하면, 본 발명에 따른 화자 추적이 가능한 다자간 회의 영상 제공 시스템은 다자간 회의에 참여하는 유저 중 화자를 추적하는 화자 인식 수단(10)과 다자간 회의에 참여하는 모든 유저를 촬영하는 360도 카메라(20)와 상기 화자 인식 수단으로부터 전송된 정보를 분석하여 화자의 위치를 추출하고, 상기 360도 카메라의 영상 중 화자 위치의 영상을 추출하여 화자의 영상 출력을 제어하는 제어수단(30)과 상기 추출된 화자의 영상을 출력하는 디스플레이수단(40)을 포함하여 구성될 수 있다.Referring to FIG. 1, a multi-party conference image providing system capable of tracking a speaker according to the present invention includes aspeaker recognition unit 10 for tracking a speaker among users participating in a multi-party conference and a 360-degreeA control unit 30 for extracting a position of a speaker by analyzing information transmitted from thecamera 20 and the speaker recognition unit, extracting an image of a speaker position in the image of the 360-degree camera, And a display means (40) for outputting an image of the extracted speaker.

일반적으로, 다자간 회의는 참여하는 유저의 얼굴을 볼 수 있도록 유저가 원형 또는 타원형으로 배치되므로 360도 카메라를 중앙 상부에 배치할 경우 촬영 범위가 360도로 확보되기 때문에 다자간 회의에 참여하는 모든 유저를 동시에 촬영할 수 있다.In general, since a user is placed in a circle or an ellipse so that a face of a participating user can be seen in a multi-party conference, when the 360-degree camera is disposed at the upper center, the shooting range is 360 degrees. Therefore, You can shoot.

상기 화자 인식 수단(10)은 화자의 위치를 인식할 수 있는 수단으로, 입력식과 추적식으로 구성될 수 있다.The speaker recognition means 10 is a means for recognizing the position of a speaker, and may be constituted by an input type and a tracking type.

여기서, 상기 입력식은 회의에 참여하는 유저가 앉은 자리의 데스크에 설치된 화자 입력 장치(110)를 화자가 누를 경우 상기 화자 입력 장치의 위치 정보를 상기 제어 수단으로 전송하여 화자의 위치를 추출하는 방식으로 화자가 능동적으로 자신의 위치를 알리는 방식이다.Here, the input expression is a method of extracting the position of the speaker by transmitting the position information of the speaker input device to the control means when the speaker presses thespeaker input device 110 installed at the desk where the user participating in the conference It is the way the speaker actively informs his location.

상기 화자 입력 장치(110)는 버튼 식으로 구성될 수 있으며, 상기 화자 입력 장치(110)는 위치 정보를 내장하고 있으며 제어 수단에 데이터를 전송할 수 있는 근거리 통신 모듈을 포함하고 있으므로 화자가 버튼을 누를 경우 상기 화자 입력 장치의 위치 정보를 제어 수단(30)에 전송하고, 상기 제어 수단(30)이 전송된 위치 정보에 따라 360도 카메라의 영상 중 상기 위치 정보에 해당하는 화자의 영상을 추출하여 디스플레이수단(40)을 통해 출력하도록 제어하게 된다.Thespeaker input device 110 may be configured as a button type, and thespeaker input device 110 includes a location communication module and a local communication module capable of transmitting data to the control means. Thecontrol unit 30 extracts the image of the speaker corresponding to the position information among the images of the 360 degree camera according to the transmitted position information, (40). ≪ / RTI >

상기 화자 입력 장치(110)는 다자간 회의에 참여하는 모든 유저가 앉는 자리에 설치될 수 있으며, 설치되는 위치에 대한 위치 정보를 미리 저장하여 화자가 버튼을 누를 경우 해당 화자 입력 장치의 위치 정보가 제어 수단(30)에 전송되어 화자의 위치가 추출된다.Thespeaker input device 110 may be installed in a place where all users participating in the multi-party conference are seated. In addition, thespeaker input device 110 may store the location information of the installed location in advance, and when the speaker presses the button, the location information of the speaker input device is controlled Is sent to the means (30) to extract the location of the speaker.

예를 들어, 도 2와 같이 화자 A가 자신의 위치의 테이블에 설치된 화자 입력 장치를 누르면 상기 화자 입력 장치(110)가 활성화되고, 내장된 위치 정보를 제어 수단에 전송하고, 상기 제어 수단(30)은 상기 전송된 위치 정보를 통해 화자A가 어떤 위치에 있는지 확인할 수 있다.For example, as shown in FIG. 2, when the speaker A presses a speaker input device installed in a table of his / her position, thespeaker input device 110 is activated, and the built-in position information is transmitted to the control means. ) Can confirm the position of the speaker A through the transmitted location information.

여기서, 상기 위치정보는 화자 입력 장치(110)의 식별 정보로 대체될 수 있으며, 초기 세팅시 상기 화자 입력 장치의 식별 정보와 위치정보를 매핑하여 제어 수단(30)에 저장될 경우 화자 입력 장치의 식별 정보 만으로 위치가 특정될 수 있다.Here, the location information may be replaced with the identification information of thespeaker input device 110. When the identification information of the speaker input device and the location information are mapped at the initial setting and stored in the control means 30, The position can be specified only by the identification information.

따라서, 360도 카메라(20)로부터 촬영된 영상 중 상기 화자A의 위치에 해당하는 영상을 추출하여 디스플레이 수단(40)을 통해 출력되도록 제어할 수 있다.Therefore, the image corresponding to the position of the speaker A among the images photographed from the 360-degree camera 20 can be extracted and controlled to be outputted through the display means 40.

한편, 추적식은 화자를 자동으로 추적하여 인식하는 방식으로 음성을 인식하는 방향성 마이크로폰(120)으로 구성될 수 있다.On the other hand, the tracking formula may be composed of adirectional microphone 120 that recognizes a voice in a manner of automatically tracking and recognizing the speaker.

보다 구체적으로, 상기 방향성 마이크로폰(120)은 모든 방향에서의 음성을 추적하기 위해 복수 개로 구성될 수 있으며, 예를 들어, 도 3과 같이 360도 카메라(20)의 4분면에 4개의 방향성 마이크로폰이 설치될 수 있다.More specifically, thedirectional microphone 120 may include a plurality ofdirectional microphones 120 for tracking audio in all directions. For example, as shown in FIG. 3, four directional microphones Can be installed.

도 3은 화자로부터 음성이 인식된 경우 방향성 마이크로폰을 통해 화자의 위치가 추적되는 것을 개략적으로 도시한 것이다.FIG. 3 schematically shows that a speaker's position is tracked through a directional microphone when speech is recognized from the speaker.

도 3을 참조하면, 특정 위치의 화자가 발언을 하는 경우 상기 화자가 말하는 방향에 있는 방향성 마이크로폰(120)이 음성을 인식하고 나머지 방향성 마이크로폰은 음성을 인식하지 않거나 작게 인식하여 하나의 방향성 마이크로폰만이 활성화되고, 상기 방향성 마이크로폰 방향이 화자의 방향이 된다.3, when a speaker at a specific position makes a speech, thedirectional microphone 120 in the direction in which the speaker speaks recognizes the speech, and the remaining directional microphones recognize the speech in the direction of the speaker. And the directional microphone direction becomes the direction of the speaker.

따라서, 제어 수단(30)은 상기 활성화된 방향성 마이크로폰(120)이 향하는 방향을 화자의 위치로 추출하고 360도 카메라(20)의 영상 중 상기 방향성 마이크로폰이 향하는 방향의 영상을 추출하여 디스플레이수단(40)에 출력되도록 제어한다. 즉, 방향성 마이크로폰(120)에서 감지된 방향성을 이용하여 화자의 위치를 추적하게 된다.Therefore, the control means 30 extracts the direction of the activateddirectional microphone 120 to the position of the speaker, extracts the image of the direction of the directional microphone from the image of the 360degree camera 20, . That is, the position of the speaker is tracked using the directionality detected by thedirectional microphone 120.

한편, 도 4와 같이 화자가 2개의 방향성 마이크로폰(120) 사이에 위치한 경우 4개의 방향성 마이크로폰 중 2개의 방향성 마이크로폰(120)이 활성화되고 신호의 세기가 동일할 경우 상기 2개의 방향성 마이크로폰 사이의 중앙 방향에 화자가 위치하고, 2개의 방향성 마이크로폰 중 신호의 크기가 다를 경우 신호의 크기를 비교하여 방향성을 추적하게 된다.4, when the speaker is positioned between the twodirectional microphones 120, when twodirectional microphones 120 of the four directional microphones are activated and the strength of the signal is the same, the center direction between the twodirectional microphones 120 And when the signal size of the two directional microphones is different, the directionality is tracked by comparing the size of the signal.

즉, 2개의 방향성 마이크로폰 중앙 방향에서 2개의 방향성 마이크로폰 중 신호의 크기가 큰 쪽으로 방향성을 추정하게 되고, 신호 크기의 비를 통해 정확한 방향성을 추적하게 된다.That is, the direction of the two directional microphones in the center direction of the two directional microphones is estimated to be the direction of the larger one of the directional microphones, and the accurate directionality is tracked through the ratio of the signal sizes.

만일, 3개 이상의 방향성 마이크로폰이 활성화되는 경우 신호가 작은 방향성 마이크로폰을 배제하고 신호가 큰 2개의 방향성 마이크로폰의 신호를 비교 분석하여 화자의 방향성을 추적할 수 있다.If three or more directional microphones are activated, the directions of the speakers can be tracked by comparing and analyzing the signals of the two directional microphones having a large signal, excluding the small directional microphone.

상기 360도 카메라(20)는 360도 어라운드 뷰가 가능한 구형의 어안렌즈(Fisheye lens) 또는 360도 시야각 렌즈를 채택하여 360도 영상 촬영이 가능하다.The 360-degree camera 20 adopts a spherical fisheye lens or a 360-degree viewing angle lens capable of 360-degree surround view, thereby enabling 360-degree image capture.

상기 360도 카메라(20)는 촬영된 360도 영상 중 원하는 영역에 대하여 원하는 크기로 펼쳐서 보이는 Dewarp 기능을 이용하여 화자의 위치가 추출되면 화자의 위치에 해당하는 영상만 Dewarp하여 영상을 출력할 수 있다.When the position of the speaker is extracted using the Dewarp function, the 360-degree camera 20 outputs the image by dewapping only the image corresponding to the position of the speaker, .

상기 360도 카메라의 구체적인 구성과 작용은 본 발명의 통상의 지식을 가진 자에게 자명할 뿐만 아니라, 발명의 특징에서 벗어나는 부분이므로 구체적인 설명은 생략하기로 한다.The specific configuration and operation of the 360-degree camera are not only obvious to those skilled in the art, but also deviate from the features of the present invention, and thus a detailed description thereof will be omitted.

상기 제어 수단(30)은 화자 인식 수단으로부터 전송된 정보로부터 화자의 위치를 추출하는 화자위치추출모듈과 상기 추출된 화자의 위치 정보에 따라 360도 카메라의 영상 중 사이 위치 정보에 매핑된 영상을 추출하여 출력하도록 제어하는 영상제어모듈을 포함하여 구성될 수 있다.The control means 30 extracts the position of the speaker from the information transmitted from the speaker recognition means and the image mapped to the position information among the images of the 360 degrees camera according to the extracted position information of the speaker And outputting the image data to the display device.

상기 영상제어모듈은 상기 추출된 화자의 위치를 중심으로 360도 영상을 표시하여 화자 중심의 회의 시스템을 제공할 수 있다.The image control module displays a 360-degree image around the extracted speaker's position to provide a speaker-centered conference system.

상기 디스플레이수단(40)은 상기 360도 카메라를 통해 촬영된 영상을 출력하는 역할을 담당하고, TV, 모니터 또는 프로젝터 등의 디스플레이 장치로 구현될 수 있다.The display means 40 may be implemented as a display device such as a TV, a monitor, or a projector in order to output an image photographed through the 360-degree camera.

특히, 도 5와 같이 4k2k(UHD) 모니터로 구성하여 FHD(1920 × 1080p) 4개 화면을 표시할 수 있으며, 360도 카메라의 360도 화면을 Local과 Remote 2채널에 표시하고, 회의에 필요한 프레젠테이션 자료를 1채널에 표시하고, 화자 또는 발표자의 자료 유동성을 높이기 위한 모바일 등록을 통한 모바일 영상을 1채널에 표시하여 FHD 4개의 화면을 동시에 표시하도록 구성할 수 있다.In particular, as shown in FIG. 5, a 4-k2k (UHD) monitor can display four FHD (1920 × 1080p) screens, and a 360-degree screen of a 360-degree camera can be displayed on two local and remote channels. The mobile image can be displayed on one channel and the four screens of the FHD can be simultaneously displayed by displaying the mobile image through the mobile registration for displaying the data on one channel and increasing the fluidity of the speaker or the presenter.

상기 모바일 영상은 화자 또는 발표자가 소지한 모바일 기기와 상기 디스플레이수단이 유선 또는 무선 연결을 통해 동기화되어 상기 모바일 기기로 표시된 메모나 노트 등의 모바일 영상이 1채널에 배치되어 출력될 수 있다.In the mobile image, a mobile device, such as a memo or a note, displayed on the mobile device is synchronized through a wired or wireless connection with a mobile device held by a speaker or a presenter, and the mobile image may be arranged in one channel and output.

이상에서 설명한 본 발명의 상세한 설명에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 본 발명의 보호범위는 상기 실시예에 한정되는 것이 아니며, 해당 기술분야의 통상의 지식을 갖는 자라면 본 발명의 사상 및 기술영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
While the present invention has been described in connection with what is presently considered to be practical exemplary embodiments, it is to be understood that the invention is not limited to the disclosed embodiments, but, on the contrary, It will be understood by those skilled in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention.

10 : 화자 인식 수단 20 : 360도 카메라
30 : 제어 수단 40 : 디스플레이 수단10: Speaker recognition means 20: 360 degree camera
30: control means 40: display means

Claims (6)

Translated fromKorean

다자간 회의에 참여하는 유저 중 화자의 위치를 추적하는 화자 인식 수단과;
다자간 회의에 참여하는 모든 유저를 촬영하는 360도 카메라와;
상기 화자 인식 수단으로부터 전송된 정보를 분석하여 화자의 위치를 추출하고, 상기 360도 카메라의 영상 중 화자 위치의 영상을 추출하여 화자의 영상 출력을 제어하는 제어수단 및;
상기 추출된 화자의 영상을 출력하는 디스플레이수단을 포함하되;
상기 화자 인식 수단은
회의에 참여하는 유저가 앉은 자리의 데스크에 설치된 화자 입력 장치로 구성되고;
상기 화자 입력 장치는
다자간 회의에 참여하는 모든 유저가 앉는 자리에 설치되고, 위치 정보를 내장하고 있으며 제어 수단에 데이터를 전송할 수 있는 근거리 통신 모듈을 포함하여 상기 화자 입력 장치를 화자가 누를 경우 상기 화자 입력 장치에 저장된 위치 정보를 상기 제어 수단으로 전송하고;
상기 제어수단은 전송된 위치 정보에 따라 상기 360도 카메라의 영상 중 상기 위치 정보에 해당하는 화자의 영상을 추출하여 화자의 위치를 추적하는 것을 특징으로 하는 화자 추적이 가능한 다자간 회의 영상 제공 시스템.
A speaker recognition means for tracking a position of a speaker among users participating in a multi-party conference;
A 360-degree camera that captures all users participating in a multi-party conference;
Control means for extracting a position of a speaker by analyzing information transmitted from the speaker recognition means, extracting an image of a speaker position in the image of the 360-degree camera, and controlling a video output of the speaker;
And display means for outputting an image of the extracted speaker;
The speaker recognition means
A speaker input device installed in a desk at a place where a user participating in the conference is located;
The speaker input device
A local communication module installed in a place where all the users participating in the multi-party conference are seated, the location information being embedded therein and capable of transmitting data to the control means, and when the speaker presses the speaker input device, Transmitting information to said control means;
Wherein the control means extracts a video of a speaker corresponding to the position information among the images of the 360-degree camera according to the transmitted position information, and tracks the position of the speaker.
삭제delete삭제delete삭제delete제 1항에 있어서,
상기 제어 수단은
화자 인식 수단으로부터 전송된 정보로부터 화자의 위치를 추출하는 화자위치추출모듈과;
상기 추출된 화자의 위치 정보에 따라 360도 카메라의 영상 중 상기 위치 정보에 매핑된 영상을 추출하여 출력하도록 제어하는 영상제어모듈을 포함하는 것을 특징으로 하는 화자 추적이 가능한 다자간 회의 영상 제공 시스템.
The method according to claim 1,
The control means
A speaker position extraction module for extracting a position of a speaker from the information transmitted from the speaker recognition means;
And an image control module for controlling the speaker to extract and output an image mapped to the position information among images of the 360 degrees camera according to the extracted position information of the speaker.
제 1항에 있어서,
상기 디스플레이 수단은
4k2k(UHD) 모니터로 구성되어 FHD(1920 × 1080p) 4개 화면(4채널)을 표시하고, 상기 360도 카메라의 360도 화면을 Local과 Remote 2채널에 표시하고, 회의에 필요한 프레젠테이션 자료를 1채널에 표시하고, 화자 또는 발표자의 자료 유동성을 높이기 위한 모바일 등록을 통한 모바일 영상을 1채널에 표시하여 FHD 4개의 화면을 동시에 표시하도록 구성된 것을 특징으로 하는 화자 추적이 가능한 다자간 회의 영상 제공 시스템.The method according to claim 1,
The display means
4 channels (4 channels) of FHD (1920 × 1080p), 360 degree screen of 360 degree camera is displayed on 2 channels of Local and Remote, And displaying mobile images through mobile registration on a single channel to increase the fluidity of a speaker or a presenter, thereby displaying four FHD screens simultaneously.

Images