













본 발명은 터치스크린 기기 간 사용성 제공 시스템 및 방법에 관한 것으로, 보다 상세하게는 멀티터치 기기를 사용하는 사용자들에게 직관적인 사용성을 제공하는 기기 간 상호 작용이 가능한 터치스크린 기기 간 사용성 제공 시스템 및 방법에 관한 것이다.The present invention relates to a system and method for providing usability between touch screen devices, and more particularly, to a system and method for providing usability between touch screen devices capable of interacting with devices that provide intuitive usability to users using multi- .
퍼스널 컴퓨터(PC), PDA(Personal Digital Assistant), 휴대형 컴퓨터(Notebook PC), PMP(Portable Multimedia Player), 휴대폰과 같은 이동통신 단말기에 이르기까지 다양한 정보를 처리하는 기기(Devices)들이 제공되고 있으며, 정보 처리 기기에서 특정 정보를 처리하기 위해서는 입력장치가 필수적이다. 이러한 입력장치로 키보드, 마우스와 같은 장치 외에 터치 스크린, 터치 패드와 같이 사용자의 멀티터치 입력이 가능한 입력장치가 대중화되고 있다. 예를 들어, 스마트폰, 태블릿 PC 등 멀티터치 기능이 제공되는 여러 단말기가 빠르게 보급되고 있다.Devices for processing various information from mobile communication terminals such as a personal computer (PC), a PDA (Personal Digital Assistant), a portable computer (Notebook PC), a PMP (Portable Multimedia Player) An input device is essential for processing specific information in an information processing device. In addition to devices such as a keyboard and a mouse, an input device capable of inputting a user's multi-touch input such as a touch screen and a touch pad is becoming popular. For example, smart phones, tablet PCs, and other terminals with multi-touch functions are rapidly spreading.
그리고, 디지털 기술의 발전에 따라 사용자의 직관성을 반영하는 새로운 어플리케이션이 요구되고 있다. 사용자의 사용성(usability)을 위해 터치스크린 기반의 기기 간에 상호 작용을 통해 기기 사용자들이 직관적으로 이용할 수 있는 기술이 요구된다.And, as digital technology advances, new applications that reflect user's intuitiveness are required. For the usability of the user, there is a need for a technology that can be intuitively used by the users of the device through the interaction between the devices based on the touch screen.
본 발명은 상기 문제점을 해결하기 위한 것으로, 멀티터치가 가능한 터치스크린을 구비한 복수의 터치스크린 기기 간의 상호 작용에 따른 직관적인 사용성(usability)을 제공하는 터치스크린 기기 간 사용성 제공 시스템 및 방법을 제공하는 것이다.SUMMARY OF THE INVENTION The present invention provides a system and method for providing usability between touch screen devices that provides intuitive usability according to an interaction between a plurality of touch screen devices having a multi touch capable touch screen .
본 발명이 해결하고자 하는 과제들은 이상에서 언급한 과제들로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.The problems to be solved by the present invention are not limited to the above-mentioned problems, and other matters not mentioned can be clearly understood by those skilled in the art from the following description.
상기 과제를 달성하기 위한 본 발명의 일 실시예에 따른 터치스크린 기기 간 사용성 제공 시스템은, 멀티터치가 가능한 터치스크린을 구비한 복수의 터치스크린 기기 간의 상호 작용에 따른 사용성(usability)을 제공하는 터치스크린 기기 간 사용성 제공 시스템에 있어서, 다른 터치스크린 기기의 터치스크린을 멀티터치하는 적어도 하나의 제1 터치스크린 기기; 및 상기 제1 터치스크린 기기가 터치스크린에 접촉하는 경우에, 상기 제1 터치스크린 기기가 접촉하는 터치스크린 상 위치 정보와, 상기 제1 터치스크린 기기가 접촉하는 터치스크린에 디스플레이되는 영상 정보를 상기 제1 터치스크린 기기로 전송하는 제2 터치스크린 기기를 포함한다.According to an aspect of the present invention, there is provided a system for providing usability between touchscreens, the system comprising: a plurality of touchscreens each having a multi-touch capable touch screen; A system for providing usability between screen devices, comprising: at least one first touch screen device for multi-touching a touch screen of another touch screen device; The touch screen device according to claim 1, wherein when the first touch screen device is in contact with the touch screen, position information on the touch screen on which the first touch screen device contacts and image information displayed on the touch screen And a second touch screen device for transmitting to the first touch screen device.
상기 과제를 달성하기 위한 본 발명의 다른 실시예에 따른 터치스크린 기기 간 사용성 제공 시스템은, 멀티터치가 가능한 터치스크린을 구비한 복수의 터치스크린 기기 간의 상호 작용에 따른 사용성(usability)을 제공하는 터치스크린 기기 간 사용성 제공 시스템에 있어서, 다른 터치스크린 기기의 터치스크린을 멀티터치하는 적어도 하나의 제1 터치스크린 기기; 상기 제1 터치스크린 기기가 터치스크린에 접촉하는 경우에, 상기 제1 터치스크린 기기가 접촉하는 터치스크린 상 위치 정보와, 상기 제1 터치스크린 기기가 접촉하는 터치스크린에 디스플레이되는 영상 정보를 외부로 전송하는 제2 터치스크린 기기; 및 상기 영상 정보를 수신하여 상기 영상 정보에 연관되는 추가 정보를 상기 위치 정보 및 영상 정보와 함께 상기 제1 터치스크린 기기로 전송하는 클라우드 서버를 포함한다.According to another aspect of the present invention, there is provided a system for providing usability between touchscreens, comprising: a plurality of touchscreens each having a multi-touch capable touch screen; A system for providing usability between screen devices, comprising: at least one first touch screen device for multi-touching a touch screen of another touch screen device; The touch screen device according to claim 1, wherein when the first touch screen device is in contact with the touch screen, position information on the touch screen on which the first touch screen device contacts and image information displayed on the touch screen on which the first touch screen device A second touch screen device for transmitting the first touch screen device; And a cloud server receiving the image information and transmitting the additional information related to the image information together with the location information and the image information to the first touch screen device.
상기 과제를 달성하기 위한 본 발명의 일 실시예에 따른 터치스크린 기기 간 사용성 제공 방법은, 멀티터치가 가능한 터치스크린을 구비한 복수의 터치스크린 기기 간의 상호 작용에 따른 사용성(usability)을 제공하는 터치스크린 기기 간 사용성 제공 방법에 있어서, 적어도 하나의 제1 터치스크린 기기가 제2 터치스크린 기기의 터치스크린에 접촉되는 단계; 상기 제2 터치스크린 기기에 의해 상기 제1 터치스크린 기기의 위치 정보가 인식되는 단계; 및 상기 제2 터치스크린 기기의 터치스크린에 디스플레이되는 영상 정보와, 상기 제1 터치스크린 기기의 상기 위치 정보가 상기 제1 터치스크린 기기로 전송되는 단계를 포함한다.According to an aspect of the present invention, there is provided a method for providing usability between touch screen devices, the method comprising: providing a plurality of touch screen devices having a multi-touch capable touch screen, A method for providing usability between screen devices, comprising: at least one first touch screen device contacting a touch screen of a second touch screen device; Recognizing position information of the first touch screen device by the second touch screen device; And transmitting the image information displayed on the touch screen of the second touch screen device and the position information of the first touch screen device to the first touch screen device.
본 발명의 기타 구체적인 사항들은 상세한 설명 및 도면들에 포함되어 있다.Other specific details of the invention are included in the detailed description and drawings.
본 발명에 따르면, 멀티터치가 가능한 터치스크린을 구비한 복수의 터치스크린 기기 간의 상호 작용 기술에 기초하여 사용자에게 직관적인 사용성(usability)을 제공하고, 기기 하나만이 가지는 디스플레이 크기의 한계를 극복하여 디스플레이를 확장할 수 있다.According to the present invention, it is possible to provide an intuitive usability to a user based on an interaction technique between a plurality of touch-screen devices having a multi-touch capable touch screen, to overcome the limitation of the display size of only one device, Can be extended.
또한, 멀티터치 기기의 하드웨어 및 소프트웨어의 한계를 극복하여 기기 사용자들에게 쉽고 편리한 사용성을 제공할 수 있다.In addition, it is possible to overcome the limitations of the hardware and software of the multi-touch device and to provide easy and convenient usability to the device users.
도 1은 본 발명의 일 실시예에 따른 터치스크린 기기 간 사용성 제공 시스템의 블록 구성도이다.
도 2는 본 발명의 일 실시예에 따른 터치스크린 기기 간 사용성 제공 시스템에 사용되는 터치스크린 기기의 사시도이다.
도 3은 본 발명의 일 실시예에 따른 터치스크린 기기 간 사용성 제공 시스템에 사용되는 제1 및 제2 터치스크린 기기의 사용 상태도이다.
도 4는 터치스크린 기기의 터치스크린의 패널 단면도이다.
도 5 내지 도 11은 본 발명의 일 실시예에 따른 터치스크린 기기 간 사용성 제공 시스템의 구체적인 실시예를 도시한 도면 및/또는 사진이다.
도 12는 본 발명의 다른 실시예에 따른 터치스크린 기기 간 사용성 제공 시스템의 블록 구성도이다.
도 13 및 도 14는 본 발명의 일 실시예에 따른 터치스크린 기기 간 사용성 제공 방법의 순서도이다.1 is a block diagram of a system for providing usability between touch screen devices according to an embodiment of the present invention.
 2 is a perspective view of a touch screen device used in a usability provision system between touch screen devices according to an embodiment of the present invention.
 FIG. 3 is a view illustrating a use state of first and second touch screen devices used in a usability provision system between touch screen devices according to an exemplary embodiment of the present invention.
 4 is a sectional view of the touch screen of the touch screen device.
 5 to 11 are views and / or photographs showing a practical embodiment of a usability provision system between touch screen devices according to an embodiment of the present invention.
 12 is a block diagram of a system for providing usability between touch screen devices according to another embodiment of the present invention.
 13 and 14 are flowcharts of a method for providing usability between touch screen devices according to an embodiment of the present invention.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명한다. 본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시 예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 게시되는 실시 예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시 예들은 본 발명의 게시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. BRIEF DESCRIPTION OF THE DRAWINGS The advantages and features of the present invention and the manner of achieving them will become apparent with reference to the embodiments described in detail below with reference to the accompanying drawings. The present invention may, however, be embodied in many different forms and should not be construed as limited to the embodiments set forth herein. Rather, these embodiments are provided so that this disclosure will be thorough and complete, and will fully convey the scope of the invention to those skilled in the art. Is provided to fully convey the scope of the invention to those skilled in the art, and the invention is only defined by the scope of the claims. Like reference numerals refer to like elements throughout the specification.
다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어(기술 및 과학적 용어를 포함)는 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 공통적으로 이해될 수 있는 의미로 사용될 수 있을 것이다. 또 일반적으로 사용되는 사전에 정의되어 있는 용어들은 명백하게 특별히 정의되어 있지 않는 한 이상적으로 또는 과도하게 해석되지 않는다.Unless defined otherwise, all terms (including technical and scientific terms) used herein may be used in a sense commonly understood by one of ordinary skill in the art to which this invention belongs. Also, commonly used predefined terms are not ideally or excessively interpreted unless explicitly defined otherwise.
이하, 본 발명에 대하여 첨부된 도면에 따라 보다 상세히 설명한다.Hereinafter, the present invention will be described in more detail with reference to the accompanying drawings.
도 1은 본 발명의 일 실시예에 따른 터치스크린 기기 간 사용성 제공 시스템의 블록 구성도이며, 도 2는 본 발명의 일 실시예에 따른 터치스크린 기기 간 사용성 제공 시스템에 사용되는 터치스크린 기기의 사시도이고, 도 3은 본 발명의 일 실시예에 따른 터치스크린 기기 간 사용성 제공 시스템에 사용되는 제1 및 제2 터치스크린 기기의 사용 상태도이고, 도 4는 터치스크린 기기의 터치스크린의 패널 단면도이다.FIG. 1 is a block diagram of a system for providing usability between touch screen devices according to an embodiment of the present invention. FIG. 2 is a perspective view of a touch screen device used in a usability providing system between touch screen devices according to an embodiment of the present invention. FIG. 3 is a view illustrating a state of use of first and second touch screen devices used in a system for providing usability between touch screen devices according to an embodiment of the present invention, and FIG. 4 is a sectional view of a touch screen device of a touch screen device.
본 발명의 일 실시예에 따른 터치스크린 기기 간 사용성 제공 시스템(10)은, 멀티터치가 가능한 터치스크린을 구비한 복수의 터치스크린 기기 간의 상호 작용에 따른 사용성(usability)을 제공하기 위해 다른 터치스크린 기기의 터치스크린을 멀티터치하는 적어도 하나의 제1 터치스크린 기기(100) 및, 제1 터치스크린 기기(100)가 터치스크린에 접촉하는 경우에, 제1 터치스크린 기기(100)가 접촉하는 터치스크린 상 위치 정보와, 제1 터치스크린 기기(100)가 접촉하는 터치스크린에 디스플레이되는 영상 정보를 제1 터치스크린 기기(100)로 전송하는 제2 터치스크린 기기(200)를 포함한다.The
일반적으로, 제1 터치스크린 기기(100)가 제2 터치스크린 기기(200)에 접촉하여 멀티터치를 수행하므로, 제1 터치스크린 기기(100)의 디스플레이 크기가 제2 터치스크린 기기(200)보다 작을 것이나, 이에만 제한되지 않음은 당업자에게 자명하다 할 것이다. 그리고, 복수의 제1 터치스크린 기기(100)가 제2 터치스크린 기기(200)에 동시에 접촉하여 멀티터치를 수행할 수도 있다. 또한, 제1 터치스크린 기기(100) 및 제2 터치스크린 기기(200)는 멀티터치(multi-touch)가 가능한 기기로, 예를 들어, PDA(Personal Digital Assistant), 휴대형 컴퓨터(Notebook PC), PMP(Portable Multimedia Player), 스마트폰, 태블릿 PC 등 모든 멀티터치 입력이 가능한 디바이스를 포함할 수 있다.In general, since the first
제1 터치스크린 기기(100)는 제1 터치스크린(110), 제1 통신부(120), 제1 제어부(130) 및 터치 입력부(140)를 포함할 수 있고, 제2 터치스크린 기기(200)는 제2 터치스크린(210), 제2 통신부(220) 및 제2 제어부(230)를 포함할 수 있다.The first
제1 터치스크린(110) 및 제2 터치스크린(210)은 멀티터치 입력이 가능한 입력 인터페이스의 기능뿐만 아니라 출력 인터페이스의 역할도 수행할 수 있다. 즉, 제1 터치스크린(110)이 입력모듈인 동시에 출력모듈이 된다. 그리고, 전술한 바와 같이, 제1 터치스크린(110)보다 제2 터치스크린(210)이 화면 크기가 일반적으로 클 것이나, 그 반대의 경우도 가능함은 물론이다.The
여기에서, 제1 터치스크린(110) 및 제2 터치스크린(210)은 터치 패널(112, 212) 및 디스플레이 패널(114, 214)을 포함하며, 전자기 유도 방식, 정전 방식, 정압 방식 또는 적외선 방식 중 적어도 하나의 방식으로 멀티터치가 가능하다.The
도 4를 참조하면, 터치 패널(112, 212) 하부에 디스플레이 패널(114, 214)이 위치하며, 터치 패널(112, 212)은 터치 동작을 감지하는 센서가 구비될 수 있으며, 예를 들어 터치 필름, 터치 시트, 터치 패드 등의 형태를 가질 수 있다. 그리고, 디스플레이 패널(114, 214)은 터치 패널(112, 212)과 상호 레이어 구조를 이루어 제1 터치스크린(110) 및 제2 터치스크린(210)이 출력 장치 및 입력 장치로 사용될 수 있다. 디스플레이 패널(114, 214)은 LCD, TFT LCD, OLED, 플렉시블 디스플레이(flexible display) 등이 사용될 수 있고, 디스플레이 패널(114, 214)을 통해 볼 수 있도록 광투과형 또는 투명형으로 구성될 수도 있다.4, the display panels 114 and 214 are positioned under the touch panels 112 and 212. The touch panels 112 and 212 may be provided with a sensor for sensing a touch operation. For example, A film, a touch sheet, a touch pad, or the like. The display panels 114 and 214 have a mutual layer structure with the touch panels 112 and 212 so that the
그리고, 제1 및 제2 터치스크린(110, 210)은 전자기 유도 방식, 정전 방식, 정압 방식 또는 적외선 방식 중 적어도 하나의 방식으로 멀티터치가 가능함은 물론, 전자기 유도 방식, 정전 방식, 정압 방식 및 적외선 방식 어느 것이나 멀티터치가 가능하도록 설계될 수도 있다. 특히, 정전(capacitive) 방식이면 접근하는 외부 기기의 접근 거리를 인식할 수 있으며, 접촉될 위치의 예측도 가능하다. 터치 패널(112, 212)에 구비된 터치 센서는 터치되는 위치 및 면적뿐만 아니라 터치될 때의 압력도 검출할 수 있다.The first and
제1 통신부(120) 및 제2 통신부(220)는 외부와 데이터를 송수신하며, 영상 정보 및 정보 데이터 등을 외부 기기와 전송 및 수신하게 된다. 이를 위해, 제1 및 제2 통신부(120, 220)는 각각 데이터를 송신하는 송신모듈(122, 222) 및 데이터를 수신하는 수신모듈(124, 224)을 포함한다. 특히, 제1 터치스크린 기기(100)의 통신부(120)와 제2 터치스크린 기기(200)의 통신부(220) 간 통신을 통해 터치 센서 없이 접촉 여부를 판단하거나 근접 센서 없이 터치스크린 기기들(100, 200)간 위치를 파악할 수 있다.The first communication unit 120 and the second communication unit 220 transmit and receive data to and from the outside, and transmit and receive image information, information data, and the like to / from an external device. To this end, the first and second communication units 120 and 220 include transmission modules 122 and 222 for transmitting data and reception modules 124 and 224 for receiving data, respectively. Particularly, through the communication between the communication unit 120 of the first
터치 입력부(140)는 제1 터치스크린 기기(100)에 위치하며, 제2 터치스크린 기기(200)의 터치스크린(210)을 멀티터치한다. 물론, 제2 터치스크린 기기(200)도 제1 터치스크린 기기(100)와 마찬가지로 터치 입력이 가능한 구성요소를 구비할 수도 있음은 당업자에게 자명하다 할 것이다.The touch input unit 140 is located in the first
터치 입력부(140)는 제1 터치스크린 기기(100)에 복수개가 위치할 수 있으며, 기기의 하면 및 측면에 배치되는 것이 바람직하다. 도 2에 제1 터치스크린 기기(100)의 하면에 네 개의 터치 입력이 가능한 돌기(140-1 내지 140-4)와 측면에 하나의 돌기(140-5)가 도시되어 있다. 이러한 돌기가 모여 터치 입력부(140)를 구성한다.A plurality of touch input units 140 may be disposed on the first
터치 입력부(140)는 제2 터치스크린(210)의 멀티터치 방식에 따라, 전자기 유도 방식의 경우에는 내부에 전자기 코일을 구비하며, 정전 방식의 경우에는 전도성 물질로 이루어지고, 정압 방식의 경우에는 외부로 돌출되어 형성되고, 적외선 방식의 경우에는 적외선을 인식하는 인식 물질로 이루어질 수 있다. 이때, 터치를 일으키는 도 2의 돌기와 같은 요소는 기기 자체에 구비될 수도 있고, 부착 가능한 형태로 기기에 추가될 수도 있다.The touch input unit 140 includes an electromagnetic coil in the case of the electromagnetic induction method according to the multi-touch method of the
도 2를 참조하면, 터치 입력부(140)를 구성한 돌기들(140-1 내지 140-5)는 임의로 배치될 수 있다. 그리고, 이미 배치된 위치를 가지고, 제2 터치스크린(210)에 제1 터치스크린 기기(100)가 접촉할 때 손 또는 스타일러스 펜과 같은 다른 입력 장치가 아닌 제1 터치스크린 기기(110)가 접촉하였다는 것을 인식할 수 있다. 또한, 제2 터치스크린(210)에 제1 터치스크린 기기(100)가 놓여졌을 때 하면의 네 개의 돌기들(140-1 내지 140-4)에 의해 제1 터치스크린 기기(100)의 위치를 파악할 수 있고, 제1 터치스크린 기기(100)가 제2 터치스크린(210) 상에서 접촉 이동할 때 그 이동 위치를 실시간으로 추적할 수 있다.Referring to FIG. 2, the protrusions 140-1 to 140-5 constituting the touch input unit 140 may be arbitrarily arranged. When the first
도 3을 참조하면, 제1 터치스크린 기기(100)가 제2 터치스크린(210) 상에 놓여지게 되면, 터치 입력부(140)에 의해 제1 터치스크린 기기(100)에 멀티터치 입력되어 제 제1 터치스크린 기기(100)의 위치 정보 등을 획득할 수 있게 되는 것이다.Referring to FIG. 3, when the first
이와 같이, 제1 터치스크린 기기(100)의 제2 터치스크린(210)의 터치에 따라 제1 터치스크린 기기(100)의 위치 정보를 획득할 수 있고, 제1 터치스크린 기기(100)의 접촉(터치) 위치에 관련된 제2 터치스크린 기기(200)의 영상 정보 등을 확인할 수 있다. 이러한 위치 정보 및 영상 정보 등은 제2 터치스크린 기기(200)의 제2 제어부(230)가 제2 통신부(220)를 제어하여 제1 터치스크린 기기(100)로 전송하게 된다. 즉, 제2 제어부(230)는 제1 터치스크린 기기(100)의 위치 정보 및 제2 터치스크린 기기(200)의 제2 터치스크린(210)에 디스플레이되는 영상 정보를 제1 터치스크린 기기(100)에 전송하기 위해 제2 통신부(220)를 제어하는 역할을 수행한다.In this way, the position information of the first
제1 터치스크린 기기(100)의 제1 제어부(130)는 제1 터치스크린 기기(100)의 제2 터치스크린(210)에 접촉한 위치 정보를 기초로 제2 터치스크린 (210)에 디스플레이되는 영상 정보를 제1 터치스크린(110)에 디스플레이하도록 제어한다.The first controller 130 of the first
바람직하게는, 제1 제어부(130)는 제1 터치스크린 기기(100)의 제2 터치스크린(210)에 접촉한 위치 정보를 기초로 제2 터치스크린 (210)에 디스플레이되는 영상 정보 중 제1 터치스크린 기기(100)가 접촉하는 접촉 영역 내에서 디스플레이되는 영상 정보를 동시에 제1 터치스크린(110)에 디스플레이하도록 제어한다. 이에 따라, 제2 터치스크린(210)을 제1 터치스크린(110)으로 확장하는 터치스크린의 확장성을 구현할 수 있다.The first controller 130 controls the first
또한, 제1 제어부(130)는 제1 터치스크린 기기(100)가 제2 터치스크린 기기(200)의 터치스크린(210) 상에서 이동함에 따라, 이동하는 접촉 영역 내에 디스플레이되는 영상 정보를 제1 터치스크린(110)에 디스플레이할 수 있다. 즉, 제1 터치스크린(110)에 디스플레이되는 영상 정보가 제1 터치스크린 기기(100)의 이동에 따르게 된다.As the first
그리고, 제1 제어부(130)는 제1 터치스크린 기기(100)의 접촉 위치 정보를 기초로 제1 터치스크린 기기(100)가 접촉하는 접촉 영역 내에서 디스플레이되는 영상 정보에 대응하는 대응 정보를 제1 터치스크린(110)에 디스플레이할 수 있다. 즉, 제2 터치스크린(210)에 지도가 디스플레이되는 경우, 제1 터치스크린(110)에는 디스플레이되는 지도의 건물에 관한 입체도 등이 디스플레이될 수 있다.The first controller 130 receives the corresponding information corresponding to the image information displayed in the contact area, which the first
또한, 제1 제어부(130)는 제1 터치스크린 기기(100)의 접촉 위치 정보를 기초로 제1 터치스크린 기기(100)가 접촉하는 접촉 영역 내에서 디스플레이되는 영상 정보정보와 함께 상기 영상 정보의 추가 정보를 제1 터치스크린(110)에 디스플레이할 수 있다. 즉, 제2 터치스크린(210)에 지도가 디스플레이되는 경우, 제1 터치스크린(110)에는 디스플레이되는 지도의 건물에 관한 주소가 지도의 건물과 함께 디스플레이될 수 있다.The first controller 130 controls the first
보다 구체적으로, 본 발명의 일 실시예에 따른 터치스크린 기기 간 사용성 제공 시스템(10)의 실시예를 살펴 보도록 한다.More specifically, an embodiment of a
도 5 내지 도 11은 본 발명의 일 실시예에 따른 터치스크린 기기 간 사용성 제공 시스템의 구체적인 실시예를 도시한 도면 및/또는 사진이다.5 to 11 are views and / or photographs showing a practical embodiment of a usability provision system between touch screen devices according to an embodiment of the present invention.
도 5를 참조하면, 제1 터치스크린 기기(100)를 제2 터치스크린 기기(200)의 터치스크린(210) 상에 위치시키면, 제1 터치스크린 기기(100)의 터치스크린(110)에 제2 터치스크린 기기(200)에 디스플레이되는 영상 정보의 일부가 동시에 디스플레이되게 된다. 만일, 제1 터치스크린(110)에 디스플레이되는 영상 정보가 평가를 시험과 같은 컨텐츠일 경우에, 제1 터치스크린 기기(100)의 접촉에 따라 상기 시험의 해석 또는 정답과 같은 추가 정보가 함께 디스플레이되어 사용자의 직관적인 사용을 가능하게 할 수 있다.5, when the first
이때, 제1 터치스크린 기기(100)와 제2 터치스크린 기기(200) 간에 정보의 송수신은 제1 터치스크린 기기(100)의 움직임을 실시간으로 반영하기 위해 제1 터치스크린 기기(100)가 위치한 주변의 기기인 제2 터치스크린 기기(200)의 영상 정보 및 관련 데이터를 제1 및 제2 통신부(120, 220) 간 통신에 의해 미리 받아놓을 수도 있다. 이러한 경우, 제1 터치스크린 기기(100)의 위치 주변에 대한 영상 정보 및 관련 데이터를 미리 제2 터치스크린 기기(200)로부터 제1 터치스크린 기기(100)로 전송되었기에 제1 터치스크린 기기(100)가 제2 터치스크린 기기(200)의 터치스크린(210) 상에서 이동할 때 기기(100, 200) 사용자들에게 실시간으로 변화하는 영상 정보 및 관련 데이털르 출력할 수 있다. 여기에서, 제1 터치스크린 기기(100)와 제2 터치스크린 기기(200) 간 통신은 3G, 4G, WiFi, 블루투스 등 모든 이용 가능한 데이터 통신을 통해 이루어질 수 있음은 당업자에게 자명하다 할 것이다.At this time, the transmission / reception of information between the first
도 6을 참조하면, 도 5와 유사하게 제1 터치스크린 기기(100)를 제2 터치스크린 기기(200)의 터치스크린(210) 상에 위치시키면, 제1 터치스크린 기기(100)의 터치스크린(110)에 제2 터치스크린 기기(200)에 디스플레이되는 영상 정보의 일부가 제1 터치스크린 기기(100)의 디스플레이 크기에 맞추어 제1 터치스크린(110)에 디스플레이된다. 그리고, 제1 터치스크린(110)에 디스플레이되는 영상 정보 위에 제1 터치스크린 기기(100)에 미리 저장된 관련 정보인, 퍼즐 조각들을 디스플레이되는 영상 정보 위에 맞추어 출력할 수 있다. 예를 들어, 영유아들이 직관적으로 퍼즐을 맞추기 위해 제1 터치스크린 기기(100)를 제2 터치스크린 기기(200)의 터치스크린(210) 상에서 움직이며 퍼즐을 맞추어 가는데 도움을 줄 수 있다.Referring to FIG. 6, when the first
도 7을 참조하면, 제1 터치스크린 기기(100)를 제2 터치스크린 기기(200)의 터치스크린(210) 상에 세운 채로 위치시키면, 제1 터치스크린 기기(100)의 접촉 위치 정보를 기초로 제2 터치스크린 기기(200)에 디스플레이되는 일부 위성 영상에 대응하는 해당 길거리 뷰(street view)를 제1 터치스크린 기기(100)의 터치스크린(110)에 디스플레이할 수 있다. 이때, 제1 터치스크린 기기(100)가 제2 터치스크린 기기(200)의 터치스크린(210) 위를 움직이게 되면, 실시간으로 해당되는 위치의 길거리 뷰(street view)를 변화시키면서 사용자에게 보여줄 수 있다.Referring to FIG. 7, when the first
도 8을 참조하면, 제2 터치스크린 기기(200)의 터치스크린(210)에 일반적인 지도 뷰(map view)가 디스플레이될 때, 제1 터치스크린 기기(100)를 제2 터치스크린(210)에 접촉시키는 경우 제1 터치스크린 기기(100)의 제1 터치스크린(110)에는 위성 뷰(satellite view)를 디스플레이하여 두 가지 형태의 뷰를 동시에 사용자가 볼 수 있게 된다. 이때, 제1 및 제2 터치스크린 기기(100, 200)는 실시간으로 데이터를 송수신하고, 제1 터치스크린 기기(100)의 이동에 따라 실시간으로 적합한 영상 정보가 제1 터치스크린(110)에 디스플레이된다.Referring to FIG. 8, when a general map view is displayed on the
도 9를 참조하면, 제2 터치스크린 기기(200)의 터치스크린(210)에 환자의 의료 영상이 디스플레이되고, 제1 터치스크린 기기(100)를 세운 채로 위치시키면, 터치 위치에 맞는 다른 의료기기의 영상이 제1 터치스크린 기기(100)의 터치스크린(110)에 디스플레이된다. 예를 들어, 평면적인 엑스레이의 영상 정보와 MRI 등의 영상 정보를 제1 및 제2 터치스크린 기기(100, 200)를 통해 직관적으로 결합하여 환자의 상태를 쉽게 파악할 수 있다. 특히, 제1 터치스크린 기기(100)를 이동시킴에 따라 환자의 신체에 대한 영상 정보를 스캔하듯이 확인할 수 있는 장점이 있다.Referring to FIG. 9, when a medical image of a patient is displayed on the
도 10을 참조하면, 제1 터치스크린 기기가 복수개(100-1 내지 100-9) 제2 터치스크린 기기(200) 상에 위치한다. 제1 터치스크린 기기들(100-1 내지 100-9)가 제2 터치스크린(210)에 접촉함에 따라 상기 제1 터치스크린 기기들((100-1 내지 100-9)의 위치를 추적하며, 기기의 사용자들은 회의를 진행할 수 있다. 이때, 제1 터치스크린 기기 100-5의 사용자는 제2 터치스크린 기기(200)에 디스플레이되는 파일 아이콘(2001)을 손가락 등으로 터치 이동시키는 동작(화살표 A)에 의해 직관적으로 상기 파일 아이콘(2001)의 데이터를 상기 제1 터치스크린 기기 100-5에 옮길 수 있다. 역으로, 제1 터치스크린 기기 100-9의 사용자는 제1 터치스크린 기기 100-9에 디스플레이되는 파일 아이콘(1001)을 손가락 등으로 터치 이동시키는 동작(화살표 B)에 의해 직관적으로 상기 파일 아이콘(1001)의 데이터를 제2 터치스크린 기기(200)로 옮길 수 있다. 여기에서, 제1 터치스크린 기기들(100-1 내지 100-9)의 사용자들에 의한 동작들(화살표 A, B)은 실시간으로 구현되어 회의를 진행하는 상기 제1 터치스크린 기기들(100-1 내지 100-9)의 사용자들은 직관적으로 회의를 진행할 수 있게 된다.Referring to FIG. 10, a plurality of first touch screen devices 100-1 to 100-9 are disposed on the second
도 11을 참조하면, 제1 터치스크린 기기가 복수개(100-1 내지 100-6) 제2 터치스크린 기기(200) 상에 위치한다. 가운데 위치한 공 모양 이미지(2006)를 제2 터치스크린 기기(200)의 양단에 위치한 각 골대 모양의 이미지(2003)에 넣는 게임 영상이 제2 터치스크린 기기(200)의 터치스크린(210)에 디스플레이된다. 여기에서, 복수의 제1 터치스크린 기기 (100-1 내지 100-6)는 공 모양 이미지(2006)를 치기 위한 인터페이스로 활용된다. 예를 들어, 공 모양 이미지(2006)가 화살표 C 방향으로 움직이고 있을 때, 제1 터치스크린 기기 100-3의 사용자가 화살표 D 방향으로 제1 터치스크린 기기 100-3을 제2 터치스크린(210) 상에 접촉한 채로 이동시켜 공 모양 이미지(2006)를 반대 방향으로 쳐낼 수 있다. 이때, 공 모양 이미지(2006)와 제1 터치스크린 기기 100-3이 접촉할 경우에 진동을 제1 터치스크린 기기 100-3에 가하여 햅틱(haptic) 효과를 제1 터치스크린 기기 100-3의 사용자에게 줄 수 있다. 이를 위해, 터치스크린 기기(100, 200)에는 진동 모터(미도시)가 포함될 수 있다.Referring to FIG. 11, a plurality of first touch screen devices 100-1 to 100-6 are disposed on the second
그리고, 제1 터치스크린 기기(100)를 제2 터치스크린 기기(200)의 터치스크린(210) 상에 표시된 폴더 이미지 등에 접촉시켜 직접 해당 폴더의 내용을 제2 터치스크린 기기(200)로부터 제1 터치스크린 기기(100)로 이동시킬 수 있다. 이를 통해, 폴더 또는 파일 등의 내용을 이메일이나 USB 메모리 등을 이용하여 이동시키는 것이 아니라, 기기 간에 직접 멀티터치를 통해 이동시킬 수 있게 된다.Then, the first
도 12는 본 발명의 다른 실시예에 따른 터치스크린 기기 간 사용성 제공 시스템의 블록 구성도이다.12 is a block diagram of a system for providing usability between touch screen devices according to another embodiment of the present invention.
본 발명의 다른 실시예에 따른 터치스크린 기기 간 사용성 제공 시스템(20)은 제1 및 제2 터치스크린 기기(100, 200) 외에 추가적으로 클라우드 서버(300)를 포함할 수 있다. 제1 및 제2 터치스크린 기기(100, 200)가 3G, 4G, WiFi 같은 이동통신을 이용할 경우, 사용자의 편의를 위해 데이터의 전송 및 저장에 클라우드라는 개념을 도입하여 이용하면 편리하기 때문이다.The
본 발명의 다른 실시예에 따른 터치스크린 기기 간 사용성 제공 시스템(20)은 멀티터치가 가능한 터치스크린을 구비한 복수의 터치스크린 기기 간의 상호 작용에 따른 사용성(usability)을 제공하는 것은 전술한 본 발명의 일 실시예에 따른 터치스크린 기기 간 사용성 제공 시스템(10)과 동일하다.The
전술한 바와 같이, 본 발명의 다른 실시예에 따른 터치스크린 기기 간 사용성 제공 시스템(20)은 멀티터치가 가능한 터치스크린을 구비한 복수의 터치스크린 기기 간의 상호 작용에 따른 사용성(usability)을 제공하기 위해 다른 터치스크린 기기의 터치스크린을 멀티터치하는 적어도 하나의 제1 터치스크린 기기(100)와, 제1 터치스크린 기기(100)가 터치스크린에 접촉하는 경우에, 제1 터치스크린 기기(100)가 접촉하는 터치스크린 상 위치 정보와, 제1 터치스크린 기기(100)가 접촉하는 터치스크린에 디스플레이되는 영상 정보를 제1 터치스크린 기기(100)로 전송하는 제2 터치스크린 기기(200)를 포함하는 것뿐만 아니라, 영상 정보를 수신하여 영상 정보에 연관되는 추가 정보를 위치 정보 및 영상 정보와 함께 제1 터치스크린 기기(100)로 전송하는 클라우드 서버(300)를 포함할 수 있다.As described above, the
제1 터치스크린 기기(100)는 제1 터치스크린(110)과, 외부와 데이터를 송수신하는 제1 통신부(120)와, 제2 터치스크린 기기(200)의 터치스크린(210)을 멀티터치하는 터치 입력부(140)와, 위치 정보를 기초로 영상 정보와 추가 정보를 함께 제1 터치스크린(110)에 디스플레이하도록 제어하는 제1 제어부(130)를 포함하며, 제2 터치스크린 기기(200)는 제2 터치스크린(210)과, 외부와 데이터를 송수신하는 제2 통신부(220)와, 제2 터치스크린(210) 상에 접촉하는 제1 터치스크린 기기(100)의 위치 정보와 제2 터치스크린(210)에 디스플레이되는 영상 정보를 클라우드 서버(300)로 전송하기 위해 제2 통신부(220)를 제어하는 제2 제어부(230)를 포함하는 것은 전술한 바와 동일하므로 상세한 설명은 생략하도록 한다.The first
클라우드 서버(300)는 외부와 데이터를 송수신하는 서버 통신부(310)와, 소정의 정보를 저장하는 서버 저장부(320)와, 위치 정보를 기초로 영상 정보에 연관되는 추가 정보를 서버 저장부(320)에 저장된 정보로부터 탐색하는 서버 제어부(330)를 포함한다.The
서버 통신부(310)는 제1 통신부(120) 및 제2 통신부(220)와 영상 정보 및 관련 데이터를 송수신하는 기능을 하며, 서버 저장부(320)는 제1 터치스크린(110)에 디스플레이되는 제2 터치스크린 기기(200)의 영상 정보와 관련된 여러 부가 정보를 저장하는 기능을 한다. 그리고, 서버 제어부(330)가 관련되는 여러 부가 정보를 서버 저장부(320)로부터 탐색하여 서버 통신부(310)를 통하여 제1 터치스크린 기기(100)의 제1 터치스크린(110)에 디스플레이할 수 있도록 제어하는 기능을 한다.The server communication unit 310 transmits and receives image information and related data to and from the first communication unit 120 and the second communication unit 220. The server storage unit 320 includes a server 2 function of storing various additional information related to the image information of the
도 13 및 도 14는 본 발명의 일 실시예에 따른 터치스크린 기기 간 사용성 제공 방법의 순서도이다.13 and 14 are flowcharts of a method for providing usability between touch screen devices according to an embodiment of the present invention.
도 13을 참조하면, 멀티터치가 가능한 터치스크린을 구비한 복수의 터치스크린 기기 간의 상호 작용에 따른 사용성(usability)을 제공하는 터치스크린 기기 간 사용성 제공 방법에 있어서, 적어도 하나의 제1 터치스크린 기기(100)가 제2 터치스크린 기기(200)의 터치스크린(210)에 접촉되는 경우(S10), 제2 터치스크린 기기(200)에 의해 제1 터치스크린 기기(100)의 위치 정보가 인식되고(S20), 제2 터치스크린 기기(200)의 터치스크린(210)에 디스플레이되는 영상 정보와, 제1 터치스크린 기기(100)의 접촉 위치 정보가 제1 터치스크린 기기(100)로 전송된다(S30). 이를 통해, 멀티터치가 가능한 터치스크린을 구비한 기기들을 사용할 때 있어 직관적으로 영상 정보나 관련 데이터 등을 전송할 수 있다.Referring to FIG. 13, there is provided a method for providing usability according to interaction between a plurality of touch-screen devices having a multi-touch capable touch screen, the method comprising: When the first
도 14를 참조하면, S30 단계를 통해 제1 터치스크린 기기(100)로 전송된 위치 정보 및 영상 정보를 기초로 제1 터치스크린 기기(100)의 터치스크린(110)에 제2 터치스크린(210)에 디스플레이되는 영상 정보 및 관련 데이터와 전부 또는 일부가 동일한 영상 정보 및 관련 데이터를 실시간으로 디스플레이할 수 있다. 구체적으로, 1 터치스크린 기기(100)로 전송된 위치 정보를 기초로 제1 터치스크린 기기(100)가 접촉되는 제2 터치스크린 기기(200)의 터치스크린(210)의 접촉 영역 내에 디스플레이되는 영상 정보가 제1 터치스크린 기기(100)의 터치스크린(110)에 디스플레이될 수 있다.Referring to FIG. 14, the second touch screen 210 (210) is displayed on the
그리고, 제1 터치스크린 기기(100)가 접촉하는 접촉 영역 내에 디스플레이되는 영상 정보와 대응하는 대응 정보 및 영상 정보와 관련된 추가 정보 중 적어도 하나의 정보가 상기 접촉 영역 내에 디스플레이되는 영상 정보와 함께 디스플레이될 수도 있다. 또한, 제1 터치스크린 기기(100)가 제2 터치스크린 기기(200)의 터치스크린(210) 상에서 이동함에 따라, 이동하는 제2 터치스크린(210) 상 접촉 영역 내에 디스플레이되는 영상 정보가 제1 터치스크린 기기(100) 이동에 맞추어 제1 터치스크린(110)에 실시간으로 디스플레이될 수도 있다.Then, at least one of the image information displayed in the contact area in which the first
멀티터치 기반의 터치스크린 기기의 사용자가 터치스크린 기기 간에 직관적으로 정보의 전송 등을 할 수 있다. 또한, 하나의 정보 레이어(layer)가 아닌 다중 레이어(영상 정보에 추가 정보를 함께 디스플레이하는 경우 등)를 표현할 수 있어 멀티터치 기반의 터치스크린 기기의 사용자는 많은 정보를 편리하고 직관적으로 확인할 수 있다. 그리고, 소프트웨어 등의 개발자들도 하나의 디스플레이만으로 표현 못하는 영상 정보 및 관련 데이터들을 복수의 스크린(n-screen)을 통해 효과적으로 표현할 수 있음을 알 수 있다.A user of a multi-touch-based touch screen device can intuitively transmit information between touch screen devices. In addition, it is possible to express multiple layers (e.g., when displaying additional information together with image information) rather than one information layer, so that a user of a multi-touch based touch screen device can conveniently and intuitively confirm a large amount of information . Also, developers such as software can effectively express image information and related data that can not be expressed by only one display through a plurality of screens (n-screens).
한편, 본 발명의 일 실시예에 따른 터치스크린 기기 간 사용성 제공 방법은 소프트웨어 및 하드웨어에 의해 하나의 모듈로 구현 가능하며, 전술한 본 발명의 실시예들은 컴퓨터에서 실행될 수 있는 프로그램으로 작성 가능하고, 컴퓨터로 읽을 수 있는 기록매체를 이용하여 상기 프로그램을 동작시키는 범용 컴퓨터에서 구현될 수 있다. 상기 컴퓨터로 읽을 수 있는 기록매체는 롬(ROM), 플로피 디스크, 하드 디스크 등의 자기적 매체, CD, DVD 등의 광학적 매체 및 인터넷을 통한 전송과 같은 캐리어 웨이브와 같은 형태로 구현된다. 또한, 컴퓨터가 읽을 수 있는 기록매체는 네크워크로 연결된 컴퓨터 시스템에 분산되어 분산 방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.Meanwhile, the method for providing usability between touch screen devices according to an exemplary embodiment of the present invention can be implemented as one module by software and hardware, and the embodiments of the present invention described above can be created as a program that can be executed in a computer, And can be implemented in a general-purpose computer that operates the program using a computer-readable recording medium. The computer-readable recording medium is implemented in the form of a carrier wave such as a ROM, a floppy disk, a magnetic medium such as a hard disk, an optical medium such as a CD or a DVD, and a transmission through the Internet. In addition, the computer-readable recording medium may be distributed to a network-connected computer system so that computer-readable codes may be stored and executed in a distributed manner.
이상 첨부된 도면을 참조하여 본 발명의 실시예를 설명하였지만, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다.While the present invention has been described in connection with what is presently considered to be practical exemplary embodiments, it is to be understood that the invention is not limited to the disclosed embodiments, but, on the contrary, You will understand. It is therefore to be understood that the above-described embodiments are illustrative in all aspects and not restrictive.
10, 20: 터치스크린 기기 간 사용성 제공 시스템
100: 제1 터치스크린 기기110: 제1 터치스크린
120: 제1 통신부130: 제1 제어부
140: 터치 입력부
200: 제2 터치스크린 기기210: 제2 터치스크린
220: 제2 통신부230: 제2 제어부
300: 클라우드 서버310: 서버 통신부
320: 서버 저장부330: 서버 제어부10, 20: Usability provision system between touch screen devices
 100: first touch screen device 110: first touch screen
 120: first communication unit 130: first control unit
 140: Touch input unit
 200: second touch screen device 210: second touch screen
 220: second communication unit 230: second control unit
 300: Cloud server 310: Server communication part
 320: server storage unit 330: server control unit
| Application Number | Priority Date | Filing Date | Title | 
|---|---|---|---|
| KR1020120047018AKR101426942B1 (en) | 2012-05-03 | 2012-05-03 | System and method for providing usability among touch-screen devices | 
| Application Number | Priority Date | Filing Date | Title | 
|---|---|---|---|
| KR1020120047018AKR101426942B1 (en) | 2012-05-03 | 2012-05-03 | System and method for providing usability among touch-screen devices | 
| Publication Number | Publication Date | 
|---|---|
| KR20130123696A KR20130123696A (en) | 2013-11-13 | 
| KR101426942B1true KR101426942B1 (en) | 2014-08-05 | 
| Application Number | Title | Priority Date | Filing Date | 
|---|---|---|---|
| KR1020120047018AExpired - Fee RelatedKR101426942B1 (en) | 2012-05-03 | 2012-05-03 | System and method for providing usability among touch-screen devices | 
| Country | Link | 
|---|---|
| KR (1) | KR101426942B1 (en) | 
| Publication number | Priority date | Publication date | Assignee | Title | 
|---|---|---|---|---|
| KR102220306B1 (en)* | 2014-06-25 | 2021-02-25 | 엘지전자 주식회사 | Mobile terminal and method for controlling the same | 
| WO2015199381A1 (en)* | 2014-06-25 | 2015-12-30 | Lg Electronics Inc. | Mobile terminal and method for controlling the same | 
| KR102161694B1 (en) | 2014-10-20 | 2020-10-05 | 삼성전자주식회사 | Display apparatus and display method thereof | 
| CN106155378B (en)* | 2015-03-30 | 2017-12-05 | 深圳市汇顶科技股份有限公司 | A kind of touch screen terminal and its near field communication method, device and system | 
| KR101866336B1 (en)* | 2016-01-27 | 2018-06-14 | 모젼스랩 (주) | System for providing interaction contents devices location-based using multi-touch pointer | 
| CN109656493A (en)* | 2017-10-10 | 2019-04-19 | 中兴通讯股份有限公司 | Control method and device | 
| KR102163682B1 (en) | 2019-12-31 | 2020-10-08 | 김정익 | Trolley For Rail Having Manual Typed Brake Device | 
| KR20230001099U (en) | 2021-11-24 | 2023-05-31 | 김수용 | A system that embeds or attaches a senser to an artificial rock climbing structure | 
| Publication number | Priority date | Publication date | Assignee | Title | 
|---|---|---|---|---|
| KR20100036664A (en)* | 2008-09-30 | 2010-04-08 | 삼성전자주식회사 | A display apparatus capable of moving image and the method thereof | 
| KR101118704B1 (en)* | 2011-06-27 | 2012-03-12 | 임용순 | Mobile handfree display apparatus | 
| Publication number | Priority date | Publication date | Assignee | Title | 
|---|---|---|---|---|
| KR20100036664A (en)* | 2008-09-30 | 2010-04-08 | 삼성전자주식회사 | A display apparatus capable of moving image and the method thereof | 
| KR101118704B1 (en)* | 2011-06-27 | 2012-03-12 | 임용순 | Mobile handfree display apparatus | 
| Publication number | Publication date | 
|---|---|
| KR20130123696A (en) | 2013-11-13 | 
| Publication | Publication Date | Title | 
|---|---|---|
| KR101426942B1 (en) | System and method for providing usability among touch-screen devices | |
| US9304949B2 (en) | Sensing user input at display area edge | |
| JP5759660B2 (en) | Portable information terminal having touch screen and input method | |
| US10031604B2 (en) | Control method of virtual touchpad and terminal performing the same | |
| US9665177B2 (en) | User interfaces and associated methods | |
| US20140043265A1 (en) | System and method for detecting and interpreting on and off-screen gestures | |
| CN103092502B (en) | The method and its equipment of user interface are provided in portable terminal | |
| KR102021048B1 (en) | Method for controlling user input and an electronic device thereof | |
| KR20140071118A (en) | Method for displaying for virtual button an electronic device thereof | |
| WO2016025356A1 (en) | Hover-based interaction with rendered content | |
| KR20160132994A (en) | Conductive trace routing for display and bezel sensors | |
| CN103946766A (en) | Light-based finger gesture user interface | |
| CN105190517B (en) | Apparatus for displaying electronic document | |
| US8947378B2 (en) | Portable electronic apparatus and touch sensing method | |
| US11429147B2 (en) | Electronic device with sensing strip | |
| WO2014207288A1 (en) | User interfaces and associated methods for controlling user interface elements | |
| Hoye et al. | Touch screens: A pressing technology | |
| US20170017389A1 (en) | Method and apparatus for smart device manipulation utilizing sides of device | |
| EP3433713B1 (en) | Selecting first digital input behavior based on presence of a second, concurrent, input | |
| CN111338521A (en) | Icon display control method and electronic device | |
| KR101961786B1 (en) | Method and apparatus for providing function of mouse using terminal including touch screen | |
| CN103870105A (en) | Method for information processing and electronic device | |
| KR101165388B1 (en) | Method for controlling screen using different kind of input devices and terminal unit thereof | |
| Huot | Touch Interfaces | |
| TW201502873A (en) | Touch system and method for adjusting the position of the object displayed on the touch display device by the wireless touch pen | 
| Date | Code | Title | Description | 
|---|---|---|---|
| A201 | Request for examination | ||
| PA0109 | Patent application | St.27 status event code:A-0-1-A10-A12-nap-PA0109 | |
| PA0201 | Request for examination | St.27 status event code:A-1-2-D10-D11-exm-PA0201 | |
| D13-X000 | Search requested | St.27 status event code:A-1-2-D10-D13-srh-X000 | |
| R18-X000 | Changes to party contact information recorded | St.27 status event code:A-3-3-R10-R18-oth-X000 | |
| D14-X000 | Search report completed | St.27 status event code:A-1-2-D10-D14-srh-X000 | |
| E902 | Notification of reason for refusal | ||
| PE0902 | Notice of grounds for rejection | St.27 status event code:A-1-2-D10-D21-exm-PE0902 | |
| PN2301 | Change of applicant | St.27 status event code:A-3-3-R10-R13-asn-PN2301 St.27 status event code:A-3-3-R10-R11-asn-PN2301 | |
| E13-X000 | Pre-grant limitation requested | St.27 status event code:A-2-3-E10-E13-lim-X000 | |
| P11-X000 | Amendment of application requested | St.27 status event code:A-2-2-P10-P11-nap-X000 | |
| P13-X000 | Application amended | St.27 status event code:A-2-2-P10-P13-nap-X000 | |
| PG1501 | Laying open of application | St.27 status event code:A-1-1-Q10-Q12-nap-PG1501 | |
| E90F | Notification of reason for final refusal | ||
| PE0902 | Notice of grounds for rejection | St.27 status event code:A-1-2-D10-D21-exm-PE0902 | |
| P11-X000 | Amendment of application requested | St.27 status event code:A-2-2-P10-P11-nap-X000 | |
| P13-X000 | Application amended | St.27 status event code:A-2-2-P10-P13-nap-X000 | |
| E701 | Decision to grant or registration of patent right | ||
| PE0701 | Decision of registration | St.27 status event code:A-1-2-D10-D22-exm-PE0701 | |
| GRNT | Written decision to grant | ||
| PR0701 | Registration of establishment | St.27 status event code:A-2-4-F10-F11-exm-PR0701 | |
| PR1002 | Payment of registration fee | St.27 status event code:A-2-2-U10-U11-oth-PR1002 Fee payment year number:1 | |
| PG1601 | Publication of registration | St.27 status event code:A-4-4-Q10-Q13-nap-PG1601 | |
| R18-X000 | Changes to party contact information recorded | St.27 status event code:A-5-5-R10-R18-oth-X000 | |
| FPAY | Annual fee payment | Payment date:20170724 Year of fee payment:4 | |
| PR1001 | Payment of annual fee | St.27 status event code:A-4-4-U10-U11-oth-PR1001 Fee payment year number:4 | |
| FPAY | Annual fee payment | Payment date:20180718 Year of fee payment:5 | |
| PR1001 | Payment of annual fee | St.27 status event code:A-4-4-U10-U11-oth-PR1001 Fee payment year number:5 | |
| FPAY | Annual fee payment | Payment date:20190722 Year of fee payment:6 | |
| PR1001 | Payment of annual fee | St.27 status event code:A-4-4-U10-U11-oth-PR1001 Fee payment year number:6 | |
| PC1903 | Unpaid annual fee | St.27 status event code:A-4-4-U10-U13-oth-PC1903 Not in force date:20200729 Payment event data comment text:Termination Category : DEFAULT_OF_REGISTRATION_FEE | |
| PC1903 | Unpaid annual fee | St.27 status event code:N-4-6-H10-H13-oth-PC1903 Ip right cessation event data comment text:Termination Category : DEFAULT_OF_REGISTRATION_FEE Not in force date:20200729 | |
| P22-X000 | Classification modified | St.27 status event code:A-4-4-P10-P22-nap-X000 | |
| R18-X000 | Changes to party contact information recorded | St.27 status event code:A-5-5-R10-R18-oth-X000 | |
| PN2301 | Change of applicant | St.27 status event code:A-5-5-R10-R13-asn-PN2301 St.27 status event code:A-5-5-R10-R11-asn-PN2301 |