WO2014088158A1 - Touch input device for mobile terminal, and method thereof - Google Patents
Touch input device for mobile terminal, and method thereofDownload PDFInfo
- Publication number
- WO2014088158A1 WO2014088158A1PCT/KR2013/002046KR2013002046WWO2014088158A1WO 2014088158 A1WO2014088158 A1WO 2014088158A1KR 2013002046 WKR2013002046 WKR 2013002046WWO 2014088158 A1WO2014088158 A1WO 2014088158A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- touch
- bezel
- touch input
- terminal
- dimensional
- Prior art date
Links
Images
Classifications
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0416—Control or interface arrangements specially adapted for digitisers
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0412—Digitisers structurally integrated in a display
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
- G06F2203/04101—2.5D-digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface and also measures the distance of the input means within a short range in the Z direction, possibly with a separate measurement setup
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
Definitions
- the present inventionrelates to a touch input device and a method of a mobile terminal, and more particularly, to arrange a touch sensor on the bezel and the terminal side of the mobile terminal and their corners to diversify the contact area between the user and the mobile terminal,
- the present inventionrelates to a touch input device of a mobile terminal and a method of detecting a touch and using the same as a 3D touch input device for menu selection or navigation of an application program.
- the size of the devicecannot be unconditionally increased, and the size of the mobile terminal should be at least large enough to hold and operate the mobile terminal with one hand. That is, in a mobile terminal having a limited device size, the screen size visible to the user should be as large as possible.
- the best solution to satisfy the above conditionsis to reduce the width of the bezel, which is the space (or area) outside the screen while keeping the size of the device as it is, to increase the actual screen size or to maximize the bezel space. It can be used to achieve the same effect as the screen size is increased.
- the electrode wiringis located in the bezel area, there is a limit to unconditionally reducing the width of the bezel. Therefore, it is desirable to make the most of the bezel space to obtain the same effect as the screen size is increased.
- an electronic device having a display and a touch sensitive bezel around the user interface and control disclosed in US Pat. No. 7,656,393 B2 (2010.02.02) as a background art of the present inventionincludes a touch sensor mounted on the bezel.
- Example: an iPadis proposed, and the background art describes a method of controlling a touch sensor installed in the bezel instead of the home button of an electronic device.
- the structure of disposing touch sensors on the terminal side or their edgesis not described, and furthermore, there is no description of the method of receiving three-dimensional stereoscopic touch using the bezel, the corners and the touch sensors disposed on the terminal side. Therefore, there exists a difference in the objective, structure, and effect of this invention.
- the present inventionhas been made to solve the above problems, the touch input of the mobile terminal that can diversify the contact area between the user and the mobile terminal by placing a touch sensor on the bezel and the terminal side of the mobile terminal and their corners
- An objectis to provide an apparatus and a method thereof.
- the present inventionis a touch input device and method of the mobile terminal that can be utilized as a three-dimensional touch input device for menu selection or navigation of the application by placing a touch sensor disposed on the bezel and the terminal side and their corners of the mobile terminal The purpose is to provide.
- a touch input device of a mobile terminalincluding at least one touch sensor disposed at a bezel, a terminal side, or an edge thereof between the terminals;
- a control unitdetecting a touch input from the at least one touch sensor and detecting a touch gesture corresponding to a combination of the touch input information;
- a storage unitfor storing driver software for determining the touch gesture, wherein the controller can determine whether the detected touch gesture is a two-dimensional touch gesture or a three-dimensional touch gesture.
- at least one guide information display meansfor displaying to the user guide information such as activation state of each touch sensor or processing of a touch input, wherein the controller is configured to input a touch gesture only at a corner.
- the controllerdetermines that it is a two-dimensional touch input and starts a sweep operation at an arbitrary position on the bezel or the terminal side. 3D if the sweep direction changes to the z axis via this edge
- the control unitmay further include a single tap, a continuous touch, two or more consecutive taps, a two-dimensional touch gesture continuously sweeping while a specific point on the two-dimensional plane is touched, and a sweep on the two-dimensional plane.
- the three-dimensional touch gestureWhen the sweep direction is changed to the z-axis after the start, and detects at least one or more touch inputs of the continuously sweeped three-dimensional touch gesture, or a combination thereof, the three-dimensional touch gesture, when the sweep direction is changed to the z-axis direction, Depth information corresponding to the sweep distance continuously moving in the changed sweep direction, and the directions of x, y, and z axes for detecting the 3D touch gesture are changed according to the attitude or rotation of the terminal, and z The touch can be touched at a depth equal to the width or thickness of the bezel or the terminal side corresponding to the axis.
- the touch sensoris arranged in a continuous line form, one line form or at least two or more lines are arranged in a form overlapping (parallel form) in parallel at a predetermined interval, the touch sensor,
- the gaps (gaps) according to the arrangement intervals of the touch sensors formed by the linesare arranged to cross each other so as to be filled by the touch sensors of the other lines, and the touch sensors are arranged in a form surrounding the entire outer periphery of the bezel or the terminal side.
- a touch input method of a mobile terminalcomprising: a first step of activating at least one touch sensor continuously disposed on a bezel or a terminal side via a bezel, a terminal side, a corner thereof, or a corner thereof; A second step of detecting a touch gesture by combining a touch input input by the user through the activated touch sensor; And a 3D touch input when the sweep direction of the touch gesture is changed to the z axis, and the 2D touch when the sweep direction is not changed to the z axis or input only in a 2D plane such as a bezel or the terminal side.
- a third step of judging as an inputwherein the three-dimensional touch input has a depth corresponding to a sweep distance continuously moving in the changed sweep direction when the sweep direction is changed in the z-axis direction.
- the x, y, z axis directions for detecting the 3D touch inputare changed according to the attitude or rotation of the terminal, and the depth information is equal to the width or thickness of the bezel or the side surface of the terminal corresponding to the z axis.
- a touch inputis possible.
- the present inventionis to arrange the touch sensor on the bezel and the terminal side and their corners of the mobile terminal to diversify the contact area between the user and the mobile terminal, and also apply the touch sensor disposed on the bezel and the terminal side and their corners By using it as a 3D touch input device for menu selection or navigation, there is an effect of improving the user's convenience according to the application and developing various application programs using the input method.
- FIG. 1is a block diagram showing the configuration of a touch input device of a mobile terminal according to an embodiment of the present invention
- FIGS. 2A to 2Care exemplary views illustrating a mobile terminal for explaining an arrangement structure of a touch sensor according to an embodiment of the present invention.
- FIGS. 2A to 2Care exemplary views illustrating an arrangement method of a touch sensor in FIGS. 2A to 2C.
- FIG. 4is an exemplary view for explaining a method of using a touch sensor disposed on a bezel or a terminal side as a touch key according to an embodiment of the present invention.
- 5A to 5Dare exemplary views for explaining a two-dimensional touch gesture that can be input through a touch sensor disposed on a bezel or a terminal side according to an embodiment of the present invention.
- FIG. 6is an exemplary view for explaining a three-dimensional touch gesture that can be input through a touch sensor disposed in the corner of the terminal according to an embodiment of the present invention.
- FIG. 7is a flowchart illustrating a touch input method of a mobile terminal according to an embodiment of the present invention.
- FIG. 1is a block diagram showing the configuration of a touch input device of a mobile terminal according to an embodiment of the present invention, as shown therein and at least one or more touch sensors 110 disposed on a bezel, a terminal side, or a corner thereof. Detecting a touch input from the at least one touch sensor 110 to determine (detect) a touch gesture corresponding to a combination of the touch inputs, and apply the determined touch gesture (touch input information) to the specified application. And a storage unit 320 for storing driver software SW for determining a touch gesture by combining the control unit 310 output to the program 410 and the touch input.
- At least one light emitting device 210 for displaying the activation state of each touch sensor 110 or whether the touch input is processedmay be further included.
- the touch sensor 110may be configured in a resistive film type or a capacitive type.
- the capacitive typewhen the dielectric constant of the monopolar plate is changed by approaching or contacting a conductor such as a user's finger to the monopolar plate, The change in capacitance is detected and a switching signal is generated according to the result.
- the touch sensors 110may be continuously arranged in a line form, and may be arranged in a line form or in a form in which at least two or more lines overlap each other in parallel at a predetermined interval (fold line form).
- a gap (gap) according to the arrangement interval of the touch sensorsmay be arranged so as to be intersected by a touch sensor of another line.
- the light emitting device 210may display at least one touch sensor or a touch area (a plurality of touch sensors arranged in a line or a specific form) capable of receiving a touch among the at least one touch sensor 110. Can be. That is, the touch sensor or the touch area in the activated state is displayed, and if the touch is input, the input state (or the input touch sensor) is displayed so that the user can know.
- a touch sensor or a touch areaa plurality of touch sensors arranged in a line or a specific form
- the driver software of the storage unit 320is a driver software for detecting various touch gestures by combining inputs of the touch sensor 110, and related to control of the light emitting device according to an activation state and an input state of the light emitting device 210. Save the driver software.
- the touch gesturecan detect a three-dimensional touch gesture. That is, not only the two-dimensional touch gesture in the plane but also the three-dimensional touch gesture including the depth information (z-axis information) in the plane information (x, y-axis information) can be detected.
- the three-dimensional stereoscopic touch methodwill be described with reference to other drawings.
- the controller 310controls the touch sensor 110 and the light emitting device 210 by using driver software stored in the storage 320, and detects the detected two-dimensional touch gesture information or three-dimensional touch gesture information. By outputting the (touch input information) to the corresponding application program (or the firmware program of the terminal) to perform the corresponding operation.
- FIGS. 2A to 2Care exemplary diagrams of a mobile terminal for explaining an arrangement structure of a touch sensor according to an embodiment of the present invention.
- a touch sensoris disposed in a bezel area in a dot format, and as shown in FIG. 2A, the entire terminal is continuously surrounded.
- the touch sensormay be disposed in the form of a shape, and the touch sensor may be disposed in the same shape (continuous line shape to fit the entire length of the side surface) of the terminal side.
- the touch sensormay be disposed in a predetermined length or in an arbitrary shape at least one or more specific positions (or specific portions) in the bezel area, and may also be disposed in at least one or more specific positions (or specific portions) on the side of the terminal.
- the touch sensormay be arranged in a predetermined length or in an arbitrary shape.
- the specific position where the touch sensor is arrangedcan specify various desired positions according to the product design and the touch input purpose (2D touch input or 3D touch input), and also by adjusting the number and arrangement interval of the touch sensors. It can be configured in batch length and shape.
- the touch sensormay be disposed at an arbitrary position instead of the home button to perform a home button function using the touch sensor.
- the touch sensormay be disposed on at least one edge formed by the terminal side and the bezel area, or at least one edge formed by the terminal side and the other terminal side.
- the touch sensormay use a resistive method or a capacitive method.
- the resistive film methodhas a disadvantage in that multi-touch is difficult and proximity sensing is not possible while the technology barrier is low, and the capacitance barrier is a technology barrier. Instead of this high, it has the advantage of multi-touch and proximity sensing. Therefore, in recent years, capacitive methods have been frequently used in relation to user interface, convenience, and product design, and can receive a touch using a finger or a conductive pen.
- FIG. 3is an exemplary view illustrating a method of arranging touch sensors in FIGS. 2A to 2C, and as shown therein, the touch sensors may be arranged in at least one line shape.
- the number of lines of the touch sensors arrangedmay be adjusted according to the thickness of the terminal side or the width of the bezel. Alternatively, the number of lines of the touch sensor may be adjusted according to the position (eg, corner, side) of the touch sensor.
- the touch sensorswhen the touch sensors are overlapped with each other in the form of overlapping lines as shown in (b) or (c), the touch sensors may be disposed to cross each other in order to prevent sensing failure due to a large space between the touch sensors. That is, it is preferable that the touch sensors of the other lines arranged in the form of a line correspond to the empty spaces (arrangement intervals) of the touch sensors arranged in a line shape so as to cross each other so that the empty spaces can be filled.
- the touch sensoris not necessarily arranged in succession at a predetermined interval. That is, it is not necessarily arranged in a line form with a constant arrangement interval, depending on the desired touch input method or purpose (two-dimensional touch input or three-dimensional touch input), or in order to increase the accuracy of sensing (eg, circular , Triangles, squares, X-shapes, or any other form).
- the desired position of the terminalfor example, when the finger is wrapped around the palm of the hand to touch Only a part (or any area) of the touch sensor can be placed in any one specific form (for example, circular, triangular, square, X-shaped or otherwise), and then the touch sensor
- the numbercan also be configured differently depending on the location.
- only one touch sensoris disposed on one side of the terminal (for example, the right bezel of the screen, the terminal side, or a corner thereof), and the other side (for example, the left bezel of the screen, the terminal side, or the corner thereof) of the terminal.
- At least one touch sensormay be disposed.
- the desired number of touch sensorsmay be arranged on another side (eg, upper / lower bezel or terminal side of the screen or their edges).
- the touch sensor arranged as abovemay detect a single tap, a continuous touch, two or more consecutive taps, or other possible touch gestures.
- the touch gestureincludes a two-dimensional touch input detected in a plane or a three-dimensional touch input including depth information.
- the touch sensor disposed in the form of an overlap of bezels or terminal sides or their edgesmay detect a touch gesture that continuously moves with directionality in a state where a specific point is touched. That is, the touch gesture input by the finger sweep method may be detected.
- 5A to 5Dare exemplary views for explaining a two-dimensional touch gesture that can be input through a touch sensor disposed on a bezel or a terminal side according to an embodiment of the present invention.
- the touch sensors arranged in the form of at least one line on the terminal sideare arranged in a form overlapped in parallel with each other at a predetermined interval (folded form), and the sweep direction (from the touch start point to the touch end point). It is assumed that the direction of continuous movement, the sweep distance (the distance continuously moved from the touch start point to the touch end point), and the sweep speed (the sweep distance divided by the elapsed time) can be detected.
- the touch input information(information where the touch input is moved forward) is displayed.
- the sweep direction(direction continuously moving from the touch start point to the touch end point) may be a straight line shape as shown in (a), or may be a diagonal line shape as shown in (b).
- the touch input information provided to the application programmay be merely provided with sweep direction information from the rear to the front, and may also be provided with angle information of the touch start point and the touch end point.
- the touch input information(information of which the touch input is moved backward) is moved.
- the sweep direction(direction continuously moving from the touch start point to the touch end point) may be a straight line shape as shown in (a), or may be a diagonal line shape as shown in (b).
- the touch input information provided to the application programmay simply be provided with only sweep direction information from the front to the rear, and may also be provided with angle information of the touch start point and the touch end point.
- the sweep directionis detected based on the user.
- the side of the terminal corresponding to the user's right handbecomes the right side
- the side of the terminal corresponding to the user's left handis left. do. If the terminal is rotated in the vertical direction to the horizontal direction, the upper and lower sides in the vertical direction is changed to the left and right sides in the horizontal direction.
- a 2D touch gesturethat can be input through a touch sensor disposed on a 2D plane such as a bezel or a terminal side
- a three-dimensional touch gesturethat can be input through a touch sensor disposed at an edge formed by the bezel and the terminal side or an edge formed on the terminal side and another terminal side (or each terminal side) will be described.
- the 3D touchmeans to add depth information to the 2D plane information and to touch it.
- FIG. 6is an exemplary view for explaining a three-dimensional touch gesture that can be input through a touch sensor disposed in the corner of the terminal according to an embodiment of the present invention.
- the touch sensormay be disposed on at least one of the four corners (or each terminal side) formed by the terminal side of one side and the terminal side of the other side,
- a three-dimensional touch input operation(touch gesture or sweep operation) input at least continuously through a touch sensor disposed at one corner (or each terminal side) can be detected.
- the touch input operationis detected through the touch sensor disposed on the right side of the terminal via the edge at the upper end of the terminal, the two-dimensional touch gesture is input while the upper surface is swept from left to right.
- the distance swept to itbecomes a depth and becomes a three-dimensional touch gesture.
- the touch sensoris disposed at the other corner, the three-dimensional stereoscopic touch operation is performed from the moment when the sweep direction is turned to 90 degrees via the touch sensor disposed at the corner.
- the sweep distance of the sidebecomes a depth from the moment when the sweep direction is turned to 90 degrees, thereby making the three-dimensional stereoscopic touch operation.
- a mouse wheelis detected by detecting a sweeping direction that is continuously inputted through a touch sensor disposed at an edge (or a touch sensor continuously disposed on a bezel or a terminal side via a corner).
- Applicationssuch as manipulating the jog wheel or grabbing and rotating a horizontal or vertical row of cubes (toys that match each side of the cube in the same color), such as rotating a wheel or cube. It is also possible to implement a three-dimensional stereoscopic touch function.
- the touch sensormay be disposed on at least one of the corners formed by the bezel and the terminal side, or the touch sensor may be continuously disposed on the edge of the bezel and the terminal side, and the touch sensor disposed at the corner.
- the touch input operationcan be detected in the same manner as a handing over a finger. For example, 2) in an application program (such as an e-book or an e-book), the effect of actually flipping a bookshelf (the individual chapters of a book) with a finger can be produced.
- the touch sensorcan detect the touch pressure, and 4) touch the two sides of the corner with a predetermined pressure in a direction facing each other in order to obtain a pressing effect on both sides of the object.
- the depth of the touch input continuously or the depth swept continuouslyis detected and the depth information of the object can be picked up from the object image displayed in the application.
- the thickness and the numbercan also be adjusted.
- the touch input operationmay be performed by continuously sweeping.
- the touch input operationfor touching both sides of the edge at a predetermined depth (the depth corresponding to the width of the bezel or the thickness of the terminal side) corresponds to a three-dimensional stereoscopic touch input.
- the conceptis completely different from the two-dimensional touch input operation of multi-touching a flat touch screen or touch pad.
- the depth informationis that when the sweep direction is changed in the z-axis direction via the edge, the sweep distance continuously moving in the changed sweep direction becomes the depth.
- the directions of the x, y, and z axesmay be changed according to the attitude (vertical direction, horizontal direction or flat direction) or rotation of the terminal.
- the horizontal / vertical direction of the two-dimensional plane where the starting point of the first touch startsis the x and y axes
- the other planeis moved to the other plane.
- the continuous directionis the z axis, and the distance of the z axis at that time becomes the depth information in the 3D touch operation.
- the touch sensoris disposed on the bezel or the terminal side (up / down / left / right side), or an edge formed between the bezel and the terminal side, or an edge formed between the terminal side and another terminal side, or through the edge thereof.
- guide informationmay be displayed in order to allow a user to know a location where the touch sensor is disposed.
- the guide informationmay be used to print text or an image indicating the position of the touch sensor at a corresponding position of the terminal body, to process the body of the portion where the touch sensor is disposed in a relatively more convex or more concave shape, or to emit light such as an LED. Is embedded in the body of the position corresponding to the touch sensor and then emits the light emitting element to indicate the position of the touch sensor, or to form a protrusion on the body of the portion where the touch sensor is disposed to touch the user with the texture of the protrusion It can be displayed to know the position of the sensor. In this case, the methods may be configured in combination with each other.
- a guide information for guiding a position of the touch sensor and an operation corresponding to the touch sensoris displayed on a display screen (or a screen display device) of the terminal.
- the guide informationmay be displayed as text or an image, and may be displayed as semi-transparent so as not to obscure previously displayed information.
- the display of the guide informationmay be deleted by determining a meaningless touch input. If the touch is input without the display of the guide information, it is meaningless. The error can be prevented by judging by an input. At this time, the activation start and release of the touch sensor and the display and release of the guide information can be changed as much as the application or the desired operation.
- FIG. 7is a flowchart illustrating a touch input method of a mobile terminal according to an embodiment of the present invention, and as shown in FIG. 7, a bezel or a terminal side of the terminal via a bezel, a terminal side, a corner thereof, or a corner thereof. At least one touch sensor arranged in series is activated (S101).
- the corresponding guide information display means indicating the activation statemay be activated (S102).
- the guide information display meansincludes a light emitting element embedded in correspondence to the position where the screen display device or touch sensor built in the terminal is disposed.
- the guide information display meansis a screen display device
- the guide information corresponding to the touch sensoris displayed in a designated format in a designated position on the display screen.
- the guide information display meansis a light emitting device
- the light emitting device embedded in the position corresponding to the touch sensoris made to emit light.
- the touch sensorWhen the touch sensor is activated as described above, the user inputs a corresponding touch gesture in order to perform a desired operation in an application program.
- the touch inputis detected through the touch sensor corresponding to the touch gesture, and the control unit detects the touch gesture input by the user by combining the touch inputs of the touch sensors (S103).
- the touch gestureis a touch input operation that can be input through the bezel, the terminal side, and the edge of the terminal.
- the three-dimensional stereoscopic touchis possible as much as the width or thickness of the bezel or the terminal side corresponding to the z-axis.
- the multi-touchis started at an arbitrary position on the side of the bezel and the terminal, it is swept and the touch ends at the edge, or 5) After the multi-touch is started on both sides of the edge, it is swept and is touched at an arbitrary position on the bezel and the terminal side. Even in the end, the three-dimensional stereoscopic touch is possible as much as the width of the bezel corresponding to the z-axis or the thickness of the terminal side.
- the touch gesturewhen the touch gesture is input only at the corners or the touch gesture is input only at the two-dimensional plane such as the bezel or the terminal side, it may be determined as the two-dimensional touch input (S105). That is, the sweep direction is not changed to the z-axis, and only the touch input operation performed in the two-dimensional plane such as the up / down / forward / rear movement is determined as the two-dimensional touch input.
- the three-dimensional stereoscopic touch operationmay be multi-touch input in at least two places. For example, when sweeping arbitrary edges between the bezel and the side of the terminal with the thumb and forefinger, respectively, and sweeping the bezel and the side of the terminal, three-dimensional multi-touch is input by the sweep depth (the width of the bezel and the thickness of the side of the terminal). It can be judged.
- the controllerWhen the touch gesture is detected as described above, the controller outputs three-dimensional stereoscopic touch or two-dimensional touch input information corresponding to the detected touch gesture to the designated application program (S105).
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
본 발명은 모바일 단말기의 터치 입력 장치와 그 방법에 관한 것으로, 더욱 상세하게는 모바일 단말기의 베젤과 단말측면 및 그들의 모서리 부분에 터치센서를 배치하여 사용자와 모바일 단말기간의 접촉 부위를 다양화시키고, 그 접촉을 감지하여 응용 프로그램의 메뉴 선택이나 내비게이션을 위한 3차원 입체터치 입력장치로 활용할 수 있도록 하는 모바일 단말기의 터치 입력장치와 그 방법에 관한 것이다.The present invention relates to a touch input device and a method of a mobile terminal, and more particularly, to arrange a touch sensor on the bezel and the terminal side of the mobile terminal and their corners to diversify the contact area between the user and the mobile terminal, The present invention relates to a touch input device of a mobile terminal and a method of detecting a touch and using the same as a 3D touch input device for menu selection or navigation of an application program.
최근 모바일 단말기(예 : 스마트폰, 태블릿 PC 등)의 개발 동향을 살펴보면 화면은 커지고 두께는 얇아지고 있다. 이는 사용자들이 화면 크기가 큰 것을 선호하는 경향이 강해지고 있기 때문이다.Looking at recent development trends of mobile terminals (eg smartphones, tablet PCs, etc.), screens are getting bigger and thinner. This is because users tend to prefer larger screen sizes.
그러나 모바일 단말기는 휴대할 수 있어야 하는 것이 가장 중요한 요구사항이이기 때문에 무조건 기기의 사이즈를 증가시킬 수도 없으며, 적어도 한 손으로 모바일 단말기를 잡고 조작할 수 있을 정도의 사이즈이어야 하는 제한이 있다. 즉, 한정된 기기 사이즈를 갖는 모바일 단말기에서 사용자의 눈에 보이는 화면 사이즈는 최대한 커져야 한다는 것이다.However, since the most important requirement is that the mobile terminal should be portable, there is a limitation that the size of the device cannot be unconditionally increased, and the size of the mobile terminal should be at least large enough to hold and operate the mobile terminal with one hand. That is, in a mobile terminal having a limited device size, the screen size visible to the user should be as large as possible.
상기와 같은 조건을 만족시킬 수 있는 가장 좋은 해결책으로는 기기의 사이즈는 그대로 유지하면서, 화면외의 공간(또는 영역)인 베젤(Bezel)의 폭을 줄여 실제 화면 사이즈를 커지게 하거나, 베젤 공간을 최대한 활용하여 화면 사이즈가 커진 것과 같은 효과를 얻을 수 있도록 하는 것이다. 그러나 베젤 부위에는 전극배선이 위치해 있기 때문에 베젤의 폭을 무조건 줄이는 것은 한계가 있다. 따라서 베젤 공간을 최대한 활용하여 화면 사이즈가 커진 것과 같은 효과를 얻을 수 있도록 하는 것이 바람직하다.The best solution to satisfy the above conditions is to reduce the width of the bezel, which is the space (or area) outside the screen while keeping the size of the device as it is, to increase the actual screen size or to maximize the bezel space. It can be used to achieve the same effect as the screen size is increased. However, because the electrode wiring is located in the bezel area, there is a limit to unconditionally reducing the width of the bezel. Therefore, it is desirable to make the most of the bezel space to obtain the same effect as the screen size is increased.
이에 따라 종래에도 베젤 공간을 활용할 수 있는 기술이 일부 공개되었으나, 단순히 베젤 공간으로 터치영역을 확장하여 베젤에서 터치를 입력받을 수 있는 방법을 제공하고 있을 뿐이다. 더구나 최근 단말기에 설치되는 응용 프로그램은 3차원으로 입체화되고 있는 상황이지만, 단순히 베젤로 확장된 영역에서 터치를 검출하는 정도로는 3차원 응용 프로그램을 제어하는 방법으로서 충분하지 않으며, 또한 종래에는 베젤 공간이나 단말측면을 활용하여 3차원 입체터치를 입력받을 수 있는 적절한 방법이 제공되지 않는다.Accordingly, some techniques for utilizing the bezel space have been disclosed in the related art, but merely providing a method of receiving a touch from the bezel by simply extending the touch area to the bezel space. In addition, recently, the application installed in the terminal has been three-dimensionally three-dimensional situation, but simply detecting the touch in the area extended by the bezel is not enough as a method of controlling the three-dimensional application, and conventionally bezel space or There is no suitable method for receiving a three-dimensional stereoscopic touch using the terminal side.
한편, 본 발명의 배경기술로서 미국 등록특허 US7,656,393 B2(2010.02.02)에 개시된 사용자 인터페이스와 컨트롤을 위한 디스플레이와 주위의 터치 민감한 베젤을 가지는 전자소자는 베젤에 터치센서를 탑재해서 전자소자(예 : 아이패드)를 컨트롤하는 방법에 대해서 제안하고 있으며, 또한 상기 배경기술은 전자소자의 홈 버튼 대신에 베젤에 설치된 터치센서를 조작하여 컨트롤하는 방법에 대해서 기재되어 있지만, 상기 배경기술에는 베젤이나 단말측면 또는 그들의 모서리에 터치센서를 배치하는 구조에 대해서는 기재되지 않으며, 더구나 베젤과 모서리 및 단말측면에 배치된 터치센서를 활용하여 3차원 입체터치를 입력받을 수 있는 방법에 대해서는 전혀 기재되어 있지 않는 것으로, 본 발명의 목적과 구성 및 그 효과에 있어서 차이가 있다.Meanwhile, an electronic device having a display and a touch sensitive bezel around the user interface and control disclosed in US Pat. No. 7,656,393 B2 (2010.02.02) as a background art of the present invention includes a touch sensor mounted on the bezel. Example: an iPad) is proposed, and the background art describes a method of controlling a touch sensor installed in the bezel instead of the home button of an electronic device. The structure of disposing touch sensors on the terminal side or their edges is not described, and furthermore, there is no description of the method of receiving three-dimensional stereoscopic touch using the bezel, the corners and the touch sensors disposed on the terminal side. Therefore, there exists a difference in the objective, structure, and effect of this invention.
본 발명은 상기와 같은 문제점을 해결하기 위해 창작된 것으로서, 모바일 단말기의 베젤과 단말측면 및 그들의 모서리 부분에 터치센서를 배치하여 사용자와 모바일 단말기간의 접촉 부위를 다양화시킬 수 있는 모바일 단말기의 터치 입력 장치와 그 방법을 제공하는데 목적이 있다.The present invention has been made to solve the above problems, the touch input of the mobile terminal that can diversify the contact area between the user and the mobile terminal by placing a touch sensor on the bezel and the terminal side of the mobile terminal and their corners An object is to provide an apparatus and a method thereof.
또한 본 발명은 모바일 단말기의 베젤과 단말측면 및 그들의 모서리 부분에 배치된 터치센서를 배치하여 응용 프로그램의 메뉴 선택이나 내비게이션을 위한 3차원 터치 입력장치로 활용할 수 있는 모바일 단말기의 터치 입력 장치와 그 방법을 제공하는데 목적이 있다.In addition, the present invention is a touch input device and method of the mobile terminal that can be utilized as a three-dimensional touch input device for menu selection or navigation of the application by placing a touch sensor disposed on the bezel and the terminal side and their corners of the mobile terminal The purpose is to provide.
본 발명의 일 측면에 따른 모바일 단말기의 터치 입력장치는 단말의 베젤, 단말측면, 또는 그들간의 모서리에 배치되는 적어도 하나 이상의 터치센서; 상기 적어도 하나 이상의 터치센서로부터 입력되는 터치를 검출하여 그 터치입력 정보의 조합에 해당하는 터치 제스처를 검출하는 제어부; 및 상기 터치 제스처의 판단을 위한 드라이버 소프트웨어를 저장하는 저장부;를 포함하여 구성하고, 상기 제어부는 상기 검출된 터치 제스처가 2차원 터치 제스처인지 또는 3차원 터치 제스처인지를 판단할 수 있는 것을 특징으로 하며, 상기 각 터치센서의 활성화 상태 혹은 터치입력의 처리 여부와 같은 가이드 정보를 사용자에게 표시하기 위한 적어도 하나 이상의 가이드정보 표시수단;을 더 포함하여 구성되고, 상기 제어부는, 모서리에서만 터치 제스처가 입력되거나, 스위프 방향이 z축으로 변경되지 않고, 베젤, 또는 단말측면과 같은 2차원 평면에서만 터치 제스처가 입력될 경우에는 2차원 터치입력으로 판단하고, 베젤 또는 단말측면의 임의의 위치에서 시작된 스위프 동작이 모서리를 경유하여 z축으로 스위프 방향이 변경되는 경우에는 3차원 터치입력으로 판단하며, 또한 상기 제어부는, 단일 탭, 지속된 터치, 둘 이상의 연속하는 탭, 2차원 평면상의 특정 지점이 터치된 상태에서 지속적으로 스위프 되는 2차원 터치 제스처, 2차원 평면상에서 스위프가 시작된 후 z축으로 스위프 방향이 변경되어 지속적으로 스위프 되는 3차원 터치 제스처, 또는 그들의 조합 중 적어도 하나 이상의 터치입력을 검출하며, 상기 3차원 터치 제스처는, 스위프 방향이 z축 방향으로 변경되는 경우, 그 변경된 스위프 방향으로 지속해서 이동하는 스위프 거리에 해당하는 만큼의 깊이 정보를 포함하고, 상기 3차원 터치 제스처를 검출하기 위한 x, y, z축의 방향은 단말기의 자세나 회전에 따라서 변경되며, z축에 해당하는 베젤 또는 단말측면의 넓이나 두께만큼의 깊이로 터치가 가능하며, 상기 터치센서는, 정전용량 방식으로 구성되고, 또한 상기 터치센서는, 라인 형태로 연속해서 배열하되, 한 개의 라인 형태 또는 적어도 두 개 이상의 라인이 소정 간격으로 평행하게 겹친 형태(겹선 형태)로 배치되고, 상기 터치센서는, 상기 라인으로 형성된 터치센서의 배치 간격에 따른 틈새(간극)를 다른 라인의 터치센서에 의해서 메꿀 수 있도록 교차되게 배치하며, 또한 상기 터치센서는, 베젤이나 단말측면의 외곽 전체를 둘러싸는 형태로 배치되거나, 베젤이나 단말측면에서 적어도 하나 이상의 특정 위치에 배치되거나, 단말측면과 베젤간 또는 단말측면과 다른 단말측면간 이루는 적어도 하나 이상의 모서리에 배치되거나, 또는 그들을 조합한 위치에 배치되는 것을 특징으로 한다.According to an aspect of the present invention, there is provided a touch input device of a mobile terminal, the touch input device including at least one touch sensor disposed at a bezel, a terminal side, or an edge thereof between the terminals; A control unit detecting a touch input from the at least one touch sensor and detecting a touch gesture corresponding to a combination of the touch input information; And a storage unit for storing driver software for determining the touch gesture, wherein the controller can determine whether the detected touch gesture is a two-dimensional touch gesture or a three-dimensional touch gesture. And at least one guide information display means for displaying to the user guide information such as activation state of each touch sensor or processing of a touch input, wherein the controller is configured to input a touch gesture only at a corner. Or when the sweep direction is not changed to the z-axis and a touch gesture is input only in a two-dimensional plane such as a bezel or the terminal side, the controller determines that it is a two-dimensional touch input and starts a sweep operation at an arbitrary position on the bezel or the terminal side. 3D if the sweep direction changes to the z axis via this edge The control unit may further include a single tap, a continuous touch, two or more consecutive taps, a two-dimensional touch gesture continuously sweeping while a specific point on the two-dimensional plane is touched, and a sweep on the two-dimensional plane. When the sweep direction is changed to the z-axis after the start, and detects at least one or more touch inputs of the continuously sweeped three-dimensional touch gesture, or a combination thereof, the three-dimensional touch gesture, when the sweep direction is changed to the z-axis direction, Depth information corresponding to the sweep distance continuously moving in the changed sweep direction, and the directions of x, y, and z axes for detecting the 3D touch gesture are changed according to the attitude or rotation of the terminal, and z The touch can be touched at a depth equal to the width or thickness of the bezel or the terminal side corresponding to the axis. The touch sensor is arranged in a continuous line form, one line form or at least two or more lines are arranged in a form overlapping (parallel form) in parallel at a predetermined interval, the touch sensor, The gaps (gaps) according to the arrangement intervals of the touch sensors formed by the lines are arranged to cross each other so as to be filled by the touch sensors of the other lines, and the touch sensors are arranged in a form surrounding the entire outer periphery of the bezel or the terminal side. Or be disposed at at least one specific position on the bezel or at the terminal side, or at at least one corner formed between the terminal side and the bezel or between the terminal side and another terminal side, or at a position combining them. .
본 발명의 일 측면에 따른 모바일 단말기의 터치 입력방법은 베젤, 단말측면, 그들의 모서리, 또는 그 모서리를 경유하여 베젤이나 단말측면에 연속해서 배치된 적어도 하나 이상의 터치센서를 활성화시키는 제1 단계; 상기 활성화된 터치센서를 통해 사용자가 입력하는 터치입력을 조합하여 터치 제스처를 검출하는 제2 단계; 및 상기 터치 제스처의 스위프 방향이 z축으로 변경될 경우 3차원 터치입력으로 판단하고, 상기 스위프 방향이 z축으로 변경되지 않거나, 베젤, 또는 단말측면과 같은 2차원 평면에서만 입력될 경우 2차원 터치입력으로 판단하는 제3 단계;를 포함하여 구성되고, 상기 3차원 터치입력은, 상기 스위프 방향이 z축 방향으로 변경되는 경우, 그 변경된 스위프 방향으로 지속해서 이동하는 스위프 거리에 해당하는 만큼의 깊이 정보를 포함하고, 상기 3차원 터치입력을 검출하기 위한 x, y, z축의 방향은 단말기의 자세나 회전에 따라서 변경되며, 상기 깊이 정보는 z축에 해당하는 베젤 또는 단말측면의 넓이나 두께만큼 터치입력이 가능한 것을 특징으로 한다.According to an aspect of the present invention, there is provided a touch input method of a mobile terminal, comprising: a first step of activating at least one touch sensor continuously disposed on a bezel or a terminal side via a bezel, a terminal side, a corner thereof, or a corner thereof; A second step of detecting a touch gesture by combining a touch input input by the user through the activated touch sensor; And a 3D touch input when the sweep direction of the touch gesture is changed to the z axis, and the 2D touch when the sweep direction is not changed to the z axis or input only in a 2D plane such as a bezel or the terminal side. And a third step of judging as an input, wherein the three-dimensional touch input has a depth corresponding to a sweep distance continuously moving in the changed sweep direction when the sweep direction is changed in the z-axis direction. The x, y, z axis directions for detecting the 3D touch input are changed according to the attitude or rotation of the terminal, and the depth information is equal to the width or thickness of the bezel or the side surface of the terminal corresponding to the z axis. A touch input is possible.
본 발명은 모바일 단말기의 베젤과 단말측면 및 그들의 모서리 부분에 터치센서를 배치하여 사용자와 모바일 단말기간의 접촉 부위를 다양화시키고, 또한 상기 베젤과 단말측면 및 그들의 모서리 부분에 배치된 터치센서를 응용 프로그램의 메뉴 선택이나 내비게이션을 위한 3차원 터치 입력장치로 활용할 수 있도록 함으로써, 응용 프로그램에 따른 사용자의 편의성을 향상시키고, 그 입력 방법을 활용한 다양한 응용 프로그램을 개발할 수 있도록 하는 효과가 있다.The present invention is to arrange the touch sensor on the bezel and the terminal side and their corners of the mobile terminal to diversify the contact area between the user and the mobile terminal, and also apply the touch sensor disposed on the bezel and the terminal side and their corners By using it as a 3D touch input device for menu selection or navigation, there is an effect of improving the user's convenience according to the application and developing various application programs using the input method.
도 1은 본 발명의 일 실시예에 따른 모바일 단말기의 터치 입력 장치의 구성을 보인 블록도.1 is a block diagram showing the configuration of a touch input device of a mobile terminal according to an embodiment of the present invention;
도 2a 내지 도 2c는 본 발명의 일 실시예에 따른 터치센서의 배치 구조를 설명하기 위한 모바일 단말기의 예시도.2A to 2C are exemplary views illustrating a mobile terminal for explaining an arrangement structure of a touch sensor according to an embodiment of the present invention.
도 3는 상기 도 2a 내지 도 2c에 있어서, 터치센서의 배열 방법을 보인 예시도.3 is an exemplary view illustrating an arrangement method of a touch sensor in FIGS. 2A to 2C.
도 4는 본 발명의 일 실시예에 따라 베젤이나 단말측면에 배치된 터치센서를 터치키로 사용하는 방법을 설명하기 위한 예시도.4 is an exemplary view for explaining a method of using a touch sensor disposed on a bezel or a terminal side as a touch key according to an embodiment of the present invention.
도 5a 내지 도 5d는 본 발명의 일 실시예에 따라 베젤이나 단말측면에 배치된 터치센서를 통해서 입력받을 수 있는 2차원 터치 제스처를 설명하기 위한 예시도.5A to 5D are exemplary views for explaining a two-dimensional touch gesture that can be input through a touch sensor disposed on a bezel or a terminal side according to an embodiment of the present invention.
도 6은 본 발명의 일 실시예에 따라 단말기의 모서리에 배치된 터치센서를 통해서 입력받을 수 있는 3차원 터치 제스처를 설명하기 위한 예시도.6 is an exemplary view for explaining a three-dimensional touch gesture that can be input through a touch sensor disposed in the corner of the terminal according to an embodiment of the present invention.
도 7은 본 발명의 일 실시예에 따른 모바일 단말기의 터치 입력 방법을 설명하기 위한 흐름도.7 is a flowchart illustrating a touch input method of a mobile terminal according to an embodiment of the present invention.
이하, 첨부된 도면을 참조하여 본 발명에 따른 모바일 단말기의 터치 입력 장치와 그 방법의 일 실시예를 설명한다.Hereinafter, a touch input device and a method of a mobile terminal according to the present invention will be described with reference to the accompanying drawings.
도 1은 본 발명의 일 실시예에 따른 모바일 단말기의 터치 입력장치의 구성을 보인 블록도로서, 이에 도시된 바와 같이 베젤, 단말측면, 또는 그들의 모서리에 배치되는 적어도 하나 이상의 터치센서(110)와, 상기 적어도 하나 이상의 터치센서(110)로부터 입력되는 터치를 검출하여 그 터치입력의 조합에 해당하는 터치 제스처를 판단(검출)하고, 그 판단(검출)된 터치 제스처(터치입력 정보)를 지정된 응용 프로그램(410)에 출력하는 제어부(310) 및 상기 터치입력을 조합하여 터치 제스처를 판단하기 위한 드라이버 소프트웨어(SW)를 저장하는 저장부(320)를 포함하여 구성한다.1 is a block diagram showing the configuration of a touch input device of a mobile terminal according to an embodiment of the present invention, as shown therein and at least one ormore touch sensors 110 disposed on a bezel, a terminal side, or a corner thereof. Detecting a touch input from the at least onetouch sensor 110 to determine (detect) a touch gesture corresponding to a combination of the touch inputs, and apply the determined touch gesture (touch input information) to the specified application. And astorage unit 320 for storing driver software SW for determining a touch gesture by combining thecontrol unit 310 output to theprogram 410 and the touch input.
또한 상기 각 터치센서(110)의 활성화 상태 혹은 터치입력의 처리 여부를 사용자에게 표시하기 위한 적어도 하나 이상의 발광소자(210)를 추가로 포함하여 구성할 수 있다.In addition, at least onelight emitting device 210 for displaying the activation state of eachtouch sensor 110 or whether the touch input is processed may be further included.
여기서 상기 터치센서(110)는 저항막 방식 또는 정전용량 방식으로 구성될 수 있으며, 특히 정전용량 방식의 경우 사용자의 손가락과 같은 전도체를 단극판에 근접하거나 접촉하여 단극판의 유전율이 변화될 경우, 그에 따른 정전용량 변화를 검출하여 그 결과에 따라 스위칭 신호를 발생시키게 된다.Herein, thetouch sensor 110 may be configured in a resistive film type or a capacitive type. In the case of the capacitive type, when the dielectric constant of the monopolar plate is changed by approaching or contacting a conductor such as a user's finger to the monopolar plate, The change in capacitance is detected and a switching signal is generated according to the result.
상기 터치센서(110)는 라인 형태로 연속해서 배열하되, 한 개의 라인 형태 또는 적어도 두 개 이상의 라인이 소정 간격으로 평행하게 겹친 형태(겹선 형태)로 배치할 수 있으며, 상기 겹선 형태로 배치할 경우 터치센서간의 배치 간격에 의한 센싱의 실패를 방지하기 위하여 터치센서의 배치 간격에 따른 틈새(간극)를 다른 라인의 터치센서에 의해서 메꿀 수 있도록 교차되게 배치할 수 있다. 상기 터치센서의 배치구조에 대한 구체적인 설명은 다른 도면을 참조하여 설명한다.Thetouch sensors 110 may be continuously arranged in a line form, and may be arranged in a line form or in a form in which at least two or more lines overlap each other in parallel at a predetermined interval (fold line form). In order to prevent the sensing failure due to the arrangement interval between the touch sensors, a gap (gap) according to the arrangement interval of the touch sensors may be arranged so as to be intersected by a touch sensor of another line. Detailed description of the arrangement structure of the touch sensor will be described with reference to the other drawings.
상기 발광소자(210)는 상기 적어도 하나 이상의 터치센서(110)들 중 터치를 입력받을 수 있는 적어도 어느 하나의 터치센서 또는 터치 영역(라인이나 특정 형태로 배열된 복수의 터치센서들)을 표시할 수 있다. 즉, 활성화 상태의 터치센서 또는 터치 영역을 표시하며, 만약 터치가 입력될 경우 그 입력된 상태(또는 입력된 터치센서)를 사용자가 알 수 있도록 표시한다.Thelight emitting device 210 may display at least one touch sensor or a touch area (a plurality of touch sensors arranged in a line or a specific form) capable of receiving a touch among the at least onetouch sensor 110. Can be. That is, the touch sensor or the touch area in the activated state is displayed, and if the touch is input, the input state (or the input touch sensor) is displayed so that the user can know.
상기 저장부(320)의 드라이버 소프트웨어는 터치센서(110)의 입력을 조합하여 다양한 터치 제스처를 검출하기 위한 드라이버 소프트웨어, 상기 발광소자(210)의 활성화 상태 및 입력 상태에 따른 발광소자의 제어에 관련된 드라이버 소프트웨어를 저장한다. 특히 본 발명에서 상기 터치 제스처는 3차원 터치 제스처를 검출할 수 있다. 즉, 평면에서의 2차원 터치 제스처뿐만 아니라, 평면 정보(x,y 축 정보)에 깊이 정보(z축 정보)까지 포함된 3차원 터치 제스처를 검출할 수 있다. 상기 3차원 입체터치 방법에 대한 구체적인 설명은 다른 도면을 참조하여 설명한다.The driver software of thestorage unit 320 is a driver software for detecting various touch gestures by combining inputs of thetouch sensor 110, and related to control of the light emitting device according to an activation state and an input state of thelight emitting device 210. Save the driver software. In particular, in the present invention, the touch gesture can detect a three-dimensional touch gesture. That is, not only the two-dimensional touch gesture in the plane but also the three-dimensional touch gesture including the depth information (z-axis information) in the plane information (x, y-axis information) can be detected. A detailed description of the three-dimensional stereoscopic touch method will be described with reference to other drawings.
그리고 상기 제어부(310)는 상기 저장부(320)에 저장된 드라이버 소프트웨어를 이용하여 터치센서(110)와 발광소자(210)를 제어하고, 상기 검출된 2차원 터치 제스처 정보, 또는 3차원 터치 제스처 정보(터치입력 정보)를 해당 응용 프로그램(또는 단말기의 펌웨어 프로그램)으로 출력함으로써 그에 해당하는 동작을 수행하도록 한다.Thecontroller 310 controls thetouch sensor 110 and thelight emitting device 210 by using driver software stored in thestorage 320, and detects the detected two-dimensional touch gesture information or three-dimensional touch gesture information. By outputting the (touch input information) to the corresponding application program (or the firmware program of the terminal) to perform the corresponding operation.
도 2a 내지 도 2c는 본 발명의 일 실시예에 따른 터치센서의 배치 구조를 설명하기 위한 모바일 단말기의 예시도이다.2A to 2C are exemplary diagrams of a mobile terminal for explaining an arrangement structure of a touch sensor according to an embodiment of the present invention.
이에 도시된 바와 같이 상기 모바일 단말기를 화면 표시영역과 베젤 영역으로 구분할 경우, 터치센서를 베젤 영역에 도트(dot) 형식으로 배치하되, 도 2a와 같이, 화면 표시영역의 외곽 전체를 연속해서 둘러싸는 형태로 배치할 수 있으며, 또한 단말 측면에도 같은 형태(측면 전체 길이에 맞춰 연속된 라인 형태)로 터치센서를 배치할 수 있다.As shown in FIG. 2, when the mobile terminal is divided into a screen display area and a bezel area, a touch sensor is disposed in a bezel area in a dot format, and as shown in FIG. 2A, the entire terminal is continuously surrounded. The touch sensor may be disposed in the form of a shape, and the touch sensor may be disposed in the same shape (continuous line shape to fit the entire length of the side surface) of the terminal side.
또는 도 2b와 같이, 베젤 영역 내의 적어도 하나 이상의 특정 위치(또는 특정 부분)에 터치센서를 소정 길이나 임의의 모양으로 배치할 수 있으며, 또한 단말 측면의 적어도 하나 이상의 특정 위치(또는 특정 부분)에도 터치센서를 소정 길이나 임의의 모양으로 배치할 수 있다. 이때 상기 터치센서가 배치되는 특정 위치는 제품 디자인과 터치입력 목적(2차원 터치입력 or 3차원 터치입력)에 따라 원하는 다양한 위치를 지정할 수 있으며, 또한 상기 터치센서의 개수와 배치 간격을 조절하여 원하는 배치 길이와 모양으로 구성할 수 있다. 그리고 상기 터치센서를 홈 버튼 대신 임의의 위치에 배치하여 그 터치센서를 이용해 홈 버튼 기능을 수행하는 것도 가능하다.Alternatively, as illustrated in FIG. 2B, the touch sensor may be disposed in a predetermined length or in an arbitrary shape at least one or more specific positions (or specific portions) in the bezel area, and may also be disposed in at least one or more specific positions (or specific portions) on the side of the terminal. The touch sensor may be arranged in a predetermined length or in an arbitrary shape. At this time, the specific position where the touch sensor is arranged can specify various desired positions according to the product design and the touch input purpose (2D touch input or 3D touch input), and also by adjusting the number and arrangement interval of the touch sensors. It can be configured in batch length and shape. In addition, the touch sensor may be disposed at an arbitrary position instead of the home button to perform a home button function using the touch sensor.
또한, 도 2c와 같이, 단말 측면과 베젤 영역이 이루는 적어도 하나 이상의 모서리, 또는 단말 측면과 다른 단말 측면이 이루는 적어도 하나 이상의 모서리에도 터치센서를 배치할 수 있다.In addition, as illustrated in FIG. 2C, the touch sensor may be disposed on at least one edge formed by the terminal side and the bezel area, or at least one edge formed by the terminal side and the other terminal side.
참고로 상기 터치센서는 저항막 방식이나 정전용량 방식을 이용할 수 있는데, 상기 저항막 방식은 기술 진입장벽이 낮은 대신에 멀티터치가 어렵고 근접 센싱이 불가능한 단점이 있으며, 상기 정전용량 방식은 기술 진입장벽이 높은 대신에 멀티터치와 근접 센싱이 가능한 장점이 있다. 따라서 최근에는 사용자 인터페이스와 편의성 및 제품 디자인 등과 관련하여 정전용량 방식을 많이 이용하고 있으며, 손가락이나 전도성 펜을 이용한 터치를 입력받을 수 있다.For reference, the touch sensor may use a resistive method or a capacitive method. The resistive film method has a disadvantage in that multi-touch is difficult and proximity sensing is not possible while the technology barrier is low, and the capacitance barrier is a technology barrier. Instead of this high, it has the advantage of multi-touch and proximity sensing. Therefore, in recent years, capacitive methods have been frequently used in relation to user interface, convenience, and product design, and can receive a touch using a finger or a conductive pen.
도 3은 상기 도 2a 내지 도 2c에 있어서, 터치센서의 배열 방법을 보인 예시도로서, 이에 도시된 바와 같이 상기 터치센서는 적어도 하나 이상의 라인 형태로 배열할 수 있다. 상기 배열되는 터치센서의 라인 개수는 단말측면의 두께 또는 베젤의 넓이에 따라 조절될 수 있다. 또는 배치되는 위치(예 : 모서리, 측면)에 따라서도 그 터치센서의 라인 개수는 조절될 수 있다.FIG. 3 is an exemplary view illustrating a method of arranging touch sensors in FIGS. 2A to 2C, and as shown therein, the touch sensors may be arranged in at least one line shape. The number of lines of the touch sensors arranged may be adjusted according to the thickness of the terminal side or the width of the bezel. Alternatively, the number of lines of the touch sensor may be adjusted according to the position (eg, corner, side) of the touch sensor.
예를 들어, 도 3의 (a)와 같이 한 개의 라인 형태, (b)와 같이 두 개의 라인이 소정 간격으로 평행하게 겹친 형태(2중 겹선 형태), 또는 (c)와 같은 3개의 라인이 소정 간격으로 평행하게 겹친 형태(3중 겹선 형태)로 배열할 수 있다. 이때 상기 (b) 또는 (c)와 같이 터치센서를 겹선 형태로 겹쳐서 배치할 경우, 터치센서간의 배치 간격이 너무 넓어 센싱이 실패하는 것을 방지하기 위하여 터치센서가 서로 교차하도록 배치하는 것이 바람직하다. 즉, 라인 형태로 배열된 터치센서의 빈 공간(배치 간격)에 대응하여 겹선 형태로 배열된 다른 라인의 터치센서가 그 빈 공간을 메꿀 수 있도록 교차되게 배치하는 것이 바람직하다.For example, one line form as shown in (a) of FIG. 3, two lines overlapping in parallel at a predetermined interval (double layer form) as shown in (b), or three lines such as (c) It can arrange | position in parallel form (triple fold form) at predetermined intervals. In this case, when the touch sensors are overlapped with each other in the form of overlapping lines as shown in (b) or (c), the touch sensors may be disposed to cross each other in order to prevent sensing failure due to a large space between the touch sensors. That is, it is preferable that the touch sensors of the other lines arranged in the form of a line correspond to the empty spaces (arrangement intervals) of the touch sensors arranged in a line shape so as to cross each other so that the empty spaces can be filled.
그러나 상기 각 라인의 터치센서를 반드시 교차될 수 있는 형태로 배치해야 되는 것은 아니다. 예컨대 센싱이 실패하지 않을 정도로 배치 간격이 충분히 좁을 경우에는 (d)와 같이 각 라인의 터치센서를 교차하지 않고 단지 소정 간격으로 평행하게 겹친 형태(겹선 형태)로만 배치하는 것도 가능하다.However, it is not necessary to arrange the touch sensors of the lines in such a way that they cross. For example, when the arrangement interval is narrow enough so that the sensing does not fail, it is possible to arrange only in the form of overlapping in parallel with each other at a predetermined interval without crossing the touch sensors of each line as shown in (d).
또한 상기 터치센서는 반드시 일정 간격으로 연속해서 배치해야 되는 것은 아니다. 즉, 반드시 일정한 배치 간격을 갖는 라인 형태로 배치되어야 하는 것은 아니며, 원하는 터치입력 방식이나 목적(2차원 터치입력 or 3차원 터치입력)에 따라서, 또는 센싱의 정확도를 높이기 위해서 다른 형태(예 : 원형, 삼각형, 사각형, X자형 또는 그 외의 다른 형태)로 배치하는 것도 가능하다.In addition, the touch sensor is not necessarily arranged in succession at a predetermined interval. That is, it is not necessarily arranged in a line form with a constant arrangement interval, depending on the desired touch input method or purpose (two-dimensional touch input or three-dimensional touch input), or in order to increase the accuracy of sensing (eg, circular , Triangles, squares, X-shapes, or any other form).
가령, 터치센서를 푸시 버튼의 대신으로 사용하고자 할 경우, 즉, 터치키로 사용하고자 할 경우에는 도 4에 도시된 바와 같이, 단말기의 원하는 위치(예 : 단말기를 손바닥으로 감싸 쥐었을 때 손가락이 닿는 위치)에 임의의 부분(또는 임의의 영역)만 어느 하나의 특정 형태(예 : 원형, 삼각형, 사각형, X자형 또는 그 외의 다른 형태)로 터치센서를 배치할 수 있으며, 그때 배치되는 터치센서의 개수도 위치에 따라 다르게 구성할 수 있다. 예컨대, 터치입력 목적에 따라서 단말기의 일측(예 : 화면의 우측 베젤이나 단말측면 또는 그의 모서리)에는 하나의 터치센서만 배치하고, 다른 일측(예 : 화면의 좌측 베젤이나 단말측면 또는 그의 모서리)에는 적어도 하나 이상의 터치센서를 배치할 수 있다. 물론 또 다른 일측(예 : 화면의 상/하측 베젤이나 단말측면 또는 그들의 모서리)에 원하는 수의 터치센서를 배치할 수도 있다.For example, if you want to use the touch sensor instead of the push button, that is, if you want to use the touch key, as shown in Figure 4, the desired position of the terminal (for example, when the finger is wrapped around the palm of the hand to touch Only a part (or any area) of the touch sensor can be placed in any one specific form (for example, circular, triangular, square, X-shaped or otherwise), and then the touch sensor The number can also be configured differently depending on the location. For example, according to the purpose of the touch input, only one touch sensor is disposed on one side of the terminal (for example, the right bezel of the screen, the terminal side, or a corner thereof), and the other side (for example, the left bezel of the screen, the terminal side, or the corner thereof) of the terminal. At least one touch sensor may be disposed. Of course, the desired number of touch sensors may be arranged on another side (eg, upper / lower bezel or terminal side of the screen or their edges).
상기와 같이 배치된 터치센서는 단일 탭, 지속된 터치, 둘 이상의 연속하는 탭, 또는 다른 가능한 터치 제스처를 검출할 수 있다. 이때 상기 터치 제스처는 평면에서 검출하는 2차원 터치입력이거나 깊이정보까지 포함된 3차원 터치입력을 포함한다.The touch sensor arranged as above may detect a single tap, a continuous touch, two or more consecutive taps, or other possible touch gestures. In this case, the touch gesture includes a two-dimensional touch input detected in a plane or a three-dimensional touch input including depth information.
또한 상기와 같이 베젤이나 단말측면 또는 그들의 모서리에 겹선 형태로 배치된 터치센서는 특정 지점이 터치된 상태로 방향성을 가지고 지속적으로 이동하는 터치 제스처를 검출할 수도 있다. 즉, 핑거 스위프(Sweep) 방식으로 입력되는 터치 제스처를 검출할 수 있다.In addition, as described above, the touch sensor disposed in the form of an overlap of bezels or terminal sides or their edges may detect a touch gesture that continuously moves with directionality in a state where a specific point is touched. That is, the touch gesture input by the finger sweep method may be detected.
도 5a 내지 도 5d는 본 발명의 일 실시예에 따라 베젤이나 단말측면에 배치된 터치센서를 통해서 입력받을 수 있는 2차원 터치 제스처를 설명하기 위한 예시도이다. 이하 본 실시예에서는 편의상 단말측면(예 : 우측면)에 적어도 하나 이상의 라인 형태로 배열된 터치센서가 소정 간격으로 평행하게 겹친 형태(겹선 형태)로 배치되어 있으며, 스위프 방향(터치 시작점에서 터치 끝점까지 지속적으로 이동한 방향)과 스위프 거리(터치 시작점에서 터치 끝점까지 지속적으로 이동한 거리) 및 스위프 속도(스위프 거리를 경과된 시간으로 나눈 값)를 검출할 수 있다고 가정하여 설명한다.5A to 5D are exemplary views for explaining a two-dimensional touch gesture that can be input through a touch sensor disposed on a bezel or a terminal side according to an embodiment of the present invention. In the present embodiment, for convenience, the touch sensors arranged in the form of at least one line on the terminal side (for example, the right side) are arranged in a form overlapped in parallel with each other at a predetermined interval (folded form), and the sweep direction (from the touch start point to the touch end point). It is assumed that the direction of continuous movement, the sweep distance (the distance continuously moved from the touch start point to the touch end point), and the sweep speed (the sweep distance divided by the elapsed time) can be detected.
우선, 도 5a에 도시된 바와 같이, 복수의 터치센서 라인이 겹선 형태로 배치된 경우에 있어서, 사용자가 임의의 시작점을 터치한 상태에서 그 상방향으로 소정 거리(스위프 거리)를 지속해서 이동할 경우, 단말기에 내장된 제어부(예 : 터치센서 칩, 컨트롤러 칩)는 그 터치 시작점, 터치 끝점, 스위프 방향, 스위프 거리 및 스위프 속도를 검출하고, 그들의 조합으로 검출된 터치입력 정보(터치입력이 상방향으로 이동된 정보)를 응용 프로그램에 제공함으로써 그에 해당하는 동작을 수행하도록 한다.First, as illustrated in FIG. 5A, when a plurality of touch sensor lines are arranged in an overlapping form, when a user continuously touches an arbitrary starting point and continuously moves a predetermined distance (sweep distance) in the upward direction thereof. The controller (e.g. touch sensor chip, controller chip) embedded in the terminal detects the touch start point, touch end point, sweep direction, sweep distance and sweep speed, and the touch input information (touch input is upward) detected by a combination thereof. Information transferred to the application) to perform the corresponding operation.
마찬가지로, 도 5b에 도시된 바와 같이, 사용자가 임의의 시작점을 터치한 상태에서 그 하방향으로 소정 거리(스위프 거리)를 지속해서 이동할 경우, 그 터치 시작점, 터치 끝점, 스위프 방향, 스위프 거리 및 스위프 속도를 검출하고, 그들의 조합으로 검출된 터치입력 정보(터치입력이 하방향으로 이동된 정보)를 응용 프로그램에 제공함으로써 그에 해당하는 동작을 수행하도록 한다.Similarly, as shown in FIG. 5B, when the user continuously moves a predetermined distance (sweep distance) downward while touching a certain starting point, the touch starting point, touch end point, sweep direction, sweep distance, and sweep By detecting the speed and providing the touch input information (information of the touch input moved downward) to the application program, the corresponding operation is performed.
또한, 도 5c에 도시된 바와 같이, 사용자가 임의의 시작점을 터치한 상태에서 그 전방으로 소정 거리(스위프 거리)를 지속해서 이동할 경우, 그 터치입력 정보(터치입력이 전방으로 이동된 정보)를 응용 프로그램에 제공함으로써 그에 해당하는 동작을 수행하도록 한다. 이때 상기 스위프 방향(터치 시작점에서 터치 끝점으로 지속적으로 이동하는 방향)은, (a)와 같이 일직선 형태가 될 수도 있고, (b)와 같이 사선(대각선) 형태가 될 수도 있다. 이에 따라 상기 응용 프로그램에 제공되는 터치입력 정보는, 단순히 후방에서 전방으로의 스위프 방향 정보만 제공될 수도 있고, 터치 시작점과 터치 끝점이 이루는 각도 정보도 함께 제공될 수도 있다.In addition, as illustrated in FIG. 5C, when the user continuously moves a predetermined distance (sweep distance) forward while touching a certain starting point, the touch input information (information where the touch input is moved forward) is displayed. By providing it to the application program, it performs the corresponding operation. At this time, the sweep direction (direction continuously moving from the touch start point to the touch end point) may be a straight line shape as shown in (a), or may be a diagonal line shape as shown in (b). Accordingly, the touch input information provided to the application program may be merely provided with sweep direction information from the rear to the front, and may also be provided with angle information of the touch start point and the touch end point.
마찬가지로, 도 5d에 도시된 바와 같이, 사용자가 임의의 시작점을 터치한 상태에서 그 후방으로 소정 거리(스위프 거리)를 지속해서 이동할 경우, 그 터치입력 정보(터치입력이 후방으로 이동된 정보)를 응용 프로그램에 제공함으로써 그에 해당하는 동작을 수행하도록 한다. 이때 상기 스위프 방향(터치 시작점에서 터치 끝점으로 지속적으로 이동하는 방향)은, (a)와 같이 일직선 형태가 될 수도 있고, (b)와 같이 사선(대각선) 형태가 될 수 있다. 이에 따라 상기 응용 프로그램에 제공되는 터치입력 정보는, 단순히 전방에서 후방으로의 스위프 방향 정보만 제공될 수도 있고, 터치 시작점과 터치 끝점이 이루는 각도 정보도 함께 제공될 수 있다.Similarly, as shown in FIG. 5D, when the user continuously moves a predetermined distance (sweep distance) to the rear while touching a certain starting point, the touch input information (information of which the touch input is moved backward) is moved. By providing it to the application program, it performs the corresponding operation. At this time, the sweep direction (direction continuously moving from the touch start point to the touch end point) may be a straight line shape as shown in (a), or may be a diagonal line shape as shown in (b). Accordingly, the touch input information provided to the application program may simply be provided with only sweep direction information from the front to the rear, and may also be provided with angle information of the touch start point and the touch end point.
참고로, 본 실시예에서 상기 스위프 방향은 사용자를 기준으로 검출한다.For reference, in the present embodiment, the sweep direction is detected based on the user.
예컨대 사용자가 단말기를 양손(또는 한손)으로 잡고 그 단말기의 표시화면을 정면으로 바라봤을 때, 사용자의 오른손에 대응하는 단말기의 측면이 우측이 되고, 사용자의 왼손에 대응하는 단말기의 측면이 좌측이 된다. 만약 단말기를 세로에서 가로 방향으로 회전시키는 경우에는 세로 방향에서의 상/하 측면이 가로 방향에서는 좌/우 측면으로 바뀌게 됨에 유의한다.For example, when the user holds the terminal with both hands (or one hand) and faces the display screen of the terminal in front, the side of the terminal corresponding to the user's right hand becomes the right side, and the side of the terminal corresponding to the user's left hand is left. do. If the terminal is rotated in the vertical direction to the horizontal direction, the upper and lower sides in the vertical direction is changed to the left and right sides in the horizontal direction.
이상으로 상기 도 5a 내지 도 5d를 참조하여 베젤이나 단말측면과 같이 2차원 평면상에 배치된 터치센서를 통해서 입력받을 수 있는 2차원 터치 제스처의 검출 방법에 대해서 설명하였다. 이하 베젤과 단말측면이 이루는 모서리 또는 단말측면과 다른 단말측면이 이루는 모서리(또는 각 단말측면)에 배치된 터치센서를 통해서 입력받을 수 있는 3차원 터치 제스처에 대해서 설명한다. 여기서 3차원 터치는 2차원 평면 정보에 깊이 정보를 더하여 터치하는 것을 의미한다.The method of detecting a 2D touch gesture that can be input through a touch sensor disposed on a 2D plane such as a bezel or a terminal side has been described above with reference to FIGS. 5A to 5D. Hereinafter, a three-dimensional touch gesture that can be input through a touch sensor disposed at an edge formed by the bezel and the terminal side or an edge formed on the terminal side and another terminal side (or each terminal side) will be described. Here, the 3D touch means to add depth information to the 2D plane information and to touch it.
도 6은 본 발명의 일 실시예에 따라 단말기의 모서리에 배치된 터치센서를 통해서 입력받을 수 있는 3차원 터치 제스처를 설명하기 위한 예시도이다.6 is an exemplary view for explaining a three-dimensional touch gesture that can be input through a touch sensor disposed in the corner of the terminal according to an embodiment of the present invention.
이에 도시된 바와 같이 단말기가 사각형으로 구성되어 있다고 가정할 경우, 일측의 단말측면과 다른 일측의 단말측면이 이루는 4개의 모서리(또는 각 단말측면) 중 적어도 어느 하나에 터치센서를 배치할 수 있으며, 상기와 같이 어느 하나의 모서리(또는 각 단말측면)에 배치된 터치센서를 통해서 적어도 지속해서 입력되는 3차원 터치입력 동작(터치 제스처 또는 스위프 동작)을 검출할 수 있다. 예컨대 단말 상단면에서 모서리를 경유하여 단말우측면에 배치된 터치센서를 통해서 터치입력 동작을 검출한다고 가정할 경우, 상단면에서 (좌→우)로 스위프 되는 동안에는 2차원 터치 제스처가 입력되지만, 모서리를 경유하여 단말우측면에서 (상→하)로 스위프 되는 순간부터는 그(상→하)로 스위프 되는 거리가 깊이가 되어 3차원 터치 제스처가 되는 것이다. 나머지 다른 모서리에 터치센서가 배치되어 있을 경우에도 그 모서리에 배치된 터치센서를 경유해서 스위프 방향이 90도로 꺾이는 순간부터 3차원 입체터치 동작이 되는 것이다. 또는 디스플레이 수단이 배치되는 단말의 전면부에서 터치를 시작하여 단말의 측면부로 계속해서 스위프할 경우, 그 스위프 방향이 90도로 꺾이는 순간부터는 그 측면의 스위프 거리가 깊이가 되어 3차원 입체터치 동작이 되는 것이다.Assuming that the terminal is configured as a quadrangle as shown, the touch sensor may be disposed on at least one of the four corners (or each terminal side) formed by the terminal side of one side and the terminal side of the other side, As described above, a three-dimensional touch input operation (touch gesture or sweep operation) input at least continuously through a touch sensor disposed at one corner (or each terminal side) can be detected. For example, if it is assumed that the touch input operation is detected through the touch sensor disposed on the right side of the terminal via the edge at the upper end of the terminal, the two-dimensional touch gesture is input while the upper surface is swept from left to right. From the moment when the terminal is swept from the right side of the terminal via (upper to lower), the distance swept to it (upper to lower) becomes a depth and becomes a three-dimensional touch gesture. Even when the touch sensor is disposed at the other corner, the three-dimensional stereoscopic touch operation is performed from the moment when the sweep direction is turned to 90 degrees via the touch sensor disposed at the corner. Alternatively, when the touch is started on the front part of the terminal where the display means is disposed and the sweep is continuously swept to the side part of the terminal, the sweep distance of the side becomes a depth from the moment when the sweep direction is turned to 90 degrees, thereby making the three-dimensional stereoscopic touch operation. will be.
상기와 같이 모서리에 배치된 터치센서(또는 모서리를 경유하여 베젤 또는 단말측면에 지속해서 넓게 배치된 터치센서)를 통해서 지속해서 입력되는 스위프 방향이 90도로 꺾이는 동작을 검출함으로써, 예컨대 1) 마우스 휠이나 조그 휠을 조작하거나, 큐브(cube, 정육면체의 각 면을 같은 빛깔로 맞추는 장난감)의 가로줄 또는 세로줄을 잡고 회전시키는 것과 같은 조작 방법(예 : 휠이나 큐브를 회전시키는 것과 같은 방법)으로 응용 프로그램에서 3차원 입체터치 기능을 구현하는 것도 가능하다.As described above, 1) a mouse wheel is detected by detecting a sweeping direction that is continuously inputted through a touch sensor disposed at an edge (or a touch sensor continuously disposed on a bezel or a terminal side via a corner). Applications such as manipulating the jog wheel or grabbing and rotating a horizontal or vertical row of cubes (toys that match each side of the cube in the same color), such as rotating a wheel or cube. It is also possible to implement a three-dimensional stereoscopic touch function.
또한, 베젤과 단말측면이 이루는 모서리들 중 적어도 어느 하나의 모서리에 터치센서를 배치하거나, 그 모서리를 경유하여 베젤과 단말측면이 연속되게 터치센서를 배치할 수 있으며, 그 모서리에 배치된 터치센서를 손가락으로 걸어서 넘기는 것과 같은 방식으로 터치입력 동작을 검출할 수 있다. 예컨대 2) 응용 프로그램(예 : 전자책 또는 E-book)에서 실제로 책장(책을 이루고 있는 낱낱의 장)을 손가락으로 걸어 넘기는 것과 같은 효과를 연출할 수 있다.In addition, the touch sensor may be disposed on at least one of the corners formed by the bezel and the terminal side, or the touch sensor may be continuously disposed on the edge of the bezel and the terminal side, and the touch sensor disposed at the corner. The touch input operation can be detected in the same manner as a handing over a finger. For example, 2) in an application program (such as an e-book or an e-book), the effect of actually flipping a bookshelf (the individual chapters of a book) with a finger can be produced.
또는 3) 컵, 접시, 레코드판, 또는 서류들이 겹겹이 쌓여있다고 가정할 때, 단말기의 양측 모서리를 잡고 들어 올림으로써, 상기 겹겹이 쌓여있는 물건 중에서 최상위의 물건 하나를 집어서 들어 올리는 것과 같은 효과를 연출할 수 있다. 즉, 응용 프로그램에 표시된 물건(예 : 악기, 그릇, 전기 장치, 치약, 공, 트럼프 카드 등)의 모서리를 만지거나, 쌓여있는 물건 중 깊이를 조절하여 상위에 쌓여있는 어느 하나의 물건만 집어 들거나, 또는 가장 상측에 쌓여있는 어느 하나의 물건만 선택하여 그 양측을 눌러 짜거나 집는 것과 효과를 연출할 수 있다.Or 3) assuming that cups, plates, records, or papers are stacked, by holding the sides of the terminal and lifting them, the same effect as picking up and lifting the top item from the stacked materials is produced. Can be. That is, touch the edge of an object (e.g. musical instrument, bowl, electric device, toothpaste, ball, trump card, etc.) displayed in the application, or adjust the depth of the stacked object to pick up only one object stacked on top You can choose only one object, or the one stacked on the top, to press and squeeze or pinch the two sides to produce the effect.
이를 위해 상기 터치센서는 터치 압력을 검출할 수 있으며, 4) 상기 물건의 양측을 눌러 짜는 효과를 얻기 위해서 서로 마주보는 방향으로 모서리 양측을 소정의 압력으로 터치입력 할 수 있다. 이때 터치가 지속적으로 입력되는 깊이 또는 지속적으로 스위프 되는 깊이(예 : 모서리에서부터 단말측면의 두께에 해당하는 깊이)를 검출하여 그 깊이정보를 이용해서 응용 프로그램에 표시된 물건 이미지에서 집어들 수 있는 물건의 두께나 개수를 조정할 수도 있다. 또한 5) 모서리의 양측에서 엄지 손가락과 검지 손가락으로 멀티터치를 한 후, 베젤과 단말측면의 임의의 위치까지 지속적으로 스위프하거나, 반대로 베젤과 단말측면의 임의의 위치에서 멀티 터치를 한 후, 모서리까지 지속적으로 스위프하는 방식으로 터치입력 동작을 수행할 수도 있다.To this end, the touch sensor can detect the touch pressure, and 4) touch the two sides of the corner with a predetermined pressure in a direction facing each other in order to obtain a pressing effect on both sides of the object. At this time, the depth of the touch input continuously or the depth swept continuously (for example, the depth corresponding to the thickness of the terminal side from the edge) is detected and the depth information of the object can be picked up from the object image displayed in the application. The thickness and the number can also be adjusted. 5) After the multi-touch with the thumb and index finger on both sides of the corner, and continuously sweep to any position of the bezel and the terminal side, or conversely multi-touch at any position of the bezel and the terminal side, The touch input operation may be performed by continuously sweeping.
이때 상기 모서리 양측을 소정의 깊이(베젤의 넓이나 단말측면의 두께에 해당하는 깊이)로 터치하는 터치입력 동작(또는 터치 제스처)은 3차원 입체터치 입력에 해당하는 것으로, 구조적으로 기존에 2차원 평면으로 구성된 터치스크린이나 터치패드를 멀티 터치하는 2차원 터치입력 동작과는 그 개념이 전혀 다름에 유의한다. 여기서 깊이 정보는 스위프 방향이 모서리를 경유하면서 z축 방향으로 변경되는 경우, 그 변경된 스위프 방향으로 지속해서 이동하는 스위프 거리가 깊이가 되는 것이다. 이때 x, y, z축의 방향은 단말기의 자세(세로 방향, 가로 방향 또는 평평한 방향)나 회전에 따라서 변경될 수 있다. 즉, 처음 터치가 시작되는 시작점이 위치한 2차원 평면의 가로/세로 방향을 x, y축이라고 가정할 때, 그 터치가 모서리를 경유하여 꺾인 후 다른 평면으로 계속해서 스위프되는 경우, 그 다른 평면으로 계속 진행되는 방향이 z축이 되며 그때의 z축의 거리가 3차원 터치동작에서는 깊이 정보가 되는 것이다.In this case, the touch input operation (or touch gesture) for touching both sides of the edge at a predetermined depth (the depth corresponding to the width of the bezel or the thickness of the terminal side) corresponds to a three-dimensional stereoscopic touch input. Note that the concept is completely different from the two-dimensional touch input operation of multi-touching a flat touch screen or touch pad. Here, the depth information is that when the sweep direction is changed in the z-axis direction via the edge, the sweep distance continuously moving in the changed sweep direction becomes the depth. In this case, the directions of the x, y, and z axes may be changed according to the attitude (vertical direction, horizontal direction or flat direction) or rotation of the terminal. That is, assuming that the horizontal / vertical direction of the two-dimensional plane where the starting point of the first touch starts is the x and y axes, when the touch is bent through the edge and continuously swept to another plane, the other plane is moved to the other plane. The continuous direction is the z axis, and the distance of the z axis at that time becomes the depth information in the 3D touch operation.
한편 상기와 같이 베젤이나 단말측면(상/하/좌/우 측면)에 터치센서를 배치하거나, 베젤과 단말측면 간에 이루는 모서리, 또는 단말측면과 다른 단말측면 간에 이루는 모서리, 또는 그 모서리를 경유하여 터치센서를 배치할 경우, 상기 터치센서가 배치된 위치를 사용자가 알 수 있도록 하기 위하여 가이드 정보를 표시할 수 있다.Meanwhile, as described above, the touch sensor is disposed on the bezel or the terminal side (up / down / left / right side), or an edge formed between the bezel and the terminal side, or an edge formed between the terminal side and another terminal side, or through the edge thereof. When arranging the touch sensor, guide information may be displayed in order to allow a user to know a location where the touch sensor is disposed.
상기 가이드 정보는 해당 터치센서의 위치를 나타내는 텍스트나 이미지를 단말기 바디의 해당 위치에 인쇄하거나, 터치센서가 배치된 부분의 바디를 상대적으로 더 볼록하거나 더 오목한 형상으로 처리하거나, LED와 같은 발광 소자를 터치센서와 대응하는 위치의 바디 내부에 매립한 후 그 발광 소자를 발광시켜 터치센서의 위치를 표시하거나, 또는 터치센서가 배치된 부분의 바디에 돌기를 형성하여 그 돌기의 감촉으로 사용자가 터치센서의 위치를 알 수 있도록 표시할 수 있다. 이때 상기 방법들은 서로 조합하여 구성할 수도 있다.The guide information may be used to print text or an image indicating the position of the touch sensor at a corresponding position of the terminal body, to process the body of the portion where the touch sensor is disposed in a relatively more convex or more concave shape, or to emit light such as an LED. Is embedded in the body of the position corresponding to the touch sensor and then emits the light emitting element to indicate the position of the touch sensor, or to form a protrusion on the body of the portion where the touch sensor is disposed to touch the user with the texture of the protrusion It can be displayed to know the position of the sensor. In this case, the methods may be configured in combination with each other.
또한 상기 터치센서가 배치된 베젤, 단말측면, 또는 그들의 모서리가 터치될 경우, 단말기의 표시화면(또는 화면표시장치)에 터치센서의 위치와 그 터치센서에 대응하는 동작을 안내하는 가이드 정보를 표시할 수 있다. 상기 가이드 정보는 텍스트나 이미지로 디스플레이 할 수 있으며, 기존에 디스플레이 되어 있는 정보들을 가리지 않기 위해서 반투명으로 표시할 수 있다. 그리고 상기 터치가 해제되지 않은 상태로 미리 지정된 기준시간 이상 터치될 경우에는 의미없는 터치입력으로 판단하여 가이드 정보의 표시를 삭제할 수 있으며, 만약 가이드 정보의 표시가 없는 상태에서 터치가 입력될 경우에는 무의미한 입력으로 판단하여 에러를 방지할 수도 있다. 이때 상기 터치센서의 활성화 개시와 해제 및 가이드 정보의 표시와 해제는 응용 프로그램이나 원하는 동작에 따라 얼마든지 변경할 수 있다.In addition, when the bezel on which the touch sensor is disposed, the side of the terminal, or a corner thereof is touched, a guide information for guiding a position of the touch sensor and an operation corresponding to the touch sensor is displayed on a display screen (or a screen display device) of the terminal. can do. The guide information may be displayed as text or an image, and may be displayed as semi-transparent so as not to obscure previously displayed information. In addition, when the touch is not released, when the touch time is over a predetermined reference time, the display of the guide information may be deleted by determining a meaningless touch input. If the touch is input without the display of the guide information, it is meaningless. The error can be prevented by judging by an input. At this time, the activation start and release of the touch sensor and the display and release of the guide information can be changed as much as the application or the desired operation.
이하 상기와 같이 구성된 터치 입력장치를 이용해서 3차원 터치 제스처(터치입력 정보)를 검출하는 방법에 대해서 설명한다.Hereinafter, a method of detecting a three-dimensional touch gesture (touch input information) using the touch input device configured as described above will be described.
도 7은 본 발명의 일 실시예에 따른 모바일 단말기의 터치 입력방법을 설명하기 위한 흐름도로서, 이에 도시된 바와 같이 단말기의 베젤, 단말측면, 그들의 모서리, 또는 그 모서리를 경유하여 베젤이나 단말측면에 연속해서 배치된 적어도 하나 이상의 터치센서를 활성화시킨다(S101).7 is a flowchart illustrating a touch input method of a mobile terminal according to an embodiment of the present invention, and as shown in FIG. 7, a bezel or a terminal side of the terminal via a bezel, a terminal side, a corner thereof, or a corner thereof. At least one touch sensor arranged in series is activated (S101).
상기와 같이 터치센서가 활성화되면 그 활성화 상태를 나타내는 해당 가이드 정보 표시수단을 활성화시킬 수 있다(S102).When the touch sensor is activated as described above, the corresponding guide information display means indicating the activation state may be activated (S102).
이때 상기 가이드 정보 표시수단은 단말에 내장된 화면표시장치 또는 터치센서가 배치된 위치에 대응하여 매립된 발광소자를 포함한다. 예컨대 상기 가이드 정보 표시수단이 화면표시장치인 경우 터치센서에 대응하는 가이드 정보를 표시화면 내의 지정된 위치에 지정된 포맷으로 디스플레이 한다. 만약 상기 가이드 정보 표시수단이 발광소자인 경우 터치센서에 대응하는 위치에 매립된 발광소자를 발광시킨다.In this case, the guide information display means includes a light emitting element embedded in correspondence to the position where the screen display device or touch sensor built in the terminal is disposed. For example, when the guide information display means is a screen display device, the guide information corresponding to the touch sensor is displayed in a designated format in a designated position on the display screen. If the guide information display means is a light emitting device, the light emitting device embedded in the position corresponding to the touch sensor is made to emit light.
상기와 같이 터치센서가 활성화되면 사용자는 응용 프로그램에서 원하는 동작을 수행하기 위하여 해당하는 터치 제스처를 입력한다. 상기와 같이 터치 제스처가 입력되면 그 터치 제스처에 해당하는 터치센서를 통해서 터치입력을 검출하고, 제어부는 그 터치센서들의 터치입력을 조합하여 사용자가 입력한 터치 제스처를 검출하게 된다(S103).When the touch sensor is activated as described above, the user inputs a corresponding touch gesture in order to perform a desired operation in an application program. When the touch gesture is input as described above, the touch input is detected through the touch sensor corresponding to the touch gesture, and the control unit detects the touch gesture input by the user by combining the touch inputs of the touch sensors (S103).
이때 상기 터치 제스처는 단말기의 베젤, 단말측면, 그들의 모서리를 통해서 입력받을 수 있는 터치입력 동작으로서, 1) 베젤 또는 단말측면의 임의의 위치에서 시작된 스위프 동작이 모서리에서 끝나거나, 2) 모서리에서 시작된 스위프 동작이 베젤 또는 단말측면의 임의의 위치에서 끝나거나, 3) 베젤 또는 단말측면의 임의의 위치에서 시작된 스위프 동작이 모서리를 경유하여 z축으로 스위프 방향이 변경된 후 소정의 스위프 거리를 더 이동하여 끝나는 경우 그 z축에 해당하는 베젤 또는 단말측면의 넓이나 두께에 해당하는 만큼 3차원 입체터치가 가능하게 된다.In this case, the touch gesture is a touch input operation that can be input through the bezel, the terminal side, and the edge of the terminal. 1) A sweep operation started at an arbitrary position on the bezel or the terminal side ends at the edge, or 2) is initiated at the edge. Sweep motion ends at any position on the bezel or terminal side, or 3) Sweep motion started at any position on the bezel or terminal side changes the sweep direction to the z axis via the corner and then moves the predetermined sweep distance further. When finished, the three-dimensional stereoscopic touch is possible as much as the width or thickness of the bezel or the terminal side corresponding to the z-axis.
또한 4) 베젤과 단말측면의 임의의 위치에서 멀티 터치가 시작된 후 스위프되어 모서리에서 터치가 끝나거나, 5) 모서리의 양측에서 멀티 터치가 시작된 후 스위프되어 베젤과 단말측면의 임의의 위치에서 터치가 끝나는 경우에도 z축에 해당하는 베젤의 넓이 또는 단말측면의 두께에 해당하는 만큼 3차원 입체터치가 가능하게 된다.4) After the multi-touch is started at an arbitrary position on the side of the bezel and the terminal, it is swept and the touch ends at the edge, or 5) After the multi-touch is started on both sides of the edge, it is swept and is touched at an arbitrary position on the bezel and the terminal side. Even in the end, the three-dimensional stereoscopic touch is possible as much as the width of the bezel corresponding to the z-axis or the thickness of the terminal side.
즉, 상기와 같이 터치 제스처가 검출되면, 그 터치가 모서리에서 z축으로 스위프 방향이 변경될 경우 깊이 정보가 추가로 입력되는 3차원 입체터치로 판단한다(S104).That is, when the touch gesture is detected as described above, when the touch direction is changed from the edge to the z-axis, it is determined as a three-dimensional stereoscopic touch in which depth information is additionally input (S104).
그러나 모서리에서만 터치 제스처가 입력되거나, 베젤, 또는 단말측면과 같은 2차원 평면에서만 터치 제스처가 입력될 경우에는 2차원 터치입력으로 판단할 수 있다(S105). 즉, 스위프 방향이 z축으로 변경되지 않고, 단지 상방향/하방향/전방/후방 이동과 같이 2차원 평면에서 이루어지는 터치입력 동작은 2차원 터치입력으로 판단하는 것이다.However, when the touch gesture is input only at the corners or the touch gesture is input only at the two-dimensional plane such as the bezel or the terminal side, it may be determined as the two-dimensional touch input (S105). That is, the sweep direction is not changed to the z-axis, and only the touch input operation performed in the two-dimensional plane such as the up / down / forward / rear movement is determined as the two-dimensional touch input.
여기서 상기 3차원 입체터치 동작은 적어도 두 군데 이상에서 멀티터치 입력도 가능하다. 예컨대 베젤과 단말측면간에 이루어진 임의의 모서리를 엄지와 검지로 멀티터치한 상태에서 각기 베젤과 단말측면으로 스위프 할 경우, 그 스위프 깊이(베젤의 넓이 및 단말측면의 두께)만큼 3차원 멀티터치가 입력되는 것으로 판단할 수 있다.Here, the three-dimensional stereoscopic touch operation may be multi-touch input in at least two places. For example, when sweeping arbitrary edges between the bezel and the side of the terminal with the thumb and forefinger, respectively, and sweeping the bezel and the side of the terminal, three-dimensional multi-touch is input by the sweep depth (the width of the bezel and the thickness of the side of the terminal). It can be judged.
상기와 같이 터치 제스처가 검출되면 제어부는 그 검출된 터치 제스처에 해당하는 3차원 입체터치 또는 2차원 터치입력 정보를 지정된 응용 프로그램에 출력한다(S105).When the touch gesture is detected as described above, the controller outputs three-dimensional stereoscopic touch or two-dimensional touch input information corresponding to the detected touch gesture to the designated application program (S105).
이상으로 본 발명은 도면에 도시된 실시예를 참고로 하여 설명되었으나, 이는 예시적인 것에 불과하며, 당해 기술이 속하는 분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서 본 발명의 기술적 보호범위는 아래의 특허청구범위에 의해서 정하여져야 할 것이다.Although the present invention has been described with reference to the embodiments illustrated in the drawings, this is merely exemplary, and various modifications and equivalent other embodiments are possible for those skilled in the art to which the art pertains. I will understand the point. Therefore, the technical protection scope of the present invention will be defined by the claims below.
Claims (11)
- 단말의 베젤, 측면, 또는 상기 베젤과 측면 사이의 모서리에 배치되는 적어도 하나 이상의 터치센서; 및At least one touch sensor disposed at a bezel, a side surface, or an edge between the bezel and the side surface of the terminal; And상기 적어도 하나 이상의 터치센서로부터 입력되는 적어도 하나 이상의 터치를 검출하여 상기 터치의 조합에 해당하는 터치 제스처를 검출하는 제어부;를 포함하여 구성되고,And a controller for detecting at least one touch input from the at least one touch sensor and detecting a touch gesture corresponding to the combination of the touches.상기 제어부는 상기 검출된 터치 제스처가 2차원 터치 제스처인지 또는 3차원 터치 제스처인지를 판단할 수 있는 것을 특징으로 하는 모바일 단말기의 터치 입력장치.The control unit may determine whether the detected touch gesture is a two-dimensional touch gesture or a three-dimensional touch gesture.
- 청구항 1에 있어서,The method according to claim 1,상기 각 터치센서의 활성화 상태 혹은 터치입력의 처리 여부와 같은 가이드 정보를 사용자에게 표시하기 위한 적어도 하나 이상의 가이드정보 표시수단;을 더 포함하여 구성된 것을 특징으로 하는 모바일 단말기의 터치 입력장치.And at least one guide information display means for displaying to the user guide information such as activation state of each touch sensor or processing of a touch input.
- 청구항 1에 있어서, 상기 제어부는,The method according to claim 1, wherein the control unit,모서리에서만 터치 제스처가 입력되거나, 스위프 방향이 z축으로 변경되지 않고, 베젤, 또는 단말측면과 같은 2차원 평면에서만 터치 제스처가 입력될 경우 2차원 터치입력으로 판단하고,If the touch gesture is input only at the edge or the sweep direction is not changed to the z-axis, and the touch gesture is input only at the two-dimensional plane such as the bezel or the terminal side, it is determined as the two-dimensional touch input.베젤 또는 단말측면의 임의의 위치에서 시작된 스위프 동작이 모서리를 경유하여 z축으로 스위프 방향이 변경되는 경우 3차원 터치입력으로 판단하는 것을 특징으로 하는 모바일 단말기의 터치 입력장치.The touch input device of a mobile terminal, characterized in that it is determined by the three-dimensional touch input when the sweep direction started from any position on the bezel or the terminal side is changed to the z-axis via the corner.
- 청구항 1에 있어서, 상기 제어부는,The method according to claim 1, wherein the control unit,단일 탭, 지속된 터치, 둘 이상의 연속하는 탭, 2차원 평면상의 특정 지점이 터치된 상태에서 지속적으로 스위프 되는 2차원 터치 제스처, 2차원 평면상에서 스위프가 시작된 후 z축으로 스위프 방향이 변경되어 지속적으로 스위프 되는 3차원 터치 제스처, 또는 그들의 조합 중 적어도 하나 이상의 터치입력을 검출하는 것을 특징으로 하는 모바일 단말기의 터치 입력장치.A single tap, a continuous touch, two or more consecutive taps, a two-dimensional touch gesture that continuously sweeps while a certain point on the two-dimensional plane is touched, and the sweep direction changes to the z-axis after the sweep begins on the two-dimensional plane, Touch input device of a mobile terminal, characterized in that for detecting at least one or more touch input of the three-dimensional touch gesture, or a combination thereof.
- 청구항 4에 있어서, 상기 3차원 터치 제스처는,The method of claim 4, wherein the three-dimensional touch gesture,스위프 방향이 z축 방향으로 변경되는 경우, 그 변경된 스위프 방향으로 지속해서 이동하는 스위프 거리에 해당하는 만큼의 깊이 정보를 포함하는 것을 특징으로 하는 모바일 단말기의 터치 입력장치.When the sweep direction is changed in the z-axis direction, the touch input device of the mobile terminal, characterized in that the depth information corresponding to the sweep distance continuously moving in the changed sweep direction.
- 청구항 4에 있어서,The method according to claim 4,상기 3차원 터치 제스처를 검출하기 위한 x, y, z축의 방향은 단말기의 자세나 회전에 따라서 변경되며, z축에 해당하는 베젤 또는 단말측면의 넓이나 두께만큼의 깊이로 터치가 가능한 것을 특징으로 하는 모바일 단말기의 터치 입력장치.The directions of the x, y, and z axes for detecting the 3D touch gesture are changed according to the posture or rotation of the terminal, and the touch can be made at a depth equal to the width or thickness of the bezel or the terminal side corresponding to the z axis. Touch input device of the mobile terminal.
- 청구항 1에 있어서, 상기 터치센서는,The method according to claim 1, wherein the touch sensor,라인 형태로 연속해서 배열하되, 한 개의 라인 형태 또는 적어도 두 개 이상의 라인이 소정 간격으로 평행하게 겹친 형태(겹선 형태)로 배치되거나, 상기 라인으로 형성된 터치센서의 배치 간격에 따른 틈새(간극)를 다른 라인의 터치센서에 의해서 메울 수 있도록 교차되게 배치하는 것을 특징으로 하는 모바일 단말기의 터치 입력장치.Arrange them continuously in a line form, and arrange one line or at least two or more lines in parallel to each other at a predetermined interval (folding form), or create a gap (gap) according to an arrangement interval of the touch sensor formed of the lines. Touch input device of a mobile terminal, characterized in that arranged so as to intersect to fill by another touch sensor.
- 청구항 7에 있어서, 상기 터치센서는,The method according to claim 7, wherein the touch sensor,베젤이나 단말측면의 외곽 전체를 둘러싸는 형태로 배치되거나, 베젤이나 단말측면에서 적어도 하나 이상의 특정 위치에 배치되거나, 단말측면과 베젤간 또는 단말측면과 다른 단말측면간 이루는 적어도 하나 이상의 모서리에 배치되거나, 또는 그들을 조합한 위치에 배치되는 것을 특징으로 하는 모바일 단말기의 터치 입력장치.It is disposed in a form surrounding the entire outer surface of the bezel or the terminal side, or disposed at least one or more specific positions on the bezel or the terminal side, or disposed on at least one corner between the terminal side and the bezel or between the terminal side and the other terminal side Or a touch input device of a mobile terminal, characterized in that arranged at a position combining them.
- 단말의 베젤, 측면, 상기 베젤과 측면 사이의 모서리, 또는 그 모서리를 경유하여 베젤이나 단말 측면에 연속해서 배치된 적어도 하나 이상의 터치센서를 활성화시키는 제1 단계;A first step of activating at least one touch sensor continuously disposed on the bezel or the side surface of the terminal through a bezel, a side surface, an edge between the bezel and the side surface, or an edge thereof;상기 활성화된 터치센서를 통해 사용자가 입력하는 터치입력을 조합하여 터치 제스처를 검출하는 제2 단계; 및A second step of detecting a touch gesture by combining a touch input input by the user through the activated touch sensor; And상기 터치 제스처의 스위프 방향이 z축으로 변경될 경우 3차원 터치입력으로 판단하고, 상기 스위프 방향이 z축으로 변경되지 않거나, 베젤, 또는 단말측면과 같은 2차원 평면에서만 입력될 경우 2차원 터치입력으로 판단하는 제3 단계;를 포함하여 구성된 것을 특징으로 하는 모바일 단말기의 터치 입력방법.When the sweep direction of the touch gesture is changed to the z axis, it is determined as a 3D touch input, and when the sweep direction is not changed to the z axis or is input only in a 2D plane such as a bezel or the terminal side, the 2D touch input is determined. And a third step of determining the touch input method of the mobile terminal.
- 청구항 9에 있어서, 상기 3차원 터치입력은,The method of claim 9, wherein the three-dimensional touch input,상기 스위프 방향이 z축 방향으로 변경되는 경우, 그 변경된 스위프 방향으로 지속해서 이동하는 스위프 거리에 해당하는 만큼의 깊이 정보를 포함하는 것을 특징으로 하는 모바일 단말기의 터치 입력방법.When the sweep direction is changed in the z-axis direction, the touch input method of the mobile terminal, characterized in that it includes depth information corresponding to the sweep distance continuously moving in the changed sweep direction.
- 청구항 10에 있어서,The method according to claim 10,상기 3차원 터치입력을 검출하기 위한 x, y, z축의 방향은 단말기의 자세나 회전에 따라서 변경되며, 상기 깊이 정보는 z축에 해당하는 베젤 또는 단말측면의 넓이나 두께만큼 터치입력이 가능한 것을 특징으로 하는 모바일 단말기의 터치 입력방법.The directions of the x, y, and z axes for detecting the 3D touch input are changed according to the attitude or rotation of the terminal, and the depth information may be touch input by the width or thickness of the bezel or the terminal side corresponding to the z axis. Touch input method of a mobile terminal characterized in that.
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR10-2012-0141010 | 2012-12-06 | ||
| KR1020120141010AKR101424742B1 (en) | 2012-12-06 | 2012-12-06 | An apparatus for touch inputs of a mobile terminal and the method thereof |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2014088158A1true WO2014088158A1 (en) | 2014-06-12 |
Family
ID=50883564
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/KR2013/002046WO2014088158A1 (en) | 2012-12-06 | 2013-03-14 | Touch input device for mobile terminal, and method thereof |
Country Status (2)
| Country | Link |
|---|---|
| KR (1) | KR101424742B1 (en) |
| WO (1) | WO2014088158A1 (en) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106020477A (en)* | 2016-05-23 | 2016-10-12 | 苏州芯通微电子有限公司 | Linear and nonlinear sensing line apparatus |
| CN106095301A (en)* | 2016-05-30 | 2016-11-09 | 努比亚技术有限公司 | Exchange method and device |
| CN106774850A (en)* | 2016-11-24 | 2017-05-31 | 深圳奥比中光科技有限公司 | A kind of mobile terminal and its interaction control method |
| CN107623721A (en)* | 2017-08-18 | 2018-01-23 | 北京五八信息技术有限公司 | 3D Touch function menus generation methods and device |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106873895A (en)* | 2016-12-30 | 2017-06-20 | 努比亚技术有限公司 | The implementation method and device of a kind of edge gesture operation |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7656393B2 (en)* | 2005-03-04 | 2010-02-02 | Apple Inc. | Electronic device having display and surrounding touch sensitive bezel for user interface and control |
| US20100053861A1 (en)* | 2008-09-02 | 2010-03-04 | Chi-Young Kim | Mobile terminal |
| US20110187660A1 (en)* | 2008-07-16 | 2011-08-04 | Sony Computer Entertainment Inc. | Mobile type image display device, method for controlling the same and information memory medium |
| KR20110138743A (en)* | 2010-06-21 | 2011-12-28 | 안현구 | Mobile devices with side and rear touch sensors |
| KR20120019268A (en)* | 2010-08-25 | 2012-03-06 | 주식회사 케이티 | Gesture command method and terminal using bezel of touch screen |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101611866B1 (en)* | 2009-06-25 | 2016-04-26 | 엘지전자 주식회사 | A mobile terminal with touch sensors mounted on case and a controlling method thereof |
- 2012
- 2012-12-06KRKR1020120141010Apatent/KR101424742B1/ennot_activeExpired - Fee Related
- 2013
- 2013-03-14WOPCT/KR2013/002046patent/WO2014088158A1/enactiveApplication Filing
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7656393B2 (en)* | 2005-03-04 | 2010-02-02 | Apple Inc. | Electronic device having display and surrounding touch sensitive bezel for user interface and control |
| US20110187660A1 (en)* | 2008-07-16 | 2011-08-04 | Sony Computer Entertainment Inc. | Mobile type image display device, method for controlling the same and information memory medium |
| US20100053861A1 (en)* | 2008-09-02 | 2010-03-04 | Chi-Young Kim | Mobile terminal |
| KR20110138743A (en)* | 2010-06-21 | 2011-12-28 | 안현구 | Mobile devices with side and rear touch sensors |
| KR20120019268A (en)* | 2010-08-25 | 2012-03-06 | 주식회사 케이티 | Gesture command method and terminal using bezel of touch screen |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106020477A (en)* | 2016-05-23 | 2016-10-12 | 苏州芯通微电子有限公司 | Linear and nonlinear sensing line apparatus |
| CN106095301A (en)* | 2016-05-30 | 2016-11-09 | 努比亚技术有限公司 | Exchange method and device |
| CN106774850A (en)* | 2016-11-24 | 2017-05-31 | 深圳奥比中光科技有限公司 | A kind of mobile terminal and its interaction control method |
| CN107623721A (en)* | 2017-08-18 | 2018-01-23 | 北京五八信息技术有限公司 | 3D Touch function menus generation methods and device |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20140073171A (en) | 2014-06-16 |
| KR101424742B1 (en) | 2014-08-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102378956B (en) | Detect the touch on curved surface | |
| CN105992991B (en) | Low shape TrackPoint | |
| CN102378955B (en) | Detect touches on curved surfaces | |
| KR101101581B1 (en) | Multi point touch sensing device | |
| US20140210748A1 (en) | Information processing apparatus, system and method | |
| EP2159673A2 (en) | A multi-point touch-sensitive system | |
| WO2014088158A1 (en) | Touch input device for mobile terminal, and method thereof | |
| US10481742B2 (en) | Multi-phase touch-sensing electronic device | |
| CN110032300B (en) | Touch panel and touch panel device | |
| JP2010055613A (en) | Operation method for multi-point touch-sensitive system | |
| CN104965623B (en) | A kind of touch module, touch-screen, its touch localization method and display device | |
| WO2013162830A1 (en) | Systems and methods for a rollable illumination device | |
| WO2014168368A1 (en) | Capacitive touch panel | |
| KR20170040076A (en) | Touch screen, touch panel and eletronic deivce having the same | |
| US20140282279A1 (en) | Input interaction on a touch sensor combining touch and hover actions | |
| JP2014170334A (en) | Capacitance touch panel, and handheld electronic apparatus using the same | |
| CN102681713B (en) | Three-dimensional touch display system and method | |
| US20130016051A1 (en) | Touch Panel Device Having a Divided ITO layer for Reducing Loading | |
| CN201993740U (en) | A touch screen with dual touch devices | |
| JP2014149815A (en) | Information processing apparatus, system and method | |
| JP6683952B2 (en) | Pointing device and manufacturing method | |
| KR20150122013A (en) | Underwater control method of camera | |
| JP7199194B2 (en) | Touch panel and touch panel device | |
| JP2018032122A (en) | Display operation device | |
| CN108369459A (en) | Compact pointing bar |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application | Ref document number:13859826 Country of ref document:EP Kind code of ref document:A1 | |
| NENP | Non-entry into the national phase | Ref country code:DE | |
| 122 | Ep: pct application non-entry in european phase | Ref document number:13859826 Country of ref document:EP Kind code of ref document:A1 |