Movatterモバイル変換


[0]ホーム

URL:


KR101669882B1 - System for providing shopping information based on augmented reality and control method thereof - Google Patents

System for providing shopping information based on augmented reality and control method thereof
Download PDF

Info

Publication number
KR101669882B1
KR101669882B1KR1020160004711AKR20160004711AKR101669882B1KR 101669882 B1KR101669882 B1KR 101669882B1KR 1020160004711 AKR1020160004711 AKR 1020160004711AKR 20160004711 AKR20160004711 AKR 20160004711AKR 101669882 B1KR101669882 B1KR 101669882B1
Authority
KR
South Korea
Prior art keywords
information
server
purchasing terminal
store
terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
KR1020160004711A
Other languages
Korean (ko)
Inventor
김영덕
Original Assignee
김영덕
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 김영덕filedCritical김영덕
Priority to KR1020160004711ApriorityCriticalpatent/KR101669882B1/en
Priority to PCT/KR2016/011641prioritypatent/WO2017122909A1/en
Application grantedgrantedCritical
Publication of KR101669882B1publicationCriticalpatent/KR101669882B1/en
Expired - Fee Relatedlegal-statusCriticalCurrent
Anticipated expirationlegal-statusCritical

Links

Images

Classifications

Landscapes

Abstract

Translated fromKorean

본 발명은 증강 현실 기반 쇼핑 정보 제공 시스템 및 그의 제어 방법을 개시한다. 즉, 본 발명은 오프라인 매장 또는 거리 매장에 구비된 객체를 촬영하고, 상기 촬영된 객체와 관련한 상품 및 서비스 정보, 부가 정보 등을 증강 현실 기능을 통해 제공함으로써, 실제 백화점, 쇼핑몰, 거리 등에서 마주치는 뷰를 그대로 제공하면서 오프라인에서 제공하는 상품이나 매장과 관련한 부가적인 정보를 전달하여 사용상의 편의성을 향상시키고, 사용자에게 다양한 정보를 제공할 수 있으며, 소규모 오프라인 매장을 구매 단말의 사용자가 방문하더라도 대형 매장의 상품 구색과 쇼핑 정보를 동일하게 제공받을 수 있다.The present invention discloses an augmented reality-based shopping information providing system and a control method thereof. That is, according to the present invention, an object provided in an offline store or a street store is photographed, and goods, service information, additional information, etc. related to the photographed object are provided through an augmented reality function, It is possible to provide convenience of use and to provide various information to the user by providing additional information related to the product or store provided in the offline while providing the view as it is. Also, even if a user of the purchasing terminal visits a small- It is possible to provide the same product assortment and shopping information.

Description

Translated fromKorean
증강 현실 기반 쇼핑 정보 제공 시스템 및 그의 제어 방법{System for providing shopping information based on augmented reality and control method thereof}[0001] The present invention relates to an augmented reality-based shopping information providing system and a control method thereof,

본 발명은 증강 현실 기반 쇼핑 정보 제공 시스템 및 그의 제어 방법에 관한 것으로, 특히 오프라인 매장 또는 거리 매장에 구비된 객체를 촬영하고, 상기 촬영된 객체와 관련한 상품 및 서비스 정보, 부가 정보 등을 증강 현실 기능을 통해 제공하는 증강 현실 기반 쇼핑 정보 제공 시스템 및 그의 제어 방법에 관한 것이다.The present invention relates to an augmented reality-based shopping information providing system and a control method thereof, and more particularly to an augmented reality-based shopping information providing system, Based shopping information providing system and a control method thereof.

일반적으로, 이동 단말기(Mobile Terminal)는, GPS(Global Positioning System) 기능 및 통화 기능(또는, 호(call) 기능)을 수행하여, 그 수행 결과를 사용자에게 제공하는 장치이다.2. Description of the Related Art Generally, a mobile terminal is a device that performs a Global Positioning System (GPS) function and a call function (or a call function) and provides a result of the operation to a user.

이러한 이동 단말기는 세대를 거듭할수록 더 많은 정보를 더 짧은 시간에 송수신할 수 있고, 다양한 기능이 부가되고 있으나, 이러한 기능에 맞춘 사용자 중심의 편의성을 위한 UI(User Interface) 개발이 부족한 상태이다.These mobile terminals are able to transmit and receive more information in a shorter time and have various functions, but there is a lack of UI (User Interface) for user-oriented convenience in accordance with these functions.

한국공개특허 제10-2013-0084274호 [명칭: 3차원 가상현실 인터넷 쇼핑몰]Korean Patent Laid-Open No. 10-2013-0084274 [entitled " 3D virtual reality Internet shopping mall]

본 발명의 목적은 오프라인 매장 또는 거리 매장에 구비된 객체를 촬영하고, 상기 촬영된 객체와 관련한 상품 및 서비스 정보, 부가 정보 등을 증강 현실 기능을 통해 제공하는 증강 현실 기반 쇼핑 정보 제공 시스템 및 그의 제어 방법을 제공하는 데 있다.An object of the present invention is to provide an augmented reality-based shopping information providing system which captures an object provided in an off-street store or a street store, provides goods, service information, additional information, etc. related to the photographed object through an augmented reality function, Method.

본 발명의 다른 목적은 구매 단말에서 촬영한 객체와 관련한 상품 정보 및/또는 서비스 정보를 제공하는 것 이외에 추가로 해당 상품이 직접 수령이나 배송 가능한 상품임을 나타내는 핸드 캐리 상품인지 또는, 오프라인 매장 또는 거리 매장에서 취급하지 않거나 판매 소진으로 인한 품절 상태인 상품임을 나타내는 배송 상품인지 여부의 부가 정보를 증강 현실 기능을 통해 제공하는 증강 현실 기반 쇼핑 정보 제공 시스템 및 그의 제어 방법을 제공하는 데 있다.Another object of the present invention is to provide goods information and / or service information related to an object photographed by a purchasing terminal, in addition to providing a goods information and / or service information related to an object photographed by a purchasing terminal, Based shopping information providing system and a control method thereof, which provide supplementary information as to whether or not the discounted merchandise is a delivery merchandise indicating that the merchandise is out of stock due to the exhaustion of sales through the augmented reality function.

본 발명의 실시예에 따른 증강 현실 기반 쇼핑 정보 제공 시스템은 증강 현실 기반 쇼핑 정보 제공 시스템에 있어서, 오프라인 매장 또는 거리 매장에 구비된 객체를 촬영하고, 상기 객체를 포함하는 영상 정보 및 구매 단말의 식별 정보를 전송하는 구매 단말; 및 상기 영상 정보에 포함된 객체를 인식하고, 미리 저장된 복수의 객체별 코드 중에서 상기 인식된 객체와 관련한 코드를 확인하고, 미리 저장된 코드별 상품 및 서비스 정보 중에서 상기 확인된 코드에 대응하는 하나 이상의 상품 및 서비스 정보를 확인하고, 상기 확인된 하나 이상의 상품 및 서비스 정보에 적용 가능한 부가 정보를 확인하고, 상기 확인된 코드에 대응하는 하나 이상의 상품 및 서비스 정보와, 상기 확인된 부가 정보를 상기 구매 단말에 전송하는 서버를 포함할 수 있다.The augmented reality-based shopping information providing system according to an embodiment of the present invention is a system for providing augmented reality-based shopping information providing system, in which an object provided in an offline store or a street store is photographed, image information including the object, A purchasing terminal for transmitting information; And recognizing an object included in the image information, identifying a code associated with the recognized object from among a plurality of pre-stored code for each object, selecting one or more products corresponding to the identified code from the pre- And confirming the service information, confirming the additional information applicable to the one or more goods and service information, checking one or more goods and service information corresponding to the identified code, and transmitting the confirmed additional information to the purchasing terminal And a server for transmitting data.

본 발명과 관련된 일 예로서 상기 객체는, 상기 오프라인 매장 또는 상기 거리 매장에 구비된 전시 상품(Display products), POP(Point of Purchase), 전단(leaflet), 배너 광고(banner advertisement), 게시판 광고(board advertising), 포스터 광고(billing), 간판(sign) 및 가격표(price tag) 중 적어도 하나를 포함하며, 상기 오프라인 매장 또는 상기 거리 매장에서 제공하는 상품 및 서비스는 제외한 상태일 수 있다.As an example related to the present invention, the object may include at least one of display products, a POP (point of purchase), a leaflet, a banner advertisement, a bulletin board advertisement board advertising, poster billing, sign, and price tag, and the goods and services provided by the off-line store or the street store may be excluded.

본 발명과 관련된 일 예로서 상기 부가 정보는, 상기 확인되는 하나 이상의 상품 및 서비스 정보 중에서 해당 상품이 직접 수령이나 배송 가능한 상품임을 나타내는 핸드 캐리 상품인지 여부를 나타내는 정보 및, 오프라인 매장 또는 거리 매장에서 취급하지 않거나 판매 소진으로 인한 품절 상태인 상품임을 나타내는 배송 상품인지 여부를 나타내는 정보 중 어느 하나를 포함할 수 있다.As an example related to the present invention, the additional information may be information indicating whether or not the merchandise is a hand-held merchandise indicating that the merchandise is directly receivable or deliverable from among the at least one merchandise and service information to be verified, And information indicating whether the product is a delivery product indicating that the product is out of stock due to exhaustion of sales.

본 발명과 관련된 일 예로서 상기 구매 단말은, 상기 서버로부터 전송되는 하나 이상의 상품 및 서비스 정보와 부가 정보를 증강 현실 기능을 적용하여 상기 촬영된 영상 정보 상에 표시할 수 있다.As an example related to the present invention, the purchasing terminal may display one or more goods and service information and additional information transmitted from the server on the photographed image information by applying the augmented reality function.

본 발명과 관련된 일 예로서 상기 구매 단말에 표시되는 하나 이상의 상품 및 서비스 정보 중에서 핸드 캐리 상품에 대응하는 상품이 선택될 때, 상기 구매 단말, 상기 서버 및 결제 서버와의 연동에 의해, 상기 선택된 핸드 캐리 상품에 대응하는 상품의 결제 금액에 대한 결제 기능을 수행하고, 상기 서버로부터 전송되는 회원 정보, 상기 핸드 캐리 상품에 대한 정보 및 상기 구매 단말의 식별 정보를 수신하고, 매장에 방문한 상기 구매 단말의 사용자에 대한 인증 절차를 수행한 후, 상기 핸드 캐리 상품을 상기 구매 단말의 사용자에게 제공하는 매장 서버를 더 포함할 수 있다.As one example related to the present invention, when a commodity corresponding to a hand-held commodity is selected from among one or more commodity and service information displayed on the purchasing terminal, the commodity is selected by interlocking with the purchasing terminal, the server, Receiving a member information transmitted from the server, information on the hand-held merchandise, and identification information of the purchasing terminal, performing a settlement function for the settlement amount of the commodity corresponding to the carry commodity, And a store server for providing the hand held merchandise to the user of the purchasing terminal after performing an authentication procedure for the user.

본 발명과 관련된 일 예로서 상기 구매 단말에 표시되는 하나 이상의 상품 및 서비스 정보 중에서 배송 상품에 대응하는 상품이 선택될 때, 상기 구매 단말, 상기 서버 및 결제 서버와의 연동에 의해, 상기 선택된 배송 상품에 대응하는 상품의 결제 금액에 대한 결제 기능을 수행하고, 상기 서버로부터 전송되는 회원 정보, 상기 배송 상품에 대한 정보 및 상기 구매 단말의 식별 정보를 수신하고, 상기 회원 정보에 포함된 배송지 정보를 근거로 배송지로 상기 배송 상품을 배송하는 매장 서버를 더 포함할 수 있다.As an example related to the present invention, when a commodity corresponding to a commodity is selected from among at least one commodity and service information displayed on the purchasing terminal, the commodity corresponding to the selected commodity and service information is interlocked with the purchasing terminal, And receives the member information transmitted from the server, the information on the delivery commodity, and the identification information of the purchasing terminal, and transmits the delivery information included in the member information to the base The delivery server may further include a store server for delivering the delivery product to a delivery address.

본 발명의 실시예에 따른 증강 현실 기반 쇼핑 정보 제공 시스템의 제어 방법은 증강 현실 기반 쇼핑 정보 제공 시스템의 제어 방법에 있어서, 구매 단말을 통해, 오프라인 매장 또는 거리 매장에 구비된 객체를 촬영하는 단계; 상기 구매 단말을 통해, 상기 객체를 포함하는 영상 정보 및 구매 단말의 식별 정보를 전송하는 단계; 서버를 통해, 상기 구매 단말로부터 전송되는 영상 정보에 포함된 객체를 인식하는 단계; 상기 서버를 통해, 미리 저장된 복수의 객체별 코드 중에서 상기 인식된 객체와 관련한 코드를 확인하는 단계; 상기 서버를 통해, 미리 저장된 코드별 상품 및 서비스 정보 중에서 상기 확인된 코드에 대응하는 하나 이상의 상품 및 서비스 정보를 확인하는 단계; 상기 서버를 통해, 상기 확인된 하나 이상의 상품 및 서비스 정보에 적용 가능한 부가 정보를 확인하는 단계; 상기 서버를 통해, 상기 하나 이상의 상품 및 서비스 정보를 미리 설정된 할인율순, 적립율순, 판매량순, 인기도순 및 브랜드순 중 어느 하나로 정렬하는 단계; 및 상기 서버를 통해, 상기 정렬된 하나 이상의 상품 및 서비스 정보 중에서 미리 설정된 개수의 상품 및 서비스 정보 및, 상기 확인된 부가 정보를 상기 구매 단말에 전송하는 단계를 포함할 수 있다.A control method of an augmented reality-based shopping information providing system according to an embodiment of the present invention includes a step of photographing an object provided in an offline store or a street store through a purchasing terminal, Transmitting image information including the object and identification information of a purchasing terminal through the purchasing terminal; Recognizing an object included in image information transmitted from the purchasing terminal through a server; Confirming a code associated with the recognized object among a plurality of pre-stored object-specific codes through the server; Confirming at least one item of goods and service information corresponding to the checked code among the goods and service information for each code stored in advance through the server; Confirming, through the server, additional information applicable to the identified one or more goods and service information; Arranging the one or more goods and service information in any one of a predetermined discount rate order, an accumulation rate order, a sales order order, a popularity order, and a brand order through the server; And transmitting, through the server, a predetermined number of goods and service information and a predetermined number of pieces of additional information among the sorted one or more goods and service information to the purchasing terminal.

본 발명과 관련된 일 예로서 상기 구매 단말을 통해, 상기 서버로부터 전송되는 하나 이상의 상품 및 서비스 정보와 부가 정보를 증강 현실 기능을 적용하여 상기 촬영된 영상 정보 상에 표시하는 단계; 상기 구매 단말에 표시되는 하나 이상의 상품 및 서비스 정보 중에서 핸드 캐리 상품에 대응하는 상품이 선택될 때, 상기 구매 단말, 상기 서버 및 결제 서버와의 연동에 의해, 상기 선택된 핸드 캐리 상품에 대응하는 상품의 결제 금액에 대한 결제 기능을 수행하는 단계; 매장 서버를 통해, 상기 서버로부터 전송되는 회원 정보, 상기 핸드 캐리 상품에 대한 정보 및 상기 구매 단말의 식별 정보를 수신하는 단계; 및 상기 매장 서버를 통해, 매장에 방문한 상기 구매 단말의 사용자에 대한 인증 절차를 수행한 후, 상기 핸드 캐리 상품을 상기 구매 단말의 사용자에게 제공하는 단계를 더 포함할 수 있다.Displaying one or more goods and service information and additional information transmitted from the server on the photographed image information by applying an augmented reality function through the purchasing terminal according to an embodiment of the present invention; When the merchandise corresponding to the hand-held merchandise is selected from among at least one merchandise and service information displayed on the merchandising terminal, by interlocking with the purchasing terminal, the server and the settlement server, the merchandise corresponding to the selected hand- Performing a payment function for a payment amount; Receiving member information transmitted from the server, information on the hand-held product, and identification information of the purchasing terminal through a store server; And providing the hand-held merchandise to a user of the purchasing terminal after performing an authentication procedure for the user of the purchasing terminal visited at the store through the store server.

본 발명과 관련된 일 예로서 상기 구매 단말을 통해, 상기 서버로부터 전송되는 하나 이상의 상품 및 서비스 정보와 부가 정보를 증강 현실 기능을 적용하여 상기 촬영된 영상 정보 상에 표시하는 단계; 상기 구매 단말에 표시되는 하나 이상의 상품 및 서비스 정보 중에서 배송 상품에 대응하는 상품이 선택될 때, 상기 구매 단말, 상기 서버 및 결제 서버와의 연동에 의해, 상기 선택된 배송 상품에 대응하는 상품의 결제 금액에 대한 결제 기능을 수행하는 단계; 매장 서버를 통해, 상기 서버로부터 전송되는 회원 정보, 상기 핸드 캐리 상품에 대한 정보 및 상기 구매 단말의 식별 정보를 수신하는 단계; 및 상기 매장 서버를 통해, 상기 회원 정보에 포함된 배송지 정보를 근거로 배송지로 상기 배송 상품을 배송하는 단계를 더 포함할 수 있다.Displaying one or more goods and service information and additional information transmitted from the server on the photographed image information by applying an augmented reality function through the purchasing terminal according to an embodiment of the present invention; When a product corresponding to a delivery commodity is selected from among at least one commodity and service information displayed on the purchasing terminal, a payment amount of a commodity corresponding to the selected delivery commodity in association with the purchasing terminal, the server and the payment server Performing a settlement function for the terminal; Receiving member information transmitted from the server, information on the hand-held product, and identification information of the purchasing terminal through a store server; And delivering the delivery item to the delivery site based on the delivery address information included in the member information through the store server.

본 발명은 오프라인 매장 또는 거리 매장에 구비된 객체를 촬영하고, 상기 촬영된 객체와 관련한 상품 및 서비스 정보, 부가 정보 등을 증강 현실 기능을 통해 제공함으로써, 실제 백화점, 쇼핑몰, 거리 등에서 마주치는 뷰를 그대로 제공하면서 오프라인에서 제공하는 상품이나 매장과 관련한 부가적인 정보를 전달하여 사용상의 편의성을 향상시키고, 사용자에게 다양한 정보를 제공할 수 있으며, 소규모 오프라인 매장을 구매 단말의 사용자가 방문하더라도 대형 매장의 상품 구색과 쇼핑 정보를 동일하게 제공받을 수 있는 효과가 있다.The present invention takes a picture of an object provided in an off-line store or a street store, provides a product, service information, additional information, and the like related to the photographed object through an augmented reality function so that a view encountered at an actual department store, a shopping mall, It is possible to provide additional information related to a product or a store offered in offline while improving the convenience of use and providing various information to a user. Even if a user of a purchasing terminal visits a small-scale offline store, It is possible to receive the assortment and shopping information in the same manner.

또한, 본 발명은 구매 단말에서 촬영한 객체와 관련한 상품 정보 및/또는 서비스 정보를 제공하는 것 이외에 추가로 해당 상품이 직접 수령이나 배송 가능한 상품임을 나타내는 핸드 캐리 상품인지 또는, 오프라인 매장 또는 거리 매장에서 취급하지 않거나 판매 소진으로 인한 품절 상태인 상품임을 나타내는 배송 상품인지 여부의 부가 정보를 증강 현실 기능을 통해 제공함으로써, 국/내외 오프라인 매장의 상품 정보를 추가로 확인할 수 있어 구매자 선택의 폭을 확대하고, 해외 직접 구매 시 구매자와 판매자 간 신뢰성을 향상시킬 수 있는 효과가 있다.In addition to providing product information and / or service information related to an object photographed by a purchasing terminal, the present invention may further be used as a hand-held commodity indicating that the commodity is directly receivable or deliverable, By providing the augmented reality function with additional information on whether or not the item is a delivery item indicating that the item is out of stock due to depletion of sales, it is possible to further confirm the item information of the domestic / overseas offline store, , And the reliability between the buyer and the seller can be improved when foreign direct purchases are made.

도 1은 본 발명의 실시예에 따른 쇼핑 정보 제공 시스템의 구성을 나타낸 블록도이다.
도 2는 본 발명의 실시예에 따른 전시 상품의 예를 나타낸 도이다.
도 3은 본 발명의 실시예에 따른 POP(Point of Purchase)의 예를 나타낸 도이다.
도 4는 본 발명의 실시예에 따른 전단의 예를 나타낸 도이다.
도 5는 본 발명의 실시예에 따른 배너 광고의 예를 나타낸 도이다.
도 6은 본 발명의 실시예에 따른 포스터 광고의 예를 나타낸 도이다.
도 7은 본 발명의 실시예에 따른 간판의 예를 나타낸 도이다.
도 8은 본 발명의 실시예에 따른 증강 현실 기반 쇼핑 정보 제공 시스템의 제어 방법을 나타낸 흐름도이다.
도 9 내지 도 10은 본 발명의 실시예에 따른 구매 단말의 화면을 나타낸 도이다.
1 is a block diagram showing a configuration of a shopping information providing system according to an embodiment of the present invention.
2 is a view illustrating an example of an exhibition product according to an embodiment of the present invention.
3 is a diagram illustrating an example of a Point of Purchase (POP) according to an embodiment of the present invention.
4 is a view showing an example of a front end according to an embodiment of the present invention.
5 is a diagram illustrating an example of a banner advertisement according to an embodiment of the present invention.
6 is a diagram illustrating an example of a poster advertisement according to an embodiment of the present invention.
7 is a view showing an example of a signboard according to an embodiment of the present invention.
FIG. 8 is a flowchart illustrating a control method of the augmented reality-based shopping information providing system according to the embodiment of the present invention.
9 to 10 are diagrams illustrating screens of a purchasing terminal according to an embodiment of the present invention.

본 발명에서 사용되는 기술적 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아님을 유의해야 한다. 또한, 본 발명에서 사용되는 기술적 용어는 본 발명에서 특별히 다른 의미로 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 의미로 해석되어야 하며, 과도하게 포괄적인 의미로 해석되거나, 과도하게 축소된 의미로 해석되지 않아야 한다. 또한, 본 발명에서 사용되는 기술적인 용어가 본 발명의 사상을 정확하게 표현하지 못하는 잘못된 기술적 용어일 때에는 당업자가 올바르게 이해할 수 있는 기술적 용어로 대체되어 이해되어야 할 것이다. 또한, 본 발명에서 사용되는 일반적인 용어는 사전에 정의되어 있는 바에 따라, 또는 전후 문맥상에 따라 해석되어야 하며, 과도하게 축소된 의미로 해석되지 않아야 한다.It is noted that the technical terms used in the present invention are used only to describe specific embodiments and are not intended to limit the present invention. In addition, the technical terms used in the present invention should be construed in a sense generally understood by a person having ordinary skill in the art to which the present invention belongs, unless otherwise defined in the present invention, Should not be construed to mean, or be interpreted in an excessively reduced sense. In addition, when a technical term used in the present invention is an erroneous technical term that does not accurately express the concept of the present invention, it should be understood that technical terms that can be understood by a person skilled in the art can be properly understood. In addition, the general terms used in the present invention should be interpreted according to a predefined or prior context, and should not be construed as being excessively reduced.

또한, 본 발명에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한 복수의 표현을 포함한다. 본 발명에서 "구성된다" 또는 "포함한다" 등의 용어는 발명에 기재된 여러 구성 요소들 또는 여러 단계를 반드시 모두 포함하는 것으로 해석되지 않아야 하며, 그 중 일부 구성 요소들 또는 일부 단계들은 포함되지 않을 수도 있고, 또는 추가적인 구성 요소 또는 단계들을 더 포함할 수 있는 것으로 해석되어야 한다.Furthermore, the singular expressions used in the present invention include plural expressions unless the context clearly dictates otherwise. The term "comprising" or "comprising" or the like in the present invention should not be construed as necessarily including the various elements or steps described in the invention, Or may further include additional components or steps.

또한, 본 발명에서 사용되는 제 1, 제 2 등과 같이 서수를 포함하는 용어는 구성 요소들을 설명하는데 사용될 수 있지만, 구성 요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제 1 구성 요소는 제 2 구성 요소로 명명될 수 있고, 유사하게 제 2 구성 요소도 제 1 구성 요소로 명명될 수 있다.Furthermore, terms including ordinals such as first, second, etc. used in the present invention can be used to describe elements, but the elements should not be limited by terms. Terms are used only for the purpose of distinguishing one component from another. For example, without departing from the scope of the present invention, the first component may be referred to as a second component, and similarly, the second component may also be referred to as a first component.

이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성 요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings, wherein like reference numerals refer to like or similar elements throughout the several views, and redundant description thereof will be omitted.

또한, 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 발명의 사상을 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 발명의 사상이 제한되는 것으로 해석되어서는 아니 됨을 유의해야 한다.In the following description, well-known functions or constructions are not described in detail since they would obscure the invention in unnecessary detail. It is to be noted that the accompanying drawings are only for the purpose of facilitating understanding of the present invention, and should not be construed as limiting the scope of the present invention with reference to the accompanying drawings.

도 1은 본 발명의 실시예에 따른 쇼핑 정보 제공 시스템(10)의 구성을 나타낸 블록도이다.1 is a block diagram showing a configuration of a shoppinginformation providing system 10 according to an embodiment of the present invention.

도 1에 도시한 바와 같이, 쇼핑 정보 제공 시스템(10)은 구매 단말(100), 서버(200), 결제 서버(300), 판매 단말(400) 및 매장 서버(500)로 구성된다. 도 1에 도시된 쇼핑 정보 제공 시스템(10)의 구성 요소 모두가 필수 구성 요소인 것은 아니며, 도 1에 도시된 구성 요소보다 많은 구성 요소에 의해 쇼핑 정보 제공 시스템(10)이 구현될 수도 있고, 그보다 적은 구성 요소에 의해서도 쇼핑 정보 제공 시스템(10)이 구현될 수도 있다.1, the shoppinginformation providing system 10 includes apurchasing terminal 100, aserver 200, apayment server 300, asales terminal 400, and astore server 500. All of the components of the shoppinginformation providing system 10 shown in FIG. 1 are not essential components, and the shoppinginformation providing system 10 may be implemented by more components than the components shown in FIG. 1, The shoppinginformation providing system 10 may be implemented by a smaller number of components.

상기 구매 단말(100) 및/또는 상기 판매 단말(400)은 스마트 폰(Smart Phone), 휴대 단말기(Portable Terminal), 이동 단말기(Mobile Terminal), 개인 정보 단말기(Personal Digital Assistant: PDA), PMP(Portable Multimedia Player) 단말기, 텔레매틱스(Telematics) 단말기, 내비게이션(Navigation) 단말기, 개인용 컴퓨터(Personal Computer), 노트북 컴퓨터, 슬레이트 PC(Slate PC), 태블릿 PC(Tablet PC), 울트라북(ultrabook), 웨어러블 디바이스(Wearable Device, 예를 들어, 워치형 단말기(Smartwatch), 글래스형 단말기(Smart Glass), HMD(Head Mounted Display) 등 포함), 와이브로(Wibro) 단말기, IPTV(Internet Protocol Television) 단말기, 스마트 TV, 디지털방송용 단말기, AVN(Audio Video Navigation) 단말기, A/V(Audio/Video) 시스템, 플렉시블 단말기(Flexible Terminal) 등과 같은 다양한 단말기에 적용될 수 있다. 여기서, 상기 판매 단말(400) 및/또는 상기 매장 서버(500)는 매장에 구비되는 POS(Point of Sales) 단말 등일 수 있다.Thepurchasing terminal 100 and / or thesales terminal 400 may be a smart phone, a portable terminal, a mobile terminal, a personal digital assistant (PDA), a personal digital assistant (PMP) A portable computer, a portable multimedia player, a telematics terminal, a navigation terminal, a personal computer, a notebook computer, a slate PC, a tablet PC, an ultrabook, a wearable device (Wibro) terminal, an IPTV (Internet Protocol Television) terminal, a smart TV, a mobile phone, a mobile phone, a mobile phone, An AV (Audio Video Navigation) terminal, an A / V (Audio / Video) system, a flexible terminal, and the like. Here, thesales terminal 400 and / or thestore server 500 may be a POS (Point of Sales) terminal or the like provided in a store.

또한, 상기 구매 단말(100), 상기 서버(200), 상기 결제 서버(300), 상기 판매 단말(400) 및 상기 매장 서버(500)은 각각 유/무선 통신망을 통해 내부의 임의의 구성 요소 또는 외부의 임의의 적어도 하나의 단말기와 통신 연결하기 위해서 통신부를 포함할 수 있다. 여기서, 무선 인터넷 기술로는 무선랜(Wireless LAN: WLAN), 와이브로(Wireless Broadband: Wibro), 와이맥스(World Interoperability for Microwave Access: Wimax), HSDPA(High Speed Downlink Packet Access), IEEE 802.16, 롱 텀 에볼루션(Long Term Evolution: LTE), 광대역 무선 이동 통신 서비스(Wireless Mobile Broadband Service: WMBS) 등이 포함될 수 있다. 또한, 근거리 통신 기술로는, 블루투스(Bluetooth), 와이 파이(Wi-Fi), RFID(Radio Frequency Identification), 적외선 통신(Infrared Data Association: IrDA), UWB(Ultra Wideband), 지그비(ZigBee), 인접 자장 통신(Near Field Communication: NFC), 초음파 통신(Ultra Sound Communication: USC), 가시광 통신(Visible Light Communication: VLC), BLE(Bluetooth Low Energy) 등이 포함될 수 있다. 또한, 유선 통신 기술로는, 전력선 통신(Power Line Communication: PLC), USB 통신, 이더넷(Ethernet), 시리얼 통신(serial communication), 광/동축 케이블 등이 포함될 수 있다.Thepurchasing terminal 100, theserver 200, thepayment server 300, thesales terminal 400 and thestore server 500 may be connected to each other via a wired / wireless communication network, And a communication unit for communicating with at least one external terminal. Herein, as a wireless Internet technology, a wireless LAN (WLAN), a wireless broadband (Wibro), a WiMAX (World Interoperability for Microwave Access), HSDPA (High Speed Downlink Packet Access) , Long Term Evolution (LTE), Wireless Mobile Broadband Service (WMBS), and the like. In addition, the short distance communication technology may be Bluetooth, Wi-Fi, Radio Frequency Identification (RFID), Infrared Data Association (IrDA), Ultra Wideband (UWB), ZigBee For example, Near Field Communication (NFC), Ultra Sound Communication (USC), Visible Light Communication (VLC), and Bluetooth Low Energy (BLE). The wired communication technology may include a power line communication (PLC), a USB communication, an Ethernet, a serial communication, an optical / coaxial cable, and the like.

또한, 상기 통신부는 유니버설 시리얼 버스(Universal Serial Bus: USB)를 통해 임의의 단말과 정보를 상호 전송할 수 있다.In addition, the communication unit can transmit information to and from an arbitrary terminal through a universal serial bus (USB).

또한, 상기 통신부는 이동통신을 위한 기술표준들 또는 통신방식(예를 들어, GSM(Global System for Mobile communication), CDMA(Code Division Multi Access), CDMA2000(Code Division Multi Access 2000), EV-DO(Enhanced Voice-Data Optimized or Enhanced Voice-Data Only), WCDMA(Wideband CDMA), HSDPA(High Speed Downlink Packet Access), HSUPA(High Speed Uplink Packet Access), LTE(Long Term Evolution), LTE-A(Long Term Evolution-Advanced) 등)에 따라 구축된 이동 통신망 상에서 기지국, 상기 구매 단말(100), 상기 서버(200), 상기 결제 서버(300), 상기 판매 단말(400) 및 상기 매장 서버(500) 등과 무선 신호를 송수신한다.In addition, the communication unit may be a mobile communication system, a mobile communication system, a mobile communication system, a mobile communication system, a mobile communication system, a mobile communication system, a mobile communication system, (Wideband CDMA), HSDPA (High Speed Downlink Packet Access), HSUPA (High Speed Uplink Packet Access), LTE (Long Term Evolution), LTE-A (Long Term Thepayment server 300, thesales terminal 400, thestore server 500, and the like on a mobile communication network constructed according to a wireless network And transmits and receives signals.

또한, 상기 구매 단말(100), 상기 서버(200), 상기 결제 서버(300), 상기 판매 단말(400) 및 상기 매장 서버(500)는 각각 저장부를 포함할 수 있다. 여기서, 상기 저장부는 다양한 사용자 인터페이스(User Interface: UI), 그래픽 사용자 인터페이스(Graphic User Interface: GUI) 등을 저장한다.Thepurchasing terminal 100, theserver 200, thepayment server 300, thesales terminal 400, and thestore server 500 may each include a storage unit. Here, the storage unit may store various user interfaces (UI), a graphical user interface (GUI), and the like.

또한, 상기 저장부는 상기 구매 단말(100), 상기 서버(200), 상기 결제 서버(300), 상기 판매 단말(400) 및 상기 매장 서버(500)가 각각 동작하는데 필요한 데이터와 프로그램 등을 저장한다.The storage unit stores data and programs necessary for thepurchase terminal 100, theserver 200, thepayment server 300, thesales terminal 400, and thestore server 500 to operate, respectively .

즉, 상기 저장부는 상기 구매 단말(100), 상기 서버(200), 상기 결제 서버(300), 상기 판매 단말(400) 및 상기 매장 서버(500)에서 구동되는 다수의 응용 프로그램(application program 또는 애플리케이션(application)), 상기 구매 단말(100), 상기 서버(200), 상기 결제 서버(300), 상기 판매 단말(400) 및 상기 매장 서버(500)의 동작을 위한 데이터들, 명령어들을 저장할 수 있다. 이러한 응용 프로그램 중 적어도 일부는 무선 통신을 통해 외부 서버로부터 다운로드 될 수 있다. 또한 이러한 응용 프로그램 중 적어도 일부는 상기 구매 단말(100), 상기 서버(200), 상기 결제 서버(300), 상기 판매 단말(400) 및 상기 매장 서버(500)의 기본적인 기능(예를 들어, 전화 착신, 발신 기능, 메시지 수신, 발신 기능)을 위하여 출고 당시부터 상기 구매 단말(100), 상기 서버(200), 상기 결제 서버(300), 상기 판매 단말(400) 및 상기 매장 서버(500)상에 존재할 수 있다. 한편, 응용 프로그램은 상기 저장부에 저장되고, 상기 구매 단말(100), 상기 서버(200), 상기 결제 서버(300), 상기 판매 단말(400) 및 상기 매장 서버(500)에 각각 설치되어, 제어부(미도시)에 의하여 상기 구매 단말(100), 상기 서버(200), 상기 결제 서버(300), 상기 판매 단말(400) 및 상기 매장 서버(500) 각각의 동작(또는 기능)을 수행하도록 구동될 수 있다.That is, the storage unit stores a plurality of application programs (application programs or application programs) running on thepurchase terminal 100, theserver 200, thepayment server 300, thesales terminal 400, and data and commands for operation of thepurchasing terminal 100, theserver 200, thepayment server 300, thesales terminal 400 and thestore server 500 . At least some of these applications may be downloaded from an external server via wireless communication. At least some of these application programs may also be used to provide basic functions of thepurchasing terminal 100, theserver 200, thepayment server 300, thesales terminal 400 and thestore server 500 Theserver 200, thepayment server 300, thesales terminal 400 and thestore server 500 from the time of shipment from the beginning to the end of the shipment Lt; / RTI > The application programs are stored in the storage unit and installed in thepurchasing terminal 100, theserver 200, thepayment server 300, thesales terminal 400 and thestore server 500, respectively, (Or function) of each of thepurchasing terminal 100, theserver 200, thepayment server 300, thesales terminal 400 and thestore server 500 by a controller (not shown) Can be driven.

또한, 상기 저장부는 플래시 메모리 타입(Flash Memory Type), 하드 디스크 타입(Hard Disk Type), 멀티미디어 카드 마이크로 타입(Multimedia Card Micro Type), 카드 타입의 메모리(예를 들면, SD 또는 XD 메모리 등), 자기 메모리, 자기 디스크, 광디스크, 램(Random Access Memory: RAM), SRAM(Static Random Access Memory), 롬(Read-Only Memory: ROM), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory) 중 적어도 하나의 저장매체를 포함할 수 있다. 또한, 상기 구매 단말(100), 상기 서버(200), 상기 결제 서버(300), 상기 판매 단말(400) 및 상기 매장 서버(500)는 인터넷(internet)상에서 저장부의 저장 기능을 수행하는 웹 스토리지(web storage)를 운영하거나, 또는 상기 웹 스토리지와 관련되어 동작할 수도 있다.The storage unit may be a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (for example, SD or XD memory) A random access memory (SRAM), a read-only memory (ROM), an electrically erasable programmable read-only memory (EEPROM), a programmable read-only memory -Only Memory). ≪ / RTI > Thepurchasing terminal 100, theserver 200, thepayment server 300, thesales terminal 400 and thestore server 500 are connected to a web storage operate web storage, or operate in association with the web storage.

또한, 상기 구매 단말(100), 상기 서버(200), 상기 결제 서버(300), 상기 판매 단말(400) 및 상기 매장 서버(500)는 각각 표시부를 포함할 수 있다. 여기서, 상기 표시부는 액정 디스플레이(Liquid Crystal Display: LCD), 박막 트랜지스터 액정 디스플레이(Thin Film Transistor-Liquid Crystal Display: TFT LCD), 유기 발광 다이오드(Organic Light-Emitting Diode: OLED), 플렉시블 디스플레이(Flexible Display), 3차원 디스플레이(3D Display), 전자잉크 디스플레이(e-ink display), LED(Light Emitting Diode) 중에서 적어도 하나를 포함할 수 있다. 또한, 상기 표시부는 터치 스크린 일 수 있다.Thepurchase terminal 100, theserver 200, thepayment server 300, thesales terminal 400, and thestore server 500 may each include a display unit. Here, the display unit may be a liquid crystal display (LCD), a thin film transistor liquid crystal display (TFT LCD), an organic light-emitting diode (OLED), a flexible display ), A three-dimensional display (3D display), an electronic ink display (e-ink display), and an LED (Light Emitting Diode). Also, the display unit may be a touch screen.

또한, 상기 구매 단말(100), 상기 서버(200), 상기 결제 서버(300), 상기 판매 단말(400) 및 상기 매장 서버(500)는 각각 음성 출력부를 포함할 수 있다. 여기서, 상기 음성 출력부는 상기 제어부의 제어에 의해 소정 신호 처리된 신호에 포함된 음성 정보를 출력한다. 여기서, 상기 음성 출력부에는 리시버(receiver), 스피커(speaker), 버저(buzzer) 등이 포함될 수 있다.Thepurchase terminal 100, theserver 200, thepayment server 300, thesales terminal 400, and thestore server 500 may each include a voice output unit. Here, the audio output unit outputs audio information included in the signal subjected to the predetermined signal processing under the control of the control unit. Here, the audio output unit may include a receiver, a speaker, a buzzer, and the like.

또한, 상기 음성 출력부는 상기 제어부에 의해 생성된 안내 음성을 출력한다.Further, the voice output unit outputs the guidance voice generated by the control unit.

또한, 상기 구매 단말(100), 상기 서버(200), 상기 결제 서버(300), 상기 판매 단말(400) 및 상기 매장 서버(500)는 각각 제어부를 포함할 수 있다. 여기서, 상기 제어부는 상기 구매 단말(100), 상기 서버(200), 상기 결제 서버(300), 상기 판매 단말(400) 및 상기 매장 서버(500) 각각의 전반적인 제어 기능을 실행한다.Thepurchase terminal 100, theserver 200, thepayment server 300, thesales terminal 400, and thestore server 500 may each include a control unit. Here, the control unit performs overall control functions of the purchasingterminal 100, theserver 200, thepayment server 300, thesales terminal 400, and thestore server 500.

또한, 상기 제어부는 상기 저장부에 저장된 프로그램 및 데이터를 이용하여 상기 구매 단말(100), 상기 서버(200), 상기 결제 서버(300), 상기 판매 단말(400) 및 상기 매장 서버(500)의 전반적인 제어 기능을 실행한다. 상기 제어부는 RAM, ROM, CPU, GPU, 버스를 포함할 수 있으며, RAM, ROM, CPU, GPU 등은 버스를 통해 서로 연결될 수 있다. CPU는 상기 저장부에 액세스하여, 상기 저장부에 저장된 O/S를 이용하여 부팅을 수행할 수 있으며, 상기 저장부에 저장된 각종 프로그램, 콘텐츠, 데이터 등을 이용하여 다양한 동작을 수행할 수 있다.Also, the control unit may control thepurchase terminal 100, theserver 200, thepayment server 300, thesales terminal 400, and thestore server 500 using the programs and data stored in the storage unit. Performs overall control functions. The control unit may include a RAM, a ROM, a CPU, a GPU, and a bus, and the RAM, the ROM, the CPU, and the GPU may be connected to each other via a bus. The CPU accesses the storage unit, performs booting using the O / S stored in the storage unit, and can perform various operations using various programs, contents, and data stored in the storage unit.

상기 구매 단말(100)은 상기 서버(200), 상기 결제 서버(300), 상기 판매 단말(400), 상기 매장 서버(500) 등과 통신한다.The purchasingterminal 100 communicates with theserver 200, thepayment server 300, thesales terminal 400, thestore server 500, and the like.

또한, 상기 구매 단말(100)은 상기 서버(200)와의 연동에 의해, 상기 구매 단말(100)의 사용자에 대한 회원 가입 절차를 각각 수행한다.In addition, the purchasingterminal 100 performs a membership subscription procedure with respect to a user of the purchasingterminal 100 by interlocking with theserver 200, respectively.

또한, 상기 회원 가입 절차 수행 시, 상기 구매 단말(100)은 본인 인증 수단(예를 들어 이동 전화, 신용카드, 아이핀 등 포함)을 통한 인증 기능을 완료해야 상기 서버(200)에 대한 회원 가입 절차를 정상적으로 완료할 수 있다.In addition, when performing the membership registration procedure, the purchasingterminal 100 must complete the authentication function through the authentication means (for example, a mobile phone, a credit card, an IFP, etc.) Can normally be completed.

또한, 상기 구매 단말(100)에 미리 설치된 앱이 실행되는 경우, 상기 구매 단말(100)은 앱 실행 결과 화면을 표시한다. 여기서, 상기 앱 실행 결과 화면은 회원 정보를 입력받거나 전송하기 위한 회원 정보 항목(또는 메뉴/버튼), 특정 객체를 포함하는 영상을 촬영하기 위한 촬영 항목, 앱의 기능을 설정하기 위한 설정 항목, 구매 단말(100)을 통해 구매한 상품이나 서비스에 대한 구매 이력 정보 등을 관리하기 위한 마이 페이지 항목 등을 포함한다. 이때, 상기 구매 단말(100)은 백그라운드 상태로 해당 앱과 관련한 서버(200)와 통신한다.Also, when an app installed in the purchasingterminal 100 is executed, the purchasingterminal 100 displays an app execution result screen. Here, the application execution result screen may include a member information item (or menu / button) for receiving or transmitting member information, a shooting item for shooting an image including a specific object, a setting item for setting a function of the application, And a My Page item for managing purchase history information on a purchased product or service through the terminal 100. [ At this time, the purchasingterminal 100 communicates with theserver 200 related to the corresponding application in the background state.

또한, 상기 구매 단말(100)에 표시되는 앱 실행 결과 화면 중에서 회원 정보 항목이 선택되는 경우, 상기 구매 단말(100)은 상기 선택된 회원 정보 항목에 대응하는 회원 정보를 입력받기(또는 수신하기) 위한 회원 정보 화면을 표시한다.In addition, when the member information item is selected from the application execution result screen displayed on the purchasingterminal 100, the purchasingterminal 100 may be configured to receive (or receive) the member information corresponding to the selected member information item Display the member information screen.

또한, 상기 구매 단말(100)은 사용자 입력(또는 사용자 터치)에 따른 회원 정보를 수신한다. 여기서, 상기 회원 정보는 이름, 주소, 사용 언어, 배송지 정보, 쇼핑 객체 종류(예를 들어 아바타 종류, 이모티콘 종류 등 포함) 등을 포함한다.Also, the purchasingterminal 100 receives member information according to user input (or user touch). Here, the member information includes a name, an address, a language used, a destination information, a shopping object type (for example, an avatar type, an emoticon type, etc.).

또한, 상기 구매 단말(100)은 상기 수신된 회원 정보, 상기 구매 단말(100)의 식별 정보 등을 상기 서버(200)에 전송한다. 여기서, 상기 구매 단말(100)의 식별 정보는 MDN(Mobile Directory Number), 모바일 IP, 모바일 MAC, Sim(subscriber identity module: 가입자 식별 모듈) 카드 고유정보, 시리얼번호 등을 포함한다.In addition, the purchasingterminal 100 transmits the received member information, identification information of the purchasingterminal 100, and the like to theserver 200. [ The identification information of the purchasingterminal 100 includes a mobile directory number (MDN), a mobile IP, a mobile MAC, a SIM (subscriber identity module) card unique information, and a serial number.

또한, 상기 구매 단말(100)은 오프라인 매장 또는 거리 매장(또는 가두(街頭) 매장)에 구비된(또는 설치된/배치된) 객체를 촬영한다. 여기서, 상기 객체는 상기 오프라인 또는 거리에 위치하는 각 매장에 구비된 할인행사코드(예를 들어 전시 상품, POP, 전단, 배너 광고, 게시판 광고(board advertising), 포스터 광고, 간판 등 포함), 상품코드(예를 들어 가격표 등 포함) 등을 포함한다. 이때, 본 발명에서의 상기 객체는 각 매장에서 제공하는 상품 및 서비스를 제외한 상태일 수 있다.In addition, the purchasing terminal 100 photographs an object provided (or installed / placed) in an offline store or a street store (or a street store). Here, the object may include a discount offer code (for example, an offer item, a POP, a flyer, a banner advertisement, a board advertisement, a poster advertisement, a signboard, etc.) Code (for example, including a price tag), and the like. At this time, the object in the present invention may be a state excluding goods and services provided in each store.

이때, 도 2에 도시된 바와 같이, 상기 전시 상품(Display products)은 고객에게 상품 판매를 위해 전시한 전시용 비판매 상품을 나타낸다(예를 들어 마네킹에 입힌 옷, 전시대에 돋보이게 진열해 둔 가방 등 포함).As shown in FIG. 2, the display products indicate non-sale goods for exhibition (for example, clothes clad in mannequins, bags that are displayed on display shelves, etc.) ).

또한, 도 3에 도시된 바와 같이, 상기 POP(Point of Purchase)는 매장을 찾아온 고객에게 즉석에서 상품 및/또는 서비스에 대한 정보를 제공하는 광고를 나타낸다.Also, as shown in FIG. 3, the POP (Point of Purchase) represents an advertisement that provides information on goods and / or services on the spot to a customer who visited the store.

또한, 도 4에 도시된 바와 같이, 상기 전단(leaflet)(또는 전단 광고/전단지/전단지 광고)은 광고나 선전을 목적으로 배포하는 간단한 인쇄물의 형태를 나타낸다.Also, as shown in FIG. 4, the leaflet (or the advertisement of the leaflet / leaflet / flyer) represents a form of simple printed matter distributed for advertisement or propaganda.

또한, 도 5에 도시된 바와 같이, 상기 배너 광고(banner advertisement)는 매장의 특정 위치에 설치되어 특정 상품 및/또는 서비스에 대한 정보를 제공하는 광고를 나타낸다.Also, as shown in FIG. 5, the banner advertisement is an advertisement provided at a specific location of the store to provide information on a specific product and / or service.

또한, 도 6에 도시된 바와 같이, 상기 포스터 광고(billing)는 광고 선전용으로 제작하여 붙이는 종이를 나타내며, 시각에 호소하는 것이기 때문에 주목을 끌수 있도록 문자, 도형, 문장 등을 고려하여 제작한다.Also, as shown in FIG. 6, the poster billing refers to a paper made for advertisement and adheres to the time, so it is produced in consideration of characters, figures, and sentences so as to attract attention.

또한, 도 7에 도시된 바와 같이, 상기 간판(sign)은 매장과 관련한 회사명, 상점명, 상품명, 서비스명 등을 표시하는 판을 나타낸다.Further, as shown in Fig. 7, the sign indicates a plate indicating a company name, a store name, a product name, a service name, and the like related to the store.

즉, 상기 구매 단말(100)은 상기 구매 단말(100)에 구비된 촬영부(미도시)를 통해 상기 오프라인 매장 또는 거리 매장에 구비된 객체를 포함하는 영상을 촬영한다. 이때, 상기 구매 단말(100)은 상기 구매 단말(100)에 표시되는 앱 실행 결과 화면 중에 포함된 촬영 메뉴를 통해 상기 오프라인 매장 또는 거리 매장에 구비된 객체를 포함하는 영상을 촬영할 수도 있다.That is, the purchasingterminal 100 shoots an image including an object included in the offline store or the street store through a photographing unit (not shown) provided in the purchasingterminal 100. At this time, the purchasingterminal 100 may photograph an image including an object included in the offline store or the street store through the photographing menu included in the app execution result screen displayed on the purchasingterminal 100. [

또한, 상기 구매 단말(100)은 GPS 수신기(미도시)를 포함한다. 여기서, 상기 GPS 수신기는 위성으로부터 전송된 GPS 신호를 수신하고, 상기 수신된 GPS 신호에 포함된 경도 좌표 및 위도 좌표를 근거로 상기 구매 단말(100)의 위치 데이터를 실시간으로 발생시킨다. 여기서, 상기 발생된 위치 데이터는 상기 구매 단말(100)의 현재 위치(또는 현재 위치 데이터)로 정의한다. 여기서, 상기 GPS 수신기뿐만 아니라 와이 파이 또는 와이브로 통신을 통해 위치 정보를 수신할 수도 있다.Also, the purchasingterminal 100 includes a GPS receiver (not shown). Here, the GPS receiver receives the GPS signal transmitted from the satellite, and generates position data of the purchasingterminal 100 in real time based on the longitude coordinates and latitude coordinates included in the received GPS signal. Here, the generated position data is defined as the current position (or current position data) of the purchasingterminal 100. Here, the GPS receiver may receive location information through WiFi or WiBro communication as well.

또한, 상기 GPS 수신기를 통해 수신되는 신호는 IEEE(Institute of Electrical and Electronics Engineers)에서 제안한 무선 LAN 및 일부 적외선 통신 등을 포함하는 무선 LAN에 대한 무선 네트워크의 표준 규격인 802.11과, 블루투스, UWB, 지그비 등을 포함하는 무선 PAN(Personal Area Network)에 대한 표준 규격인 802.15과, 도시 광대역 네트워크(Fixed Wireless Access: FWA) 등을 포함하는 무선 MAN(Metropolitan Area Network), 광대역 무선 접속(Broadband Wireless Access: BWA)에 대한 표준 규격인 802.16과, 와이브로, 와이맥스 등을 포함하는 무선 MAN(Mobile Broadband Wireless Access: MBWA)에 대한 모바일 인터넷에 대한 표준 규격인 802.20 등의 무선 통신 방식을 이용하여 단말기의 위치 정보를 상기 구매 또한, 상기 GPS 수신기를 통해 수신되는 신호는 IEEE(Institute of Electrical and Electronics Engineers)에서 제안한 무선 LAN 및 일부 적외선 통신 등을 포함하는 무선 LAN에 대한 무선 네트워크의 표준 규격인 802.11과, 블루투스, UWB, 지그비 등을 포함하는 무선 PAN(Personal Area Network)에 대한 표준 규격인 802.15과, 도시 광대역 네트워크(Fixed Wireless Access: FWA) 등을 포함하는 무선 MAN(Metropolitan Area Network), 광대역 무선 접속(Broadband Wireless Access: BWA)에 대한 표준 규격인 802.16과, 와이브로, 와이맥스 등을 포함하는 무선 MAN(Mobile Broadband Wireless Access: MBWA)에 대한 모바일 인터넷에 대한 표준 규격인 802.20 등의 무선 통신 방식을 이용하여 단말기의 위치 정보를 상기 구매 단말(100)에 제공하도록 구성할 수도 있다.단말(100)에 제공하도록 구성할 수도 있다.The signals received through the GPS receiver include 802.11, a standard for a wireless network for a wireless LAN including a wireless LAN and some infrared communication proposed by the Institute of Electrical and Electronics Engineers (IEEE), Bluetooth, UWB, ZigBee , A wireless metropolitan area network (MAN) including a fixed wireless access (FWA), a broadband wireless access (BWA), and the like, which are standard specifications for a wireless personal area network (PAN) , 802.16, which is a standard for the mobile Internet, and 802.20, which is a standard for the mobile Internet for a mobile broadband wireless access (MBWA) including WiBro, WiMAX, etc., In addition, the signal received through the GPS receiver may be transmitted to the wireless LAN and / 802.15, which is a standard of a wireless network for wireless LAN including infrared communication, 802.15, which is a standard for a wireless PAN (Personal Area Network) including Bluetooth, UWB, ZigBee, : Mobile Broadband Wireless Access (MBWA) including WiBro, WiMAX, etc., and 802.16, a standard for a metropolitan area network (MAN) and a broadband wireless access (BWA) The location information of the terminal may be provided to the purchasing terminal 100 using a wireless communication method such as 802.20, which is a standard for the mobile Internet.

이와 같이, 상기 구매 단말(100)은 상기 구매 단말(100)의 위치 정보(또는 상기 객체를 촬영한 지점의 위치 정보)를 확인할 수 있다.Thus, the purchasingterminal 100 can confirm the location information of the purchasing terminal 100 (or the location information of the point where the object is photographed).

또한, 상기 구매 단말(100)은 상기 촬영된 영상 정보, 상기 확인된 구매 단말(100)의 위치 정보, 구매 단말(100)의 식별 정보 등을 상기 서버(200)에 전송한다. 여기서, 상기 구매 단말(100)의 식별 정보는 MDN, 모바일 IP, 모바일 MAC, Sim(가입자 식별 모듈) 카드 고유정보, 시리얼번호 등을 포함한다.The purchasingterminal 100 transmits the photographed image information, the location information of the purchasedpurchasing terminal 100, the identification information of the purchasingterminal 100, and the like to theserver 200. Here, the identification information of the purchasingterminal 100 includes an MDN, a mobile IP, a mobile MAC, a SIM (subscriber identity module) card specific information, a serial number, and the like.

또한, 상기 구매 단말(100)은 상기 전송된 영상 정보 등에 응답하여 상기 서버(200)로부터 전송되는 영상 정보에 포함된 해당 객체와 관련한 하나 이상의 상품 및 서비스 정보, 부가 정보 등을 수신한다. 여기서, 상기 상품 및 서비스 정보는 상품명(또는 서비스명), 상품 고유 코드(또는 서비스 고유 코드), 상품 이미지(또는 서비스 기본 이미지), 상품 설명 정보(또는 서비스 설명 정보), 상품/서비스에 대한 체험 정보, 상품/서비스에 대한 평가 정보, 예약 정보, 상담 정보, 진료 시간 정보 등을 포함한다. 또한, 상기 부가 정보는 해당 상품이 직접 수령이나 배송 가능한 상품임을 나타내는 핸드 캐리 상품임을 나타내는 정보, 오프라인 매장 또는 거리 매장에서 취급하지 않거나 판매 소진으로 인한 품절 상태인 상품임을 나타내는 배송 상품임을 나타내는 정보 등을 포함한다.In addition, the purchasingterminal 100 receives one or more goods, service information, additional information, and the like related to the object included in the image information transmitted from theserver 200 in response to the transmitted image information. Here, the goods and service information may include at least one of a product name (or a service name), a product unique code (or service unique code), a product image (or a service basic image), product description information (or service description information) Information about the product / service, evaluation information about the product / service, reservation information, consultation information, and time information. Further, the additional information may include information indicating that the product is a hand-held product that indicates that the product is directly receivable or deliverable, information indicating that the product is a delivery product that is not handled in an offline store or a street store, .

또한, 상기 구매 단말(100)은 해당 구매 단말(100)에 표시되는 앞서 촬영된 영상 정보 상에 상기 수신된 하나 이상의 상품 및 서비스 정보, 상기 부가 정보 등을 증강 현실 기능을 적용하여 표시한다. 이때, 상기 구매 단말(100)에서 상기 서버(200)로부터 전송되는 할인율순, 적립율순, 판매량순, 인기도순 및 브랜드순 중 어느 하나로 정렬된 복수의 상품 및 서비스 정보를 수신하는 경우, 상기 구매 단말(100)은 상기 수신된 할인율순, 적립율순, 판매량순, 인기도순 및 브랜드순 중 어느 하나로 정렬된 복수의 상품 및 서비스 정보를 표시할 수도 있다. 이때, 상기 구매 단말(100)은 미리 공지된 다양한 증강 현실 기능에 의해서 해당 증강 현실 기능을 적용할 수 있다.Also, the purchasingterminal 100 displays the received one or more goods and service information, the additional information, and the like on the photographed image information displayed on the purchasingterminal 100 by applying the augmented reality function. In this case, when the purchasingterminal 100 receives a plurality of goods and service information sorted by any one of discount rate, accrual rate, sales volume, popularity order, and brand order transmitted from theserver 200, (100) may display a plurality of goods and service information arranged in any one of the received discount rate order, the accumulation rate order, the sales order order, the popularity order, and the brand order. At this time, the purchasingterminal 100 may apply the augmented reality function by various previously known augmented reality functions.

또한, 정렬되지 않은 복수의 상품 및 서비스 정보를 수신하는 경우, 상기 구매 단말(100)은 상기 수신된 복수의 상품 및 서비스 정보를 상기 미리 설정된 할인율순, 적립율순, 판매량순, 인기도순 및 브랜드순 중 어느 하나로 정렬하고, 상기 정렬된 복수의 상품 및 서비스 정보를 증강 현실 기능을 적용하여 표시할 수도 있다. 이때, 상기 구매 단말(100)은 상기 정렬된 복수의 상품 및 서비스 정보 중에서 미리 설정된 개수만큼만 표시할 수도 있다.Also, when a plurality of goods and service information that are not aligned are received, the purchasing terminal 100 stores the received plurality of goods and service information in the order of the preset discount rate, the order of accumulation rate, the order of sales amount, And displaying the plurality of sorted goods and service information by applying the augmented reality function. At this time, the purchasingterminal 100 may display only a predetermined number of the plurality of ordered goods and service information.

또한, 상기 구매 단말(100)은 상기 영상 정보에 포함된 해당 객체와 관련한 하나 이상의 상품 및 서비스 정보, 부가 정보 이외에, 상기 서버(200)로부터 전송되는 상기 영상 정보에 포함된 해당 객체와 관련한 하나 이상의 유사군 상품 및 서비스 정보, 상기 하나 이상의 상품 및 서비스 정보 및/또는 상기 하나 이상의 유사군 상품 및 서비스 정보 등에 적용 가능한 쿠폰, 상품권, 서비스 예약 정보 등을 포함하는 추가 부가 정보, 상기 하나 이상의 상품 및 서비스 정보 및/또는 상기 하나 이상의 유사군 상품 및 서비스 정보와 관련한 복수의 3D 파노라마 영상 정보 등을 상기 하나 이상의 상품 및 서비스 정보, 부가 정보 등과 함께 수신할 수도 있다. 여기서, 상기 3D 파노라마 영상 정보는 실제 오프라인 상황의 영상 정보에, 상기 오프라인 상황의 영상 정보에 포함된 매장, 전시 상품(Display products), POP(Point of Purchase), 전단(leaflet), 배너 광고(banner advertisement), 게시판 광고(board advertising), 포스터 광고(billing), 간판(sign), 가격표(price tag) 등을 포함하는 객체에 각각 대응하는 하나 이상의 코드가 추가된 상태일 수 있다. 또한, 상기 객체는 해당 오프라인 상황의 영상 정보에 포함되는 각 매장에서 제공하는 상품 및 서비스는 제외한 상태로 정의한다. 또한, 상기 객체에 대응하는 코드는 바코드, QR 코드, 문자열 코드 등의 형태이며, 상기 객체와 관련한 하나 이상의 상품 정보, 하나 이상의 서비스 정보 등을 포함한다. 또한, 상기 3D 파노라마 영상 정보는 실시간으로 업데이트되는 최신의 정보로 상기 구매 단말(100)과 상기 서버(200)와의 연동에 의해, 최신의 3D 파노라마 영상 정보를 유지할 수 있다.In addition to the at least one goods, service, and supplementary information related to the corresponding object included in the image information, the purchasingterminal 100 may further include one or more items related to the corresponding object included in the image information transmitted from theserver 200 Additional items of information including coupon items, service coupons, service reservation information, and the like applicable to the one or more similar goods and service information and / or the one or more similar goods and service information, Information and / or a plurality of 3D panoramic image information related to the one or more similar goods and service information together with the one or more goods and service information, additional information, and the like. Here, the 3D panorama image information may include image information of an actual offline situation, a shop, a display product, a POP (Point of Purchase), a leaflet, a banner advertisement, billboard, sign, price tag, and the like may be added to each of the objects. In addition, the object is defined as a state in which goods and services provided by each store included in the image information of the offline state are excluded. In addition, the code corresponding to the object is in the form of a bar code, a QR code, a string code, etc., and includes one or more goods information related to the object, one or more service information, and the like. In addition, the 3D panorama image information is the latest information updated in real time, and can maintain the latest 3D panorama image information by interlocking with the purchasingterminal 100 and theserver 200.

또한, 상기 구매 단말(100)은 해당 구매 단말(100)에 표시되는 앞서 촬영된 영상 정보 상에, 상기 수신된 하나 이상의 상품 및 서비스 정보, 하나 이상의 유사군 상품 및 서비스 정보, 상기 부가 정보, 상기 하나 이상의 상품 및 서비스 정보 및/또는 상기 하나 이상의 유사군 상품 및 서비스 정보 등에 적용 가능한 쿠폰, 상품권, 서비스 예약 정보 등을 포함하는 추가 부가 정보 등을 증강 현실 기능을 적용하여 표시하고, 해당 구매 단말(100)에 표시되는 앞서 촬영된 영상 정보의 상의 일측에 상기 하나 이상의 상품 및 서비스 정보 및/또는 상기 하나 이상의 유사군 상품 및 서비스 정보와 관련한 복수의 3D 파노라마 영상 정보를 표시한다. 이때, 상기 구매 단말(100)에 표시되는 3D 파노라마 영상 정보, 상기 부가 정보, 상기 추가 부가 정보 등은 상기 서버(200)에서 백그라운드 모델링을 통해 업데이트되는 최신의 정보일 수 있다.In addition, the purchasingterminal 100 may store the received one or more goods and service information, one or more similar goods and service information, the supplementary information, the additional information, and the like on the photographed image information displayed on the purchasingterminal 100 Additional information including coupons, gift certificates, service reservation information, and the like applicable to one or more goods and service information and / or one or more similar goods and service information can be displayed by applying an augmented reality function, 100 displays a plurality of 3D panorama image information related to the one or more goods and service information and / or one or more similar goods and service information on one side of the image of the photographed image information. At this time, the 3D panorama image information, the additional information, the additional additional information, and the like displayed on the purchasingterminal 100 may be the latest information updated through the background modeling in theserver 200.

즉, 3D 파노라마 영상 정보가 업데이트되는 경우, 상기 구매 단말(100)은 상기 서버(200)로부터 업데이트된 최신의 3D 파노라마 영상 정보를 수신하고, 앞서 표시되고 있는 기존 3D 파노라마 영상 정보 대신에 상기 수신된 최신의 3D 파노라마 영상 정보를 변경하여 표시한다.That is, when the 3D panorama image information is updated, the purchasingterminal 100 receives the updated latest 3D panorama image information from theserver 200, and instead of the previously displayed 3D panorama image information, The latest 3D panorama image information is changed and displayed.

이와 같이, 상기 구매 단말(100)은 상기 서버(200)와의 실시간 연동에 의해, 최신의 3D 파노라마 영상 정보를 실시간으로 표시할 수 있다.In this way, the purchasingterminal 100 can display the latest 3D panorama image information in real time by interlocking with theserver 200 in real time.

또한, 상기 구매 단말(100)은 상기 회원 정보 내의 쇼핑 객체 종류를 근거로 사용자 입력에 따라 상기 3D 파노라마 영상 정보 내에서 해당 쇼핑 객체를 이동시키면서 상기 3D 파노라마 영상 정보를 표시한다.Also, the purchasingterminal 100 displays the 3D panorama image information while moving the corresponding shopping object in the 3D panorama image information according to user input based on the shopping object type in the member information.

또한, 해당 구매 단말(100)에 표시되는 앞서 촬영된 영상 정보 상에서 증강 현실 기능을 통해 표시되는 하나 이상의 상품 및 서비스 정보(및/또는 하나 이상의 유사군 상품 및 서비스 정보) 중에서 특정 상품 및 서비스 정보가 선택되는 경우, 상기 구매 단말(100)은 상기 선택된 특정 상품 및 서비스 정보에 대응하는 3D 파노라마 영상 정보를 상기 서버(200)로부터 제공받은 후, 상기 제공받은 해당 특정 상품 및 서비스 정보에 대응하는 3D 파노라마 영상 정보를 표시할 수도 있다.In addition, if at least one commodity and service information (and / or one or more similar commodity commodity and service information) displayed through the augmented reality function on the photographed image information displayed on the purchasingterminal 100, Thepurchase terminal 100 receives the 3D panorama image information corresponding to the selected specific goods and service information from theserver 200 and then transmits the 3D panorama image information corresponding to the provided specific goods and service information, It is also possible to display image information.

또한, 상기 구매 단말(100)은 상기 구매 단말(100)에 표시되는 하나 이상의 상품 및 서비스 정보 중에서 선택되는 적어도 하나의 특정 상품 및 서비스 정보를 근거로 상기 서버(200), 결제 서버(300) 및 판매 단말(400) 등과의 연동에 의해 결제 기능을 수행한다.Also, the purchasingterminal 100 may be connected to theserver 200, thepayment server 300, and thepayment server 300 based on at least one specific commodity and service information selected from one or more commodity and service information displayed on the purchasingterminal 100 And performs the settlement function by interlocking with thesales terminal 400 or the like.

이때, 상기 구매 단말(100)은 상기 구매 단말(100)에 표시되는 하나 이상의 상품 및 서비스 정보 및, 하나 이상의 유사군 상품 및 서비스 정보 중에서 선택되는 적어도 하나의 특정 상품 및 서비스 정보를 근거로 상기 서버(200), 결제 서버(300) 및 판매 단말(400) 등과의 연동에 의해 결제 기능을 수행할 수도 있다.At this time, the purchasingterminal 100 is connected to theserver 100 based on one or more goods and service information displayed on the purchasingterminal 100, and at least one specific goods and service information selected from one or more similar goods and service information, Thesettlement server 300, thesales terminal 400, and the like.

여기서, 상기 구매 단말(100)에서 선택된 특정 상품 및 서비스 정보에 대응하는 특정 상품에 대해서, 해당 특정 상품이 미리 설정된 배송 상품이며 해외 직접 구매에 해당하는 상품인 경우, 상기 서버(200)는 상기 구매 단말(100), 상기 결제 서버(300) 및 상기 판매 단말(400) 등과의 연동에 의해, 상기 배송 상품에 해당하는 특정 상품에 대해서 배송료, 관세 등을 포함하는 금액에 대한 결제 기능을 수행할 수 있다.In the case where the specific product corresponding to the specific product and service information selected by the purchasingterminal 100 is a predetermined delivery product and corresponds to the direct foreign purchase, It is possible to perform the payment function for the amount of the specific commodity corresponding to the commodity including the postage and the customs by interlocking with the terminal 100, thepayment server 300 and thesales terminal 400 have.

또한, 상기 구매 단말(100)은 사용자 입력에 따른 회원 정보(또는 상기 구매 단말(100)에 미리 저장된 회원 정보), 상기 구매 단말(100)의 식별 정보 등을 상기 서버(200)에 전송한다. 여기서, 상기 회원 정보는 이름, 주소, 사용 언어, 배송지 정보, 쇼핑 객체 종류(예를 들어 아바타 종류, 이모티콘 종류 등 포함) 등을 포함한다.Also, the purchasingterminal 100 transmits the member information (or the member information stored in advance in the purchasing terminal 100) according to user input, the identification information of the purchasingterminal 100, and the like to theserver 200. Here, the member information includes a name, an address, a language used, a destination information, a shopping object type (for example, an avatar type, an emoticon type, etc.).

이때, 상기 구매 단말(100)에서 선택된 특정 상품 및 서비스 정보에 대응하는 특정 상품에 대해서, 해당 특정 상품이 미리 설정된(또는 등록된) 수입 통관 불가 상품(예를 들어 육류, 재화, 무기류, 가스류, 약 등 포함)에 해당하는 경우, 상기 구매 단말(100)은 상기 서버(200)로부터 전송되는 상기 특정 상품 및 서비스 정보에 대한 결제 기능 수행이 불가함을 나타내는 정보(또는 결제 기능 실패 정보)를 수신한다. 여기서, 상기 결제 기능 수행이 불가함을 나타내는 정보는 상기 특정 상품 및 서비스 정보에 대응하는 특정 상품이 수입 통관 불가 상품에 해당함을 나타내는 정보 등을 포함한다.At this time, with respect to the specific commodity corresponding to the specific commodity and the service information selected by the purchasingterminal 100, the commodity can be set to a predetermined commodity (for example, meat, commodities, , Thepurchase terminal 100 transmits information (or payment function failure information) indicating that the payment function for the specific goods and service information transmitted from theserver 200 can not be performed . Herein, the information indicating that the payment function can not be performed includes information indicating that the specific commodity corresponding to the specific commodity and service information corresponds to the commodity that can not be imported.

또한, 상기 구매 단말(100)은 상기 수신된 상기 특정 상품 및 서비스 정보에 대한 결제 기능 수행이 불가함을 나타내는 정보를 표시한다.Also, the purchasingterminal 100 displays information indicating that the payment function can not be performed for the received specific goods and service information.

또한, 상기 구매 단말(100)에서 선택된 특정 상품 및 서비스 정보에 대응하는 특정 상품이 미리 설정된(또는 등록된) 수입 통관 불가 상품(예를 들어 육류, 재화, 무기류, 가스류, 약 등 포함)에 해당하지 않는 경우, 상기 구매 단말(100)은 상기 서버(200), 결제 서버(300) 및 판매 단말(400)과의 연동에 의해 상기 특정 상품 및 서비스 정보에 대응하는 특정 상품 및/또는 특정 서비스에 해당하는 결제 금액에 대한 결제 기능을 수행한다. 이때, 상기 결제 기능 수행 시, 상기 구매 단말(100)은 상기 특정 상품 및 서비스 정보에 대응하는 정상가 금액에 미리 설정된 할인액을 적용하여 상기 정상가 금액에서 상기 할인액이 적용된 금액에 대한 결제 기능을 수행한다.In addition, when a specific commodity corresponding to the specific commodity and the service information selected by the purchasingterminal 100 is set to a predetermined commodity (for example, meat, commodities, weapons, gas, medicine, etc.) If not, the purchasingterminal 100 interlocks with theserver 200, thepayment server 300, and thesales terminal 400 to identify specific goods corresponding to the specific goods and service information and / And a payment function corresponding to the payment amount corresponding to the payment amount. At this time, when the payment function is performed, the purchasingterminal 100 performs a payment function for the amount of the discount amount applied at the normal amount by applying a preset discount amount to the normal amount corresponding to the specific goods and service information.

또한, 상기 결제 기능이 정상적으로 수행 완료된 이후, 상기 구매 단말(100)은 상기 서버(200) 또는 상기 결제 서버(300)로부터 제공되는 결제 기능 수행 결과(또는 결제 정보)를 수신한다. 여기서, 상기 결제 기능 수행 결과(또는 결제 정보)는 상품 및 서비스 정보, 결제 일자 및 시각 정보, 주문 상품별/서비스별 가격 정보 등을 포함한다.Also, after the payment function is normally completed, the purchasingterminal 100 receives a payment function execution result (or payment information) provided from theserver 200 or thepayment server 300. [ Here, the payment function execution result (or payment information) includes goods and service information, settlement date and time information, and price information for each order product / service.

또한, 상기 구매 단말(100)은 상기 수신된 결제 기능 수행 결과를 표시한다.Also, the purchasingterminal 100 displays the received payment function execution result.

이와 같이, 상기 구매 단말(100)은 오프라인 매장을 실제 방문하지 않고도 상품 및/또는 서비스를 검색하거나, 상품 및/또는 서비스를 구매하거나, 구매한 상품을 배송받을 수 있어, 해외 직구에 따른 상품이나 서비스의 선택 폭이 개선/확대될 수 있다.As described above, the purchasingterminal 100 can search for goods and / or services, purchase goods and / or services, or receive purchased goods without actually visiting the offline store, The selection range of the service can be improved / expanded.

즉, 중국, 미국 등의 해외에서 3D 파노라마 영상을 통해 대한민국 내의 백화점이나 동대문 쇼핑몰을 검색하여 쇼핑하는데 있어서, 실제와 동일한 오프라인 매장의 쇼핑 정보를 수집하고, 관심 상품 가격 비교, 구매(또는 결제) 기능, 배송 기능까지 원스톱(one stop) 쇼핑으로 수행할 수 있어, 사용자의 편의성을 향상시킬 수 있다.In other words, in searching for a department store or a Dongdaemun shopping mall in Korea through 3D panoramic images from abroad such as China and the United States, shopping information of the same offline store is collected, and a comparison of interest goods prices, purchasing (or payment) , And the delivery function can be performed by one-stop shopping, thereby improving convenience for the user.

또한, 온라인 쇼핑몰의 과도한 상품 디자인 페이지를 작성하는데 소요되는 비용과 시간을 절감할 수 있다.In addition, the cost and time required to create an excessive product design page of the online shopping mall can be saved.

또한, 상기 구매 단말(100)은 사용 언어에 따라 상기 서버(200)로부터 제공되는 해당 사용 언어가 적용된 상기 3D 파노라마 영상, 상품 및 서비스 정보 등을 제공받을 수 있다.In addition, the purchasingterminal 100 may receive the 3D panorama image, product, service information, and the like, to which the corresponding language used by theserver 200 is applied, according to the language of use.

또한, 상기 결제 기능이 정상적으로 수행 완료된 이후, 상기 구매 단말(100)은 상기 서버(200)로부터 제공되는 상기 결제된 적어도 하나의 특정 상품 및 서비스 정보에 대응하는 특정 상품이나 특정 서비스를 제공받는다.Also, after the settlement function is normally completed, the purchasingterminal 100 is provided with a specific commodity or a specific service corresponding to the at least one specific commodity and service information provided from theserver 200.

또한, 상기 결제 기능이 정상적으로 수행 완료된 이후, 결제 완료된 적어도 하나의 특정 상품 및 서비스 정보 중에서, 미리 설정된 배송 상품이 포함된 경우, 상기 구매 단말(100)은 해당 회원 정보에 포함된 배송지 정보에 해당하는 배송지에서 가장 가까운 매장 중 상기 배송 상품의 재고가 있는 매장의 매장 서버(500)로부터 해당 배송 상품을 제공받는다.In addition, if at least one specific product and service information that has been settled after the settlement function is normally performed is included in the predetermined set delivery item, thepurchase terminal 100 may set the corresponding item And receives the corresponding delivery commodity from thestore server 500 of the store in which the commodity is in stock among the stores closest to the destination.

또한, 상기 결제 기능이 정상적으로 수행 완료된 이후, 결제 완료된 적어도 하나의 특정 상품 및 서비스 정보 중에서, 미리 설정된 핸드 캐리 상품이 포함된 경우, 상기 구매 단말(100)은 해당 회원 정보에 포함된 배송지 정보에 해당하는 배송지에서 가장 가까운 매장 중 상기 배송 상품의 재고가 있는 매장의 매장 서버(500)로부터 제공되는 핸드 캐리 상품의 현장 수령에 필요한 안내 정보, 바코드나 QR 코드 형태 등의 식별 코드 등을 포함하는 안내 메시지를 수신한다.In addition, if the preset hand-held merchandise is included among at least one specific merchandise and service information that has been settled after the settlement function is normally performed, the purchasing terminal 100 stores the hand- A guide message including information such as guide information necessary for on-site reception of the hand-held merchandise provided from thestore server 500 of the store in which the delivery merchandise is in stock, and an identification code such as bar code or QR code form, .

또한, 상기 구매 단말(100)은 상기 수신된 안내 정보, 바코드나 QR 코드 형태 등의 식별 코드 등을 포함하는 안내 메시지를 표시한다.Also, the purchasingterminal 100 displays a guidance message including the received guidance information, an identification code such as a barcode or a QR code form, and the like.

또한, 상기 구매 단말(100)의 사용자가 해당 특정 상품이나 특정 서비스를 제공하는 매장에 직접 방문한 경우, 상기 매장 서버(500)에서 상기 구매 단말(100)에 저장된 상기 바코드나 QR 코드 형태 등의 식별 코드를 인증(또는 인식)한 후, 상기 핸드 캐리 상품을 상기 구매 단말(100)의 사용자에게 제공할 수 있다.When the user of the purchasingterminal 100 directly visits the store providing the specific product or the specific service, thestore server 500 identifies the barcode or QR code form stored in the purchasingterminal 100 After the code is authenticated (or recognized), the hand-held product can be provided to the user of the purchasingterminal 100.

또한, 상기 결제 기능이 정상적으로 수행 완료된 이후, 멀티 상품 할인 쿠폰 발급이 요청된 경우, 상기 구매 단말(100)은 상기 서버(200)로부터 발급되는(또는 전송/제공되는) 상기 특정 상품이나 특정 서비스에 대응하는 멀티 상품 할인 쿠폰을 수신한다. 여기서, 상기 멀티 상품 할인 쿠폰은 상기 특정 상품 및 서비스 정보에 대응하는 정상가 금액, 할인액, 유효 기간, 상기 특정 상품 및 서비스 정보와 관련한 복수의 상품 및 서비스 아이템 코드(또는 상기 특정 상품 및 서비스 정보와 관련한 복수의 상품 및 서비스 정보/상기 특정 상품 및 서비스 정보와 동일한 카테고리 내의 복수의 상품 및 서비스 정보), 고유 번호(또는 멀티 상품 할인 쿠폰의 고유 번호) 등을 포함한다. 또한, 상기 멀티 상품 할인 쿠폰은 상기 특정 상품 및 서비스 정보와 관련한 복수의 상품 및 서비스 아이템 코드를 하나의 코드로 그룹화한 상태이며, 바코드 형태, QR 코드 형태, 문자열 형태 등으로 생성한다. 또한, 상기 복수의 상품 및 서비스 정보는 각각 상품명(또는 서비스명), 상품 고유 코드(또는 서비스 고유 코드), 상품 이미지(또는 서비스 기본 이미지), 상품 설명 정보(또는 서비스 설명 정보), 상품/서비스에 대한 체험 정보, 상품/서비스에 대한 평가 정보, 해당 상품을 판매하는(또는 해당 서비스를 제공하는) 매장의 위치 정보, 매장의 전화번호 등을 포함한다. 이때, 상기 문자열 형태의 멀티 상품 할인 쿠폰은 숫자, 문자, 특수 문자, 기호 중 적어도 하나의 조합에 의해 생성될 수 있다. 여기서, 상기 상품 아이템 코드는 상기 상품 정보 내의 상품 고유 코드(또는 서비스 고유 코드)에 대응한다. 또한, 상기 상품/서비스에 대한 체험 정보는 상기 서버(200)에 미리 등록한 회원의 단말에서 작성한 체험 정보, 상기 서버(200)에서 제공하는 해당 상품/서비스와 관련한 멀티 상품 할인 쿠폰을 구매한 단말에서 작성한 체험 정보 등일 수 있다.If the multi-commodity discount coupon issuance request is made after the payment function is normally performed, the purchasingterminal 100 may receive the multi-commodity discount coupon from theserver 200 by using the specific commodity or the specific service And receives a corresponding multi-commodity discount coupon. Here, the multi-commodity discount coupon includes a plurality of commodity and service item codes (or related to the specific commodity and service information) corresponding to the specific commodity and service information, a normal value amount, a discount amount, an expiration date, A plurality of goods and service information / a plurality of goods and service information in the same category as the specific goods and service information), a unique number (or a unique number of a multi-product discount coupon), and the like. The multi-commodity discount coupon is formed by grouping a plurality of commodities and service item codes related to the specific commodity and service information into a single code, and the commodity is generated in a barcode form, a QR code form, a string form, or the like. Each of the plurality of goods and service information includes at least one of a product name (or a service name), a product unique code (or a service unique code), a product image (or a service basic image) Experience information on the product / service, information on the location of a store selling the product (or providing the service), a phone number of the store, and the like. At this time, the multi-commodity discount coupon of the string form can be generated by a combination of at least one of numbers, letters, special characters, and symbols. Here, the merchandise item code corresponds to a merchandise unique code (or service unique code) in the merchandise information. In addition, the experience information on the goods / service may include experience information created in the terminal of the member registered in advance in theserver 200, information on the multi-product discount coupon related to the product / service provided by theserver 200 Experience information created and the like.

또한, 상기 구매 단말(100)은 상기 멀티 상품 할인 쿠폰의 구매에 따라 상기 서버(200)로부터 추가로 제공되는 무료 할인 쿠폰, 할인 쿠폰, 특정 쇼핑몰의 상품권, 재래 시장의 상품권 등을 수신한다.In addition, the purchasingterminal 100 receives a free discount coupon, a discount coupon, a gift certificate of a specific shopping mall, a gift certificate of a traditional market, etc., which are additionally provided from theserver 200 according to the purchase of the multi-product discount coupon.

또한, 상기 구매 단말(100)은 상기 수신된 멀티 상품 할인 쿠폰을 저장 및 표시한다.Also, the purchasing terminal 100 stores and displays the received multi-commodity discount coupon.

또한, 상기 구매 단말(100)은 상기 수신된 무료 할인 쿠폰, 할인 쿠폰, 특정 쇼핑몰의 상품권, 재래 시장의 상품권 등을 저장 및 표시한다.In addition, the purchasing terminal 100 stores and displays the received free discount coupon, discount coupon, gift certificate of a specific shopping mall, gift certificate of a traditional market, and the like.

이와 같이, 상기 배송 정보에 멀티 상품 할인 쿠폰 발급이 포함된 경우, 상기 구매 단말(100)은 멀티 상품 할인 쿠폰에 대해서 미리 설정된 판매 수량 범위(또는 판매/결제 금액 범위)(예를 들어 100개 이내 또는, 2천만원 이내) 내에서 상기 멀티 상품 할인 쿠폰을 구매할 수 있다.If the delivery information includes the issuance of the multi-commodity discount coupon, the purchasingterminal 100 sets a sales quantity range (or a sales / payment amount range) (for example, within 100 Or within 20 million won) of the multi-commodity discount coupon.

또한, 이와 같이, 구매 단말(100)에서 구매할 수 있는 멀티 상품 할인 쿠폰의 수량 또는 금액을 제한함으로써, 부정 거래를 방지할 수 있다.In addition, by limiting the quantity or amount of the multi-commodity discount coupons that can be purchased at the purchasingterminal 100, it is possible to prevent fraudulent transactions.

또한, 상기 구매 단말(100)은 상기 서버(200)로부터 전송되는 통관 리시트를 수신한다. 여기서, 상기 통관 리스트는 상기 적어도 하나의 특정 상품에 대한 상품명, 상품의 고유 식별 정보, HS 코드, 배송료, 과세 운임 정보(관세, 부가세, 특별소비세, 기준 초과금, 교육세, 농어촌특별세, 주세 등 포함) 등을 포함한다.Also, the purchasingterminal 100 receives the customs receipt transmitted from theserver 200. Here, the customs clearance list includes a product name, a unique identification information of the product, an HS code, a shipping fee, taxable fare information (including tariff, VAT, special consumption tax, standard excess, education tax, And the like.

또한, 상기 구매 단말(100)은 상기 수신된 통관 리스트를 표시한다.Also, the purchasingterminal 100 displays the received clearance list.

또한, 상기 구매 단말(100)은 상기 적어도 하나의 특정 상품 및 서비스에 대해서, 해당 특정 상품이나 특정 서비스의 구매에서부터 도착(또는 쿠폰 발급)까지의 체험 정보, 평가 정보, 상기 구매 단말(100)의 식별 정보 등을 상기 서버(200)에 전송한다.In addition, the purchasingterminal 100 may receive experience information from the purchase of the specific product or specific service to the arrival (or coupon issuance), evaluation information, Identification information and the like to theserver 200.

또한, 상기 구매 단말(100)의 현재 위치 정보가 상기 구매 단말(100)에 저장된 멀티 상품 할인 쿠폰을 사용할 수 있는 지역(또는 특정 국가 내의 지역) 내에 위치하는 경우, 상기 구매 단말(100)은 해당 구매 단말(100)에 저장된 멀티 상품 할인 쿠폰을 사용할 수 있는 하나 이상의 매장 정보(또는 매장의 위치 정보)를 표시한다.When the current location information of the purchasingterminal 100 is located in an area where the multi-commodity discount coupon stored in the purchasingterminal 100 can be used (or a region within a specific country), the purchasing terminal 100 (Or location information of the store) in which the multi-commodity discount coupon stored in the purchasingterminal 100 can be used.

또한, 구매 단말(100)에 표시되는 해당 구매 단말(100)에 저장된 멀티 상품 할인 쿠폰을 사용할 수 있는 하나 이상의 매장 정보 중에서 특정 매장 정보가 선택되는 경우, 상기 구매 단말(100)은 상기 구매 단말(100)의 현재 위치 정보와 상기 선택된 특정 매장 정보(또는 특정 매장의 위치 정보)를 근거로 상기 구매 단말(100)의 현재 위치에서 해당 특정 매장 정보에 대응하는 매장까지의 길 안내 정보를 생성한다. 이때, 상기 구매 단말(100)은 상기 서버(200)와의 연동에 의해, 상기 생성된 길 안내 정보 상의 경로로부터 미리 설정된 거리 이내로 인접한 하나 이상의 추천 정보를 확인(또는 생성)할 수도 있다. 여기서, 상기 추천 정보는 상기 멀티 상품 할인 쿠폰을 사용할 수 있는 매장 정보일 수 있다. 이때, 상기 길 안내 정보는 상기 서버(200)와의 연동에 의해 3D 파노라마 영상 정보 형태로 생성될 수도 있다.When the specific store information is selected from among the one or more store information that can be used in the multi-commodity discount coupon stored in the purchasingterminal 100 displayed on the purchasingterminal 100, 100 from the current location of the purchasingterminal 100 to the store corresponding to the specific store information based on the current location information of the selected store information and the selected specific store information (or the location information of the specific store). At this time, the purchasingterminal 100 may confirm (or generate) one or more adjacent recommendation information within a predetermined distance from the route on the generated route guidance information by interlocking with theserver 200. [ Here, the recommendation information may be store information on which the multi-commodity discount coupon can be used. At this time, the route guidance information may be generated in 3D panorama image information form by interlocking with theserver 200.

또한, 상기 구매 단말(100)은 상기 생성된 길 안내 정보, 상기 생성된 하나 이상의 추천 정보 등을 표시한다.Also, the purchasingterminal 100 displays the generated route guidance information, the generated one or more recommendation information, and the like.

이와 같이, 상기 구매 단말(100)은 3D 파노라마 영상, 아바타(또는 이모티콘) 등을 활용하여, 가상 현실적으로 상기 구매 단말(100)의 사용자의 동선을 고려하여 오프라인 매장 방문 시 해당 아바타를 따라가도록 길 안내 정보를 제공함으로써, 흥미를 유발시키며 사용자의 편의성을 향상시킬 수 있다.In this way, the purchasingterminal 100 uses the 3D panorama image, the avatar (or the emoticon), etc. to consider the moving line of the user of the purchasingterminal 100 as a virtual reality, By providing information, it can generate interest and improve user's convenience.

또한, 판매 단말(400)이 구비된 매장에서 특정 상품 및/또는 서비스를 제공받은 이후 상기 구매 단말(100)에 저장된 멀티 상품 할인 쿠폰을 사용하고자 하는 경우, 상기 구매 단말(100)은 상기 서버(200), 상기 결제 서버(300) 및 상기 판매 단말(400) 간의 연동에 의해, 상기 구매 단말(100)에 저장된 멀티 상품 할인 쿠폰에 대한 사용 처리(또는 결제 처리) 기능을 수행한다.In addition, when the user desires to use the multi-commodity discount coupon stored in the purchasingterminal 100 after receiving the specific commodity and / or the service in the store provided with thesales terminal 400, (Or payment processing) function for the multi-commodity discount coupon stored in the purchasingterminal 100 by interlocking between thepayment server 300 and thesales terminal 400. [

또한, 상기 구매 단말(100)에 저장된 멀티 상품 할인 쿠폰에 대한 사용 처리가 완료된 경우, 상기 구매 단말(100)은 상기 구매 단말(100)에 저장된 멀티 상품 할인 쿠폰은 중복 사용(또는 재사용)이 금지되도록 폐기 처리한다.When the use processing for the multi-commodity discount coupon stored in the purchasingterminal 100 is completed, the purchasingterminal 100 does not allow the multi-commodity discount coupon stored in the purchasingterminal 100 to be reused (or reused) Dispose of it as much as possible.

또한, 상기 결제 기능이 정상적으로 수행 완료된 이후, 해당 상품권의 잔액이 있는 경우, 상기 구매 단말(100)은 상기 서버(200)로부터 전송되는 사용 가능 금액(또는 잔액 정보) 등을 포함하는 멀티 상품 할인 쿠폰을 표시하거나 또는, 상기 판매 단말(400)로부로 제공되는 영수증 등의 인쇄물을 통해 상기 서버(200)로부터 전송되는 사용 가능 금액(또는 잔액 정보) 등을 포함하는 멀티 상품 할인 쿠폰을 출력한다. 이때, 상기 사용 가능 금액은 직전(또는 이전) 사용 가능 금액에서 상기 결제 기능 수행에 따른 결제 금액을 차감한 상태의 금액일 수 있다.If there is a balance of the gift certificate after the payment function is normally performed, thepurchase terminal 100 may receive a multi-product discount coupon including the available amount (or balance information) transmitted from theserver 200, Or a usable amount (or balance information) transmitted from theserver 200 through a printed matter such as a receipt provided to thesales terminal 400. The multi-commodity discount coupon is displayed on the screen of thesales terminal 400. At this time, the usable amount may be an amount of the amount that can be subtracted from the immediately preceding (or previous) usable amount according to the payment function.

또한, 상기 결제 기능이 정상적으로 수행 완료된 이후, 상기 구매 단말(100)은 상기 판매 단말(400)로부터 전송(또는 발급)되는 미리 설정된 포인트 및/또는 할인 쿠폰을 수신한다.Further, after the settlement function is normally completed, the purchasingterminal 100 receives a predetermined point and / or a discount coupon transmitted (or issued) from thesales terminal 400.

또한, 상기 구매 단말(100)은 상기 수신된 미리 설정된 포인트 및/또는 할인 쿠폰을 표시 및 저장한다.In addition, the purchasingterminal 100 displays and stores the received preset points and / or discount coupons.

또한, 상기 구매 단말(100)은 상기 멀티 상품 할인 쿠폰에 포함된 유효 기간을 근거로 해당 유효 기간이 미리 설정된 기간(예를 들어 유효 기간으로부터 한달, 유효 기간으로부터 15일, 유효 기간으로부터 7일, 유효 기간으로부터 3일, 유효 기간으로부터 1일 등 포함)에 도래하고 해당 상품권 정보 내에 사용 가능 금액(또는 잔액)이 남아 있는 경우, 멀티 상품 할인 쿠폰의 잔액이 남아 있음을 나타내는 정보, 유효 기간 등을 포함하는 정보를 상기 미리 설정된 기간마다 표시한다. 이때, 상기 멀티 상품 할인 쿠폰의 잔액이 남아 있음을 나타내는 정보, 유효 기간 등을 포함하는 정보는 상기 서버(200)로부터 제공될 수도 있다.Also, the purchasingterminal 100 may set the validity period included in the multi-commodity discount coupon as a predetermined period (for example, one month from the validity period, 15 days from the validity period, seven days from the validity period, (3 days from the expiration date, 1 day from the expiration date, etc.), and if the usable amount (or balance) remains in the voucher information, information indicating that the balance of the multi-commodity discount coupon remains, And displays the included information every predetermined period. At this time, information including information indicating that the balance of the multi-commodity discount coupon remains, valid period, and the like may be provided from theserver 200.

또한, 상기 구매 단말(100)은 해당 구매 단말(100)의 사용자 입력에 따른 특정 상품/서비스에 대한 체험 정보, 특정 상품/서비스에 대한 평가 정보 등을 수신한다.In addition, the purchasingterminal 100 receives experience information on a specific commodity / service according to a user input of the purchasingterminal 100, evaluation information on a specific commodity / service, and the like.

이때, 상기 구매 단말(100)은 특정 상품/서비스에 대해서 미리 설정된 개수 이내의 체험 정보, 평가 정보 등을 수신하도록 구성하여, 동일 사용자에 의한 다량의 체험 정보나 평가 정보 제공을 방지하여, 해당 체험 정보, 평가 정보 등에 대한 신뢰성을 높일 수 있다.At this time, the purchasingterminal 100 is configured to receive experiential information, evaluation information, and the like within a preset number of specific goods / services, thereby preventing a large amount of experiential information and evaluation information from being provided by the same user, Information, evaluation information, and the like can be increased.

또한, 상기 구매 단말(100)은 상기 수신된 상품/서비스에 대한 체험 정보, 상품/서비스에 대한 평가 정보, 상기 구매 단말(100)의 식별 정보 등을 상기 서버(200)에 전송한다.In addition, the purchasingterminal 100 transmits the experience information on the received goods / service, evaluation information on the goods / services, identification information of the purchasingterminal 100, and the like to theserver 200.

상기 서버(200)는 상기 구매 단말(100), 상기 결제 서버(300), 상기 판매 단말(400), 상기 매장 서버(500) 등과 통신한다.Theserver 200 communicates with the purchasingterminal 100, thepayment server 300, thesales terminal 400, thestore server 500, and the like.

또한, 상기 서버(200)는 상기 구매 단말(100)과의 연동에 의해, 상기 구매 단말(100)의 사용자에 대한 회원 가입 절차를 수행한다.In addition, theserver 200 performs the membership registration procedure for the user of the purchasingterminal 100 by interlocking with the purchasingterminal 100.

또한, 상기 서버(200)는 상기 판매 단말(400)과의 연동에 의해, 상기 판매 단말(400)의 사용자에 대한 회원 가입 절차를 수행한다.In addition, theserver 200 performs the membership registration procedure for the user of thesales terminal 400 by interlocking with thesales terminal 400.

또한, 상기 서버(200)는 해당 서버(200)에 포함된 복수의 카메라(미도시)를 통해 오프라인 또는 가두 매장 상의 하나 이상의 매장, 해당 매장 내의 상품, 전시 상품, POP, 전단, 배너 광고, 게시판 광고, 포스터 광고, 간판, 가격표 등을 포함하는 제 1 영상과 제 2 영상을 촬영한다. 여기서, 상기 매장은 백화점, 쇼핑몰, 아울렛, 음식점, 병원, 빌딩(또는 건축물) 등을 포함한다. 이때, 상기 서버(200)는 상기 제 1 영상과 제 2 영상을 촬영하는 지점의 위치 정보(예를 들어 GPS 위치 정보 등 포함)를 확인하고, 상기 확인된 위치 정보를 상기 촬영한 제 1 영상과 제 2 영상과 매칭(또는 연동)하여 저장한다.In addition, theserver 200 may store at least one store on an offline or street store through a plurality of cameras (not shown) included in theserver 200, a merchandise, an exhibition merchandise, a POP, a flyer, A first image and a second image including an advertisement, a poster advertisement, a signboard, a price tag, and the like are photographed. Here, the store includes a department store, a shopping mall, an outlet, a restaurant, a hospital, a building (or a building), and the like. At this time, theserver 200 confirms position information (for example, GPS position information and the like) of a point at which the first image and the second image are photographed, and transmits the identified position information to the first image (Or interlocked) with the second image and stores the same.

또한, 상기 서버(200)는 상기 촬영된 제 1 영상 및 제 2 영상에 대해 픽셀의 방향성을 기준으로 상기 제 1 영상 및 제 2 영상이 중첩되는 중첩 영역을 획득한다.In addition, theserver 200 acquires the overlapped region in which the first image and the second image are superimposed on the photographed first image and the second image based on the directionality of the pixel.

또한, 상기 서버(200)는 상기 획득된 중첩 영역을 기준으로 상기 제 1 영상 및 제 2 영상을 합성하여 예비 파노라마 영상을 생성한다. 이때, 상기 서버(200)는 미리 공지된 다양한 합성 방법에 의해서 상기 촬영된 제 1 영상 및 제 2 영상을 합성하여 예비 파노라마 영상을 생성할 수 있다. 이때, 상기 생성되는 예비 파노라마 영상은 상기 예비 파노라마 영상에 포함된 제 1 객체, 상품, 지점(point)(또는 좌표) 등에 대한 위치 정보를 포함(또는 연동/매칭)한다.In addition, theserver 200 generates the preliminary panoramic image by synthesizing the first image and the second image based on the obtained overlapping area. At this time, theserver 200 may generate the preliminary panoramic image by synthesizing the photographed first image and the second image by various previously synthesized methods. At this time, the generated preliminary panoramic image includes (or interlocks / matches) positional information about a first object, a product, a point (or coordinates) included in the preliminary panoramic image, and the like.

즉, 상기 예비 파노라마 영상은 영상뿐만 아니라, 추후 임의의 단말의 위치 정보(예를 들어 구매 단말(100)의 위치 정보 등 포함)에 대응하는 3D 파노라마 영상을 검색(또는 확인)할 수 있도록 해당 예비 파노라마 영상에 포함된 제 1 객체, 상품, 지점 등에 대한 위치 정보를 포함하도록 구성한다.That is, the preliminary panoramic image can be used to search (or check) a 3D panoramic image corresponding to not only the image but also position information of an arbitrary terminal (for example, the location information of the purchasing terminal 100) And position information on a first object, a product, a point, and the like included in the panoramic image.

본 발명의 실시예에서는, 상기 획득된 중첩 영역을 기준으로 상기 제 1 영상 및 제 2 영상을 합성하여 상기 예비 파노라마 영상을 생성하는 것으로 설명하고 있으나, 이에 한정되는 것은 아니며, 상기 서버(200)는 미리 공지된 다양한 합성 방법에 의해서 상기 촬영된 제 1 영상 및 제 2 영상을 합성하여 상기 예비 파노라마 영상을 생성할 수도 있다.In the embodiment of the present invention, the preliminary panoramic image is generated by combining the first image and the second image on the basis of the obtained overlap region, but the present invention is not limited thereto, The preliminary panoramic image may be generated by synthesizing the photographed first image and the second image by various previously known synthesis methods.

이때, 상기 서버(200)는 별도로 구성되는 복수의 카메라(예를 들어 3D 파노라마 영상을 촬영하기 위한 특수 장치, 특수 차량 등에 구성된 복수의 카메라)를 통해서 촬영된 제 1 영상 및 제 2 영상을 근거로 상기 예비 파노라마 영상을 생성할 수도 있다.At this time, theserver 200 may be based on a first image and a second image photographed through a plurality of cameras (for example, a special device for photographing a 3D panorama image, a plurality of cameras configured by a special vehicle, etc.) The preliminary panoramic image may be generated.

또한, 상기 서버(200)는 상기 예비 파노라마 영상 내에 포함된 하나 이상의 제 1 객체를 각각 인식한다. 여기서, 상기 제 1 객체는 상기 오프라인 상에 위치하는 각각의 매장일 수도 있고, 상기 오프라인 상에 위치하거나 각 매장 내에 위치하는 전시 상품, POP, 전단, 배너 광고, 게시판 광고, 포스터 광고, 간판, 가격표 등을 포함할 수 있다. 이때, 본 발명에서의 상기 제 1 객체는 각 매장에서 제공하는 상품 및 서비스를 제외한 상태일 수 있다. 또한, 상기 전시 상품, POP, 전단, 배너 광고, 게시판 광고, 포스터 광고, 간판 등은 할인 행사 코드를 나타내며, 상기 가격표는 상품 코드를 나타낼 수 있다.In addition, theserver 200 recognizes one or more first objects included in the preliminary panoramic image. Here, the first object may be a store located on the off-line, an exhibition product located on the off-line or located in each store, a POP, a flyer, a banner advertisement, a bulletin board advertisement, a poster advertisement, And the like. At this time, the first object in the present invention may be a state excluding goods and services provided in each store. In addition, the exhibition goods, the POP, the flyer, the banner advertisement, the bulletin board advertisement, the poster advertisement, the signboard, and the like represent the discount event code, and the price tag can represent the product code.

즉, 상기 서버(200)는 상기 예비 파노라마 영상 내에 포함된 하나 이상의 매장을 각각 인식하거나, 상기 예비 파노라마 영상 내에 포함된 POP, 전단, 배너 광고, 게시판 광고, 포스터 광고, 간판, 가격표 등을 각각 인식한다.That is, theserver 200 recognizes one or more stores included in the preliminary panoramic image, recognizes POPs, flyers, banner advertisements, poster advertisements, poster advertisements, signboards, price tags, etc. contained in the preliminary panoramic image do.

또한, 상기 서버(200)는 상기 인식된 하나 이상의 제 1 객체에 각각 대응하는 제 1 코드를 상기 예비 파노라마 영상 내의 해당 제 1 객체 상의 일부 영역에 추가(또는 삽입)하거나 또는 상기 제 1 객체로부터 미리 설정된 거리 이내에 인접하게 추가(또는 삽입)하여 3D 파노라마 영상을 생성한다. 여기서, 상기 제 1 코드는 바코드, QR 코드, 문자열 코드 등의 형태이며, 상기 인식된 제 1 객체와 관련한 하나 이상의 상품 정보, 하나 이상의 서비스 정보 등을 포함한다. 또한, 상기 문자열 코드는 언어별 문자, 숫자, 기호 등의 조합에 의해 구성할 수 있다. 이때, 상기 상품 정보는 상품명, 상품 고유 코드, 상품 이미지, 상품 설명 정보, 상품에 대한 체험 정보, 상품에 대한 평가 정보, 해당 상품을 판매하는 매장의 위치 정보, 매장의 전화번호 등을 포함한다. 또한, 상기 서비스 정보는 서비스명, 서비스 고유 코드, 서비스 기본 이미지, 서비스 설명 정보, 서비스에 대한 체험 정보, 서비스에 대한 평가 정보, 해당 서비스를 제공하는 매장의 위치 정보, 매장의 전화번호, 예약 정보, 상담 정보, 진료 시간 정보 등을 포함한다. 또한, 상기 생성되는 3D 파노라마 영상은 상기 3D 파노라마 영상에 포함된 제 1 객체, 상품, 지점(또는 좌표) 등에 대한 위치 정보를 포함(또는 연동/매칭)한다.In addition, theserver 200 may add (or insert) a first code corresponding to each of the recognized one or more first objects to a partial area on the corresponding first object in the preliminary panoramic image, The 3D panorama image is created by adding (or inserting) adjacent within the set distance. Here, the first code is in the form of a bar code, a QR code, a character code, etc., and includes one or more goods information, one or more service information, etc. related to the recognized first object. In addition, the character string code can be constituted by a combination of letters, numbers, symbols, etc. in each language. At this time, the product information includes a product name, a product unique code, a product image, product description information, experience information on the product, evaluation information on the product, location information of the store selling the product, and telephone number of the store. The service information may include at least one of a service name, a service unique code, a service basic image, service description information, experience information about the service, evaluation information about the service, location information of the store providing the service, , Consultation information, and treatment time information. The generated 3D panorama image includes (or interlocks / matches) position information about a first object, a product, a point (or coordinates) included in the 3D panorama image, and the like.

또한, 상기 제 1 코드를 나타내는 색상은 검정색 외에도 다양한 색상(color)으로 나타낼 수 있다. 이때, 상기 제 1 코드가 바코드인 경우, 콰이어트 존(quiet zone), 패턴(또는 바(bar)) 중 적어도 하나의 색상을 다양한 색상으로(colorful) 설정할 수 있다. 또한, 상기 제 1 코드가 QR 코드인 경우, 상기 QR 코드를 구성하는 파인딩 패턴(finding pattern), 타이밍 패턴(timing pattern), 정렬 패턴(alignment pattern), 콰이어트 존, 데이터 영역(에러 정정 코드 영역 포함) 중 적어도 하나의 색상을 다양한 색상으로 설정할 수 있다. 또한, 상기 제 1 코드가 문자열 코드인 경우, 해당 문자열의 색상을 다양한 색상으로 설정할 수 있다.In addition, the color representing the first code may be expressed in various colors in addition to black. At this time, when the first code is a bar code, at least one of a quiet zone and a pattern (or bar) may be set to be colorful. If the first code is a QR code, a finding pattern, a timing pattern, an alignment pattern, a Quiet zone, a data area (including an error correction code area) included in the QR code ) Can be set to various colors. In addition, when the first code is a string code, the color of the string can be set to various colors.

또한, 상기 제 1 코드를 나타내는 색상은 검정색이나 다른 다양한 색상으로 나타내고, 해당 제 1 코드의 배경색을 흰색 외에도 다양한 색상으로 나타낼 수도 있다. 예를 들어, 상기 제 1 코드가 QR 코드인 경우, 상기 QR 코드를 구성하는 파인딩 패턴, 타이밍 패턴, 정렬 패턴, 데이터 영역 중 적어도 하나의 색상을 노란색으로 표시하고, 상기 QR 코드의 배경색(또는 QR 코드의 콰이어트 존)을 빨간색으로 설정하는 것과 같이 구성할 수도 있다.In addition, the color representing the first code may be represented by black or various other colors, and the background color of the first code may be represented by various colors in addition to white. For example, if the first code is a QR code, the color of at least one of a finding pattern, a timing pattern, an alignment pattern, and a data area constituting the QR code is displayed in yellow, and the background color (or QR Quot; zone " of the code) to red.

이와 같이, 제 1 코드의 색상이나 바탕색을 다양한 색상으로 설정하여, 3D 파노라마 영상 내에서 해당 바코드의 식별이 용이하도록 구성할 수 있다.In this way, the color or background color of the first code can be set to various colors, and the barcode can be easily identified in the 3D panorama image.

또한, 상기 서버(200)는 언어별 특성을 고려하여 언어별로 상기 3D 파노라마 영상을 생성할 수도 있다.In addition, theserver 200 may generate the 3D panoramic image for each language in consideration of language-specific characteristics.

본 발명의 실시예에 따라 생성되는 3D 파노라마 영상은 상기 3D 파노라마 영상에 포함된 제 1 객체, 상품, 지점(또는 좌표) 등에 대한 위치 정보를 포함(또는 연동/매칭)한다.The 3D panoramic image generated according to the embodiment of the present invention includes (or interlocks / matches) position information about a first object, a product, a point (or coordinates) included in the 3D panorama image, and the like.

즉, 상기 3D 파노라마 영상은 영상뿐만 아니라, 추후 임의의 단말(예를 들어 상기 구매 단말(100)의 위치 정보 등 포함)에 대응하는 3D 파노라마 영상을 검색(또는 확인)할 수 있도록 해당 3D 파노라마 영상에 포함된 제 1 객체, 상품, 지점 등에 대한 위치 정보를 포함하도록 구성한다.That is, the 3D panorama image is not only the 3D panorama image but also the 3D panorama image corresponding to the arbitrary terminal (for example, the location information of the purchasing terminal 100) And location information about a first object, a commodity, a point,

이에 따라, 상기 임의의 단말에서 위치 정보에 대응하는 3D 파노라마 영상을 요청하는 경우, 상기 서버(200)는 미리 저장된 하나 이상의 객체, 상품, 지점 등의 위치 정보를 포함하는 복수의 3D 파노라마 영상 정보 중에서 상기 임의의 단말로부터 요청된 특정 위치 정보에 대응하는 3D 파노라마 영상 정보를 확인하고, 상기 확인된 3D 파노라마 영상 정보를 해당 단말에 제공할 수 있다.Accordingly, when requesting a 3D panorama image corresponding to the position information from the arbitrary terminal, theserver 200 selects one of the plurality of 3D panorama image information including position information of one or more objects, products, The 3D panorama image information corresponding to the specific location information requested from the arbitrary terminal can be confirmed and the 3D panorama image information can be provided to the corresponding terminal.

예를 들어, 상기 서버(200)는 복수의 객체 및/또는 상품의 위치 정보와 연동된 3D 파노라마 영상 정보 중에서, 상기 임의의 단말의 위치 정보인 서울특별시 강남구 역삼로 123-45에 대응하는 객체가 포함된 3D 파노라마 영상 정보를 확인할 수 있다.For example, in theserver 200, an object corresponding to 123-45 of Gangnam-gu, Gangnam-gu, Seoul, which is the location information of the arbitrary terminal, among the 3D panoramic image information linked with the location information of a plurality of objects and / You can check the included 3D panorama image information.

또한, 상기 복수의 객체 및/또는 상품의 위치 정보와 연동된 3D 파노라마 영상 정보 중에서, 상기 임의의 단말의 위치 정보인 서울특별시 강남구 역삼로 123-45에 대응하는 객체 및/또는 상품이 없는 경우, 상기 서버(200)는 상기 임의의 단말의 위치 정보와 유사한(예를 들어 서울특별시 강남구 역삼로 123-44 또는 123-46 등 포함) 객체 및/또는 상품이 포함된 3D 파노라마 영상 정보를 확인할 수도 있다.If there is no object and / or product corresponding to 123-45 Gangnam-gu, Gangnam-gu, Seoul, which is the location information of the arbitrary terminal, among the 3D panoramic image information interlocked with the location information of the plurality of objects and / Theserver 200 may check the 3D panoramic image information including the object and / or the commodities similar to the position information of the arbitrary terminal (for example, 123-44 or 123-46 in Gangnam-gu, Seoul, Korea) .

또한, 상기 복수의 3D 파노라마 영상 정보가 미리 설정된 간격으로 구성된 GPS 정보와 매칭된 경우, 상기 서버(200)는 상기 임의의 단말의 위치 정보와 상기 미리 설정된 간격으로 구성된 GPS 정보를 근거로 상기 임의의 단말의 위치 정보에 대응하는(또는 유사한/관련한) 하나의 3D 파노라마 영상 정보를 확인할 수도 있다.When the plurality of 3D panoramic image information is matched with the GPS information configured at predetermined intervals, theserver 200 generates the arbitrary 3D panorama image information based on the position information of the arbitrary terminal and the GPS information configured at the predetermined interval It is possible to confirm one 3D panorama image information corresponding to (or similar / related to) the position information of the terminal.

이외에도, 상기 서버(200)에 미리 저장된 복수의 3D 파노라마 영상 정보 중에서 특정 위치 정보에 대응하는 3D 파노라마 영상 정보를 확인하는 방법은 지도 검색 서비스에서 활용되는 기술들을 적용할 수도 있다.In addition, the 3D panorama image information corresponding to the specific position information among the plurality of 3D panorama image information stored in advance in theserver 200 may be applied to the techniques utilized in the map search service.

이와 같이, 본 발명에 의해 생성되는 3D 파노라마 영상 정보는 위치 정보와 연동된 상태로, 임의의 단말로부터 전송되는 특정 위치 정보에 대해서, 상기 서버(200)에 미리 저장된 복수의 3D 파노라마 영상 정보 중에서 상기 특정 위치 정보에 대응하는 3D 파노라마 영상 정보를 확인하고, 상기 확인된 3D 파노라마 영상 정보를 상기 특정 위치 정보를 전송한 해당 단말에 제공할 수 있다.As described above, the 3D panorama image information generated by the present invention is interlocked with the position information, and the 3D panorama image information, which is stored in advance in theserver 200, for specific position information transmitted from an arbitrary terminal, The 3D panorama image information corresponding to the specific location information can be confirmed and the 3D panorama image information can be provided to the terminal that has transmitted the specific location information.

또한, 상기 서버(200)는 상기 인식된 객체(또는 객체의 고유 식별 정보)와 상기 생성된 코드를 연동하여 저장한다.Also, theserver 200 stores the generated code in association with the recognized object (or the unique identification information of the object).

이때, 상기 서버(200)는 상기 생성된 제 1 코드의 외곽선을 상기 인식된 제 1 객체의 외곽선까지 연장 형성한다. 즉, 상기 서버(200)는 상기 생성된 제 1 코드의 외곽선의 좌표값을 상기 인식된 제 1 객체의 외곽선의 좌표값으로 매칭하여 저장한다.At this time, theserver 200 extends the outline of the generated first code to the outline of the recognized first object. That is, theserver 200 stores the coordinate value of the outline of the generated first code with the coordinate value of the outline of the recognized first object and stores the coordinate value.

이와 같이, 상기 제 1 코드의 외곽선을 상기 제 1 코드에 대응하는 제 1 객체의 외곽선으로 연장 형성함에 따라, 추후 해당 제 1 객체를 선택할 경우에도, 해당 제 1 코드를 선택한 효과를 얻을 수 있다.In this way, by extending the outline of the first code to the outline of the first object corresponding to the first code, it is possible to obtain the effect of selecting the first code even when the first object is selected later.

또한, 상기 서버(200)는 미리 설정된 주기(예를 들어 10초, 1분 등 포함)로 앞선 단계들을 반복적으로 수행하여, 새로운 3D 파노라마 영상을 생성한다.In addition, theserver 200 repeatedly performs the preceding steps with a predetermined period (for example, 10 seconds, 1 minute, etc.) to generate a new 3D panorama image.

즉, 상기 서버(200)는 미리 설정된 주기(예를 들어 10초, 1분 등 포함)로 상기 복수의 카메라를 통해 실시간으로 촬영되는 영상들을 합성하여 새로운 예비 파노라마 영상을 생성하고, 상기 생성된 새로운 예비 파노라마 영상 내에 포함된 하나 이상의 제 1 객체를 인식하고, 상기 인식된 하나 이상의 제 1 객체에 대응하는 제 1 코드를 상기 새로운 예비 파노라마 영상 내에 추가하여 상기 새로운 3D 파노라마 영상을 생성한다.That is, theserver 200 generates a new preliminary panoramic image by synthesizing images photographed in real time through the plurality of cameras at predetermined intervals (for example, 10 seconds, 1 minute, etc.) Recognizes one or more first objects included in the preliminary panoramic image, and adds the first code corresponding to the recognized one or more first objects to the new preliminary panoramic image to generate the new 3D panoramic image.

이때, 상기 생성된 새로운 예비 파노라마 영상 내에서 사람이 인식되는 경우, 상기 서버(200)는 상기 새로운 예비 파노라마 영상 내에서의 사람의 윤곽선을 획득(또는 추출)하고, 상기 새로운 예비 파노라마 영상 내에서 상기 인식된 사람을 제거하고, 상기 사람이 제거된 새로운 예비 파노라마 영상 내에 상기 인식된 하나 이상의 제 1 객체에 대응하는 제 1 코드 및 상기 획득된(또는 추출된) 사람의 윤곽선을 추가하여 상기 새로운 3D 파노라마 영상을 생성한다. 여기서, 상기 서버(200)는 상기 새로운 예비 파노라마 영상 내에서의 사람의 위치에 상기 획득된 사람의 윤곽선을 추가한다.At this time, when a person is recognized in the generated new preliminary panoramic image, theserver 200 acquires (or extracts) the outline of a person in the new preliminary panoramic image, and, in the new preliminary panoramic image, Removing the recognized person, adding a first code corresponding to the recognized one or more first objects and a contour of the acquired (or extracted) person in the new preliminary panorama image from which the person has been removed, And generates an image. Here, theserver 200 adds the obtained contour of the person to the position of the person in the new preliminary panorama image.

이와 같이, 상기 생성되는 새로운 예비 파노라마 영상 내에 사람이 포함된 경우, 상기 서버(200)는 개인 정보 보호를 위해서 상기 새로운 예비 파노라마 영상 내에 포함된 사람에 대해서 해당 사람의 윤곽선만을 유지하고, 사람의 윤곽선 내부 영역은 빈 공간으로 처리하거나 직전 단계에서 생성된 직전 예비 파노라마 영상의 화면으로 대체하도록 처리할 수 있다.In this way, when a person is included in the generated new preliminary panoramic image, theserver 200 keeps only the outline of the person included in the new preliminary panoramic image for personal information protection, The inner area may be processed as an empty space or replaced with a screen of the immediately preceding preliminary panoramic image generated in the immediately preceding step.

또한, 상기 서버(200)는 상기 생성된 새로운 3D 파노라마 영상과 앞서 생성된 3D 파노라마 영상(또는 상기 생성된 새로운 3D 파노라마 영상 정보와 앞서 생성된 3D 파노라마 영상 정보) 간의 차이를 확인한다.Also, theserver 200 confirms the difference between the generated new 3D panorama image and the previously generated 3D panorama image (or the generated new 3D panorama image information and the previously generated 3D panorama image information).

또한, 상기 서버(200)는 상기 확인된 차이를 상기 앞서 생성된 3D 파노라마 영상에 실시간으로 보상하여 최신의 3D 파노라마 영상을 유지한다.In addition, theserver 200 compensates for the identified difference in real time to the 3D panorama image generated in advance and maintains the latest 3D panorama image.

즉, 상기 생성된 새로운 3D 파노라마 영상과 상기 앞서 생성된 3D 파노라마 영상이 동일한 경우(또는 차이가 없는 경우), 상기 서버(200)는 상기 앞서 생성된 3D 파노라마 영상에 포함된 하나 이상의 제 1 객체 및/또는 상품의 상태에 변화가 없는 것으로 판단하여, 앞서 생성된 3D 파노라마 영상을 최신의 3D 파노라마 영상으로 그대로 유지한다.That is, if the generated new 3D panorama image and the previously generated 3D panorama image are the same (or there is no difference), theserver 200 generates one or more first objects included in the previously created 3D panorama image, / Or the state of the product is not changed, and the 3D panorama image generated in advance is maintained as the latest 3D panorama image.

또한, 상기 생성된 새로운 3D 파노라마 영상과 상기 앞서 생성된 3D 파노라마 영상에 차이가 있는 경우, 상기 서버(200)는 변화가 있는 부분(또는 상기 확인된 차이)을 상기 앞서 생성된 3D 파노라마 영상에 보상(또는 반영)하여, 비교 대상 3D 파노라마 영상 간의 차이가 보상된 3D 파노라마 영상을 최신의 새로운 3D 파노라마 영상으로 생성한다.When there is a difference between the generated new 3D panorama image and the previously generated 3D panorama image, theserver 200 compensates the changed part (or the identified difference) to the 3D panorama image generated in advance (Or reflects) the 3D panorama image to generate a new 3D panorama image that is compensated for the difference between the 3D panorama images to be compared.

또한, 상기 새로운 3D 파노라마 영상에 사람이 포함된 경우(또는 상기 새로운 3D 파노라마 영상에서 사람이 인식된 경우), 상기 서버(200)는 상기 앞서 생성된 3D 파노라마 영상에 상기 새로운 3D 파노라마 영상 내에 포함된 사람의 윤곽선을 추가하여, 상기 윤곽선 형태의 사람이 포함된 3D 파노라마 영상을 최신의 새로운 3D 파노라마 영상으로 생성할 수도 있다.If the new 3D panorama image includes a person (or a person is recognized in the new 3D panorama image), theserver 200 stores the 3D panorama image generated in the new 3D panorama image, A 3D panoramic image including a contour shaped person may be generated as a newest new 3D panoramic image by adding a contour of a person.

이와 같이, 상기 생성되는 새로운 3D 파노라마 영상 내에 사람이 포함된 경우, 상기 서버(200)는 개인 정보 보호를 위해서 상기 새로운 3D 파노라마 영상 내에 포함된 사람에 대해서 해당 사람의 윤곽선만을 유지하고, 사람의 윤곽선 내부 영역은 빈 공간으로 처리하거나 직전 단계에서 생성된 직전 3D 파노라마 영상의 화면으로 대체하도록 처리할 수 있다.In the case where a person is included in the generated new 3D panoramic image, theserver 200 maintains only the outline of the person included in the new 3D panoramic image for personal information protection, The inner area can be processed as an empty space or replaced with a screen of the immediately preceding 3D panorama image generated in the immediately preceding step.

또한, 상기 새로 생성되는 새로운 3D 파노라마 영상 내에 사람이 포함된 경우, 상기 서버(200)는 상기 새로운 3D 파노라마 영상 내에 포함된 사람을 윤곽선 처리하고 해당 윤곽선 처리된 사람 내부 영역은 직전 단계에서 생성된 직전 3D 파노라마 영상의 화면을 표시함에 따라, 해당 사람에 의해 3D 파노라마 영상 내의 객체, 상품 등이 가려져서 보이지 않게 되는 경우를 방지할 수 있다.When the new 3D panorama image includes a person, theserver 200 processes the person included in the new 3D panorama image, and the contour processed human inside area is displayed on the immediately preceding By displaying a screen of the 3D panoramic image, it is possible to prevent a case where an object, a product or the like in the 3D panoramic image is hidden by the person and is not seen.

이때, 상기 서버(200)는 상기 앞서 생성된 3D 파노라마 영상에서 차이가 있는 부분만을 보상할 수도 있고, 상기 앞서 생성된 3D 파노라마 영상 대신 상기 생성된 새로운 3D 파노라마 영상을 최신의 새로운 3D 파노라마 영상으로 대체할 수도 있다.At this time, theserver 200 may compensate only the difference in the 3D panorama image generated in advance, and replace the generated new 3D panorama image with the new 3D panorama image that is generated in advance, instead of the 3D panorama image generated in advance You may.

이와 같이, 상기 서버(200)는 백그라운드 모델링을 통해 실시간으로 최신의 3D 파노라마 영상을 유지할 수 있다.In this way, theserver 200 can maintain the latest 3D panorama image in real time through background modeling.

또한, 상기 서버(200)는 상기 구매 단말(100)로부터 전송되는 상기 영상 정보, 상기 구매 단말(100)의 식별 정보 등을 수신한다. 이때, 상기 서버(200)는 상기 구매 단말(100)로부터 전송되는 상기 구매 단말(100)의 위치 정보 등을 함께 수신할 수도 있다.Also, theserver 200 receives the image information transmitted from the purchasingterminal 100, the identification information of the purchasingterminal 100, and the like. At this time, theserver 200 may receive the location information of the purchasingterminal 100 transmitted from the purchasingterminal 100 together.

또한, 상기 서버(200)는 상기 수신된 영상 정보를 분석하여 상기 영상 정보 내에 포함된 객체를 인식한다. 여기서, 상기 객체는 상기 오프라인 또는 거리에 위치하는 각 매장에 구비된 할인행사코드(예를 들어 전시 상품, POP, 전단, 배너 광고, 게시판 광고, 포스터 광고, 간판 등 포함), 상품코드(예를 들어 가격표 등 포함) 등을 포함한다. 이때, 본 발명에서의 상기 객체는 각 매장에서 제공하는 상품 및 서비스를 제외한 상태일 수 있다. 또한, 상기 구매 단말(100)의 식별 정보는 MDN, 모바일 IP, 모바일 MAC, Sim(가입자 식별 모듈) 카드 고유정보, 시리얼번호 등을 포함한다.In addition, theserver 200 analyzes the received image information and recognizes an object included in the image information. Here, the object may include a discount code (for example, an exhibition item, a POP, a postage, a banner advertisement, a bulletin board advertisement, a poster advertisement, a signboard etc.), a product code Including price tags, etc.). At this time, the object in the present invention may be a state excluding goods and services provided in each store. Also, the identification information of the purchasingterminal 100 includes an MDN, a mobile IP, a mobile MAC, a SIM (subscriber identity module) card specific information, a serial number, and the like.

또한, 상기 서버(200)는 미리 저장된 복수의 객체별 코드(또는 복수의 객체의 고유 식별 정보별 코드) 중에서 상기 인식된 객체에 대응하는 코드를 확인한다.Also, theserver 200 identifies a code corresponding to the recognized object among a plurality of pre-stored object-specific codes (or codes of unique identification information of a plurality of objects).

또한, 상기 서버(200)는 미리 저장된 복수의 상품 정보 및 서비스 정보 중에서 상기 확인된 코드(또는 코드의 고유 식별 정보)에 대응하는 하나 이상의 상품 및 서비스 정보를 확인한다. 이때, 상기 서버(200)는 상기 확인되는 하나 이상의 상품 및 서비스 정보(또는 상기 확인되는 코드에 대응하는 하나 이상의 상품 및 서비스 정보) 중에서 해당 상품이 직접 수령이나 배송 가능한 상품임을 나타내는 핸드 캐리 상품인지 또는, 오프라인 매장 또는 거리 매장에서 취급하지 않거나 판매 소진으로 인한 품절 상태인 상품임을 나타내는 배송 상품인지 여부의 부가 정보를 확인한다. 여기서, 상기 상품 및 서비스 정보는 상품명(또는 서비스명), 상품 고유 코드(또는 서비스 고유 코드), 상품 이미지(또는 서비스 기본 이미지), 상품 설명 정보(또는 서비스 설명 정보), 상품/서비스에 대한 체험 정보, 상품/서비스에 대한 평가 정보, 예약 정보, 상담 정보, 진료 시간 정보 등을 포함한다. 또한, 상기 상품 정보는 홍삼, 인삼, 화장품, 가전제품, 패션의류, 잡화, 귀금속, 건강 보조 식품, 유아용품, 김(laver), 김치, 제과, 음식, 골프, 스키, 공연, 스포츠 경기 등의 분야를 포함한다. 또한, 상기 서비스 정보는 찜질방, 온천, 렌터카, 렌탈, 미용 마사지, 헬스, 성형, 용역, 공연 등의 분야를 포함한다.In addition, theserver 200 identifies one or more goods and service information corresponding to the identified code (or code unique identification information) from a plurality of goods information and service information stored in advance. At this time, theserver 200 determines whether the merchandise is a hand-held merchandise indicating that the merchandise is directly receivable or deliverable, from among the at least one merchandise and service information (or at least one merchandise and service information corresponding to the verified code) , Additional information indicating whether the product is a delivery product that is not handled in an offline store or at a street store, or that the product is out of stock due to exhaustion of sales is checked. Here, the goods and service information may include at least one of a product name (or a service name), a product unique code (or service unique code), a product image (or a service basic image), product description information (or service description information) Information about the product / service, evaluation information about the product / service, reservation information, consultation information, and time information. In addition, the above information on the commodity may be used for various purposes such as red ginseng, ginseng, cosmetics, household appliances, fashion clothes, miscellaneous goods, precious metals, health supplement foods, baby goods, laver, kimchi, confectionery, Fields. The service information includes fields such as a steam room, a hot spring, a rental car, a rental, a beauty massage, a fitness, a molding, a service, and a performance.

또한, 상기 서버(200)는 상기 미리 저장된 코드별 상품 및 서비스 정보 중에서 상기 확인된 코드와 관련한 하나 이상의 유사군 상품 및 서비스 정보를 확인한다.Also, theserver 200 confirms at least one similar group product and service information related to the checked code from the pre-stored code-by-code product and service information.

또한, 상기 서버(200)는 상기 확인된 하나 이상의 상품 및 서비스 정보, 상기 하나 이상의 유사군 상품 및 서비스 정보 등에 적용 가능한 쿠폰, 상품권, 서비스 예약 정보 등을 포함하는 추가 부가 정보를 확인한다.In addition, theserver 200 confirms additional additional information including coupon, coupon, service reservation information, etc. applicable to the one or more goods and service information, the one or more similar goods and service information, and the like.

또한, 상기 서버(200)는 미리 저장된 하나 이상의 객체, 상기 객체에 대응하는 코드 및 상기 객체의 위치 정보를 포함하는 복수의 3D 파노라마 영상 정보 중에서, 상기 코드가 포함된 3D 파노라마 영상 정보를 확인한다. 이때, 상기 코드가 포함된 3D 파노라마 영상 정보가 복수인 경우, 상기 서버(200)는 앞서 수신된 상기 구매 단말(100)의 위치 정보를 반영하여, 상기 미리 저장된 하나 이상의 객체, 상기 객체에 대응하는 코드 및 상기 객체의 위치 정보를 포함하는 복수의 3D 파노라마 영상 정보 중에서, 상기 코드 및 상기 구매 단말(100)의 위치 정보를 근거로(또는 상기 코드 및 상기 구매 단말(100)의 위치 정보에 대응하는) 3D 파노라마 영상 정보를 확인할 수도 있다.In addition, theserver 200 identifies 3D panorama image information including the code from among a plurality of 3D panorama image information including one or more objects stored in advance, a code corresponding to the object, and position information of the object. If there are a plurality of 3D panorama image information including the code, theserver 200 reflects the location information of thepurchase terminal 100 received previously, and stores the previously stored one or more objects, Code, and location information of the object, based on the code and the location information of the purchasing terminal 100 (or the code and the location information of the purchasing terminal 100) corresponding to the location information of the purchasing terminal 100 ) You can also check 3D panorama image information.

또한, 상기 서버(200)는 상기 확인된 코드에 대응하는 하나 이상의 상품 및 서비스 정보, 상기 확인된 핸드 캐리 상품 또는 배송 상품인지 여부를 나타내는 부가 정보 등을 상기 구매 단말(100)에 전송한다.Also, theserver 200 transmits to the purchasingterminal 100 one or more goods and service information corresponding to the confirmed code, additional information indicating whether it is the confirmed hand-held commodity or a delivery commodity, and the like.

또한, 상기 서버(200)는 상기 확인된 3D 파노라마 영상 정보, 상기 확인된 코드에 대응하는 하나 이상의 상품 및 서비스 정보, 상기 확인된 하나 이상의 유사군 상품 및 서비스 정보, 상기 확인된 핸드 캐리 상품 또는 배송 상품인지 여부를 나타내는 부가 정보, 추가 부가 정보 등을 상기 구매 단말(100)에 전송할 수도 있다. 여기서, 상기 추가 부가 정보는 상기 하나 이상의 상품 및 서비스 정보 및/또는 상기 하나 이상의 유사군 상품 및 서비스 정보 등에 적용 가능한 쿠폰, 상품권, 서비스 예약 정보 등을 포함한다.Theserver 200 may also receive the 3D panorama image information, one or more goods and service information corresponding to the verified code, the identified one or more similar goods and service information, the verified hand carry goods or delivery Additional information indicating whether the product is a commodity, additional additional information, or the like, to the purchasingterminal 100. Here, the additional additional information includes coupons, gift certificates, service reservation information, etc. applicable to the one or more goods and service information and / or one or more similar goods and service information.

이때, 상기 하나 이상의 상품 및 서비스 정보(또는 상기 하나 이상의 유사군 상품 및 서비스 정보)가 복수인 경우, 상기 서버(200)는 복수의 상품 및 서비스 정보(또는 복수의 유사군 상품 및 서비스 정보)를 미리 설정된 할인율순, 적립율순, 판매량순, 인기도순 및 브랜드순 중 어느 하나로 정렬하고, 상기 정렬된 복수의 상품 및 서비스 정보(또는 복수의 유사군 상품 및 서비스 정보) 중에서 미리 설정된 개수만큼만 상기 구매 단말(100)에 전송할 수도 있다.In this case, when there is a plurality of one or more goods and service information (or one or more similar goods and service information), theserver 200 stores a plurality of goods and service information (or a plurality of similar goods and service information) (Or a plurality of similar group goods and service information) arranged in the order of a preset discount rate, an accumulation rate order, a sales amount order, a popularity order, and a brand order, (100).

이와 같이, 소규모 오프라인 매장이나 거리 매장을 방문해도, 대형 매장의 상품 구색과 쇼핑 정보를 동일하게 수집할 수 있고, 하나의 매장에서 상기 구매 단말(100)의 사용자가 관심이 있어 하는 관심 상품이 품절일 경우, 재고가 존재하는 다른 매장에서 배송 상품으로 구매할 수도 있다.As described above, even if a user visits a small-scale offline store or a street store, the merchandise assortment and the shopping information of the large store can be collected equally, and the interested merchandise that the user of the purchasingterminal 100 is interested in at one store , It can be purchased as a delivery item at another store where the stock exists.

본 발명의 실시예에서는, 상기 서버(200)에서 상기 구매 단말(100)과 일대일 방식으로 상기 구매 단말(100)에서 촬영한 영상 정보에 포함된 객체와 관련한 3D 파노라마 영상 정보 제공 기능, 하나 이상의 상품 및 서비스 정보 제공 기능, 하나 이상의 유사군 상품 및 서비스 정보(또는 하나 이상의 유사군 상품 및 유사군 서비스 정보) 제공 기능, 부가 정보 제공 기능, 추가 부가 정보 제공 기능 등을 수행하는 것을 설명하고 있으나 이에 한정되는 것은 아니며, 상기 구매 단말(100)에 의해 초대된 친구 단말(미도시) 및 상기 구매 단말(100)과의 연동에 의해, 상기 3D 파노라마 영상 정보 제공 기능, 상기 하나 이상의 상품 및 서비스 정보 제공 기능, 상기 하나 이상의 유사군 상품 및 서비스 정보(또는 하나 이상의 유사군 상품 및 유사군 서비스 정보) 제공 기능, 상기 부가 정보 제공 기능, 상기 추가 부가 정보 제공 기능 등을 수행할 수도 있다.In the embodiment of the present invention, a 3D panorama image information providing function related to an object included in image information photographed by the purchasingterminal 100 in a one-to-one manner with the purchasingterminal 100 in theserver 200, And a service information providing function, a function of providing one or more similar group goods and service information (or one or more similar group goods and similar group service information), a function of providing additional information, and a function of providing additional additional information. (Not shown) invited by the purchasingterminal 100 and the 3D panorama image information providing function, the one or more goods and service information providing functions , Providing the one or more similar group goods and service information (or one or more similar group goods and similar group service information) Additional information providing function, additional additional information providing function, and the like.

즉, 상기 구매 단말(100)은 하나 이상의 친구 단말에 대한 정보(예를 들어 상기 친구 단말의 식별 정보 등 포함)와 상기 구매 단말(100)의 식별 정보 등을 상기 서버(200)에 전송한다. 이후, 상기 서버(200)는 상기 구매 단말(100) 및 상기 하나 이상의 친구 단말에 상기 구매 단말(100)에서 촬영한 영상 정보에 포함된 제 2 객체와 관련한 3D 파노라마 영상 정보, 상기 하나 이상의 상품 및 서비스 정보, 상기 하나 이상의 유사군 상품 및 서비스 정보(또는 하나 이상의 유사군 상품 및 유사군 서비스 정보)능, 상기 부가 정보, 상기 추가 부가 정보 등을 제공한다. 이때, 상기 구매 단말(100) 및 상기 하나 이상의 친구 단말에 표시되는 3D 파노라마 영상 정보는 상호 연동(또는 동기화)되어 동일한 3D 파노라마 영상 정보가 상기 구매 단말(100) 및 상기 하나 이상의 친구 단말에 표시될 수도 있고, 서로 다른 3D 파노라마 영상 정보가 상기 구매 단말(100) 및 상기 하나 이상의 친구 단말에 각각 표시될 수도 있다.That is, the purchasingterminal 100 transmits information about one or more friend terminals (for example, identification information of the friend terminal, etc.) and identification information of the purchasingterminal 100 to theserver 200. Thereafter, theserver 200 transmits to the purchasingterminal 100 and the one or more friend terminals 3D panorama image information related to the second object included in the image information photographed by the purchasingterminal 100, the one or more goods and / Service information, the one or more similar group goods and service information (or one or more similar group goods and similar group service information) capability, the additional information, the additional additional information, and the like. At this time, the 3D panorama image information displayed on the purchasingterminal 100 and the one or more friend terminals are interlocked (or synchronized) so that the same 3D panorama image information is displayed on the purchasingterminal 100 and the one or more friend terminals And different 3D panoramic image information may be displayed on the purchasingterminal 100 and the one or more friend terminals, respectively.

이와 같이, 상기 서버(200), 상기 구매 단말(100) 및 하나 이상의 친구 단말은 상호 연동하여 상기 구매 단말(100)에서 촬영한 영상 정보에 포함된 제 2 객체와 관련한 3D 파노라마 영상 정보 제공 기능, 하나 이상의 상품 및 서비스 정보 제공 기능, 하나 이상의 유사군 상품 및 서비스 정보(또는 하나 이상의 유사군 상품 및 유사군 서비스 정보) 제공 기능, 부가 정보 제공 기능, 추가 부가 정보 제공 기능 등을 수행할 수 있다.As described above, theserver 200, the purchasingterminal 100, and the one or more friend terminals can provide 3D panorama image information providing functions related to the second object included in the image information photographed by the purchasingterminal 100, One or more goods and service information providing functions, one or more similar goods and service information (or one or more similar goods and similar group service information) providing functions, additional information providing functions, additional additional information providing functions, and the like.

또한, 상기 구매 단말(100) 및 하나 이상의 친구 단말은 상기 서버(200)의 중계 기능에 의해 문자 메시지 서비스 기능, 음성 서비스 기능 등을 수행할 수도 있다.In addition, the purchasingterminal 100 and one or more friend terminals may perform a text message service function, a voice service function, and the like by the relay function of theserver 200. [

또한, 상기 구매 단말(100)에 전송된 하나 이상의 상품 및 서비스 정보 및, 하나 이상의 유사군 상품 및 서비스 정보 중에서 적어도 하나의 특정 상품 및 서비스 정보가 선택되는 경우, 상기 서버(200)는 상기 구매 단말(100), 상기 결제 서버(300) 및 상기 판매 단말(400)과의 연동에 의해 상기 선택된 적어도 하나의 특정 상품 및 서비스 정보에 대응하는 결제 금액에 대한 결제 기능을 수행한다.In addition, when at least one specific commodity and service information is selected from at least one commodity and service information and at least one similar commodity commodity and service information transmitted to the purchasingterminal 100, Thebilling server 300, and thesales terminal 400 to perform a payment function for a payment amount corresponding to the selected at least one specific goods and service information.

즉, 상기 서버(200)는 상기 적어도 하나의 특정 상품 및 서비스 정보에 대응하는 정상가 금액에 미리 설정된 할인액을 적용하여 상기 정상가 금액에서 상기 할인액이 적용된 금액에 대한 결제 기능을 수행한다.That is, theserver 200 applies a predetermined discount amount to the normal amount corresponding to the at least one specific goods and service information, and performs the payment function for the amount to which the discount amount is applied at the normal amount.

이때, 상기 구매 단말(100)에서 선택된 특정 상품 및 서비스 정보에 대응하는 특정 상품에 대해서, 해당 특정 상품이 미리 설정된 배송 상품이며 해외 직접 구매에 해당하는 상품인 경우, 상기 서버(200)는 상기 구매 단말(100), 상기 결제 서버(300) 및 상기 판매 단말(400) 등과의 연동에 의해, 상기 배송 상품에 해당하는 특정 상품에 대해서 배송료, 관세 등을 포함하는 금액(예를 들어 상기 정상가 금액에 할인액이 적용된 금액 이외에, 배송을 위한 상기 배송료, 상기 관세 등이 추가된 금액)에 대한 결제 기능을 수행할 수 있다.When the specific product corresponding to the specific product and service information selected by the purchasingterminal 100 is a predetermined delivery product and corresponds to the direct foreign purchase, Thebilling server 300 and thesales terminal 400 interoperate with the terminal 100, thebilling server 300 and thesales terminal 400 so that the amount of the specific commodity corresponding to the commodity being delivered, including the postage, In addition to the amount to which the discount amount is applied, the above-mentioned shipping fee for delivery, the amount to which the customs duty, etc. are added).

또한, 상기 구매 단말(100)에서 선택된 특정 상품 및 서비스 정보에 대응하는 특정 상품에 대해서, 해당 특정 상품이 미리 설정된(또는 등록된) 수입 통관 불가 상품(예를 들어 육류, 재화, 무기류, 가스류, 약 등 포함)에 해당하는 경우, 상기 서버(200)는 상기 특정 상품 및 서비스 정보에 대한 결제 기능 수행이 불가함을 나타내는 정보(또는 결제 기능 실패 정보)를 상기 구매 단말(100)에 전송한다. 여기서, 상기 결제 기능 수행이 불가함을 나타내는 정보는 상기 특정 상품 및 서비스 정보에 대응하는 특정 상품이 수입 통관 불가 상품에 해당함을 나타내는 정보 등을 포함한다.In addition, for a specific commodity corresponding to the specific commodity and service information selected by the purchasingterminal 100, the commodity can be set to a predetermined commodity (for example, meat, commodities, , Etc.), theserver 200 transmits to thepurchase terminal 100 information indicating that the payment function for the specific goods and service information can not be performed (or the payment function failure information) . Herein, the information indicating that the payment function can not be performed includes information indicating that the specific commodity corresponding to the specific commodity and service information corresponds to the commodity that can not be imported.

또한, 해당 특정 상품이 미리 설정된(또는 등록된) 수입 통관 불가 상품(예를 들어 육류, 재화, 무기류, 가스류, 약 등 포함)에 해당하는 경우, 상기 서버(200)는 결제 기능을 종료한다.In addition, when the specific product corresponds to a predetermined (or registered) import clearance prohibited product (for example, meat, commodities, weapons, gas, medicine, etc.), theserver 200 terminates the settlement function .

또한, 상기 결제 기능이 정상적으로 수행 완료된 이후, 상기 서버(200)는 결제 기능 수행 결과(또는 결제 정보)를 상기 구매 단말(100)에 제공한다. 여기서, 상기 결제 기능 수행 결과(또는 결제 정보)는 적어도 하나의 상품 및 서비스 정보, 결제 일자 및 시각 정보, 주문 상품별/서비스별 가격 정보 등을 포함한다.Also, after the settlement function is normally completed, theserver 200 provides the settlement function execution result (or settlement information) to thepurchase terminal 100. Here, the payment function execution result (or payment information) includes at least one goods and service information, payment date and time information, and price information for each order product / service.

또한, 상기 결제 기능이 정상적으로 수행 완료된 이후, 결제 완료된 적어도 하나의 특정 상품 및 서비스 정보 중에서, 미리 설정된 배송 상품이 포함된 경우, 상기 서버(200)는 상기 구매 단말(100)로부터 전송된 회원 정보를 근거로 미리 저장된 복수의 매장(또는 매장 정보) 중에서, 해당 회원 정보에 포함된 배송지 정보에 해당하는 배송지에서 가장 가까운 매장 중 상기 배송 상품의 재고가 있는 매장을 확인한다.In addition, if the preset merchandise is included in at least one specific merchandise and service information that has been paid after the settlement function is normally completed, theserver 200 transmits the member information transmitted from thepurchase terminal 100 Out of the plurality of stores (or store information) previously stored on the basis of the store information, the store in which the item is in stock among the stores closest to the destination corresponding to the destination information included in the member information.

또한, 상기 서버(200)는 상기 확인된 매장의 매장 서버(500)로 상기 회원 정보, 상기 배송 상품에 대한 정보, 상기 구매 단말(100)의 식별 정보 등을 전송한다.Also, theserver 200 transmits the member information, the information about the delivery commodity, the identification information of the purchasingterminal 100, and the like to thestore server 500 of the identified store.

또한, 상기 결제 기능이 정상적으로 수행 완료된 이후, 결제 완료된 적어도 하나의 특정 상품 및 서비스 정보 중에서, 미리 설정된 멀티 상품 할인 쿠폰 발급이 포함된 경우, 상기 서버(200)는 상기 특정 상품이나 특정 서비스에 대응하는 멀티 상품 할인 쿠폰을 상기 구매 단말(100)에 발급(또는 전송)한다.In addition, if the preset multi-commodity discount coupon issuance is included among at least one specific commodity and service information that has been settled after the settlement function is normally completed, theserver 200 may determine that the predetermined commodity (Or transmits) the multi-commodity discount coupon to the purchasingterminal 100.

여기서, 상기 멀티 상품 할인 쿠폰은 상기 서버(200)에 의해 생성된다.Here, the multi-commodity discount coupon is generated by theserver 200.

즉, 상기 결제 기능이 정상적으로 수행 완료된 이후, 상기 서버(200)는 상기 특정 상품 및 서비스 정보에 대응하는 정상가 금액, 할인액, 유효 기간, 상기 특정 상품 및 서비스 정보와 관련한 복수의 상품 및 서비스 아이템 코드(또는 상기 특정 상품 및 서비스 정보와 관련한 복수의 상품 및 서비스 정보/상기 특정 상품 및 서비스 정보와 동일한 카테고리 내의 복수의 상품 및 서비스 정보), 고유 번호(또는 멀티 상품 할인 쿠폰의 고유 번호) 등을 포함하는 멀티 상품 할인 쿠폰(또는 멀티 서비스 할인 쿠폰/멀티 상품 및 서비스 할인 쿠폰)을 생성한다. 여기서, 상기 멀티 상품 할인 쿠폰은 상기 특정 상품 및 서비스 정보와 관련한 복수의 상품 및 서비스 아이템 코드를 하나의 코드로 그룹화한 상태이며, 바코드 형태, QR 코드 형태, 문자열 형태 등으로 생성한다. 또한, 상기 복수의 상품 및 서비스 정보는 각각 상품명(또는 서비스명), 상품 고유 코드(또는 서비스 고유 코드), 상품 이미지(또는 서비스 기본 이미지), 상품 설명 정보(또는 서비스 설명 정보), 상품/서비스에 대한 체험 정보, 상품/서비스에 대한 평가 정보, 해당 상품을 판매하는(또는 해당 서비스를 제공하는) 매장의 위치 정보, 매장의 전화번호 등을 포함한다. 이때, 상기 문자열 형태의 멀티 상품 할인 쿠폰은 숫자, 문자, 특수 문자, 기호 중 적어도 하나의 조합에 의해 생성될 수 있다. 여기서, 상기 상품 아이템 코드는 상기 상품 정보 내의 상품 고유 코드(또는 서비스 고유 코드)에 대응한다. 또한, 상기 상품/서비스에 대한 체험 정보는 상기 서버(200)에 미리 등록한 회원의 단말에서 작성한 체험 정보, 상기 서버(200)에서 제공하는 해당 상품/서비스와 관련한 멀티 상품 할인 쿠폰을 구매한 단말에서 작성한 체험 정보 등일 수 있다.That is, after the settlement function is normally completed, theserver 200 transmits a plurality of commodities and service item codes related to the specific commodity and service information, such as a normal value amount, a discount amount, an expiration date, A plurality of goods and service information related to the specific goods and service information / a plurality of goods and service information in the same category as the specific goods and service information), a unique number (or a unique number of a multi-product discount coupon) A multi-commodity discount coupon (or a multi-service discount coupon / a multi-commodity and service discount coupon) is generated. Here, the multi-commodity discount coupon is formed by grouping a plurality of commodities and service item codes related to the specific commodity and service information into one code, and is formed of a barcode form, a QR code form, a character string form, or the like. Each of the plurality of goods and service information includes at least one of a product name (or a service name), a product unique code (or a service unique code), a product image (or a service basic image) Experience information on the product / service, information on the location of a store selling the product (or providing the service), a phone number of the store, and the like. At this time, the multi-commodity discount coupon of the string form can be generated by a combination of at least one of numbers, letters, special characters, and symbols. Here, the merchandise item code corresponds to a merchandise unique code (or service unique code) in the merchandise information. In addition, the experience information on the goods / service may include experience information created in the terminal of the member registered in advance in theserver 200, information on the multi-product discount coupon related to the product / service provided by theserver 200 Experience information created and the like.

또한, 상기 서버(200)는 상기 생성된 멀티 상품 할인 쿠폰을 상기 구매 단말(100)에 발급한다.Also, theserver 200 issues the generated multi-commodity discount coupon to the purchasingterminal 100.

또한, 상기 서버(200)는 하나의 구매 단말(100)에서 구매할 수 있는 멀티 상품 할인 쿠폰의 수량(또는 판매/결제 금액)을 미리 설정할 수 있다.Also, theserver 200 may set the quantity (or the sales / payment amount) of the multi-commodity discount coupons that can be purchased from onepurchasing terminal 100 in advance.

즉, 상기 서버(200)는 미리 설정된 판매 수량 범위(또는 판매/결제 금액 범위)(예를 들어 100개 이내 또는, 2천만원 이내) 내에서 하나의 구매 단말(100)에서 특정 상품 및 서비스에 대응하는 멀티 상품 할인 쿠폰을 구매하도록 구성할 수 있다.That is, theserver 200 responds to specific goods and services from onepurchasing terminal 100 within a preset sales quantity range (or within a sales / payment range) (for example, within 100 or within 20 million won) Quot; multi-commodity discount coupon "

이와 같이, 상기 서버(200)는 특정 상품 및 서비스에 대한 대량 구매를 제한하여, 부정 거래를 방지할 수 있다.In this way, theserver 200 can prevent illegal transactions by restricting the mass purchase of specific goods and services.

또한, 상기 결제 기능이 정상적으로 수행 완료된 이후, 상기 서버(200)는 상기 멀티 상품 할인 쿠폰의 구매에 따라 추가로 제공되는 무료 할인 쿠폰, 할인 쿠폰, 특정 쇼핑몰의 상품권, 재래 시장의 상품권 등을 상기 구매 단말(100)에 발급(또는 전송)한다.In addition, after the settlement function is normally completed, theserver 200 transmits a discount coupon, a discount coupon, a gift certificate of a specific shopping mall, a gift certificate of a traditional market, and the like, which are additionally provided upon purchase of the multi- (Or transmits) it to the terminal 100.

또한, 판매 단말(400)이 구비된 매장에서 특정 상품 및/또는 서비스를 제공받은 이후 상기 구매 단말(100)에 저장된 멀티 상품 할인 쿠폰을 사용하고자 하는 경우, 상기 서버(200)는 상기 구매 단말(100), 상기 결제 서버(300) 및 상기 판매 단말(400) 간의 연동에 의해, 상기 구매 단말(100)에 저장된 멀티 상품 할인 쿠폰에 대한 사용 처리(또는 결제 처리) 기능을 수행한다.If theserver 200 desires to use the multi-commodity discount coupon stored in the purchasingterminal 100 after receiving a specific commodity and / or service in the store equipped with thesales terminal 400, (Or payment processing) function for the multi-commodity discount coupon stored in the purchasingterminal 100 by interlocking between thebilling server 300 and thesales terminal 400.

또한, 상기 서버(200)는 상기 구매 단말(100)에 전송된(또는 발급된) 해당 멀티 상품 할인 쿠폰에 대해서 사용 완료 상태로 처리(또는 전환/변경)한다.Also, theserver 200 processes (or switches / changes) the corresponding multi-commodity discount coupon transmitted (or issued) to the purchasingterminal 100 in a use completed state.

또한, 상기 결제 기능이 정상적으로 수행 완료된 이후, 해당 상품권의 잔액이 있는 경우, 상기 서버(200)는 사용 가능 금액(또는 잔액 정보) 등을 포함하는 멀티 상품 할인 쿠폰을 상기 구매 단말(100)에 전송한다. 이때, 상기 사용 가능 금액은 직전(또는 이전) 사용 가능 금액에서 상기 결제 기능 수행에 따른 결제 금액을 차감한 상태의 금액일 수 있다.In addition, if the balance of the gift certificate exists after the payment function is normally performed, theserver 200 transmits a multi-product discount coupon including the available amount (or balance information) to thepurchase terminal 100 do. At this time, the usable amount may be an amount of the amount that can be subtracted from the immediately preceding (or previous) usable amount according to the payment function.

또한, 상기 결제 기능이 정상적으로 수행 완료된 이후, 해당 상품권의 잔액이 있는 경우, 상기 서버(200)는 사용 가능 금액(또는 잔액 정보) 등을 포함하는 정보를 상기 판매 단말(400)을 통해 상기 구매 단말(100)에 전송할 수도 있다.In addition, if the balance of the gift certificate exists after the completion of the settlement function, theserver 200 transmits the information including the available amount (or balance information) to thepurchase terminal 400 through the sale terminal 400 (100).

또한, 상기 결제 기능이 정상적으로 수행 완료된 이후, 상기 서버(200)는 미리 설정된 포인트 및/또는 할인 쿠폰을 상기 구매 단말(100)에 전송한다.Further, after the billing function is normally performed, theserver 200 transmits a predetermined point and / or a discount coupon to the purchasingterminal 100. [

또한, 상기 결제 기능이 정상적으로 수행 완료된 이후, 상기 서버(200)는 미리 설정된 포인트 및/또는 할인 쿠폰을 상기 판매 단말(400)을 통해 상기 구매 단말(100)에 전송할 수도 있다.Also, after the settlement function is normally completed, theserver 200 may transmit a preset point and / or a discount coupon to the purchasingterminal 100 through thesales terminal 400.

또한, 이와 같은 상기 멀티 상품 할인 쿠폰에 대한 사용에 따라서, 상기 서버(200)와 상기 결제 서버(300)와 상기 판매 단말(400) 간에 수수료를 분배할 수 있다.In addition, according to the use of the multi-commodity discount coupon, the commission can be distributed between theserver 200, thepayment server 300, and thesales terminal 400.

또한, 상기 서버(200)는 상기 구매 단말(100)과의 연동에 의해, 상기 구매 단말(100)에서 생성된 길 안내 정보 상의 경로로부터 미리 설정된 거리 이내로 인접한 하나 이상의 추천 정보를 확인(또는 생성)할 수 있다. 여기서, 상기 추천 정보는 상기 멀티 상품 할인 쿠폰을 사용할 수 있는 매장 정보일 수 있다. 이때, 상기 서버(200)는 상기 구매 단말(100)과의 연동에 의해, 상기 구매 단말(100)의 위치 정보와 상기 구매 단말(100)에서 선택된 매장 정보를 근거로 상기 길 안내 정보를 생성할 수도 있다.In addition, theserver 200 confirms (or creates) one or more neighboring recommendation information within a predetermined distance from the route on the route guidance information generated by thepurchase terminal 100, by interlocking with thepurchase terminal 100, can do. Here, the recommendation information may be store information on which the multi-commodity discount coupon can be used. At this time, theserver 200 generates the guidance information based on the location information of the purchasingterminal 100 and the store information selected by the purchasingterminal 100 by interlocking with the purchasingterminal 100 It is possible.

또한, 상기 서버(200)는 상기 확인된 하나 이상의 추천 정보, 상기 생성된 길 안내 정보 등을 상기 구매 단말(100)에 전송한다.Also, theserver 200 transmits the confirmed one or more recommendation information, the generated guidance information, and the like to the purchasingterminal 100.

또한, 상기 구매 단말(100)에 발급된 멀티 상품 할인 쿠폰에 포함된 유효 기간이 미리 설정된 기간(예를 들어 유효 기간으로부터 한달, 유효 기간으로부터 15일, 유효 기간으로부터 7일, 유효 기간으로부터 3일, 유효 기간으로부터 1일 등 포함)에 도래하고 해당 상품권 정보 내에 사용 가능 금액(또는 잔액)이 남아 있는 경우, 상기 서버(200)는 멀티 상품 할인 쿠폰의 잔액이 남아 있음을 나타내는 정보, 유효 기간 등을 포함하는 정보를 상기 구매 단말(100)에 전송한다.If the validity period included in the multi-commodity discount coupon issued to the purchasingterminal 100 is less than a predetermined period (for example, one month from the validity period, 15 days from the validity period, 7 days from the validity period, (Including one day from the expiration date, etc.), and if the usable amount (or balance) remains in the gift voucher information, theserver 200 displays information indicating that the balance of the multi-commodity discount voucher remains, To the purchasing terminal (100).

또한, 상기 서버(200)는 상기 구매 단말(100)로부터 전송되는 특정 상품/서비스에 대한 체험 정보, 특정 상품/서비스에 대한 평가 정보 등을 수신한다.In addition, theserver 200 receives experience information on specific goods / services transmitted from the purchasingterminal 100, evaluation information on specific goods / services, and the like.

또한, 상기 서버(200)는 상기 수신된 특정 상품/서비스에 대한 체험 정보, 특정 상품/서비스에 대한 평가 정보 등을 해당 특정 상품/서비스와 연동(또는 매칭)하여 저장한다.In addition, theserver 200 interoperates (or matches) the experience information on the received specific goods / services, the evaluation information on the specific goods / services, and the like, and stores the information.

이와 같이, 상기 서버(200)는 결제 완료된 상기 적어도 하나의 특정 상품 및 서비스 정보에 대응하는 특정 상품이나 특정 서비스에 대해서 상기 구매 단말(100)에서 설정한(또는 지정한) 배송 정보(또는 배송 방식)에 따라 해당 특정 상품이나 특정 서비스를 상기 구매 단말(100)에 제공할 수 있다.In this way, theserver 200 transmits the delivery information (or the delivery method) set (or designated) by the purchasingterminal 100 to the specific commodity or the specific service corresponding to the at least one specific commodity and service information, To the purchasingterminal 100, the specific product or the specific service.

또한, 상기 서버(200)는 상기 결제 기능이 수행된 상기 적어도 하나의 특정 상품 및 서비스 정보에 대응하는 적어도 하나의 특정 상품에 대한 통관 리스트를 생성한다. 여기서, 상기 통관 리스트는 상기 적어도 하나의 특정 상품에 대한 상품명, 상품의 고유 식별 정보, HS(Harmonized Commodity Description and Coding System) 코드, 배송료, 과세 운임 정보(관세, 부가세, 특별소비세, 기준 초과금, 교육세, 농어촌특별세, 주세 등 포함) 등을 포함한다.Also, theserver 200 generates a clearance list for at least one specific commodity corresponding to the at least one specific commodity and service information on which the settlement function has been performed. Here, the customs clearance list includes a product name, unique identification information of a product, a Harmonized Commodity Description and Coding System (HS) code, a shipping fee, taxable freight information (customs, VAT, special consumption tax, , Rural special tax, liquor tax, etc.).

또한, 상기 서버(200)는 상기 생성된 통관 리스트를 상기 구매 단말(100)에 전송한다.In addition, theserver 200 transmits the generated clearance list to the purchasingterminal 100. [

또한, 상기 서버(200)는 상기 구매 단말(100)로부터 전송되는 해당 특정 상품이나 특정 서비스의 구매에서부터 도착(또는 쿠폰 발급)까지의 체험 정보, 평가 정보, 상기 구매 단말(100)의 식별 정보 등을 수신한다.Theserver 200 may also receive experience information, evaluation information, identification information of the purchasingterminal 100, and the like from the purchase of the specific product or specific service transmitted from the purchasingterminal 100 to the arrival (or coupon issuance) Lt; / RTI >

또한, 상기 서버(200)는 상기 수신된 체험 정보, 평가 정보 등을 해당하는 특정 상품이나 특정 서비스에 매칭하여 저장한다.In addition, theserver 200 stores the received experience information, evaluation information, and the like in correspondence with a specific product or a specific service.

상기 결제 서버(300)는 상기 구매 단말(100), 상기 서버(200), 상기 판매 단말(400), 상기 매장 서버(500) 등과 통신한다.Thepayment server 300 communicates with the purchasingterminal 100, theserver 200, thesales terminal 400, thestore server 500, and the like.

또한, 상기 결제 서버(300)는 상기 구매 단말(100), 상기 서버(200), 상기 판매 단말(400) 등과의 연동에 의해, 상기 구매 단말(100)에서 선택된 특정 상품 및 서비스 정보에 대한 결제 기능을 수행한다. 이때, 상기 결제 기능 수행 시, 상기 결제 서버(300)는 상기 특정 상품 및 서비스 정보에 대응하는 정상가 금액에 미리 설정된 할인액을 적용하여 상기 정상가 금액에서 상기 할인액이 적용된 금액에 대한 결제 기능을 수행한다.Thesettlement server 300 can be connected to thesettlement server 300 through thepayment terminal 300 and thesales terminal 400 in cooperation with thepurchase terminal 100, Function. At this time, when the settlement function is performed, thepayment server 300 performs a settlement function for the amount to which the discount amount is applied at the normal value by applying a preset discount amount to the normal amount corresponding to the specific goods and service information.

또한, 상기 결제 기능이 정상적으로 수행 완료된 이후, 상기 결제 서버(300)는 상기 결제 기능 수행 결과(또는 결제 정보)를 상기 구매 단말(100)에 제공한다. 여기서, 상기 결제 기능 수행 결과(또는 결제 정보)는 상품 및 서비스 정보, 결제 일자 및 시각 정보, 주문 상품별/서비스별 가격 정보 등을 포함한다.Also, after the settlement function is normally completed, thesettlement server 300 provides the settlement function execution result (or settlement information) to thepurchase terminal 100. Here, the payment function execution result (or payment information) includes goods and service information, settlement date and time information, and price information for each order product / service.

또한, 판매 단말(400)이 구비된 매장에서 특정 상품 및/또는 서비스를 제공받은 이후 상기 구매 단말(100)에 저장된 멀티 상품 할인 쿠폰을 사용하고자 하는 경우, 상기 결제 서버(300)는 상기 구매 단말(100), 상기 서버(200) 및 상기 판매 단말(400) 간의 연동에 의해, 상기 구매 단말(100)에 저장된 멀티 상품 할인 쿠폰에 대한 사용 처리(또는 결제 처리) 기능을 수행한다.In addition, when the user desires to use the multi-commodity discount coupon stored in the purchasingterminal 100 after receiving the specific commodity and / or the service in the store provided with thesales terminal 400, (Or payment processing) function for the multi-commodity discount coupon stored in the purchasingterminal 100 by interlocking between theserver 100 and theserver 200 and thesales terminal 400.

상기 판매 단말(400)은 매장에 구비되는 POS(Point of Sales) 단말 등일 수 있다.Thesales terminal 400 may be a POS (Point of Sales) terminal or the like provided in a store.

또한, 상기 판매 단말(400)은 임의의 매장에 구비(또는 설치)된다.In addition, thesales terminal 400 is installed (or installed) in any store.

또한, 상기 판매 단말(400)은 상기 서버(200)와의 연동에 의해, 상기 판매 단말(400)의 사용자에 대한 회원 가입 절차를 수행한다.In addition, thesales terminal 400 performs the membership registration procedure for the user of thesales terminal 400 by interlocking with theserver 200.

또한, 상기 회원 가입 절차 수행 시, 상기 판매 단말(400)은 본인 인증 수단(예를 들어 이동 전화, 신용카드, 아이핀 등 포함)을 통한 인증 기능을 완료해야 상기 서버(200)에 대한 회원 가입 절차를 정상적으로 완료할 수 있다.In addition, when performing the membership registration procedure, thesales terminal 400 must complete the authentication function through the authentication means (for example, mobile phone, credit card, Ipfin, etc.) Can normally be completed.

또한, 상기 판매 단말(400)은 상기 구매 단말(100), 상기 서버(200), 상기 결제 서버(300), 상기 매장 서버(500) 등과 통신한다.Thesales terminal 400 also communicates with the purchasingterminal 100, theserver 200, thepayment server 300, thestore server 500, and the like.

또한, 상기 판매 단말(400)은 상기 구매 단말(100), 상기 서버(200), 상기 결제 서버(300) 등과의 연동에 의해, 상기 구매 단말(100)에서 선택된 특정 상품 및 서비스 정보에 대한 결제 기능을 수행한다.Thesales terminal 400 may be connected to thepurchase terminal 100, theserver 200, thepayment server 300, and the like, Function.

또한, 상기 판매 단말(400)은 상기 서버(200) 또는 상기 결제 서버(300)로부터 전송되는 상기 결제 기능 수행에 따른 상기 결제 기능 수행 결과(또는 결제 정보), 상기 서버(200)로부터 발급되는 멀티 상품 할인 쿠폰의 판매 수량 등을 수신한다.Also, thesales terminal 400 may receive the payment function execution result (or payment information) according to the payment function execution transmitted from theserver 200 or thepayment server 300, And the sales quantity of the product discount coupon.

또한, 상기 판매 단말(400)은 상기 수신된 결제 기능 수행 결과, 상기 멀티 상품 할인 쿠폰의 판매 수량 등을 근거로 상기 판매 단말(400)과 관련한 매장 내의 상품 재고 관리 기능을 수행할 수 있다.Also, thesales terminal 400 may perform a product inventory management function in the store related to thesales terminal 400 based on the result of the payment function execution, the sales quantity of the multi-commodity discount coupon, and the like.

또한, 상기 판매 단말(400)은 상기 수신된 결제 기능 수행 결과, 상기 멀티 상품 할인 쿠폰의 판매 수량 등을 근거로 고객 관계 관리(Custom Relation Management: CRM) 마케팅을 적용하여, 해당 판매 단말(400)과 관련한 매장에서 제공하는 상품이나 서비스에 대한 마케팅 기능을 수행할 수 있다.Also, thesales terminal 400 applies CRM (Custom Relation Management) based on the result of the received payment function, the sales quantity of the multi-commodity discount coupon, And perform marketing functions for the goods or services provided by the store in connection with the service.

이와 같이, 상기 판매 단말(400)이 별도의 전단 홍보나 마케팅 활동 없이 상품이나 서비스 판매 자체만으로 짧은 기간 상기 판매 단말(400)과 관련한 매장이 위치한 해당 지역을 방문하는 여행객 집객이 가능하고, 사전에 판매된 멀티 상품 할인 쿠폰을 통해 예상 매출과 방문 예정 고객수 파악이 가능하여, 재고 확보, 인력 배치 등을 할 수 있어, 관리 효율을 향상시킬 수 있다.As described above, it is possible for thesales terminal 400 to be a tourist visiting the area where the store related to thesales terminal 400 is located for a short period of time only by selling a product or service without any prior publicity or marketing activities, It is possible to grasp the estimated sales and the number of customers to be visited through the multi product discount coupon that is sold, so that it is possible to secure inventory and manpower, thereby improving management efficiency.

또한, 이와 같이, 온라인 판매시 과도하게 소요되는 광고 및 홍보 디자인 페이지를 3D 파노라마 영상으로 대체함으로써, 상기 판매 단말(400)은 과도한 광고비를 대폭 줄일 수 있어 비용을 절감할 수 있다.In addition, by replacing the advertisement and promotional design pages, which are excessively consumed in online sales, with the 3D panoramic images, thesales terminal 400 can reduce the excessive advertising costs and reduce the cost.

또한, 판매 단말(400)이 구비된 매장에서 특정 상품 및/또는 서비스를 제공받은 이후 상기 구매 단말(100)에 저장된 멀티 상품 할인 쿠폰을 사용하고자 하는 경우, 상기 판매 단말(400)은 바코드 형태, QR 코드 형태 등으로 상기 구매 단말(100)에 저장된 멀티 상품 할인 쿠폰(또는 해당 멀티 상품 할인 쿠폰의 고유 번호)을 인식한다.When thesales terminal 400 wants to use the multi-commodity discount coupon stored in the purchasingterminal 100 after receiving a specific commodity and / or service in the store where thesales terminal 400 is provided, Product discount coupon (or the unique number of the corresponding multi-product discount coupon) stored in the purchasingterminal 100 in a QR code form or the like.

즉, 상기 멀티 상품 할인 쿠폰을 소지한 상기 구매 단말(100)의 사용자가 상기 판매 단말(400)이 구비된 매장에 방문하여 해당 매장에서 판매하는 하나 이상의 상품을 구매하거나, 해당 매장에서 제공하는 서비스를 제공받은 이후에 해당 서비스에 대한 대가를 지불하기 위해서 해당 멀티 상품 할인 쿠폰을 통한 결제 기능을 수행하고자 하는 경우, 상기 판매 단말(400)은 상기 구매 단말(100)에 저장된(또는 발급된) 멀티 상품 할인 쿠폰의 고유 번호(또는 해당 멀티 상품 할인 쿠폰의 정보)를 인식한다. 이때, 상기 판매 단말(400)은 해당 판매 단말(400)에 구비된 인식부(예를 들어 바코드 인식부, QR 코드 인식부 등 포함)를 통해 해당 멀티 상품 할인 쿠폰을 인식할 수 있다.That is, when the user of the purchasingterminal 100 having the multi-commodity discount coupon visits the store provided with thesales terminal 400 and purchases one or more commodities to be sold in the corresponding store, When thesales terminal 400 is to perform a payment function through the multi-commodity discount coupon in order to pay a price for the service, thesales terminal 400 transmits the multi- And recognizes the unique number of the product discount coupon (or the information of the multi-product discount coupon). At this time, thesales terminal 400 can recognize the corresponding multi-product discount coupon through a recognition unit (for example, a barcode recognition unit, a QR code recognition unit, etc.) provided in thesales terminal 400.

또한, 상기 판매 단말(400)은 상기 인식된 멀티 상품 할인 쿠폰(또는 멀티 상품 할인 쿠폰의 고유 번호)을 근거로 상기 구매 단말(100), 상기 서버(200) 및 상기 결제 서버(300) 간의 연동에 의해, 상기 구매 단말(100)에 저장된 멀티 상품 할인 쿠폰에 대한 사용 처리(또는 결제 처리) 기능을 수행한다.Thesales terminal 400 may also be connected to thepurchase terminal 100, theserver 200 and thepayment server 300 based on the recognized multi-commodity discount coupon (or the unique number of the multi-commodity discount coupon) (Or payment processing) function for the multi-commodity discount coupon stored in the purchasingterminal 100. [

또한, 상기 판매 단말(400)은 상기 구매 단말(100)에 전송된(또는 발급된) 해당 멀티 상품 할인 쿠폰에 대해서 사용 완료 상태로 처리(또는 전환/변경)한다.Also, the sales terminal 400 processes (or switches / changes) the corresponding multi-commodity discount coupon transmitted (or issued) to the purchasingterminal 100 in a use completed state.

또한, 해당 멀티 상품 할인 쿠폰에 대한 사용 처리(또는 결제 기능 수행)가 완료된 이후, 상기 판매 단말(400)은 해당 멀티 상품 할인 쿠폰에 대한 사용 처리 결과를 표시한다. 여기서, 상기 멀티 상품 할인 쿠폰에 대한 사용 처리 결과는 매장명, 매장 위치, 매장 연락처, 상품 및 서비스 정보, 결제 일자 및 시각 정보, 주문 상품별/서비스별 가격 정보 등을 포함한다.Also, after the use process (or the payment function) for the multi-commodity discount coupon is completed, thesales terminal 400 displays the use processing result for the corresponding multi-commodity discount coupon. Here, the usage processing result for the multi-commodity discount coupon includes a store name, a store location, a store contact, product and service information, payment date and time information, and price information for each order product / service.

또한, 해당 멀티 상품 할인 쿠폰에 대한 사용 처리(또는 결제 기능 수행)가 완료된 이후, 상기 판매 단말(400)은 영수증 등의 인쇄물을 통해 상기 멀티 상품 할인 쿠폰에 대한 사용 처리 결과를 출력한다.Also, after the use process (or the payment function) for the multi-commodity discount coupon is completed, thesales terminal 400 outputs the use processing result for the multi-commodity discount coupon through a printed matter such as a receipt.

또한, 해당 멀티 상품 할인 쿠폰에 대한 사용 처리(또는 결제 기능 수행)가 완료된 이후, 해당 멀티 상품 할인 쿠폰의 잔액이 있는 경우, 상기 판매 단말(400)은 상기 서버(200)로부터 전송되는 해당 멀티 상품 할인 쿠폰에서의 사용 가능 금액(또는 잔액 정보/업데이트된 사용 가능 금액) 등을 포함하는 정보를 수신한다.If there is a balance of the multi-commodity discount coupon after the use process (or the payment function execution) for the corresponding multi-commodity discount coupon is completed, thesales terminal 400 transmits the multi- (Or balance information / updated usable amount) in the discount coupon, and the like.

또한, 상기 판매 단말(400)은 상기 수신된 해당 멀티 상품 할인 쿠폰에서의 사용 가능 금액 등을 포함하는 정보를 표시하거나 또는, 상기 영수증 등의 인쇄물을 통해 출력한다.In addition, thesales terminal 400 displays information including the usable amount or the like in the received multi-commodity discount coupon or outputs it through a print such as the receipt.

또한, 해당 멀티 상품 할인 쿠폰에 대한 사용 처리(또는 결제 기능 수행)가 완료된 이후, 상기 판매 단말(400)은 미리 설정된 포인트 및/또는 할인 쿠폰을 상기 구매 단말(100)에 전송(또는 발급)한다. 여기서, 상기 포인트 및/또는 할인 쿠폰은 상기 멀티 상품 할인 쿠폰에 대한 사용 처리 결과에 함께 포함된 상태이거나 상기 발급되는 영수증에 포함될 수 있다.Further, after the use process (or the payment function) for the corresponding multi-commodity discount coupon is completed, thesales terminal 400 transmits (or issues) a predetermined point and / or a discount coupon to thepurchase terminal 100 . Here, the point and / or discount coupon may be included in the usage processing result for the multi-commodity discount coupon or may be included in the receipt to be issued.

상기 매장 서버(500)는 상기 구매 단말(100), 상기 서버(200), 상기 결제 서버(300), 상기 판매 단말(400) 등과 통신한다.Thestore server 500 communicates with the purchasingterminal 100, theserver 200, thepayment server 300, thesales terminal 400, and the like.

또한, 상기 매장 서버(500)는 특정 매장에 구비되는 상기 판매 단말(400)일 수 있다.Also, thestore server 500 may be thesales terminal 400 provided in a specific store.

또한, 상기 매장 서버(500)는 상기 서버(200)로부터 전송되는 상기 회원 정보, 상기 배송 상품에 대한 정보, 상기 구매 단말(100)의 식별 정보 등을 수신한다.Also, thestore server 500 receives the member information transmitted from theserver 200, information on the delivery commodity, identification information of the purchasingterminal 100, and the like.

또한, 상기 매장 서버(500)는 상기 회원 정보에 포함된 배송지 정보를 근거로 해당 배송지로 상기 배송 상품을 배송한다.In addition, thestore server 500 delivers the delivery product to the delivery destination based on the delivery destination information included in the member information.

또흔, 핸드 캐리 상품(또는 현장 수령 상품)인 경우, 상기 매장 서버(500)는 핸드 캐리 상품의 현장 수령에 필요한 안내 정보, 바코드나 QR 코드 형태 등의 식별 코드 등을 포함하는 상기 안내 메시지를 상기 구매 단말(100)에 전송한다. 이후, 상기 구매 단말(100)의 사용자가 해당 핸드 캐리 상품을 제공하는 매장에 직접 방문한 경우, 상기 매장 서버(500)에서 상기 구매 단말(100)에 저장된 상기 바코드나 QR 코드 형태 등의 식별 코드를 인증(또는 인식)한 후, 상기 핸드 캐리 상품을 상기 구매 단말(100)의 사용자에게 제공할 수 있다.Thestore server 500 stores the guide message including the guide information necessary for on-the-spot receipt of the hand-held merchandise, an identification code such as a bar code or a QR code form, and the like in the case of the hand- To the purchasing terminal (100). Thereafter, when the user of the purchasingterminal 100 directly visits the store providing the hand-held commodity, thestore server 500 transmits an identification code such as the bar code or QR code form stored in the purchasingterminal 100 After the authentication (or recognition), the hand-held goods can be provided to the user of the purchasingterminal 100.

이와 같이, 오프라인 매장 또는 거리 매장에 구비된 객체를 촬영하고, 상기 촬영된 객체와 관련한 상품 및 서비스 정보, 부가 정보 등을 증강 현실 기능을 통해 제공할 수 있다.In this way, it is possible to photograph an object provided in the offline store or the street store, and to provide the goods, service information, additional information, etc. related to the photographed object through the augmented reality function.

또한, 이와 같이, 구매 단말에서 촬영한 객체와 관련한 상품 정보 및/또는 서비스 정보를 제공하는 것 이외에 추가로 해당 상품이 직접 수령이나 배송 가능한 상품임을 나타내는 핸드 캐리 상품인지 또는, 오프라인 매장 또는 거리 매장에서 취급하지 않거나 판매 소진으로 인한 품절 상태인 상품임을 나타내는 배송 상품인지 여부의 부가 정보를 증강 현실 기능을 통해 제공할 수 있다.In addition to providing the product information and / or the service information related to the object photographed by the purchasing terminal, it is also possible to provide the product information and / or the service information in the form of a hand-held commodity indicating that the commodity is directly receivable or deliverable, It is possible to provide additional information as to whether or not the product is a delivery product indicating that the product is out of stock due to the depletion of sales or not through the augmented reality function.

이하에서는, 본 발명에 따른 증강 현실 기반 쇼핑 정보 제공 시스템의 제어 방법을 도 1 내지 도 10을 참조하여 상세히 설명한다.Hereinafter, a control method of the augmented reality-based shopping information providing system according to the present invention will be described in detail with reference to FIG. 1 to FIG.

도 8은 본 발명의 실시예에 따른 증강 현실 기반 쇼핑 정보 제공 시스템의 제어 방법을 나타낸 흐름도이다.FIG. 8 is a flowchart illustrating a control method of the augmented reality-based shopping information providing system according to the embodiment of the present invention.

먼저, 구매 단말(100)은 오프라인 매장 또는 거리 매장(또는 가두 매장)에 구비된(또는 설치된/배치된) 객체를 촬영한다. 여기서, 상기 객체는 상기 오프라인 또는 거리에 위치하는 각 매장에 구비된 할인행사코드(예를 들어 전시 상품, POP, 전단, 배너 광고, 게시판 광고, 포스터 광고, 간판 등 포함), 상품코드(예를 들어 가격표 등 포함) 등을 포함한다. 이때, 본 발명에서의 상기 객체는 각 매장에서 제공하는 상품 및 서비스를 제외한 상태일 수 있다.First, the purchasing terminal 100 photographs an object provided (or installed / placed) in an offline store or a street store (or a street store). Here, the object may include a discount code (for example, an exhibition item, a POP, a postage, a banner advertisement, a bulletin board advertisement, a poster advertisement, a signboard etc.), a product code Including price tags, etc.). At this time, the object in the present invention may be a state excluding goods and services provided in each store.

일 예로, 상기 구매 단말(100)은 사용자 제어(또는 사용자 조작)에 의해 오프라인 매장에 구비된 간장의 상품 코드(예를 들어 국간장 100 리터 상품 코드: 20110033698 등 포함)를 촬영한다.For example, the purchasing terminal 100 photographs a commodity code of a soy sauce (including, for example, 100 liters of domestic soy sauce product code: 20110033698) provided in an off-line store by user control (or user manipulation).

다른 일 예로, 상기 구매 단말(100)의 사용자는 거리에 위치한 제 1 정형 외과 간판을 촬영한다(S810).In another example, the user of the purchasing terminal 100 photographs a first orthopedic signboard located at a distance (S810).

이후, 상기 구매 단말(100)은 상기 촬영된 영상 정보, 구매 단말(100)의 식별 정보 등을 상기 서버(200)에 전송한다. 여기서, 상기 구매 단말(100)의 식별 정보는 MDN, 모바일 IP, 모바일 MAC, Sim(가입자 식별 모듈) 카드 고유정보, 시리얼번호 등을 포함한다.Then, the purchasingterminal 100 transmits the photographed image information, the identification information of the purchasingterminal 100, and the like to theserver 200. Here, the identification information of the purchasingterminal 100 includes an MDN, a mobile IP, a mobile MAC, a SIM (subscriber identity module) card specific information, a serial number, and the like.

일 예로, 상기 구매 단말(100)은 상기 촬영된 제 1 영상 정보(예를 들어 상기 간장의 상품 코드를 포함하는 영상 정보), 상기 구매 단말(100)의 식별 정보 등을 상기 서버(200)에 전송한다.For example, the purchasingterminal 100 may store the photographed first image information (for example, image information including the commodity code of the soy sauce), identification information of the purchasingterminal 100, and the like to theserver 200 send.

이때, 상기 구매 단말(100)은 해당 구매 단말(100)의 위치 정보(또는 상기 제 2 객체를 촬영한 지점의 위치 정보)를 확인하고, 상기 확인된 구매 단말(100)의 위치 정보를 상기 촬영된 영상 정보, 상기 구매 단말(100)의 식별 정보 등과 함께 상기 서버(200)에 전송할 수도 있다.At this time, the purchasingterminal 100 confirms the location information of the purchasing terminal 100 (or the location information of the point where the second object is photographed), and transmits the location information of the confirmedpurchasing terminal 100 The identification information of the purchasingterminal 100, and the like.

다른 일 예로, 상기 구매 단말(100)은 상기 GPS 수신기를 통해 상기 구매 단말(100)의 위치 정보를 확인한다. 또한, 상기 구매 단말(100)은 상기 촬영된 제 2 영상 정보(예를 들어 상기 제 1 정형 외과 간판을 포함하는 영상 정보), 상기 구매 단말(100)의 위치 정보, 상기 구매 단말(100)의 식별 정보 등을 상기 서버(200)에 전송한다(S820).In another example, the purchasingterminal 100 confirms the location information of the purchasingterminal 100 through the GPS receiver. Also, the purchasingterminal 100 may receive the second image information (e.g., image information including the first orthopedic signboard), location information of the purchasingterminal 100, Identification information and the like to the server 200 (S820).

이후, 상기 서버(200)는 상기 구매 단말(100)로부터 전송되는 상기 영상 정보, 상기 구매 단말(100)의 식별 정보 등을 수신한다. 이때, 상기 서버(200)는 상기 구매 단말(100)로부터 전송되는 상기 구매 단말(100)의 위치 정보 등을 함께 수신할 수도 있다.Then, theserver 200 receives the image information transmitted from the purchasingterminal 100, the identification information of the purchasingterminal 100, and the like. At this time, theserver 200 may receive the location information of the purchasingterminal 100 transmitted from the purchasingterminal 100 together.

또한, 상기 서버(200)는 상기 수신된 영상 정보를 분석하여 상기 영상 정보 내에 포함된 객체를 인식한다.In addition, theserver 200 analyzes the received image information and recognizes an object included in the image information.

일 예로, 상기 서버(200)는 상기 수신된 제 1 영상 정보 내에 포함된 상기 간장의 상품 코드(예를 들어 20110033698)를 인식한다.For example, theserver 200 recognizes the commodity code (for example, 20110033698) of the soy sauce contained in the received first image information.

다른 일 예로, 상기 서버(200)는 상기 수신된 제 2 영상 정보 내에 포함된 상기 제 1 정형 외과의 간판을 인식한다(S830).In another example, theserver 200 recognizes the sign of the first orthopedic surgeon included in the received second image information (S830).

이후, 상기 서버(200)는 미리 저장된 복수의 객체별 코드 중에서 상기 인식된 객체에 대응하는 코드를 확인한다.Thereafter, theserver 200 identifies a code corresponding to the recognized object among a plurality of pre-stored object-specific codes.

또한, 상기 서버(200)는 미리 저장된 복수의 상품 정보 및 서비스 정보 중에서 상기 확인된 코드에 대응하는 하나 이상의 상품 및 서비스 정보를 확인한다. 이때, 상기 서버(200)는 상기 확인되는 하나 이상의 상품 및 서비스 정보(또는 상기 확인되는 코드에 대응하는 하나 이상의 상품 및 서비스 정보) 중에서 해당 상품이 직접 수령이나 배송 가능한 상품임을 나타내는 핸드 캐리 상품인지 또는, 오프라인 매장 또는 거리 매장에서 취급하지 않거나 판매 소진으로 인한 품절 상태인 상품임을 나타내는 배송 상품인지 여부의 부가 정보를 확인한다. 여기서, 상기 상품 및 서비스 정보는 상품명(또는 서비스명), 상품 고유 코드(또는 서비스 고유 코드), 상품 이미지(또는 서비스 기본 이미지), 상품 설명 정보(또는 서비스 설명 정보), 상품/서비스에 대한 체험 정보, 상품/서비스에 대한 평가 정보, 예약 정보, 상담 정보, 진료 시간 정보 등을 포함한다.Also, theserver 200 identifies one or more goods and service information corresponding to the identified code from a plurality of goods information and service information stored in advance. At this time, theserver 200 determines whether the merchandise is a hand-held merchandise indicating that the merchandise is directly receivable or deliverable, from among the at least one merchandise and service information (or at least one merchandise and service information corresponding to the verified code) , Additional information indicating whether the product is a delivery product that is not handled in an offline store or at a street store, or that the product is out of stock due to exhaustion of sales is checked. Here, the goods and service information may include at least one of a product name (or a service name), a product unique code (or service unique code), a product image (or a service basic image), product description information (or service description information) Information about the product / service, evaluation information about the product / service, reservation information, consultation information, and time information.

일 예로, 상기 서버(200)는 미리 저장된 객체별 코드(또는 복수의 객체의 고유 식별 정보별 코드) 중에서 상기 인식된 간장의 상품 코드(예를 들어 20110033698)에 대응하는 미리 설정된 제 11 바코드를 확인한다. 또한, 상기 서버(200)는 미리 저장된 코드별 상품 및 서비스 정보 중에서 상기 확인된 제 11 바코드와 관련한 ABC 식품의 국간장 100 리터에 대한 상품 정보, BCD 식품의 국간장 100 리터에 대한 상품 정보, CDE 식품의 국간장 100 리터에 대한 상품 정보, DEF 식품의 국간장 100 리터에 대한 상품 정보 등을 확인한다. 또한, 상기 서버(200)는 상기 확인된 제 11 바코드와 관련한 ABC 식품의 국간장 100 리터에 대한 상품 정보, BCD 식품의 국간장 100 리터에 대한 상품 정보, CDE 식품의 국간장 100 리터에 대한 상품 정보, DEF 식품의 국간장 100 리터에 대한 상품 정보 중에서 직접 수령이나 배송 가능한 상품임을 나타내는 핸드 캐리 상품인 ABC 식품의 국간장 100 리터에 대한 상품 정보, BCD 식품의 국간장 100 리터에 대한 상품 정보 및 CDE 식품의 국간장 100 리터에 대한 상품 정보를 각각 확인하고, 판매 소진으로 인한 품절 상태인 상품임을 나타내는 배송 상품인 DEF 식품의 국간장 100 리터에 대한 상품 정보를 확인한다.For example, theserver 200 confirms a preset eleventh bar code corresponding to the recognized commodity code (for example, 20110033698) among the object-specific code (or the code for each unique identification information of a plurality of objects) do. In addition, theserver 200 may store product information for 100 liters of local soy sauce of ABC food related to the 11th bar code, product information for 100 liters of local soy sauce of BCD food, CDE Check the product information for 100 liters of local soy sauce, and product information for 100 liters of local soy sauce. In addition, theserver 200 may store the product information on 100 liters of local soy sauce of ABC food related to the 11th barcode, the product information on 100 liters of local soy sauce of BCD food, the product information on 100 liters of local soy sauce of CDE food Information, product information about 100 liters of local soy sauce of DEF food, product information ofABC food 100 liters of soup liver of hand carry product which indicates that it is a product that can be received or delivered directly, product information of 100 liter of BCD food, Check the product information for 100 liters of local soy sauce of CDE foods, and check the product information for DEF foods of 100 liters of local soy sauce, which is a delivery product indicating that the product is sold out due to exhaustion of sales.

다른 일 예로, 상기 서버(200)는 상기 미리 저장된 객체별 코드(또는 복수의 객체의 고유 식별 정보별 코드) 중에서 상기 인식된 간판에 대응하는 미리 설정된 제 12 QR 코드를 확인한다. 이때, 상기 서버(200)는 상기 구매 단말(100)의 위치 정보를 반영하여, 상기 미리 저장된 객체별 코드(또는 위치 정보를 포함하는 객체별 코드) 중에서 상기 구매 단말(100)의 위치 정보에 인접한 해당 간판에 대응하는 미리 설정된 제 12 QR 코드를 확인할 수 있다. 또한, 상기 서버(200)는 상기 미리 저장된 코드별 상품 및 서비스 정보 중에서 상기 확인된 제 12 QR 코드와 관련한 제 1 정형외과에서 제공하는 복수의 서비스(또는 복수의 진료 과목)인 근 골격 초음파 검사, 체형 진단 검사, X-레이 진단 검사, 통증 클리닉, 신경 차단술 등을 확인한다. 또한, 상기 서버(200)는 상기 확인된 제 1 정형외과에서 제공하는 복수의 서비스에 대한 예약 정보, 상담 정보, 진료 시간 정보 등을 함께 확인한다(S840).In another example, theserver 200 confirms a preset twelfth QR code corresponding to the recognized signboard among the pre-stored object-specific codes (or codes for unique identification information of a plurality of objects). At this time, theserver 200 reflects the location information of the purchasingterminal 100 and extracts, from the pre-stored object-specific code (or the object-based code including the location information) It is possible to confirm a preset 12th QR code corresponding to the signboard. In addition, theserver 200 may include a plurality of services (or a plurality of medical care courses) provided by a first orthopedic surgeon related to the confirmed 12th QR code among the goods and service information per code stored in advance, Physical examination, X-ray diagnosis, pain clinic, and neuroprotection. In addition, theserver 200 checks reservation information, consultation information, and treatment time information for a plurality of services provided by the first orthopedic surgeon (S840).

이후, 상기 서버(200)는 상기 확인된 코드에 대응하는 하나 이상의 상품 및 서비스 정보, 상기 확인된 핸드 캐리 상품 또는 배송 상품인지 여부를 나타내는 부가 정보 등을 상기 구매 단말(100)에 전송한다.Then, theserver 200 transmits to the purchasingterminal 100 one or more goods and service information corresponding to the confirmed code, additional information indicating whether it is the confirmed hand-held commodity or the delivery commodity, or the like.

이때, 상기 하나 이상의 상품 및 서비스 정보가 복수인 경우, 상기 서버(200)는 복수의 상품 및 서비스 정보를 미리 설정된 할인율순, 적립율순, 판매량순, 인기도순 및 브랜드순 중 어느 하나로 정렬하고, 상기 정렬된 복수의 상품 및 서비스 정보 중에서 미리 설정된 개수만큼만 상기 구매 단말(100)에 전송할 수도 있다.If the one or more goods and service information are plural, theserver 200 arranges a plurality of goods and service information in any one of preset discount rate, accrual rate, sales volume order, popularity order, and brand order, It is possible to transmit only a predetermined number of pieces of ordered goods and service information to the purchasingterminal 100. [

일 예로, 상기 서버(200)는 상기 확인된 제 11 바코드와 관련한 ABC 식품의 국간장 100 리터에 대한 상품 정보, BCD 식품의 국간장 100 리터에 대한 상품 정보, CDE 식품의 국간장 100 리터에 대한 상품 정보, DEF 식품의 국간장 100 리터에 대한 상품 정보 등과, 핸드 캐리 상품임을 나타내는 부가 정보(예를 들어 ABC 식품의 국간장 100 리터에 대한 상품 정보, BCD 식품의 국간장 100 리터에 대한 상품 정보, CDE 식품의 국간장 100 리터에 대한 상품 정보 등 포함), 배송 상품임을 나타내는 부가 정보(예를 들어 DEF 식품의 국간장 100 리터에 대한 상품 정보 등 포함) 등을 상기 구매 단말(100)에 전송한다.For example, theserver 200 may store product information on 100 liters of local soy sauce of ABC food related to the 11th bar code, product information on 100 liters of local soy sauce of BCD food, Product information, product information on 100 liters of local soy sauce of DEF food, and additional information indicating that it is a hand-held product (for example, product information on 100 liters of soup soy sauce of ABC food, product information on 100 liters of soup soy sauce , And additional information indicating that the product is a delivery product (for example, product information on 100 liters of domestic soy sauce of DEF food, etc.) to the purchasingterminal 100 do.

다른 일 예로, 상기 서버(200)는 상기 확인된 제 12 QR 코드와 관련한 제 1 정형외과에서 제공하는 복수의 서비스(또는 복수의 진료 과목)인 근 골격 초음파 검사, 체형 진단 검사, X-레이 진단 검사, 통증 클리닉, 신경 차단술 등을 상기 구매 단말(100)에 전송한다(S850).In another example, theserver 200 may include a plurality of services (or a plurality of medical care courses) provided by a first orthopedic surgeon related to the identified 12th QR code, such as a skeletal ultrasound examination, a body type diagnostic test, A pain clinic, a neuroprotection, and the like to the purchasing terminal 100 (S850).

이후, 상기 구매 단말(100)은 상기 서버(200)로부터 전송되는 영상 정보에 포함된 해당 객체와 관련한 하나 이상의 상품 및 서비스 정보, 부가 정보 등을 수신한다.Then, the purchasingterminal 100 receives one or more goods, service information, additional information, and the like related to the object included in the image information transmitted from theserver 200.

또한, 상기 구매 단말(100)은 해당 구매 단말(100)에 표시되는 앞서 촬영된 영상 정보 상에 상기 수신된 하나 이상의 상품 및 서비스 정보, 상기 부가 정보 등을 증강 현실 기능을 적용하여 표시한다. 이때, 상기 구매 단말(100)에서 상기 서버(200)로부터 전송되는 할인율순, 적립율순, 판매량순, 인기도순 및 브랜드순 중 어느 하나로 정렬된 복수의 상품 및 서비스 정보를 수신하는 경우, 상기 구매 단말(100)은 상기 수신된 할인율순, 적립율순, 판매량순, 인기도순 및 브랜드순 중 어느 하나로 정렬된 복수의 상품 및 서비스 정보를 표시할 수도 있다.Also, the purchasingterminal 100 displays the received one or more goods and service information, the additional information, and the like on the photographed image information displayed on the purchasingterminal 100 by applying the augmented reality function. In this case, when the purchasingterminal 100 receives a plurality of goods and service information sorted by any one of discount rate, accrual rate, sales volume, popularity order, and brand order transmitted from theserver 200, (100) may display a plurality of goods and service information arranged in any one of the received discount rate order, the accumulation rate order, the sales order order, the popularity order, and the brand order.

또한, 정렬되지 않은 복수의 상품 및 서비스 정보를 수신하는 경우, 상기 구매 단말(100)은 상기 수신된 복수의 상품 및 서비스 정보를 상기 미리 설정된 할인율순, 적립율순, 판매량순, 인기도순 및 브랜드순 중 어느 하나로 정렬하고, 상기 정렬된 복수의 상품 및 서비스 정보를 증강 현실 기능을 적용하여 표시할 수도 있다. 이때, 상기 구매 단말(100)은 상기 정렬된 복수의 상품 및 서비스 정보 중에서 미리 설정된 개수만큼만 표시할 수도 있다.Also, when a plurality of goods and service information that are not aligned are received, the purchasing terminal 100 stores the received plurality of goods and service information in the order of the preset discount rate, the order of accumulation rate, the order of sales amount, And displaying the plurality of sorted goods and service information by applying the augmented reality function. At this time, the purchasingterminal 100 may display only a predetermined number of the plurality of ordered goods and service information.

일 예로, 도 9에 도시된 바와 같이, 상기 구매 단말(100)은 상기 전송된 제 1 영상 정보에 응답하여 상기 서버(200)로부터 전송되는 상기 제 1 영상 정보에 포함된 간장의 상품 코드와 관련한 ABC 식품의 국간장 100 리터에 대한 상품 정보, BCD 식품의 국간장 100 리터에 대한 상품 정보, CDE 식품의 국간장 100 리터에 대한 상품 정보, DEF 식품의 국간장 100 리터에 대한 상품 정보(920) 등을 증강 현실 기능을 적용하여 상기 제 1 영상 정보(910) 상에 표시한다. 또한, 상기 도 9에 도시된 바와 같이, 상기 구매 단말(100)은 상기 증강 현실 기능이 적용되어 상기 제 1 영상 정보 상에 표시되는 복수의 상품 정보(920) 중에서 각 상품 정보별 부가 정보(930)를 증강 현실 기능을 적용하여 해당 상품 정보의 일측에 함께 표시한다. 여기서, 상기 상품 정보별 부가 정보(930)는 핸드 캐리 상품임을 나타내는 부가 정보(예를 들어 ABC 식품의 국간장 100 리터에 대한 상품 정보, BCD 식품의 국간장 100 리터에 대한 상품 정보, CDE 식품의 국간장 100 리터에 대한 상품 정보 등 포함), 배송 상품임을 나타내는 부가 정보(예를 들어 DEF 식품의 국간장 100 리터에 대한 상품 정보 등 포함) 등을 포함한다. 이때, 상기 구매 단말(100)은 미리 설정된 핸드캐리 상품임을 나타내는 아이콘/이모티콘, 미리 설정된 배송 상품임을 나타내는 아이콘/이모티콘 등을 해당 상품 정보의 일측에 표시할 수도 있다.For example, as shown in FIG. 9, in response to the transmitted first image information, the purchasingterminal 100 transmits the first image information transmitted from theserver 200, ABC food product information about 100 liters of local soy sauce, BCD food product information about 100 liters of local soy sauce, product information about 100 liters of local soy sauce of CDE food, product information about 100 liters of domestic soy sauce (920) Etc. are displayed on thefirst image information 910 by applying the augmented reality function. 9, the purchasingterminal 100 may includeadditional information 930 for each product information among a plurality ofproduct information 920 displayed on the first image information by applying the augmented reality function, ) Are displayed together on one side of the product information by applying the augmented reality function. Here, theadditional information 930 for each product information may include supplementary information indicating that the product is a hand-held product (for example, product information on 100 liters of local soy sauce of ABC food, product information on 100 liters of local soy sauce of BCD, (For example, product information for 100 liters of domestic soy sauce, etc.), and additional information indicating that the product is a delivery product (for example, product information for 100 liters of domestic soy sauce). At this time, the purchasingterminal 100 may display an icon / emoticon indicating that it is a preset handcrafted product, an icon / emoticon indicating a preset delivery product, and the like on one side of the corresponding product information.

다른 일 예로, 도 10에 도시된 바와 같이, 상기 구매 단말(100)은 상기 전송된 제 2 영상 정보에 응답하여 상기 서버(200)로부터 전송되는 상기 제 2 영상 정보(1010)에 포함된 제 1 정형외과의 간판과 관련한 제 1 정형외과에서 제공하는 복수의 서비스(또는 복수의 진료 과목)인 근 골격 초음파 검사, 체형 진단 검사, X-레이 진단 검사, 통증 클리닉, 신경 차단술 등을 증강 현실 기능을 적용하여 표시(1020)한다(S860).10, the purchasingterminal 100 may transmit thefirst image information 1010 included in thesecond image information 1010 transmitted from theserver 200 in response to the transmitted second image information, (Or multiple medical subjects) provided by the first orthopedic department related to the orthopedic signboard functioning as an augmented reality function such as a skeletal ultrasound examination, a body type diagnostic test, an X-ray diagnostic test, a pain clinic, (1020) (S860).

이후, 상기 구매 단말(100)은 상기 구매 단말(100)에 표시되는 하나 이상의 상품 및 서비스 정보 중에서 선택되는 적어도 하나의 특정 상품 및 서비스 정보를 근거로 상기 서버(200), 결제 서버(300) 및 판매 단말(400) 등과의 연동에 의해 결제 기능을 수행한다.Then, the purchasingterminal 100 determines whether or not theserver 200, thepayment server 300, and thepayment server 300 are selected based on at least one specific goods and service information selected from one or more goods and service information displayed on the purchasingterminal 100 And performs the settlement function by interlocking with thesales terminal 400 or the like.

이때, 상기 구매 단말(100)에서 선택된 특정 상품 및 서비스 정보에 대응하는 특정 상품에 대해서, 해당 특정 상품이 미리 설정된 배송 상품이며 해외 직접 구매에 해당하는 상품인 경우, 상기 서버(200)는 상기 구매 단말(100), 상기 결제 서버(300) 및 상기 판매 단말(400) 등과의 연동에 의해, 상기 배송 상품에 해당하는 특정 상품에 대해서 배송료, 관세 등을 포함하는 금액에 대한 결제 기능을 수행할 수 있다.When the specific product corresponding to the specific product and service information selected by the purchasingterminal 100 is a predetermined delivery product and corresponds to the direct foreign purchase, It is possible to perform the payment function for the amount of the specific commodity corresponding to the commodity including the postage and the customs by interlocking with the terminal 100, thepayment server 300 and thesales terminal 400 have.

또한, 상기 구매 단말(100)은 사용자 입력에 따른 회원 정보(또는 상기 구매 단말(100)에 미리 저장된 회원 정보), 상기 구매 단말(100)의 식별 정보 등을 상기 서버(200)에 전송한다. 여기서, 상기 회원 정보는 이름, 주소, 사용 언어, 배송지 정보, 쇼핑 객체 종류(예를 들어 아바타 종류, 이모티콘 종류 등 포함) 등을 포함한다.Also, the purchasingterminal 100 transmits the member information (or the member information stored in advance in the purchasing terminal 100) according to user input, the identification information of the purchasingterminal 100, and the like to theserver 200. Here, the member information includes a name, an address, a language used, a destination information, a shopping object type (for example, an avatar type, an emoticon type, etc.).

이때, 상기 구매 단말(100)에서 선택된 특정 상품 및 서비스 정보에 대응하는 특정 상품에 대해서, 해당 특정 상품이 미리 설정된(또는 등록된) 수입 통관 불가 상품(예를 들어 육류, 재화, 무기류, 가스류, 약 등 포함)에 해당하는 경우, 상기 서버(200)는 상기 특정 상품 및 서비스 정보에 대한 결제 기능 수행이 불가함을 나타내는 정보(또는 결제 기능 실패 정보)를 상기 구매 단말(100)에 전송한다. 여기서, 상기 결제 기능 수행이 불가함을 나타내는 정보는 상기 특정 상품 및 서비스 정보에 대응하는 특정 상품이 수입 통관 불가 상품에 해당함을 나타내는 정보 등을 포함한다.At this time, with respect to the specific commodity corresponding to the specific commodity and the service information selected by the purchasingterminal 100, the commodity can be set to a predetermined commodity (for example, meat, commodities, , Etc.), theserver 200 transmits to thepurchase terminal 100 information indicating that the payment function for the specific goods and service information can not be performed (or the payment function failure information) . Herein, the information indicating that the payment function can not be performed includes information indicating that the specific commodity corresponding to the specific commodity and service information corresponds to the commodity that can not be imported.

또한, 상기 구매 단말(100)은 상기 서버(200)로부터 전송되는 상기 특정 상품 및 서비스 정보에 대한 결제 기능 수행이 불가함을 나타내는 정보를 수신하고, 상기 수신된 상기 특정 상품 및 서비스 정보에 대한 결제 기능 수행이 불가함을 나타내는 정보를 표시한다.In addition, the purchasingterminal 100 receives information indicating that the payment function for the specific goods and service information transmitted from theserver 200 is not possible, and transmits the payment for the specific goods and service information Information indicating that the function can not be performed is displayed.

또한, 상기 구매 단말(100)에서 선택된 특정 상품 및 서비스 정보에 대응하는 특정 상품이 미리 설정된(또는 등록된) 수입 통관 불가 상품(예를 들어 육류, 재화, 무기류, 가스류, 약 등 포함)에 해당하지 않는 경우, 상기 서버(200)는 상기 적어도 하나의 특정 상품 및 서비스 정보에 대응하는 정상가 금액에 미리 설정된 할인액을 적용하여 상기 정상가 금액에서 상기 할인액이 적용된 금액에 대한 결제 기능을 수행한다.In addition, when a specific commodity corresponding to the specific commodity and the service information selected by the purchasingterminal 100 is set to a predetermined commodity (for example, meat, commodities, weapons, gas, medicine, etc.) If not, theserver 200 applies a predetermined discount amount to the normal amount corresponding to the at least one specific goods and service information, and performs the payment function for the amount to which the discount amount is applied at the normal amount.

또한, 상기 결제 기능이 정상적으로 수행 완료된 이후, 상기 서버(200)(또는 상기 결제 서버(300))는 결제 기능 수행 결과(또는 결제 정보)를 상기 구매 단말(100)에 제공한다. 여기서, 상기 결제 기능 수행 결과(또는 결제 정보)는 적어도 하나의 상품 및 서비스 정보, 결제 일자 및 시각 정보, 주문 상품별/서비스별 가격 정보 등을 포함한다.Also, after the settlement function is normally completed, the server 200 (or the settlement server 300) provides the settlement function execution result (or settlement information) to thepurchase terminal 100. Here, the payment function execution result (or payment information) includes at least one goods and service information, payment date and time information, and price information for each order product / service.

또한, 상기 구매 단말(100)은 상기 서버(200)(또는 상기 결제 서버(300))로부터 전송되는 결제 기능 수행 결과를 수신하고, 상기 수신된 결제 기능 수행 결과를 표시한다.Also, the purchasingterminal 100 receives the payment function execution result transmitted from the server 200 (or the payment server 300), and displays the received payment function execution result.

일 예로, 상기 도 9에 도시된 국간장과 관련한 상품 정보 중에서 BCD 식품의 국간장 100 리터에 대한 상품 정보가 선택될 때, 상기 구매 단말(100)은 상기 서버(200), 상기 결제 서버(300) 및 상기 판매 단말(400) 등과의 연동에 의해, 상기 국간장 100 리터에 대한 상품 정보에 대응하는 결제 금액(또는 상기 정상가 금액에 미리 설정된 제 11 쿠폰(예를 들어 15% 할인 쿠폰)에 해당하는 할인액이 적용된 금액)에 대한 결제 기능을 수행한다. 또한, 상기 결제 기능이 정상적으로 완료된 이후, 상기 서버(200)는 상기 결제 기능 수행 결과를 상기 구매 단말(100)에 전송한다. 또한, 상기 구매 단말(100)은 상기 서버(200)로부터 전송되는 결제 기능 수행 결과를 저장 및 표시한다.9, when the commodity information for 100 liters of the local soy sauce of the BCD food is selected from the commodity information related to the local soy sauce, the purchasingterminal 100 is connected to theserver 200, the payment server 300 (For example, 15% discount coupon) set in advance for the amount of commodity corresponding to the commodity information for 100 liters of the local soy sauce by interlocking with thesales terminal 400 and the like The amount of discount applied). Also, after the settlement function is normally completed, theserver 200 transmits the settlement function execution result to thepurchase terminal 100. Also, the purchasing terminal 100 stores and displays a payment function execution result transmitted from theserver 200.

다른 일 예로, 상기 도 9에 도시된 국간장과 관련한 상품 정보 중에서 상기 오프라인 매장에서 판매 소진으로 인한 품절 상태인 상품에 해당하는 DEF 식품의 국간장 100 리터에 대한 상품 정보가 선택될 때, 상기 구매 단말(100)은 상기 서버(200), 상기 결제 서버(300) 및 상기 판매 단말(400) 등과의 연동에 의해, 상기 DEF 식품의 국간장 100 리터에 대한 상품 정보에 대응하는 결제 금액(또는 상기 정상가 금액에 상기 제 12 쿠폰(예를 들어 10% 할인 쿠폰)에 해당하는 할인액이 적용된 금액)에 대한 결제 기능을 수행한다. 또한, 상기 결제 기능이 정상적으로 완료된 이후, 상기 서버(200)는 상기 결제 기능 수행 결과를 상기 구매 단말(100)에 전송한다. 또한, 상기 구매 단말(100)은 상기 서버(200)로부터 전송되는 결제 기능 수행 결과를 저장 및 표시한다.In another example, when product information for 100 liters of domestic soy sauce of DEF food corresponding to a product sold out due to sales exhaustion in the offline store is selected from the product information related to the domestic soy sauce shown in FIG. 9, The terminal 100 can receive the payment amount corresponding to the product information for 100 liters of the domestic soy sauce of the DEF food (or the payment amount corresponding to the product information for 100 liters of the domestic soy sauce) by interlocking with theserver 200, thepayment server 300, The amount of the discount corresponding to the twelfth coupon (for example, a 10% discount coupon) is applied to the normal amount of money. Also, after the settlement function is normally completed, theserver 200 transmits the settlement function execution result to thepurchase terminal 100. Also, the purchasing terminal 100 stores and displays a payment function execution result transmitted from theserver 200.

또 다른 일 예로, 상기 도 10에 도시된 제 1 정형외과에서 제공하는 복수의 서비스에 대한 정보(1010) 중에서 신경 차단술이 선택될 때, 상기 구매 단말(100)은 상기 서버(200), 상기 결제 서버(300) 및 상기 판매 단말(400) 등과의 연동에 의해, 상기 신경 차단술에 대응하는 결제 금액에 대한 결제 기능(또는 상기 신경 차단술에 대한 예약 기능)을 수행한다. 또한, 상기 결제 기능(또는 예약 기능)이 정상적으로 완료된 이후, 상기 서버(200)는 상기 결제 기능 수행 결과(또는 예약 기능 수행 결과)를 상기 구매 단말(100)에 전송한다. 또한, 상기 구매 단말(100)은 상기 서버(200)로부터 전송되는 결제 기능 수행 결과(또는 예약 기능 수행 결과)를 저장 및 표시한다(S870).10, when the neural block technique is selected from among the plurality ofservices information 1010 provided by the first orthopedic surgeon shown in FIG. 10, the purchasingterminal 100 may determine that theserver 200, (Or a reserving function for the nerve barriers) for the settlement amount corresponding to the nerve barriers by interlocking with theserver 300 and thesales terminal 400 or the like. Also, after the payment function (or the reservation function) is normally completed, theserver 200 transmits the payment function execution result (or the reservation function execution result) to thepurchase terminal 100. In addition, the purchasing terminal 100 stores and displays a payment function execution result (or a reservation function execution result) transmitted from the server 200 (S870).

이후, 상기 결제 기능이 정상적으로 수행 완료된 이후, 결제 완료된 적어도 하나의 특정 상품 및 서비스 정보 중에서, 미리 설정된 배송 상품이 포함된 경우, 상기 서버(200)는 상기 구매 단말(100)로부터 전송된 회원 정보를 근거로 미리 저장된 복수의 매장(또는 매장 정보) 중에서, 해당 회원 정보에 포함된 배송지 정보에 해당하는 배송지에서 가장 가까운 매장 중 상기 배송 상품의 재고가 있는 매장을 확인한다.Theserver 200 then transmits the member information transmitted from the purchasingterminal 100 to theserver 200 when the predetermined payment item is included in at least one specific product and service information after the settlement function is normally completed Out of the plurality of stores (or store information) previously stored on the basis of the store information, the store in which the item is in stock among the stores closest to the destination corresponding to the destination information included in the member information.

또한, 상기 서버(200)는 상기 확인된 매장의 매장 서버(500)로 상기 회원 정보, 상기 배송 상품에 대한 정보, 상기 구매 단말(100)의 식별 정보 등을 전송한다.Also, theserver 200 transmits the member information, the information about the delivery commodity, the identification information of the purchasingterminal 100, and the like to thestore server 500 of the identified store.

일 예로, 상기 오프라인 매장에서 판매 소진으로 인한 품절 상태인 상품에 해당하는 DEF 식품의 국간장 100 리터에 대한 상품 정보에 대한 결제 기능이 정상적으로 수행될 때, 상기 서버(200)는 상기 DEF 식품의 국간장 100 리터에 대한 상품 정보를 상기 구매 단말(100)의 사용자에게 배송(또는 전달)하기 위해서, 상기 서버(200)에 미리 등록된 복수의 매장 중에서 상기 DEF 식품의 국간장 100 리터에 대한 상품 정보에 해당하는 DEF 식품의 국간장 100 리터의 상품의 재고가 있는 상기 회원 정보에 포함된 배송지 정보(예를 들어 대한민국 서울특별시 강남구 역삼로 123-456)에 가장 가까운 매장인 제 101 매장을 확인한다. 또한, 상기 서버(200)는 상기 확인된 제 101 매장의 매장 서버(500)로 상기 회원 정보, 상기 DEF 식품의 국간장 100 리터에 대한 상품 정보, 상기 구매 단말(100)의 식별 정보 등을 전송한다.For example, when the settlement function for the product information on 100 liters of the domestic soy sauce of the DEF food corresponding to the commodity sold out due to the sales exhaustion in the off-line store is normally performed, In order to deliver (or deliver) the product information on 100 liters of soybeans to the user of the purchasingterminal 100, the product information of 100 liters of the local soy sauce of the DEF food among the plurality of stores registered in advance in the server 200 (For example, 123-456, Gangnam-gu, Gangnam-gu, Seoul, Korea), which has stock of 100 liters of soup stocks of DEF food, Also, theserver 200 transmits the member information, the product information of 100 liters of the local soy sauce of the DEF food, the identification information of the purchasingterminal 100, and the like to thestore server 500 of the 101st store do.

또한, 상기 결제 기능이 정상적으로 수행 완료된 이후, 결제 완료된 적어도 하나의 특정 상품 및 서비스 정보 중에서, 미리 설정된 핸드 캐리 상품이 포함된 경우, 상기 서버(200)는 상기 구매 단말(100)로부터 전송된 회원 정보를 근거로 미리 저장된 복수의 매장(또는 매장 정보) 중에서, 해당 회원 정보에 포함된 배송지 정보에 해당하는 배송지에서 가장 가까운 매장 중 상기 핸드 캐리 상품의 재고가 있는 매장을 확인한다.If the preset hand-held merchandise is included in at least one specific merchandise and service information that has been paid after the settlement function is normally performed, theserver 200 transmits the member information transmitted from the purchasingterminal 100 Of the store closest to the destination corresponding to the destination information included in the member information among the plurality of stores (or store information) stored in advance, based on the stored store information.

또한, 상기 서버(200)는 상기 확인된 매장의 매장 서버(500)로 상기 회원 정보, 상기 핸드 캐리 상품에 대한 정보, 상기 구매 단말(100)의 식별 정보 등을 전송한다(S880).In addition, theserver 200 transmits the member information, the hand-held merchandise information, the identification information of the purchasingterminal 100, and the like to thestore server 500 of the identified store (S880).

이후, 상기 매장 서버(500)는 상기 서버(200)로부터 전송되는 상기 회원 정보, 상기 배송 상품에 대한 정보, 상기 구매 단말(100)의 식별 정보 등을 수신한다.Then, thestore server 500 receives the member information transmitted from theserver 200, information on the delivery commodity, identification information of the purchasingterminal 100, and the like.

또한, 상기 매장 서버(500)는 상기 회원 정보에 포함된 배송지 정보를 근거로 해당 배송지로 상기 배송 상품을 배송한다.In addition, thestore server 500 delivers the delivery product to the delivery destination based on the delivery destination information included in the member information.

일 예로, 상기 제 101 매장의 매장 서버(500)는 상기 회원 정보에 포함된 배송지 정보(예를 들어 대한민국 서울특별시 강남구 역삼로 123-456)를 근거로 해당 배송지 정보의 배송지로 상기 DEF 식품의 국간장 100 리터의 상품을 배송(예를 들어 택배 배송 등 포함)한다.For example, thestore server 500 of the 101st store may store the DEF food item as the destination of the corresponding destination information based on the shipping destination information included in the member information (for example, 123-456 Yeoksam-ro, Gangnam- Delivery of 100 liters of soy sauce (including courier delivery, for example).

또한, 상기 매장 서버(500)는 상기 매장에 방문한 해당 구매 단말(100)의 사용자에 대한 인증 절차를 수행한 후, 해당 핸드 캐리 상품을 해당 구매 단말(100)의 사용자에게 제공(또는 전달)한다(S890).In addition, thestore server 500 performs an authentication procedure for the user of the purchasingterminal 100 visited in the store, and then provides (or delivers) the corresponding hand-carry commodity to the user of the purchasing terminal 100 (S890).

이후, 상기 구매 단말(100)은 상기 적어도 하나의 특정 상품 및 서비스에 대해서, 해당 특정 상품이나 특정 서비스의 구매에서부터 도착(또는 쿠폰 발급)까지의 체험 정보, 평가 정보, 상기 구매 단말(100)의 식별 정보 등을 상기 서버(200)에 전송한다.Then, the purchasingterminal 100 transmits to the at least one specific commodity and service, experience information from the purchase of the specific commodity or specific service to arrival (or coupon issuance), evaluation information, Identification information and the like to theserver 200.

또한, 상기 서버(200)는 상기 구매 단말(100)로부터 전송되는 상기 특정 상품이나 특정 서비스에 대한 체험 정보, 평가 정보, 상기 구매 단말(100)의 식별 정보 등을 수신한다.Also, theserver 200 receives experience information, evaluation information, identification information of the purchasingterminal 100, and the like for the specific product or specific service transmitted from the purchasingterminal 100.

또한, 상기 서버(200)는 상기 수신된 체험 정보, 평가 정보 등을 해당하는 특정 상품이나 특정 서비스에 매칭하여 저장한다(S900).In addition, theserver 200 stores the received experience information, evaluation information, and the like in association with a specific product or a specific service (S900).

본 발명의 실시예는 앞서 설명된 바와 같이, 오프라인 매장 또는 거리 매장에 구비된 객체를 촬영하고, 상기 촬영된 객체와 관련한 상품 및 서비스 정보, 부가 정보 등을 증강 현실 기능을 통해 제공하여, 실제 백화점, 쇼핑몰, 거리 등에서 마주치는 뷰를 그대로 제공하면서 오프라인에서 제공하는 상품이나 매장과 관련한 부가적인 정보를 전달하여 사용상의 편의성을 향상시키고, 사용자에게 다양한 정보를 제공할 수 있으며, 소규모 오프라인 매장을 구매 단말의 사용자가 방문하더라도 대형 매장의 상품 구색과 쇼핑 정보를 동일하게 제공받을 수 있다.As described above, the embodiment of the present invention takes an object provided in an offline store or a street store, provides goods, service information, additional information, and the like related to the photographed object through an augmented reality function, A shopping mall, a street, and the like, while providing additional information related to a product or a store provided in the off-line, thereby improving convenience in use, providing various information to the user, and providing a small- The merchandise assortment and the shopping information of the large store can be provided equally.

또한, 본 발명의 실시예는 앞서 설명된 바와 같이, 구매 단말에서 촬영한 객체와 관련한 상품 정보 및/또는 서비스 정보를 제공하는 것 이외에 추가로 해당 상품이 직접 수령이나 배송 가능한 상품임을 나타내는 핸드 캐리 상품인지 또는, 오프라인 매장 또는 거리 매장에서 취급하지 않거나 판매 소진으로 인한 품절 상태인 상품임을 나타내는 배송 상품인지 여부의 부가 정보를 증강 현실 기능을 통해 제공하여, 국/내외 오프라인 매장의 상품 정보를 추가로 확인할 수 있어 구매자 선택의 폭을 확대하고, 해외 직접 구매 시 구매자와 판매자 간 신뢰성을 향상시킬 수 있다.In addition, as described above, the embodiment of the present invention may be used in addition to providing product information and / or service information related to an object photographed by a purchasing terminal, Or information on whether or not the product is a delivery item indicating that the product is out of stock due to the depletion of sales in the offline store or the street store is provided through the augmented reality function to further confirm the product information of the domestic / It is possible to increase the choice of the buyer and to improve the reliability between the buyer and the seller at the time of overseas direct purchase.

전술된 내용은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.It will be apparent to those skilled in the art that various modifications and variations can be made in the present invention without departing from the spirit or essential characteristics thereof. Therefore, the embodiments disclosed in the present invention are intended to illustrate rather than limit the scope of the present invention, and the scope of the technical idea of the present invention is not limited by these embodiments. The scope of protection of the present invention should be construed according to the following claims, and all technical ideas within the scope of equivalents should be construed as falling within the scope of the present invention.

본 발명은 오프라인 매장 또는 거리 매장에 구비된 객체를 촬영하고, 상기 촬영된 객체와 관련한 상품 및 서비스 정보, 부가 정보 등을 증강 현실 기능을 통해 제공함으로써, 실제 백화점, 쇼핑몰, 거리 등에서 마주치는 뷰를 그대로 제공하면서 오프라인에서 제공하는 상품이나 매장과 관련한 부가적인 정보를 전달하여 사용상의 편의성을 향상시키고, 사용자에게 다양한 정보를 제공할 수 있으며, 소규모 오프라인 매장을 구매 단말의 사용자가 방문하더라도 대형 매장의 상품 구색과 쇼핑 정보를 동일하게 제공받을 수 있는 것으로, 파노라마 영상 분야, 쇼핑 정보 제공 분야, 마케팅 분야, 단말 분야, 서버 분야 등에서 광범위하게 이용될 수 있다.The present invention takes a picture of an object provided in an off-line store or a street store, provides a product, service information, additional information, and the like related to the photographed object through an augmented reality function so that a view encountered at an actual department store, a shopping mall, It is possible to provide additional information related to a product or a store offered in offline while improving the convenience of use and providing various information to a user. Even if a user of a purchasing terminal visits a small-scale offline store, And can be widely used in a panoramic image field, a shopping information providing field, a marketing field, a terminal field, a server field, and the like.

10: 쇼핑 정보 제공 시스템
100: 서버200: 구매 단말
300: 결제 서버400: 판매 단말
500: 매장 서버
10: Shopping information providing system
100: server 200: purchasing terminal
300: Payment server 400: Sales terminal
500: Store server

Claims (10)

Translated fromKorean
증강 현실 기반 쇼핑 정보 제공 시스템에 있어서,
오프라인 매장 또는 거리 매장에 구비된 객체를 촬영하고, 상기 객체를 포함하는 영상 정보 및 구매 단말의 식별 정보를 전송하는 구매 단말; 및
상기 영상 정보에 포함된 객체를 인식하고, 미리 저장된 복수의 객체별 코드 중에서 상기 인식된 객체와 관련한 코드를 확인하고, 미리 저장된 코드별 상품 및 서비스 정보 중에서 상기 확인된 코드에 대응하는 하나 이상의 상품 및 서비스 정보를 확인하고, 상기 확인된 하나 이상의 상품 및 서비스 정보에 적용 가능한 부가 정보를 확인하고, 상기 확인된 코드에 대응하는 하나 이상의 상품 및 서비스 정보와, 상기 확인된 부가 정보를 상기 구매 단말에 전송하는 서버를 포함하며,
상기 객체는,
상기 오프라인 매장 또는 상기 거리 매장에 구비된 POP(Point of Purchase), 전단(leaflet), 배너 광고(banner advertisement), 게시판 광고(board advertising), 포스터 광고(billing), 간판(sign) 및 가격표(price tag) 중 적어도 하나를 포함하며, 상기 오프라인 매장 또는 상기 거리 매장에서 제공하는 상품 및 서비스는 제외한 상태이며,
상기 부가 정보는,
상기 확인되는 하나 이상의 상품 및 서비스 정보 중에서 해당 상품이 직접 수령이나 배송 가능한 상품임을 나타내는 핸드 캐리 상품인지 여부를 나타내는 정보 및, 오프라인 매장 또는 거리 매장에서 취급하지 않거나 판매 소진으로 인한 품절 상태인 상품임을 나타내는 배송 상품인지 여부를 나타내는 정보 중 어느 하나를 포함하며,
상기 구매 단말의 식별 정보는,
MDN(Mobile Directory Number), 모바일 IP, 모바일 MAC, Sim(subscriber identity module: 가입자 식별 모듈) 카드 고유정보 및 시리얼번호 중 적어도 하나를 포함하는 증강 현실 기반 쇼핑 정보 제공 시스템.
In augmented reality-based shopping information providing system,
A purchasing terminal for photographing an object provided in an offline store or a street store, and transmitting image information including the object and identification information of the purchasing terminal; And
Recognizing an object included in the image information, confirming a code related to the recognized object among a plurality of pre-stored object-based codes, selecting at least one item corresponding to the identified code from among pre- Confirming the service information, confirming the additional information applicable to the identified one or more goods and service information, transmitting at least one goods and service information corresponding to the confirmed code, and transmitting the confirmed additional information to the purchasing terminal A server,
The object comprising:
A point of purchase (POP), a leaflet, a banner advertisement, a board advertisement, a poster advertisement, a billing sign, a sign and a price tag tag, and the goods and services provided by the off-line store or the street store are excluded,
The additional information,
Information indicating whether the merchandise is a hand-held merchandise indicating that the merchandise is directly receivable or deliverable from the at least one merchandise and service information to be verified, and information indicating whether the merchandise is not handled in an offline store or a street store, And information indicating whether the product is a delivery product,
Wherein the identification information of the purchasing terminal comprises:
A shopping information providing system including at least one of a mobile directory number (MDN), a mobile IP, a mobile MAC, a SIM (subscriber identity module) card unique information, and a serial number.
삭제delete삭제delete제 1 항에 있어서,
상기 구매 단말은,
상기 서버로부터 전송되는 하나 이상의 상품 및 서비스 정보와 부가 정보를 증강 현실 기능을 적용하여 상기 촬영된 영상 정보 상에 표시하는 것을 특징으로 하는 증강 현실 기반 쇼핑 정보 제공 시스템.
The method according to claim 1,
The purchasing terminal,
And displays one or more goods and service information and additional information transmitted from the server on the photographed image information by applying the augmented reality function.
제 4 항에 있어서,
상기 구매 단말에 표시되는 하나 이상의 상품 및 서비스 정보 중에서 핸드 캐리 상품에 대응하는 상품이 선택될 때, 상기 구매 단말, 상기 서버 및 결제 서버와의 연동에 의해, 상기 선택된 핸드 캐리 상품에 대응하는 상품의 결제 금액에 대한 결제 기능을 수행하고,
상기 서버로부터 전송되는 회원 정보, 상기 핸드 캐리 상품에 대한 정보 및 상기 구매 단말의 식별 정보를 수신하고, 매장에 방문한 상기 구매 단말의 사용자에 대한 인증 절차를 수행한 후, 상기 핸드 캐리 상품을 상기 구매 단말의 사용자에게 제공하는 매장 서버를 더 포함하는 것을 특징으로 하는 증강 현실 기반 쇼핑 정보 제공 시스템.
5. The method of claim 4,
When the merchandise corresponding to the hand-held merchandise is selected from among at least one merchandise and service information displayed on the merchandising terminal, by interlocking with the purchasing terminal, the server and the settlement server, the merchandise corresponding to the selected hand- Perform a payment function for the payment amount,
Receiving handset merchandise information transmitted from the server, information on the hand-held merchandise item, and identification information of the purchasing terminal, performing an authentication procedure for a user of the purchasing terminal visited in the store, And a store server provided to the user of the terminal.
제 4 항에 있어서,
상기 구매 단말에 표시되는 하나 이상의 상품 및 서비스 정보 중에서 배송 상품에 대응하는 상품이 선택될 때, 상기 구매 단말, 상기 서버 및 결제 서버와의 연동에 의해, 상기 선택된 배송 상품에 대응하는 상품의 결제 금액에 대한 결제 기능을 수행하고,
상기 서버로부터 전송되는 회원 정보, 상기 배송 상품에 대한 정보 및 상기 구매 단말의 식별 정보를 수신하고, 상기 회원 정보에 포함된 배송지 정보를 근거로 배송지로 상기 배송 상품을 배송하는 매장 서버를 더 포함하는 것을 특징으로 하는 증강 현실 기반 쇼핑 정보 제공 시스템.
5. The method of claim 4,
When a product corresponding to a delivery commodity is selected from among at least one commodity and service information displayed on the purchasing terminal, a payment amount of a commodity corresponding to the selected delivery commodity in association with the purchasing terminal, the server and the payment server To perform the settlement function for,
Further comprising a store server for receiving the member information transmitted from the server, information about the delivery commodity, and identification information of the purchasing terminal, and delivering the delivery commodity to the destination based on the destination information included in the member information A shopping information providing system based on augmented reality.
증강 현실 기반 쇼핑 정보 제공 시스템의 제어 방법에 있어서,
구매 단말을 통해, 오프라인 매장 또는 거리 매장에 구비된 객체를 촬영하는 단계;
상기 구매 단말을 통해, 상기 객체를 포함하는 영상 정보 및 구매 단말의 식별 정보를 전송하는 단계;
서버를 통해, 상기 구매 단말로부터 전송되는 영상 정보에 포함된 객체를 인식하는 단계;
상기 서버를 통해, 미리 저장된 복수의 객체별 코드 중에서 상기 인식된 객체와 관련한 코드를 확인하는 단계;
상기 서버를 통해, 미리 저장된 코드별 상품 및 서비스 정보 중에서 상기 확인된 코드에 대응하는 하나 이상의 상품 및 서비스 정보를 확인하는 단계;
상기 서버를 통해, 상기 확인된 하나 이상의 상품 및 서비스 정보에 적용 가능한 부가 정보를 확인하는 단계;
상기 서버를 통해, 상기 하나 이상의 상품 및 서비스 정보를 미리 설정된 할인율순, 적립율순, 판매량순, 인기도순 및 브랜드순 중 어느 하나로 정렬하는 단계; 및
상기 서버를 통해, 상기 정렬된 하나 이상의 상품 및 서비스 정보 중에서 미리 설정된 개수의 상품 및 서비스 정보 및, 상기 확인된 부가 정보를 상기 구매 단말에 전송하는 단계를 포함하며,
상기 객체는,
상기 오프라인 매장 또는 상기 거리 매장에 구비된 POP, 전단, 배너 광고, 게시판 광고, 포스터 광고, 간판 및 가격표 중 적어도 하나를 포함하며, 상기 오프라인 매장 또는 상기 거리 매장에서 제공하는 상품 및 서비스는 제외한 상태이며,
상기 부가 정보는,
상기 확인되는 하나 이상의 상품 및 서비스 정보 중에서 해당 상품이 직접 수령이나 배송 가능한 상품임을 나타내는 핸드 캐리 상품인지 여부를 나타내는 정보 및, 오프라인 매장 또는 거리 매장에서 취급하지 않거나 판매 소진으로 인한 품절 상태인 상품임을 나타내는 배송 상품인지 여부를 나타내는 정보 중 어느 하나를 포함하며,
상기 구매 단말의 식별 정보는,
MDN, 모바일 IP, 모바일 MAC, Sim 카드 고유정보 및 시리얼번호 중 적어도 하나를 포함하는 증강 현실 기반 쇼핑 정보 제공 시스템의 제어 방법.
A method for controlling an augmented reality-based shopping information providing system,
Photographing an object provided in an offline store or a street store through a purchasing terminal;
Transmitting image information including the object and identification information of a purchasing terminal through the purchasing terminal;
Recognizing an object included in image information transmitted from the purchasing terminal through a server;
Confirming a code associated with the recognized object among a plurality of pre-stored object-specific codes through the server;
Confirming at least one item of goods and service information corresponding to the checked code among the goods and service information for each code stored in advance through the server;
Confirming, through the server, additional information applicable to the identified one or more goods and service information;
Arranging the one or more goods and service information in any one of a predetermined discount rate order, an accumulation rate order, a sales order order, a popularity order, and a brand order through the server; And
Transmitting, through the server, a predetermined number of goods and service information among the sorted one or more goods and service information and the identified additional information to the purchasing terminal,
The object comprising:
And at least one of a POP, a leaflet, a banner advertisement, a bulletin board advertisement, a poster advertisement, a signboard, and a price tag, which are provided in the offline store or the street store, and excludes goods and services provided by the offline store or the street store ,
The additional information,
Information indicating whether the merchandise is a hand-held merchandise indicating that the merchandise is directly receivable or deliverable from the at least one merchandise and service information to be verified, and information indicating whether the merchandise is not handled in an offline store or a street store, And information indicating whether the product is a delivery product,
Wherein the identification information of the purchasing terminal comprises:
A mobile IP, a mobile MAC, a SIM card unique information, and a serial number.
삭제delete제 7 항에 있어서,
상기 구매 단말을 통해, 상기 서버로부터 전송되는 하나 이상의 상품 및 서비스 정보와 부가 정보를 증강 현실 기능을 적용하여 상기 촬영된 영상 정보 상에 표시하는 단계;
상기 구매 단말에 표시되는 하나 이상의 상품 및 서비스 정보 중에서 핸드 캐리 상품에 대응하는 상품이 선택될 때, 상기 구매 단말, 상기 서버 및 결제 서버와의 연동에 의해, 상기 선택된 핸드 캐리 상품에 대응하는 상품의 결제 금액에 대한 결제 기능을 수행하는 단계;
매장 서버를 통해, 상기 서버로부터 전송되는 회원 정보, 상기 핸드 캐리 상품에 대한 정보 및 상기 구매 단말의 식별 정보를 수신하는 단계; 및
상기 매장 서버를 통해, 매장에 방문한 상기 구매 단말의 사용자에 대한 인증 절차를 수행한 후, 상기 핸드 캐리 상품을 상기 구매 단말의 사용자에게 제공하는 단계를 더 포함하는 것을 특징으로 하는 증강 현실 기반 쇼핑 정보 제공 시스템.
8. The method of claim 7,
Displaying one or more goods and service information and additional information transmitted from the server through the purchasing terminal on the photographed image information by applying an augmented reality function;
When the merchandise corresponding to the hand-held merchandise is selected from among at least one merchandise and service information displayed on the merchandising terminal, by interlocking with the purchasing terminal, the server and the settlement server, the merchandise corresponding to the selected hand- Performing a payment function for a payment amount;
Receiving member information transmitted from the server, information on the hand-held product, and identification information of the purchasing terminal through a store server; And
Further comprising the step of providing the hand held merchandise to the user of the purchasing terminal after performing the authentication procedure for the user of the purchasing terminal visited at the store through the store server, Delivery system.
제 7 항에 있어서,
상기 구매 단말을 통해, 상기 서버로부터 전송되는 하나 이상의 상품 및 서비스 정보와 부가 정보를 증강 현실 기능을 적용하여 상기 촬영된 영상 정보 상에 표시하는 단계;
상기 구매 단말에 표시되는 하나 이상의 상품 및 서비스 정보 중에서 배송 상품에 대응하는 상품이 선택될 때, 상기 구매 단말, 상기 서버 및 결제 서버와의 연동에 의해, 상기 선택된 배송 상품에 대응하는 상품의 결제 금액에 대한 결제 기능을 수행하는 단계;
매장 서버를 통해, 상기 서버로부터 전송되는 회원 정보, 상기 핸드 캐리 상품에 대한 정보 및 상기 구매 단말의 식별 정보를 수신하는 단계; 및
상기 매장 서버를 통해, 상기 회원 정보에 포함된 배송지 정보를 근거로 배송지로 상기 배송 상품을 배송하는 단계를 더 포함하는 것을 특징으로 하는 증강 현실 기반 쇼핑 정보 제공 시스템.
8. The method of claim 7,
Displaying one or more goods and service information and additional information transmitted from the server through the purchasing terminal on the photographed image information by applying an augmented reality function;
When a product corresponding to a delivery commodity is selected from among at least one commodity and service information displayed on the purchasing terminal, a payment amount of a commodity corresponding to the selected delivery commodity in association with the purchasing terminal, the server and the payment server Performing a settlement function for the terminal;
Receiving member information transmitted from the server, information on the hand-held product, and identification information of the purchasing terminal through a store server; And
Further comprising the step of delivering the delivery product to the delivery site based on the delivery destination information included in the member information through the store server.
KR1020160004711A2016-01-142016-01-14System for providing shopping information based on augmented reality and control method thereofExpired - Fee RelatedKR101669882B1 (en)

Priority Applications (2)

Application NumberPriority DateFiling DateTitle
KR1020160004711AKR101669882B1 (en)2016-01-142016-01-14System for providing shopping information based on augmented reality and control method thereof
PCT/KR2016/011641WO2017122909A1 (en)2016-01-142016-10-17Terminal and control method therefor

Applications Claiming Priority (1)

Application NumberPriority DateFiling DateTitle
KR1020160004711AKR101669882B1 (en)2016-01-142016-01-14System for providing shopping information based on augmented reality and control method thereof

Publications (1)

Publication NumberPublication Date
KR101669882B1true KR101669882B1 (en)2016-10-27

Family

ID=57247294

Family Applications (1)

Application NumberTitlePriority DateFiling Date
KR1020160004711AExpired - Fee RelatedKR101669882B1 (en)2016-01-142016-01-14System for providing shopping information based on augmented reality and control method thereof

Country Status (1)

CountryLink
KR (1)KR101669882B1 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication numberPriority datePublication dateAssigneeTitle
KR101898665B1 (en)*2017-05-172018-09-13이주형Method for locating a user device
CN109961120A (en)*2019-03-202019-07-02杭州卓健信息科技有限公司It is a kind of that system is taken based on the drug for cooperating pharmacy
CN110610215A (en)*2019-07-312019-12-24北京东方国信科技股份有限公司eSIM technology-based commodity electronic price tag system and updating method
KR20200062002A (en)*2018-11-262020-06-03주식회사 코이노Shopping aids method and apparatus for the vulnerable group of sight
KR20220008410A (en)2020-07-132022-01-21주식회사 코아소프트Clerkless store apparatus providing augmented reality
KR20220022954A (en)2020-08-192022-03-02주식회사 코아소프트Clerkless store apparatus providing augmented reality

Citations (5)

* Cited by examiner, † Cited by third party
Publication numberPriority datePublication dateAssigneeTitle
JP2008146656A (en)*1996-09-292008-06-26Masanobu KujiradaProduct information display system
KR20120000709A (en)*2010-06-282012-01-04에스케이플래닛 주식회사 System for providing a product purchase service using augmented reality, a service server and a terminal for providing the service, a method therefor, and a computer-readable recording medium recording the method
KR20130084274A (en)2013-06-262013-07-24전봉균3d vitual reality internet shoppingmall
KR20150127503A (en)*2014-05-072015-11-17에스케이플래닛 주식회사Service providing system and method for recognizing object, apparatus and computer readable medium having computer program recorded therefor
JP2015210807A (en)*2014-04-242015-11-24良明 風間Augmented reality system, augmented reality processing method, program and recording medium

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication numberPriority datePublication dateAssigneeTitle
JP2008146656A (en)*1996-09-292008-06-26Masanobu KujiradaProduct information display system
KR20120000709A (en)*2010-06-282012-01-04에스케이플래닛 주식회사 System for providing a product purchase service using augmented reality, a service server and a terminal for providing the service, a method therefor, and a computer-readable recording medium recording the method
KR20130084274A (en)2013-06-262013-07-24전봉균3d vitual reality internet shoppingmall
JP2015210807A (en)*2014-04-242015-11-24良明 風間Augmented reality system, augmented reality processing method, program and recording medium
KR20150127503A (en)*2014-05-072015-11-17에스케이플래닛 주식회사Service providing system and method for recognizing object, apparatus and computer readable medium having computer program recorded therefor

Cited By (7)

* Cited by examiner, † Cited by third party
Publication numberPriority datePublication dateAssigneeTitle
KR101898665B1 (en)*2017-05-172018-09-13이주형Method for locating a user device
KR20200062002A (en)*2018-11-262020-06-03주식회사 코이노Shopping aids method and apparatus for the vulnerable group of sight
KR102210340B1 (en)*2018-11-262021-02-01주식회사 코이노Shopping aids method and apparatus for the vulnerable group of sight
CN109961120A (en)*2019-03-202019-07-02杭州卓健信息科技有限公司It is a kind of that system is taken based on the drug for cooperating pharmacy
CN110610215A (en)*2019-07-312019-12-24北京东方国信科技股份有限公司eSIM technology-based commodity electronic price tag system and updating method
KR20220008410A (en)2020-07-132022-01-21주식회사 코아소프트Clerkless store apparatus providing augmented reality
KR20220022954A (en)2020-08-192022-03-02주식회사 코아소프트Clerkless store apparatus providing augmented reality

Similar Documents

PublicationPublication DateTitle
KR101613287B1 (en)Travel destination one stop shopping system based on 3D panoramic image and control method thereof
JP6051323B1 (en) Augmented reality based shopping information providing system and control method thereof
KR101669882B1 (en)System for providing shopping information based on augmented reality and control method thereof
US9384499B2 (en)Method and system for indirect control of a website
KR101613284B1 (en)System for providing shopping information based on augmented reality and control method thereof
US9836780B2 (en)Method and system for consumer transactions using voice or human based gesture actions
US9836737B2 (en)Method and system for distribution of advertisements to mobile devices prompted by aural sound stimulus
US20130179336A1 (en)Financial card method, device and system utilizing bar codes to identify transaction details
US20120130889A1 (en)Financial card method, device and system utilizing bar codes to identify transaction details
JP6372856B2 (en) Electronic commerce support method
KR20170042258A (en)System for providing shopping information based on augmented reality and control method thereof
JP2016103256A (en)Advantageous consumption system and consumption method thereof
KR20170085281A (en)System for providing shopping information based on augmented reality and control method thereof
JP2021082356A (en)Ordering system utilizing personal information
JP2022024659A (en)Sales system
AU2011329678A1 (en)Financial card method, device and system utilizing bar codes to identify transaction details
KR101613277B1 (en)System for providing shopping information based on augmented reality and control method thereof
KR20120087594A (en)Location based mobile trading system
CN105279683B (en)A method of payment guides and generates order on line
JP2017027572A (en)Electronic commerce system, method and program
KR101688521B1 (en)Omni-channel system using augmented reality and control method thereof
KR101579260B1 (en)System for travel destination shopping information and multi-discount coupon and operation method thereof
KR20170114411A (en)System for providing travel destination shopping information and operation method thereof
KR20120105196A (en)Agent server using product mapping code
KR101535137B1 (en)System and method for supporting commerce based on utilizing mobile webpage

Legal Events

DateCodeTitleDescription
PA0109Patent application

St.27 status event code:A-0-1-A10-A12-nap-PA0109

PA0201Request for examination

St.27 status event code:A-1-2-D10-D11-exm-PA0201

PA0302Request for accelerated examination

St.27 status event code:A-1-2-D10-D17-exm-PA0302

St.27 status event code:A-1-2-D10-D16-exm-PA0302

D13-X000Search requested

St.27 status event code:A-1-2-D10-D13-srh-X000

R18-X000Changes to party contact information recorded

St.27 status event code:A-3-3-R10-R18-oth-X000

D14-X000Search report completed

St.27 status event code:A-1-2-D10-D14-srh-X000

PE0902Notice of grounds for rejection

St.27 status event code:A-1-2-D10-D21-exm-PE0902

AMNDAmendment
E13-X000Pre-grant limitation requested

St.27 status event code:A-2-3-E10-E13-lim-X000

P11-X000Amendment of application requested

St.27 status event code:A-2-2-P10-P11-nap-X000

P13-X000Application amended

St.27 status event code:A-2-2-P10-P13-nap-X000

PE0601Decision on rejection of patent

St.27 status event code:N-2-6-B10-B15-exm-PE0601

AMNDAmendment
P11-X000Amendment of application requested

St.27 status event code:A-2-2-P10-P11-nap-X000

P13-X000Application amended

St.27 status event code:A-2-2-P10-P13-nap-X000

PX0901Re-examination

St.27 status event code:A-2-3-E10-E12-rex-PX0901

PX0701Decision of registration after re-examination

St.27 status event code:A-3-4-F10-F13-rex-PX0701

X701Decision to grant (after re-examination)
GRNTWritten decision to grant
PR0701Registration of establishment

St.27 status event code:A-2-4-F10-F11-exm-PR0701

PR1002Payment of registration fee

St.27 status event code:A-2-2-U10-U11-oth-PR1002

Fee payment year number:1

PG1601Publication of registration

St.27 status event code:A-4-4-Q10-Q13-nap-PG1601

FPAYAnnual fee payment

Payment date:20191021

Year of fee payment:4

PR1001Payment of annual fee

St.27 status event code:A-4-4-U10-U11-oth-PR1001

Fee payment year number:4

PC1903Unpaid annual fee

St.27 status event code:A-4-4-U10-U13-oth-PC1903

Not in force date:20201022

Payment event data comment text:Termination Category : DEFAULT_OF_REGISTRATION_FEE

PC1903Unpaid annual fee

St.27 status event code:N-4-6-H10-H13-oth-PC1903

Ip right cessation event data comment text:Termination Category : DEFAULT_OF_REGISTRATION_FEE

Not in force date:20201022


[8]ページ先頭

©2009-2025 Movatter.jp