Movatterモバイル変換


[0]ホーム

URL:


JP7597259B2 - Information processing device, control method, and program - Google Patents

Information processing device, control method, and program
Download PDF

Info

Publication number
JP7597259B2
JP7597259B2JP2024034589AJP2024034589AJP7597259B2JP 7597259 B2JP7597259 B2JP 7597259B2JP 2024034589 AJP2024034589 AJP 2024034589AJP 2024034589 AJP2024034589 AJP 2024034589AJP 7597259 B2JP7597259 B2JP 7597259B2
Authority
JP
Japan
Prior art keywords
customer
attribute information
information
processing device
information processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2024034589A
Other languages
Japanese (ja)
Other versions
JP2024074810A (en
Inventor
二徳 高田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC CorpfiledCriticalNEC Corp
Priority to JP2024034589ApriorityCriticalpatent/JP7597259B2/en
Publication of JP2024074810ApublicationCriticalpatent/JP2024074810A/en
Priority to JP2024205281Aprioritypatent/JP2025019246A/en
Application grantedgrantedCritical
Publication of JP7597259B2publicationCriticalpatent/JP7597259B2/en
Activelegal-statusCriticalCurrent
Anticipated expirationlegal-statusCritical

Links

Images

Landscapes

Description

Translated fromJapanese

本発明は、情報処理装置、及び制御方法に関する。The present invention relates to an information processing device and a control method.

POS(Point of Sales)システムなどにおいて顧客の情報を管理する技術が開発されている。例えば特許文献1は、会員カードから読み取ることができる顧客の識別番号に対応づけて、顧客の名前、住所、及び顧客がレジ袋を利用するかどうかなどを管理する技術を開示している。Technology for managing customer information in POS (Point of Sales) systems and the like has been developed. For example,Patent Document 1 discloses technology for managing a customer's name, address, and whether or not the customer uses plastic bags, in association with the customer's identification number that can be read from a membership card.

特開2007-102527号公報JP 2007-102527 A

特許文献1のシステムは、顧客の会員カードから読み取られる顧客の識別子を利用する。そのため、顧客が会員登録をしていなければ、顧客の情報を把握することできない。The system inPatent Document 1 uses a customer identifier read from the customer's membership card. Therefore, unless the customer is registered as a member, customer information cannot be obtained.

本発明は、上記の課題に鑑みてなされたものである。本発明の目的の一つは、会員登録の有無にかかわらず、顧客が利用しうるサービスに関する顧客の情報を取得することのできる技術を提供することである。The present invention has been made in consideration of the above problems. One of the objectives of the present invention is to provide a technology that can obtain customer information related to services that can be used by the customer, regardless of whether the customer is a registered member or not.

本発明の情報処理装置は、
顧客を含む画像を取得する取得手段と、
前記顧客の履歴情報に基づいて、前記顧客の属性情報を生成する生成手段と、
前記画像によって特定される顧客に対応する属性情報を出力する出力手段と、
を有し、
前記属性情報は、前記顧客が飲食物に求める条件に関する情報を含む
The information processing device of the present invention comprises:
An acquisition means for acquiring an image including a customer;
A generating means for generating attribute information of the customer based on historical information of the customer;
an output means for outputting attribute information corresponding to the customer identified by the image;
having
The attribute information includes information regarding the conditions that the customer desires for food and drink .

本発明の制御方法は、情報処理装置を実現するコンピュータによって実行される。
当該制御方法は、1以上のコンピュータが、
顧客を含む画像を取得し、
前記顧客の履歴情報に基づいて、前記顧客の属性情報を生成し、
前記画像によって特定される顧客に対応する属性情報を出力する、
ことを含み、
前記属性情報は、前記顧客が飲食物に求める条件に関する情報を含む。
The control method of the present invention is executed by a computer that realizes an information processing device.
The control method includes:
Get an image containing the customer,
generating attribute information of the customer based on historical information of the customer;
outputting attribute information corresponding to the customer identified by the image;
Including,
The attribute information includes information regarding the conditions that the customer desires for food and drink .

本発明のプログラムは、本発明の制御方法が有する各ステップをコンピュータに実行させる。The program of the present invention causes a computer to execute each step of the control method of the present invention.

本発明によれば、会員登録の有無にかかわらず、顧客が利用しうるサービスに関する顧客の情報を取得することのできる技術が提供される。The present invention provides a technology that can obtain customer information regarding services that can be used by a customer, regardless of whether the customer is a registered member or not.

実施形態1の情報処理装置をその利用環境と共に例示するブロック図である。1 is a block diagram illustrating an example of an information processing apparatus according to a first embodiment together with its usage environment.実施形態1の情報処理装置の動作を概念的に例示する図である。2 is a diagram conceptually illustrating an example of the operation of the information processing apparatus according to the first embodiment;情報処理装置を実現するための計算機を例示する図である。FIG. 1 is a diagram illustrating a computer for implementing an information processing device.実施形態1の情報処理装置によって実行される処理の流れを例示するフローチャートである。4 is a flowchart illustrating the flow of a process executed by the information processing apparatus according to the first embodiment.顧客の特徴量と属性情報との対応付けをテーブル形式で例示する図である。10 is a diagram illustrating an example of the association between features and attribute information of customers in a table format. FIG.属性情報の別の例を例示する図である。FIG. 11 is a diagram illustrating another example of attribute information.出力情報を例示する図である。FIG. 11 is a diagram illustrating an example of output information.出力情報の内容を変更するためのウインドウを例示する図である。FIG. 13 is a diagram illustrating an example of a window for changing the contents of output information.実施形態2の情報処理装置を例示するブロック図である。FIG. 11 is a block diagram illustrating an information processing apparatus according to a second embodiment.実施形態2の情報処理装置によって実行される処理の流れを例示するフローチャートである。10 is a flowchart illustrating a flow of a process executed by an information processing apparatus according to a second embodiment.履歴情報をテーブル形式で例示する図である。FIG. 11 is a diagram illustrating an example of history information in a table format.実施形態3の情報処理装置を例示するブロック図である。FIG. 11 is a block diagram illustrating an information processing apparatus according to a third embodiment.実施形態3の情報処理装置によって実行される処理の流れを例示するフローチャートである。13 is a flowchart illustrating the flow of a process executed by an information processing apparatus according to a third embodiment.入力画面を例示する図である。FIG. 13 is a diagram illustrating an example of an input screen.

以下、本発明の実施の形態について、図面を用いて説明する。尚、すべての図面において、同様な構成要素には同様の符号を付し、適宜説明を省略する。また各ブロック図において、特に説明がない限り、各ブロックは、ハードウエア単位の構成ではなく機能単位の構成を表している。The following describes an embodiment of the present invention with reference to the drawings. In all drawings, similar components are given similar reference numerals and descriptions are omitted where appropriate. In addition, in each block diagram, unless otherwise specified, each block represents a functional configuration rather than a hardware configuration.

[実施形態1]
図1は、実施形態1の情報処理装置2000をその利用環境と共に例示するブロック図である。情報処理装置2000は算出部2020及び出力制御部2040を有する。記憶装置10は、顧客の特徴量と、その顧客の属性情報とを対応づけて記憶する。或る顧客の属性情報は、店舗においてその顧客が利用するサービスに関する顧客の属性を示す。より具体的には、サービスに関する顧客の属性は、顧客がそのサービスを利用するか否か(サービスの利用有無)、又はそのサービスを利用する際に使う物を顧客が所有しているか否か(サービスの利用に係る物の所有有無)を示す。サービスを利用する際に使う物とは、例えばポイントサービスを利用する際に使うポイントカードなどである。
[Embodiment 1]
FIG. 1 is a block diagram illustrating aninformation processing device 2000 according to the first embodiment together with its usage environment. Theinformation processing device 2000 includes acalculation unit 2020 and anoutput control unit 2040. Thestorage device 10 stores a customer's feature amount and attribute information of the customer in association with each other. The attribute information of a certain customer indicates the customer's attributes related to a service used by the customer in a store. More specifically, the customer's attributes related to a service indicate whether or not the customer uses the service (whether or not the service is used), or whether or not the customer owns an object used when using the service (whether or not the object related to the use of the service is owned). An example of an object used when using a service is a point card used when using a point service.

算出部2020は、顧客が撮像された撮像画像を取得する。さらに算出部2020は、取得した撮像画像に含まれる顧客の特徴量を算出する。顧客の特徴量は、顧客の外見の特徴(例えば顔の特徴)を表す任意の値である。出力制御部2040は、算出された特徴量を用いて、取得された撮像画像に含まれる顧客の特徴量に対応づけられている属性情報を、記憶装置10から取得する。そして出力制御部2040は、取得した属性情報に示される顧客の属性に基づく情報を出力する。属性情報に示される顧客の属性に基づく情報とは、属性情報に示される情報そのもの、又は属性情報に示される情報を所定の方法で加工したものである。Thecalculation unit 2020 acquires a captured image of a customer. Thecalculation unit 2020 further calculates the feature amount of the customer contained in the acquired captured image. The feature amount of the customer is an arbitrary value that represents the external features of the customer (e.g., facial features). Theoutput control unit 2040 acquires attribute information associated with the feature amount of the customer contained in the acquired captured image from thestorage device 10 using the calculated feature amount. Theoutput control unit 2040 then outputs information based on the attributes of the customer indicated in the acquired attribute information. The information based on the attributes of the customer indicated in the attribute information is the information indicated in the attribute information itself, or information indicated in the attribute information processed using a specified method.

図2は、実施形態1の情報処理装置2000の動作を概念的に例示する図である。顧客40は、レジ端末50で商品の精算をすることで、商品を購入する。レジ端末50は、店員30によって操作される。カメラ20は、レジ端末50の付近に設置されており、顧客40を撮像する。記憶装置10は、顧客の特徴量に対応づけて、ポイントサービスに関する顧客の属性を示す属性情報を記憶している。より具体的には、属性情報は、顧客がポイントカードを所有しているか否かを示している。FIG. 2 is a diagram conceptually illustrating the operation of theinformation processing device 2000 ofembodiment 1. Acustomer 40 purchases a product by paying for the product at acash register terminal 50. Thecash register terminal 50 is operated by astore clerk 30. A camera 20 is installed near thecash register terminal 50 and captures an image of thecustomer 40. Thestorage device 10 stores attribute information indicating the customer's attributes related to the point service in association with the customer's features. More specifically, the attribute information indicates whether or not the customer has a point card.

情報処理装置2000は、カメラ20によって撮像された顧客40の特徴量を取得する。ここで、顧客40の特徴量が v1 であったとする。情報処理装置2000は、記憶装置10の中から、特徴量 v1 に対応づけられている属性情報を取得する。この属性情報には、「ポイントカードの所有:有り」が示されている。そこで情報処理装置2000は、「顧客40はポイントカードを所有している」という旨を示す情報を出力する。Theinformation processing device 2000 acquires the feature amount of thecustomer 40 captured by the camera 20. Here, it is assumed that the feature amount of thecustomer 40 is v1. Theinformation processing device 2000 acquires attribute information associated with the feature amount v1 from thestorage device 10. This attribute information indicates "Owns a point card: Yes". Therefore, theinformation processing device 2000 outputs information indicating that "Customer 40 owns a point card."

これにより、店員30は、顧客40がポイントカードを利用することを把握する。そこで店員30は、例えば顧客に対して「ポイントカードをお持ちですか」と話しかけ、ポイントカードの提示を促す。This allows thestore clerk 30 to know that thecustomer 40 will use a point card. Thestore clerk 30 may then ask the customer, for example, "Do you have a point card?" to encourage the customer to present the point card.

なお、v2 に対応付けられている属性情報は、「ポイントカードの所有:無し」を示している。そのため顧客40の顔の特徴量が v2 であった場合、情報処理装置2000は、「顧客40はポイントカードを所有していない」という旨を示す情報を出力する。この場合、例えば店員30は、顧客40に対してポイントカードの提示を求めない。その他にも例えば、店員30は、「ポイントカードをお持ちではないですよね」などのように、顧客40がポイントカードを持っていないことを前提とする確認のための発言を行う。The attribute information associated with v2 indicates "point card ownership: none". Therefore, when the facial feature amount ofcustomer 40 is v2, theinformation processing device 2000 outputs information indicating that "customer 40 does not own a point card". In this case, for example, thestore clerk 30 does not askcustomer 40 to present the point card. In addition, for example, thestore clerk 30 may make a statement to confirm thatcustomer 40 does not have a point card, such as "You don't have a point card, do you?".

<作用・効果>
本実施形態では、顧客が含まれる撮像画像から算出できる顧客の特徴量に対応づけて、顧客の属性情報が記憶されている。このように顧客の特徴量を用いて顧客を特定する方法を用いれば、属性情報を取得するための顧客の特定に、顧客に付与される識別子(例えば会員ID(Identifier))を利用する必要がない。そのため、顧客の会員登録の有無にかかわらずその顧客が店舗において利用しうるサービスのその顧客の利用有無又はサービスに係る物のその顧客の所有有無を示す属性情報を取得することができる。
<Action and Effects>
In this embodiment, the attribute information of a customer is stored in association with the characteristic amount of the customer that can be calculated from a captured image in which the customer is included. By using the method of identifying a customer using the characteristic amount of the customer in this manner, it is not necessary to use an identifier (e.g., a member ID (identifier)) assigned to the customer to identify the customer in order to obtain the attribute information. Therefore, regardless of whether the customer is a registered member or not, attribute information indicating whether the customer uses a service that the customer can use in a store or whether the customer owns an item related to the service can be obtained.

例えば属性情報が、「会員カードを持っているか否か」を示す情報であるとする。この場合に、顧客の会員IDに対応づけて属性情報を記憶させておくとする。この方法では、顧客が会員カードを持っているか否かを示す属性情報を得るために、顧客に対して会員カードの提示を求めなければならない。すなわち、顧客が会員登録をしていなければ、顧客に対して会員カードの提示を求めるか否かを判断することができない。For example, suppose the attribute information is information indicating "whether or not the customer has a membership card." In this case, the attribute information is stored in association with the customer's membership ID. With this method, in order to obtain the attribute information indicating whether or not the customer has a membership card, the customer must be asked to present the membership card. In other words, if the customer has not registered as a member, it is not possible to determine whether or not to request the customer to present their membership card.

一方このケースにおいて、本実施形態の情報処理装置2000は、顧客が含まれる撮像画像から顧客の特徴量を算出し、その特徴量を用いて顧客の属性情報を取得できる。よって、顧客の属性情報が、顧客に対して会員カードの提示を求めるか否かの判断に利用できる。On the other hand, in this case, theinformation processing device 2000 of this embodiment can calculate the features of the customer from a captured image that includes the customer, and obtain attribute information of the customer using the features. Therefore, the attribute information of the customer can be used to determine whether or not to request the customer to present a membership card.

以下、本実施形態についてさらに詳細を述べる。The following provides further details about this embodiment.

<情報処理装置2000のハードウエア構成の例>
情報処理装置2000の各機能構成部は、各機能構成部を実現するハードウエア(例:ハードワイヤードされた電子回路など)で実現されてもよいし、ハードウエアとソフトウエアとの組み合わせ(例:電子回路とそれを制御するプログラムの組み合わせなど)で実現されてもよい。以下、情報処理装置2000の各機能構成部がハードウエアとソフトウエアとの組み合わせで実現される場合について、さらに説明する。
<Example of Hardware Configuration ofInformation Processing Device 2000>
Each functional component of theinformation processing device 2000 may be realized by hardware that realizes each functional component (e.g., a hardwired electronic circuit, etc.), or may be realized by a combination of hardware and software (e.g., a combination of an electronic circuit and a program that controls it, etc.). Below, a further description will be given of the case where each functional component of theinformation processing device 2000 is realized by a combination of hardware and software.

図3は、情報処理装置2000を実現するための計算機1000を例示する図である。計算機1000は種々の計算機である。例えば計算機1000は、Personal Computer(PC)、サーバマシン、タブレット端末、又はスマートフォンなどである。計算機1000は、情報処理装置2000を実現するために設計された専用の計算機であってもよいし、汎用の計算機であってもよい。Figure 3 is a diagram illustrating acomputer 1000 for realizing theinformation processing device 2000. Thecomputer 1000 may be any of a variety of computers. For example, thecomputer 1000 may be a personal computer (PC), a server machine, a tablet terminal, or a smartphone. Thecomputer 1000 may be a dedicated computer designed to realize theinformation processing device 2000, or may be a general-purpose computer.

計算機1000は、バス1020、プロセッサ1040、メモリ1060、ストレージデバイス1080、入出力インタフェース1100、及びネットワークインタフェース1120を有する。バス1020は、プロセッサ1040、メモリ1060、ストレージデバイス1080、入出力インタフェース1100、及びネットワークインタフェース1120が、相互にデータを送受信するためのデータ伝送路である。プロセッサ1040は、CPU(Central Processing Unit)や GPU(Graphics Processing Unit)などの演算処理装置である。メモリ1060は、RAM(Random Access Memory)などで実現される主記憶装置である。ストレージデバイス1080は、ハードディスク、SSD(Solid State Drive)、ROM、又はメモリカードなどで実現される補助記憶装置である。ただしストレージデバイス1080は、RAM など、主記憶装置の実現に用いられるハードウエアと同様のハードウエアで実現されてもよい。Thecomputer 1000 has abus 1020, aprocessor 1040, amemory 1060, astorage device 1080, an input/output interface 1100, and anetwork interface 1120. Thebus 1020 is a data transmission path for theprocessor 1040, thememory 1060, thestorage device 1080, the input/output interface 1100, and thenetwork interface 1120 to transmit and receive data to and from each other. Theprocessor 1040 is an arithmetic processing device such as a CPU (Central Processing Unit) or a GPU (Graphics Processing Unit). Thememory 1060 is a main storage device realized by a RAM (Random Access Memory) or the like. Thestorage device 1080 is an auxiliary storage device realized by a hard disk, an SSD (Solid State Drive), a ROM, or a memory card. However, thestorage device 1080 may be realized by the same hardware as the hardware used to realize the main storage device, such as a RAM.

入出力インタフェース1100は、計算機1000と入出力デバイスとを接続するためのインタフェースである。例えば入出力インタフェース1100には、キーボードやマウスなどの入力デバイスや、ディスプレイ装置などの出力デバイスが接続される。The input/output interface 1100 is an interface for connecting thecomputer 1000 to an input/output device. For example, input devices such as a keyboard and a mouse, and output devices such as a display device are connected to the input/output interface 1100.

ネットワークインタフェース1120は、WAN(Wide Area Network)や LAN(Local Area Network)などの通信網に接続するためのインタフェースである。Thenetwork interface 1120 is an interface for connecting to a communication network such as a WAN (Wide Area Network) or a LAN (Local Area Network).

ストレージデバイス1080は情報処理装置2000の各機能を実現するプログラムモジュールを記憶している。プロセッサ1040は、これら各プログラムモジュールをメモリ1060に読み出して実行することで、そのプログラムモジュールに対応する各機能を実現する。Thestorage device 1080 stores program modules that realize each function of theinformation processing device 2000. Theprocessor 1040 reads each of these program modules into thememory 1060 and executes them to realize each function corresponding to the program module.

<処理の流れ>
図4は、実施形態1の情報処理装置2000によって実行される処理の流れを例示するフローチャートである。算出部2020は、顧客が撮像された撮像画像を取得する(S102)。算出部2020は、撮像画像に含まれる顧客の特徴量を算出する(S104)。出力制御部2040は、算出された特徴量を用いて、撮像画像に含まれる顧客の特徴量に対応づけられている属性情報を記憶装置10から取得する(S106)。出力制御部2040は、取得した属性情報に基づく情報を出力する(S108)。
<Processing flow>
4 is a flowchart illustrating the flow of processing executed by theinformation processing device 2000 of the first embodiment. Thecalculation unit 2020 acquires a captured image of a customer (S102). Thecalculation unit 2020 calculates the feature amount of the customer included in the captured image (S104). Theoutput control unit 2040 acquires attribute information associated with the feature amount of the customer included in the captured image from thestorage device 10 using the calculated feature amount (S106). Theoutput control unit 2040 outputs information based on the acquired attribute information (S108).

<情報処理装置2000の利用シーン>
情報処理装置2000は、顧客の応対を行う様々なシーンで利用することができる。例えば情報処理装置2000は、商品登録装置を操作する店員が顧客の応対を行うシーン(商品を精算対象として登録するシーン)で利用できる。商品登録装置は、商品を精算対象として登録するために用いられるレジ端末である。
<Scenes in which theinformation processing device 2000 is used>
Theinformation processing device 2000 can be used in various situations in which customers are served. For example, theinformation processing device 2000 can be used in a situation in which a store clerk who operates a product registration device serves a customer (a situation in which a product is registered as a payment target). The product registration device is a cash register terminal used to register a product as a payment target.

このシーンで利用される属性情報は、例えば、買い物袋を利用するか否か、ポイントカードを所有しているか否か、割り箸の要否、冷たい商品と暖かい商品を分けて袋にいれるか否か、購入品を宅配するか否か、レシートの要否、決済の方法(現金、電子マネー、又はクレジットカード)、電子マネーで決済する際のカードの種類、又は未成年であるか否かなどを示す。店員は、これらの属性情報に基づく出力情報を、顧客にポイントカードの提示を求めるか否かの決定などに利用することができる。The attribute information used in this scene indicates, for example, whether or not a shopping bag is used, whether or not the customer has a point card, whether or not disposable chopsticks are needed, whether or not hot and cold items are to be separated into bags, whether or not the purchased items are to be delivered to the customer's home, whether or not a receipt is needed, the payment method (cash, electronic money, or credit card), the type of card used when paying with electronic money, and whether or not the customer is a minor. The store clerk can use the output information based on this attribute information to decide whether or not to ask the customer to present a point card.

その他にも例えば、情報処理装置2000は、飲食店に来店した顧客の応対を行うシーンで利用することができる。このシーンで利用される属性情報は、例えば、喫煙席と禁煙席のどちらを利用するか、カウンター席とテーブル席のどちらを利用するか、又は窓際の席を希望するかどうかなどを示す。店員は、これらの属性情報に基づく出力情報を、顧客に提供する席の決定などに利用することができる。For example, theinformation processing device 2000 can be used in a scene where a customer visiting a restaurant is served. The attribute information used in this scene indicates, for example, whether a smoking or non-smoking seat is desired, whether a counter seat or a table seat is desired, or whether a window seat is desired. The staff can use the output information based on this attribute information to decide which seat to provide to the customer.

その他にも例えば、情報処理装置2000は、顧客から注文を受けるシーンで利用することができる。このシーンで利用される属性情報は、例えば、飲食物の注文における味付けやトッピングに関する条件(味の濃さ、トッピングの量、又はトッピングの種類など)、箸とフォークのどちらを利用するか、又はナプキンを使うかどうかなどを示す。店員は、これらの属性情報に基づく出力情報を、顧客が飲食物に求める条件の把握などに利用することができる。For example, theinformation processing device 2000 can be used in a scene where an order is received from a customer. The attribute information used in this scene indicates, for example, the conditions regarding seasoning and toppings when ordering food and drink (strength of flavor, amount of toppings, type of toppings, etc.), whether chopsticks or a fork are used, or whether a napkin is used. The waiter can use the output information based on this attribute information to understand the conditions that the customer desires for food and drink.

<情報処理装置2000を実現する計算機1000の例>
情報処理装置2000を実現するための具体的な計算機1000としては、様々なものを採用しうる。例えば計算機1000は、情報処理装置2000が利用される店舗に設置されているサーバ(以下、店舗サーバ)である。その他にも例えば、計算機1000は、情報処理装置2000が利用される店舗の外部に設置されているサーバ(以下、外部サーバ)であってもよい
<Example ofcomputer 1000 realizinginformation processing device 2000>
Various types of computers can be used as thespecific computer 1000 for realizing theinformation processing device 2000. For example, thecomputer 1000 is a server (hereinafter, a store server) installed in a store where theinformation processing device 2000 is used. Alternatively, thecomputer 1000 may be a server (hereinafter, an external server) installed outside the store where theinformation processing device 2000 is used.

また例えば、計算機1000は商品登録装置であってもよい。この場合、情報処理装置2000は、例えば商品登録装置を用いて顧客の応対を行う店員によって操作される。なお商品登録装置は、精算装置と一体として設けられているものでもよいし、精算装置とは別体として設けられているものでもよい。精算装置とは、精算対象として登録された商品の精算処理(代金支払いなど)に用いられるレジ端末である。For example, thecomputer 1000 may be a product registration device. In this case, theinformation processing device 2000 is operated by, for example, a store clerk who uses the product registration device to serve customers. The product registration device may be provided integrally with a settlement device, or may be provided separately from the settlement device. The settlement device is a cash register terminal used for settlement processing (such as payment of the price) of products registered as items to be settled.

商品登録装置と精算装置とが一体となっている場合、商品を精算対象として登録する登録処理と、精算対象として登録された商品の精算処理(代金の支払いなど)が、同じレジ端末を用いて行われる。登録処理及び精算処理を顧客が行う形式をセルフ形式などと呼ぶ。一方、商品登録装置と精算装置とが別体となっている場合、商品を精算対象として登録する処理と、精算対象として登録された商品の精算処理とが、異なるレジ端末で行われる。この形式はセミセルフ形式などと呼ばれ、例えば商品登録装置の操作は店員によって行われ、精算装置の操作は顧客によって行われる。When the product registration device and the settlement device are integrated, the registration process to register products as items to be settled and the settlement process (such as paying the price) for the products registered as items to be settled are carried out using the same cash register terminal. A format in which the registration process and the settlement process are carried out by the customer is called a self-service format. On the other hand, when the product registration device and the settlement device are separate, the process to register products as items to be settled and the settlement process for the products registered as items to be settled are carried out at different cash register terminals. This format is called a semi-self-service format, and for example, the product registration device is operated by a store clerk and the settlement device is operated by the customer.

その他にも例えば、計算機1000は、店員が利用する携帯端末であってもよい。店員が利用する携帯端末は、例えば、顧客をどの席に案内したかを記録するために店員が操作する携帯端末や、顧客から受けた注文を記録するために店員が操作する携帯端末である。For example, thecomputer 1000 may be a mobile terminal used by a store clerk. The mobile terminal used by the store clerk may be, for example, a mobile terminal operated by the store clerk to record which seat a customer has been shown to, or a mobile terminal operated by the store clerk to record orders received from customers.

<撮像画像の取得:S102>
算出部2020は、顧客が撮像された撮像画像を取得する。そのために、店舗には顧客を撮像して撮像画像を生成するカメラ20が設置される。カメラ20は、動画を生成するカメラであってもよいし、静止画を撮像するカメラであってもよい。前者の場合、撮像画像は、動画を構成する画像フレームである。
<Acquisition of captured image: S102>
Thecalculation unit 2020 acquires a captured image of a customer. To this end, a camera 20 is installed in the store to capture an image of the customer and generate the captured image. The camera 20 may be a camera that generates a moving image, or a camera that captures a still image. In the former case, the captured image is an image frame that constitutes the moving image.

カメラ20は、顧客を撮像することができる位置に設けられる。商品の精算を行う顧客を撮像する場合、カメラ20は、例えば商品登録装置又はその付近に設置される。来店した顧客を撮像する場合、カメラ20は、例えば店舗の入り口又はその付近に設置される。注文を行う顧客を撮像する場合、カメラ20は、例えば顧客の席又はその付近に設置される。The camera 20 is installed in a position where it can capture an image of a customer. When capturing an image of a customer paying for an item, the camera 20 is installed, for example, at or near a product registration device. When capturing an image of a customer who has just arrived at the store, the camera 20 is installed, for example, at or near the store entrance. When capturing an image of a customer placing an order, the camera 20 is installed, for example, at or near the customer's seat.

算出部2020が撮像画像を取得する方法は任意である。例えば算出部2020は、撮像画像が記憶されている記憶装置にアクセスすることで、撮像画像を取得する。撮像画像が記憶されている記憶装置は、撮像画像を生成したカメラ20の内部に設けられていてもよいし、カメラ20の外部に設けられていてもよい。また例えば、算出部2020は、カメラ20などから送信される撮像画像を受信することで、撮像画像を取得してもよい。Thecalculation unit 2020 may acquire the captured image by any method. For example, thecalculation unit 2020 acquires the captured image by accessing a storage device in which the captured image is stored. The storage device in which the captured image is stored may be provided inside the camera 20 that generated the captured image, or may be provided outside the camera 20. For example, thecalculation unit 2020 may acquire the captured image by receiving the captured image transmitted from the camera 20 or the like.

<顧客の特徴量の算出:S104>
算出部2020は、取得した撮像画像に含まれる顧客の特徴量を算出する(S104)。ここで、画像に含まれる人物の特徴量を算出する技術には、既存の技術を利用することができる。
<Calculation of Customer Features: S104>
Thecalculation unit 2020 calculates the feature amount of the customer included in the captured image (S104). Here, the calculation of the feature amount of the person included in the image can use existing technology.

<属性情報について>
属性情報は、顧客が利用するサービスに関する顧客の属性を示す。属性情報の例は、前述した通りである。
<About attribute information>
The attribute information indicates the attributes of the customer related to the service that the customer uses. Examples of the attribute information are as described above.

図5は、顧客の特徴量と属性情報との対応付けをテーブル形式で例示する図である。図5のテーブルをテーブル500と呼ぶ。テーブル500は、特徴量502及び属性情報504という2つの列を有する。特徴量502は、顧客の特徴量を示す。属性情報504は、前述した属性情報を示す。Figure 5 is a diagram illustrating an example of the correspondence between customer features and attribute information in table format. The table in Figure 5 is called table 500. Table 500 has two columns: feature 502 and attributeinformation 504.Feature 502 indicates the customer features.Attribute information 504 indicates the attribute information described above.

ここでテーブル500は、属性情報が適用される条件をさらに示してもよい。例えば属性情報が、買い物袋の利用に関する属性(買い物袋を利用するか否かなど)を示しているとする。この場合、属性情報が適用される条件は、例えば顧客が購入する商品の量(数、重さ、又は容積など)である。属性情報は、顧客が購入する商品の数などの範囲に対応づけて、買い物袋の利用の有無や、利用する買い物袋の枚数などを示す。Here, table 500 may further indicate the conditions to which the attribute information applies. For example, the attribute information indicates attributes related to the use of shopping bags (such as whether or not shopping bags are used). In this case, the condition to which the attribute information applies is, for example, the amount of products purchased by the customer (number, weight, volume, etc.). The attribute information indicates whether or not shopping bags are used, the number of shopping bags to be used, etc., in association with a range such as the number of products purchased by the customer.

図6は、属性情報の別の例を例示する図である。図6において、テーブル500は適用条件506を有する。適用条件506は、属性情報が適用される条件を示している。例えば図6のテーブル500の2行目のレコードは、「顔の特徴量が v1 である顧客が3個未満の商品を購入する場合、この顧客は買い物袋を利用しない」ということを表している。一方、図6のテーブル500の3行目のレコードは、「顔の特徴量が v1 である顧客が3個以上の商品を購入する場合、この顧客は買い物袋を利用する」ということを示している。また、図6のテーブル500の5行目のレコードは、「顔の特徴量が v2 である顧客が、無条件で買い袋を利用しない」ということを表している。Figure 6 is a diagram illustrating another example of attribute information. In Figure 6, table 500 hasapplication conditions 506.Application conditions 506 indicate the conditions under which attribute information is applied. For example, the record in the second row of table 500 in Figure 6 indicates that "if a customer whose facial feature is v1 purchases less than three items, this customer will not use a shopping bag." On the other hand, the record in the third row of table 500 in Figure 6 indicates that "if a customer whose facial feature is v1 purchases three or more items, this customer will use a shopping bag." Also, the record in the fifth row of table 500 in Figure 6 indicates that "if a customer whose facial feature is v2 purchases three or more items, this customer will use a shopping bag unconditionally."

<属性情報の取得:S104>
出力制御部2040は、算出部2020によって算出された顧客の特徴量を用いて、撮像画像に含まれる顧客の特徴量に対応づけられている属性情報を取得する。具体的には、出力制御部2040は、記憶装置10に記憶されている属性情報のうち、算出部2020によって算出された顧客の特徴量との類似度が高い顧客の特徴量と対応づけられている属性情報を取得する。例えば出力制御部2040は、算出部2020によって算出された特徴量と同一の特徴量と対応づけて記憶装置10に記憶されている属性情報を取得する。その他にも例えば、出力制御部2040は、記憶装置10に記憶されている特徴量のうち、算出部2020によって算出された特徴量との類似度合いが所定値以上である特徴量と対応づけて記憶装置10に記憶されている属性情報を取得する。その他にも例えば、出力制御部2040は、記憶装置10に記憶されている特徴量のうち、算出部2020によって算出された特徴量との類似度合いが最も高い特徴量と対応づけて記憶装置10に記憶されている属性情報を取得する。なお、上記所定値は、出力制御部2040に予め設定されていてもよいし、出力制御部2040からアクセス可能な記憶装置に記憶されていてもよい。
<Acquisition of attribute information: S104>
Theoutput control unit 2040 acquires attribute information associated with the feature amount of the customer included in the captured image by using the feature amount of the customer calculated by thecalculation unit 2020. Specifically, theoutput control unit 2040 acquires attribute information associated with the feature amount of the customer having a high similarity to the feature amount of the customer calculated by thecalculation unit 2020 from among the attribute information stored in thestorage device 10. For example, theoutput control unit 2040 acquires attribute information stored in thestorage device 10 in association with the same feature amount as the feature amount calculated by thecalculation unit 2020. As another example, theoutput control unit 2040 acquires attribute information stored in thestorage device 10 in association with the feature amount having a similarity to the feature amount calculated by thecalculation unit 2020 that is equal to or greater than a predetermined value from among the feature amounts stored in thestorage device 10. As another example, theoutput control unit 2040 acquires attribute information stored in thestorage device 10 in association with the feature amount having the highest similarity to the feature amount calculated by thecalculation unit 2020 from among the feature amounts stored in thestorage device 10. The above-mentioned predetermined value may be preset in theoutput control unit 2040 or may be stored in a storage device accessible from theoutput control unit 2040.

記憶装置10には、出力制御部2040からアクセス可能な任意の記憶装置を採用することができる。記憶装置10は、情報処理装置2000の内部に設けられてもよいし、情報処理装置2000の外部に設けられてもよい。前者の場合、例えば記憶装置10は、図4のストレージデバイス1080として実現される。後者の場合、例えば記憶装置10は、情報処理装置2000の外部に設けられる NAS(Network Attached Storage)として実現される。Thestorage device 10 may be any storage device accessible from theoutput control unit 2040. Thestorage device 10 may be provided inside theinformation processing device 2000 or outside theinformation processing device 2000. In the former case, thestorage device 10 is realized as thestorage device 1080 in FIG. 4, for example. In the latter case, thestorage device 10 is realized as a NAS (Network Attached Storage) provided outside theinformation processing device 2000, for example.

<出力制御部2040による出力:S106>
出力制御部2040は、取得した属性情報に示される顧客の属性に基づく情報(以下、出力情報)を出力する。図7は出力情報を例示する図である。図7の例において、情報処理装置2000は、店員によって操作される商品登録装置である。表示画面60は、商品登録装置に接続されているディスプレイ装置に表示される画面である。表示画面60には、店員がバーコードリーダなどで読み取った商品の情報や商品の合計金額などが表示される。
<Output by output control unit 2040: S106>
Theoutput control unit 2040 outputs information based on the attributes of the customer indicated in the acquired attribute information (hereinafter, output information). Fig. 7 is a diagram illustrating an example of output information. In the example of Fig. 7, theinformation processing device 2000 is a product registration device operated by a store clerk. Thedisplay screen 60 is a screen displayed on a display device connected to the product registration device. Thedisplay screen 60 displays product information read by the store clerk using a barcode reader or the like, the total price of the products, and the like.

さらに表示画面60には、ウインドウ62が含まれている。ウインドウ62は出力情報が含まれるウインドウである。出力制御部2040は、ディスプレイ装置を制御することで、ディスプレイ装置にウインドウ62を表示させる。Thedisplay screen 60 further includes awindow 62. Thewindow 62 is a window that includes output information. Theoutput control unit 2040 controls the display device to display thewindow 62 on the display device.

図7の例では、2種類の属性情報が存在する。第1の種類の属性情報は、顧客が買い物袋を利用するか否かを示す。第2の種類の属性情報は、顧客がポイントカードを所有しているか否かを示す。In the example of FIG. 7, there are two types of attribute information. The first type of attribute information indicates whether or not the customer uses a shopping bag. The second type of attribute information indicates whether or not the customer has a point card.

この例において、顧客Aの特徴量には、「買い物袋の利用:無し」という第1の種類の属性情報、及び「ポイントカードの所有:有り」という第2の種類の属性情報が対応づけられている。そのため、出力制御部2040によって出力されるウインドウ62には、「買い物袋の利用:無し」及び「ポイントカードの所有:有り」という情報が示されている。In this example, the feature of customer A is associated with a first type of attribute information, "Use of shopping bag: No," and a second type of attribute information, "Owns point card: Yes." Therefore, thewindow 62 output by theoutput control unit 2040 shows the information, "Use of shopping bag: No," and "Owns point card: Yes."

例えば図7の例において、店員が商品登録装置を操作するとする。この場合、ウインドウ62を見た店員は、顧客Aが買い物袋を利用しないこと、及び顧客Aがポイントカードを所有していることを把握する。そこで、店員は、顧客Aに対し、「ポイントカードはお持ちですか」と話しかけることで、ポイントカードの提示を求める。一方、顧客Aは買い物袋を利用しないため、例えば店員は、顧客Aに対して買い物袋についての質問をしない。その他にも例えば、店員は、「買い物袋は不要ですよね」のように、買い物袋が不要であることを確認する質問をしてもよい。For example, in the example of FIG. 7, let us say that a store clerk operates the product registration device. In this case, the store clerk seeswindow 62 and realizes that customer A does not use a shopping bag and that customer A has a point card. The store clerk then asks customer A, "Do you have a point card?", asking the customer to show the point card. However, since customer A does not use a shopping bag, the store clerk does not ask customer A about a shopping bag, for example. The store clerk may also ask a question to confirm that a shopping bag is not needed, such as, "You don't need a shopping bag, do you?".

その他にも例えば、図7の例において、顧客Aが商品登録装置を操作するとする。この場合、情報処理装置2000は、セルフ形式の装置である。ウインドウ62を見た顧客Aは、自身が買い物袋を利用しないこと、及び自身がポイントカードを所有していることを確認して、ボタン64を押す。その結果、商品登録装置における商品登録処理が次の段階へ進む。As another example, in the example of FIG. 7, customer A operates the product registration device. In this case, theinformation processing device 2000 is a self-service type device. After viewingwindow 62, customer A confirms that he or she will not be using a shopping bag and that he or she has a point card, and then pressesbutton 64. As a result, the product registration process in the product registration device proceeds to the next stage.

ここで、情報処理装置2000は、出力情報の内容の変更を要求する入力を受け付けてもよい。図8は、出力情報の内容を変更するためのウインドウを例示する図である。なお、図8において表示画面60は省略されている。Here, theinformation processing device 2000 may receive an input requesting a change to the content of the output information. FIG. 8 is a diagram illustrating an example of a window for changing the content of the output information. Note that thedisplay screen 60 is omitted in FIG. 8.

図8のウインドウ62は、出力情報の内容の変更を要求するためのボタンであるボタン66を有する。ここで、ウインドウ62には「買い物袋の利用:無し」と表示されているものの、顧客が「今回は買い物袋を利用したい」と考えたとする。例えば、普段はマイバッグを利用している顧客であっても、マイバッグを忘れた等の理由により、買い物袋を利用したい場合がある。Window 62 in FIG. 8 has button 66, which is a button for requesting a change in the contents of the output information. Here, suppose thatwindow 62 displays "Shopping bag use: None", but the customer thinks, "I would like to use a shopping bag this time." For example, even if a customer normally uses their own bag, there may be cases where they want to use a shopping bag because they forgot their own bag, etc.

このような場合、顧客は、ボタン66を押下する。出力制御部2040は、ボタン66が押下されたことに応じて、例えば図8(b)に示すウインドウ68を表示する。In such a case, the customer presses button 66. In response to the button 66 being pressed, theoutput control unit 2040 displays, for example, awindow 68 as shown in FIG. 8(b).

ウインドウ68は、買い物袋の利用の有無、及びポイントカードの所有の有無をそれぞれ選択するためのラジオボタンを有する。ラジオボタンのデフォルト値は、出力情報の内容に合わせて設定される。顧客は、買い物袋の利用を「有り」から「無し」に変更した後、OKボタンを押下する。こうすることで、顧客は、「買い物袋を利用したい」という意志を店員に伝えることができる。Window 68 has radio buttons for selecting whether or not to use a shopping bag, and whether or not to own a point card. The default values of the radio buttons are set according to the contents of the output information. After changing the use of a shopping bag from "Yes" to "No," the customer presses the OK button. In this way, the customer can communicate to the store clerk that they wish to use a shopping bag.

なお、店員が商品登録装置を操作する場合、ウインドウ68は、店員によって操作されてもよい。この場合、例えば店員は、出力情報に加えたい変更の内容を顧客に尋ね、顧客から聞いた内容に従ってウインドウ68を操作する。When a store clerk operates the product registration device,window 68 may be operated by the store clerk. In this case, for example, the store clerk asks the customer what changes he or she would like to make to the output information, and operateswindow 68 in accordance with what the customer tells him or her.

ここで、情報処理装置2000は、ウインドウ68を用いて変更された出力情報の内容に基づいて属性情報を更新してもよいし、更新しなくてもよい。属性情報の更新を行うか否かは、予め定められていてもよいし、顧客によって選択されてもよい。Here, theinformation processing device 2000 may or may not update the attribute information based on the contents of the output information changed using thewindow 68. Whether or not to update the attribute information may be determined in advance, or may be selected by the customer.

後者の場合、例えば出力制御部2040は、図8(b)のウインドウ68の代わりに、図8(c)のウインドウ68を表示する。図8(c)のウインドウ68は、「今回だけ」と「今後も」のいずれかを選択させるラジオボタンを有している。前者が選択された場合、情報処理装置2000は、顧客によって行われた変更に基づく属性情報の更新を行わない。一方、後者が選択された場合、情報処理装置2000は、顧客によって行われた変更に基づいて属性情報を更新する。In the latter case, for example, theoutput control unit 2040 displays thewindow 68 in FIG. 8(c) instead of thewindow 68 in FIG. 8(b). Thewindow 68 in FIG. 8(c) has radio buttons for selecting either "Just this time" or "In the future." If the former is selected, theinformation processing device 2000 does not update the attribute information based on the changes made by the customer. On the other hand, if the latter is selected, theinformation processing device 2000 updates the attribute information based on the changes made by the customer.

なお、出力情報の出力方法は、ディスプレイ装置に表示する方法に限定されない。例えば出力情報は音声で出力されてもよい。この場合、例えば店員が予めイヤフォンを装着しておき、そのイヤフォンに出力情報が出力されるようにする。The method of outputting the output information is not limited to displaying it on a display device. For example, the output information may be output as audio. In this case, for example, the store clerk may wear earphones in advance, and the output information may be output to the earphones.

ディスプレイ装置やイヤフォンなどの出力装置が情報処理装置2000に接続されている場合、出力制御部2040は、これらの出力装置に対して出力情報を出力する。一方、出力装置が情報処理装置2000に接続されていない場合、情報処理装置2000は、出力装置が接続されている他の装置に対して出力情報を送信する。出力情報を受信した装置は、出力装置を制御して出力情報を出力させる。例えば情報処理装置2000が店舗サーバとして実現されている場合、出力制御部2040は、店員が操作している商品登録装置へ出力情報を送信する。出力情報を受信した商品登録装置は、商品登録装置に接続されているディスプレイ装置やイヤフォンを制御して、出力情報を出力させる。When output devices such as a display device or earphones are connected to theinformation processing device 2000, theoutput control unit 2040 outputs output information to these output devices. On the other hand, when an output device is not connected to theinformation processing device 2000, theinformation processing device 2000 transmits output information to another device to which the output device is connected. The device that receives the output information controls the output device to output the output information. For example, when theinformation processing device 2000 is realized as a store server, theoutput control unit 2040 transmits the output information to a product registration device operated by a store clerk. The product registration device that receives the output information controls the display device or earphones connected to the product registration device to output the output information.

なお情報処理装置2000は、属性情報を利用して顧客に対するメッセージを生成し、そのメッセージを出力するようにしてもよい。例えば属性情報がサービスの利用の有無に関する情報であるとする。この場合、属性情報が「サービスAを利用する」ということを示している場合には「サービスAは必要ですね」というメッセージを出力し、属性情報が「サービスAを利用しない」ということを示している場合には「サービスAは不要ですね」というメッセージを出力する。Theinformation processing device 2000 may use the attribute information to generate a message for the customer and output the message. For example, assume that the attribute information is information regarding whether or not a service is to be used. In this case, if the attribute information indicates that "Service A will be used," a message saying "Service A is necessary" is output, and if the attribute information indicates that "Service A will not be used," a message saying "Service A is not necessary" is output.

サービスの利用に使う物(例えばポイントカード)を所有しているか否かを属性情報が示すケースのメッセージも、同様に生成することができる。例えば属性情報が「ポイントカードを所有している」ということを示している場合には「ポイントカードをお持ちですね」というメッセージを表示し、属性情報が「ポイントカードを所有していない」ということを示している場合には「ポイントカードをお持ちではありませんね」というメッセージを表示する。Messages can also be generated in a similar manner when the attribute information indicates whether or not the user owns an item used to use a service (such as a point card). For example, if the attribute information indicates that the user "owns a point card," the message "You have a point card, don't you?" is displayed, and if the attribute information indicates that the user "does not own a point card," the message "You do not have a point card, do you?" is displayed.

このように顧客の属性に合わせたメッセージを出力することで、店員から質問を受ける顧客のストレスや不快感を和らげることができる。例えばいつもサービスAを利用しないにもかかわらず毎回店員から「サービスAをご利用しますか」と尋ねられると、不快に思う顧客もいる。一方で、「サービスAはご利用しませんよね」と尋ねられれば、「店員は自分のことを分かってくれている」と顧客が感じるため、顧客は不快に思わないか、又は顧客が感じる不快の度合いが小さくなる。In this way, by outputting messages tailored to the attributes of each customer, it is possible to reduce the stress and discomfort felt by customers who are asked questions by store clerks. For example, some customers may feel uncomfortable if a store clerk always asks "Would you like to use Service A?" even though they do not normally use Service A. On the other hand, if the clerk asks "You will not use Service A, will you?", the customer will feel that "the store clerk understands me," and so the customer will not feel uncomfortable, or the degree of discomfort felt by the customer will be reduced.

[実施形態2]
図9は、実施形態2の情報処理装置2000を例示するブロック図である。以下で説明する事項を除き、実施形態2の情報処理装置2000は、実施形態1の情報処理装置2000と同様である。
[Embodiment 2]
9 is a block diagram illustrating aninformation processing apparatus 2000 according to the second embodiment. Except for the matters described below, theinformation processing apparatus 2000 according to the second embodiment is similar to theinformation processing apparatus 2000 according to the first embodiment.

実施形態2の情報処理装置2000は第1生成部2060を有する。第1生成部2060は、履歴情報を用いて属性情報を生成する。履歴情報は、サービスの利用に関する顧客の行動や状態の履歴を示す情報である。例えば履歴情報は、顧客が買い物袋を利用したかどうかや、顧客がポイントカードを提示したかどうかなどを示す。さらに第1生成部2060は、生成した属性情報を、算出部2020によって算出された顧客の特徴量と対応づけて、記憶装置10に記憶させる。Theinformation processing device 2000 of the second embodiment has afirst generating unit 2060. Thefirst generating unit 2060 generates attribute information using history information. The history information is information indicating the history of a customer's actions and status regarding the use of a service. For example, the history information indicates whether the customer used a shopping bag or whether the customer presented a point card. Furthermore, thefirst generating unit 2060 associates the generated attribute information with the characteristic amount of the customer calculated by the calculatingunit 2020 and stores it in thestorage device 10.

<処理の流れ>
図10は、実施形態2の情報処理装置2000によって実行される処理の流れを例示するフローチャートである。算出部2020は、撮像画像を取得して顧客の特徴量を算出する(S202、S204)。以下、この顧客を、「属性情報の生成対象である顧客」とも表記する。第1生成部2060は、履歴情報を取得する(S206)。第1生成部2060は、取得した履歴情報を用いて属性情報を生成する(S208)。第1生成部2060は、S204で算出された特徴量とS208で生成された属性情報とを対応付けて、記憶装置10に記憶させる(S210)。
<Processing flow>
10 is a flowchart illustrating the flow of processing executed by theinformation processing device 2000 of the second embodiment. Thecalculation unit 2020 acquires a captured image and calculates the feature amount of the customer (S202, S204). Hereinafter, this customer is also referred to as "the customer for whom attribute information is generated." Thefirst generation unit 2060 acquires history information (S206). Thefirst generation unit 2060 generates attribute information using the acquired history information (S208). Thefirst generation unit 2060 associates the feature amount calculated in S204 with the attribute information generated in S208 and stores them in the storage device 10 (S210).

<履歴情報について:S206>
前述したように、履歴情報は、サービスの利用に関する顧客の行動や状態の履歴を示す情報である。図11は、履歴情報をテーブル形式で例示する図である。図11のテーブルをテーブル600と表記する。テーブル600は、特徴量602、履歴情報604、及び日時606という列を有する。特徴量602は、顧客の特徴量を示す。履歴情報604は、顧客の過去の行動や状態を示す。日時606は、履歴情報604に示される行動や状態に対応する日時を示す。
<Regarding History Information: S206>
As described above, history information is information that indicates the history of a customer's actions and status regarding the use of a service. Fig. 11 is a diagram illustrating an example of history information in a table format. The table in Fig. 11 is denoted as table 600. Table 600 has columns offeature amount 602,history information 604, and date andtime 606.Feature amount 602 indicates a feature amount of a customer.History information 604 indicates past actions and status of the customer. Date andtime 606 indicates a date and time corresponding to the action and status indicated inhistory information 604.

履歴情報は、第1生成部2060からアクセス可能な記憶装置に予め記憶されているものとする。第1生成部2060は、この記憶装置から履歴情報を取得する。The history information is assumed to be stored in advance in a storage device accessible by thefirst generation unit 2060. Thefirst generation unit 2060 acquires the history information from this storage device.

属性情報の生成には、取得された撮像画像に含まれる顧客の特徴量に対応する履歴情報(属性情報の生成対象である顧客の行動履歴)のみが利用されてもよいし、この履歴情報に加えて他の履歴情報が利用されてもよい。前者の場合、第1生成部2060は、算出部2020によって算出された特徴量との類似度合いが高い特徴量(例えば算出された特徴量と一致する特徴量)と対応づけられている履歴情報を取得する。To generate the attribute information, only history information corresponding to the features of the customer included in the captured image (the behavioral history of the customer for whom the attribute information is generated) may be used, or other history information may be used in addition to this history information. In the former case, thefirst generation unit 2060 acquires history information associated with features that are highly similar to the features calculated by the calculation unit 2020 (e.g., features that match the calculated features).

一方後者の場合、第1生成部2060は、例えば全ての履歴情報を取得する。その他にも例えば、第1生成部2060は、属性情報の生成対象である顧客と共通点を持つ他の顧客の履歴情報を取得する。共通点は、例えば年齢、性別、又は性格などである。On the other hand, in the latter case, thefirst generation unit 2060 acquires, for example, all history information. In addition, for example, thefirst generation unit 2060 acquires history information of other customers who have something in common with the customer for whom attribute information is generated. The something in common is, for example, age, gender, or personality.

例えば共通点として顧客の年齢を利用する場合、第1生成部2060は、算出部2020によって算出された顧客の特徴量から推定される年齢に近い年齢の顧客の履歴情報を取得する。同様に、共通点として顧客の性別を利用する場合、第1生成部2060は、算出部2020によって推定される顧客の性別と同じ性別の顧客の履歴情報を取得する。同様に、共通点として顧客の性格を利用する場合、第1生成部2060は、算出部2020によって推定される顧客の性格と同じ性格に分類される顧客の履歴情報を取得する。ここで、例えば顧客の性格は、温和な性格、神経質な性格、又は大ざっぱな性格などの種類に分類される。なお、人の顔の特徴量を用いてその人の年齢、性別、又は性格を推定する技術には,既知の技術を利用できる。For example, when the age of the customer is used as the common point, thefirst generating unit 2060 acquires history information of customers whose age is close to the age estimated from the customer's feature amount calculated by the calculatingunit 2020. Similarly, when the gender of the customer is used as the common point, thefirst generating unit 2060 acquires history information of customers whose gender is the same as the gender of the customer estimated by the calculatingunit 2020. Similarly, when the personality of the customer is used as the common point, thefirst generating unit 2060 acquires history information of customers whose personality is classified as the same personality as the personality of the customer estimated by the calculatingunit 2020. Here, for example, the personality of the customer is classified into types such as a gentle personality, a nervous personality, or a rough personality. Note that known technology can be used for estimating a person's age, gender, or personality using the features of a person's face.

このような顧客の共通点を利用する場合、各顧客の履歴情報は、顧客の共通点を特定するための情報(顧客の年齢など)と対応づけて記憶しておくことが好適である。顧客の共通点を特定するための情報は、顧客の特徴量から推定された年齢などであってもよいし、顧客の実際の年齢などであってもよい。後者の場合、顧客の共通点を特定するための情報は、何らかの方法(例えば会員情報やアンケート)によって予め把握されているものとする。When using such commonalities among customers, it is preferable to store the history information of each customer in association with information for identifying the commonalities among customers (such as the customer's age). The information for identifying the commonalities among customers may be an age estimated from the customer's features, or the customer's actual age. In the latter case, the information for identifying the commonalities among customers is assumed to be known in advance by some method (for example, membership information or a questionnaire).

<属性情報の生成:S208>
第1生成部2060は、取得した履歴情報を用いて属性情報を生成する(S208)。取得した履歴情報が1つである場合、第1生成部2060は、その履歴情報から属性情報を生成する。例えば、履歴情報において「ポイントカードの所有:無し」が示されている場合、第1生成部2060は、「ポイントカードの所有:無し」という属性情報を生成する。
<Generation of attribute information: S208>
Thefirst generating unit 2060 generates attribute information using the acquired history information (S208). If only one piece of history information is acquired, thefirst generating unit 2060 generates attribute information from that history information. For example, if the history information indicates "point card ownership: none", thefirst generating unit 2060 generates attribute information indicating "point card ownership: none".

取得した履歴情報が複数ある場合、第1生成部2060は、取得した履歴情報を統計処理することで属性情報を生成する。例えばポイントカードの所有の有無に関する属性情報を生成する場合、第1生成部2060は、「ポイントカードの所有:有り」を示す履歴情報の数と、「ポイントカードの所有:無し」を示す履歴情報の数を比較し、数が多い履歴情報の内容で属性情報を生成する。例えば「ポイントカードの所有:有り」を示す履歴情報の数の方が多い場合、第1生成部2060は、「ポイントカードの所有:有り」を示す属性情報を生成する。When multiple pieces of history information have been acquired, thefirst generation unit 2060 generates attribute information by performing statistical processing on the acquired history information. For example, when generating attribute information regarding whether or not a point card is owned, thefirst generation unit 2060 compares the number of pieces of history information indicating "Point card ownership: yes" with the number of pieces of history information indicating "Point card ownership: no", and generates attribute information based on the content of the greater number of pieces of history information. For example, when the number of pieces of history information indicating "Point card ownership: yes" is greater, thefirst generation unit 2060 generates attribute information indicating "Point card ownership: yes".

ここで、第1生成部2060は、履歴情報に重みを付けた統計処理を行って属性情報を生成してもよい。例えば第1生成部2060は、全ての顧客の履歴情報を取得し、算出部2020が取得した撮像画像に含まれる顧客と共通点を持つ顧客の履歴情報に大きな重みを与え、それ以外の履歴情報に小さな重みを与えた上で、これらの履歴情報から属性情報を生成する。Here, thefirst generating unit 2060 may generate attribute information by performing weighted statistical processing on the history information. For example, thefirst generating unit 2060 acquires the history information of all customers, assigns a large weight to the history information of customers who have something in common with the customer included in the captured image acquired by thecalculation unit 2020, assigns a small weight to the other history information, and generates attribute information from this history information.

例えばポイントカードの所有の有無に関する属性情報を生成するとする。また履歴情報が、10歳単位で区切った顧客の年齢(10代、20代、又は30代など)に対応づけられているとする。For example, suppose attribute information is generated regarding whether or not a customer has a point card. Also, suppose history information is associated with the customer's age in 10-year increments (teens, twenties, thirties, etc.).

この条件下において、属性情報の生成対象である顧客の年齢が「20代」であったとする。この場合、第1生成部2060は、20代という年齢の各顧客の履歴情報には大きな重みを与え、それ以外の年齢の顧客の履歴情報には小さな重みを与える。Under these conditions, assume that the age of the customer for whom attribute information is to be generated is "in their 20s." In this case, thefirst generation unit 2060 assigns a large weight to the history information of each customer in their 20s, and a small weight to the history information of customers of other ages.

このように、属性情報の生成対象である顧客との共通点に応じた重みを履歴情報に付与することで、生成される属性情報に、属性情報の生成対象である顧客と共通点を持つ顧客の行動が反映されやすくなる。よって、属性情報の生成対象である顧客の属性を高い精度で予測することができる。In this way, by assigning weights to history information according to the commonalities with the customer for whom attribute information is being generated, the generated attribute information is more likely to reflect the behavior of customers who have commonalities with the customer for whom attribute information is being generated. This makes it possible to predict with high accuracy the attributes of the customer for whom attribute information is being generated.

<実施形態2の情報処理装置2000が処理を行う契機>
属性情報の生成に係る一連の処理(図10の処理)は、例えば対応する属性情報が存在しない顧客の応対が行われるタイミングで実行される。情報処理装置2000は、実施形態1で説明した機能に基づき、応対する顧客について出力情報の出力を試みる。そして、取得した撮像画像に含まれる顧客の特徴量との類似度が高い特徴量が記憶装置10に記憶されていない場合に、第1生成部2060は、前述した方法で属性情報を生成する。この方法によれば、新規の顧客の応対を行うタイミングで、その顧客に関する属性情報が生成されるようになる。そのため、新たな顧客の属性情報が自動的に生成されるようになる。ただし、第1生成部2060が属性情報を生成するタイミングは任意のタイミングでよく、顧客の応対を行うタイミングに限定されない。
<Occasion for performing processing by theinformation processing apparatus 2000 according to the second embodiment>
A series of processes (processing of FIG. 10) related to the generation of attribute information is executed, for example, when a customer for whom there is no corresponding attribute information is served is served. Theinformation processing device 2000 attempts to output output information for the served customer based on the function described in the first embodiment. Then, when a feature amount having a high similarity to the feature amount of the customer contained in the acquired captured image is not stored in thestorage device 10, thefirst generating unit 2060 generates attribute information by the above-mentioned method. According to this method, attribute information for a new customer is generated when the customer is served. Therefore, attribute information for the new customer is automatically generated. However, the timing when thefirst generating unit 2060 generates attribute information may be any timing, and is not limited to the timing when the customer is served.

<ハードウエア構成>
実施形態2の情報処理装置2000を実現する計算機のハードウエア構成は、実施形態1と同様に、例えば図3によって表される。ただし、本実施形態の情報処理装置2000を実現する計算機1000のストレージデバイス1080には、本実施形態の情報処理装置2000の機能を実現するプログラムモジュールがさらに記憶される。
<Hardware configuration>
The hardware configuration of the computer that realizes theinformation processing device 2000 of the second embodiment is shown in Fig. 3, for example, as in the first embodiment. However, thestorage device 1080 of thecomputer 1000 that realizes theinformation processing device 2000 of this embodiment further stores a program module that realizes the functions of theinformation processing device 2000 of this embodiment.

<作用・効果>
本実施形態の情報処理装置2000によれば、履歴情報を用いて顧客の属性情報が生成される。よって、顧客の属性情報が、その顧客や他の顧客の過去の行動や状態に基づいて生成される。こうすることで、顧客の属性を高い精度で推測できるようになる。
<Action and Effects>
According to theinformation processing device 2000 of this embodiment, customer attribute information is generated using history information. Therefore, the customer attribute information is generated based on the past actions and states of the customer and other customers. In this way, the customer attributes can be estimated with high accuracy.

なお、属性情報の生成対象である顧客の履歴情報のみを用いて属性情報を生成すると、その顧客の過去の行動や状態の傾向に基づいて、その顧客の未来の行動や状態を予測することができる。In addition, if attribute information is generated using only the historical information of the customer for whom the attribute information is being generated, it is possible to predict the customer's future behavior and state based on the trends in that customer's past behavior and state.

また、属性情報の生成対象である顧客以外の顧客の履歴情報を用いると、様々な顧客の過去の行動や状態の傾向に基づいて、属性情報の生成対象である顧客の未来の行動や状態を予測することができる。この方法は、例えば属性情報の生成対象の顧客が新規の顧客であるために、その顧客の履歴情報が存在しないケースなどで特に好適である。In addition, by using historical information of customers other than the customer for whom the attribute information is being generated, it is possible to predict the future behavior and state of the customer for whom the attribute information is being generated, based on trends in the past behavior and state of various customers. This method is particularly suitable in cases where the customer for whom the attribute information is being generated is a new customer and therefore no historical information exists.

さらに、属性情報の生成対象である顧客と共通点を持つ顧客の履歴情報を用いると、属性情報の生成対象である顧客と共通点を持つ顧客の過去の行動や状態の傾向に基づいて、属性情報の生成対象である顧客の未来の行動や状態を予測することができる。Furthermore, by using historical information of customers who have something in common with the customer for whom the attribute information is being generated, it is possible to predict the future behavior and state of the customer for whom the attribute information is being generated, based on the tendencies in the past behavior and state of the customers who have something in common with the customer for whom the attribute information is being generated.

[実施形態3]
図12は、実施形態3の情報処理装置2000を例示するブロック図である。以下で説明する事項を除き、実施形態3の情報処理装置2000は、実施形態1の情報処理装置2000又は実施形態2の情報処理装置2000と同様である。
[Embodiment 3]
12 is a block diagram illustrating aninformation processing apparatus 2000 according to the third embodiment. Except for the matters described below, theinformation processing apparatus 2000 according to the third embodiment is similar to theinformation processing apparatus 2000 according to the first embodiment or theinformation processing apparatus 2000 according to the second embodiment.

実施形態3の情報処理装置2000は、入力受付部2080及び第2生成部2100を有する。入力受付部2080は、算出部2020によって取得された撮像画像に含まれる顧客について、サービスに関する顧客の属性を表す入力を受け付ける。第2生成部2100は、入力受付部2080が受け付けた入力に基づいて属性情報を生成する。さらに第2生成部2100は、生成した属性情報を、算出部2020によって取得された撮像画像に含まれる顧客の特徴量と対応づけて、記憶装置10に記憶させる。Theinformation processing device 2000 of the third embodiment has aninput receiving unit 2080 and asecond generating unit 2100. Theinput receiving unit 2080 receives input representing attributes of a customer related to a service, for the customer included in the captured image acquired by thecalculation unit 2020. Thesecond generating unit 2100 generates attribute information based on the input received by theinput receiving unit 2080. Furthermore, thesecond generating unit 2100 associates the generated attribute information with the feature amount of the customer included in the captured image acquired by thecalculation unit 2020, and stores the information in thestorage device 10.

<処理の流れ>
図13は、実施形態3の情報処理装置2000によって実行される処理の流れを例示するフローチャートである。算出部2020は、撮像画像を用いて顧客の特徴量を算出する(S302、S304)。入力受付部2080は、サービスに関する顧客の属性を表す入力を受け付ける(S306)。第2生成部2100は、受け付けた入力に基づいて属性情報を生成する(S308)。第2生成部2100は、算出された特報量と生成された属性情報とを対応づけて記憶装置10に記憶させる(S310)。
<Processing flow>
13 is a flowchart illustrating a process executed by theinformation processing device 2000 according to the third embodiment. Thecalculation unit 2020 calculates the feature amount of the customer using the captured image (S302, S304). Theinput receiving unit 2080 receives an input representing the customer's attributes related to the service (S306). Thesecond generation unit 2100 generates attribute information based on the received input (S308). Thesecond generation unit 2100 stores the calculated special report amount and the generated attribute information in thestorage device 10 in association with each other (S310).

<入力の受け付け:S306>
入力受付部2080が入力を受け付ける方法には、様々な方法を採用できる。例えば入力受付部2080に対する入力は、ディスプレイ装置に表示される入力画面を用いて行われる。例えばこのディスプレイ装置は、入力操作を受け付けるタッチパネルを用いて構成される。
<Accepting input: S306>
Various methods can be adopted as a method for theinput receiving unit 2080 to receive input. For example, input to theinput receiving unit 2080 is performed using an input screen displayed on a display device. For example, this display device is configured using a touch panel that receives input operations.

図14は入力画面を例示する図である。入力画面80は、ディスプレイ装置に表示される入力画面である。入力画面80は、入力エリア82及び入力エリア84を有している。入力エリア82は、買い物袋の利用の有無に関する入力を受け付ける入力エリアである。入力エリア84は、ポイントカードの所有の有無に関する入力を受け付ける入力エリアである。Figure 14 is a diagram illustrating an example of an input screen.Input screen 80 is an input screen displayed on a display device.Input screen 80 hasinput area 82 andinput area 84.Input area 82 is an input area that accepts input regarding whether or not a shopping bag is used.Input area 84 is an input area that accepts input regarding whether or not a point card is owned.

例えば入力画面80が商品登録装置のディスプレイ装置に表示されるとする。このディスプレイ装置は、店員によって閲覧及び操作が可能である。店員は、買い物袋が必要かどうかを顧客に尋ね、その結果を入力エリア82に入力する。同様に店員は、ポイントカードを持っているかどうかを顧客に尋ね、その結果を入力エリア84に入力する。これらの結果を用いて生成される属性情報を記憶装置10に記憶させておくことで、同じ顧客が再度来店した際、店員は、この顧客が買い物袋を利用するかどうかや、この顧客がポイントカードを持っているかどうかを、顧客に尋ねる前に把握することができるようになる。For example,input screen 80 is displayed on the display device of the product registration device. This display device can be viewed and operated by a store clerk. The clerk asks the customer whether or not they need a shopping bag, and enters the result ininput area 82. Similarly, the clerk asks the customer whether or not they have a point card, and enters the result ininput area 84. By storing attribute information generated using these results instorage device 10, when the same customer visits the store again, the clerk will be able to know whether the customer will use a shopping bag or whether or not they have a point card before asking the customer.

なお、入力画面80に対する入力は、顧客によって行われてもよい。この場合、入力画面80は、顧客による閲覧及び操作が可能なディスプレイ装置に表示される。例えば商品登録装置に、店員が閲覧するディスプレイ装置に加え、顧客が閲覧するディスプレイ装置を別途設けておく。In addition, input to theinput screen 80 may be performed by the customer. In this case, theinput screen 80 is displayed on a display device that can be viewed and operated by the customer. For example, the product registration device is provided with a display device that is viewed by the store clerk, as well as a separate display device that is viewed by the customer.

ここで、入力画面80にはデフォルト値が設定されるようにしてもよい。デフォルト値は、例えば予め設定されている固定値である。例えばポイントカードを持っているかどうかについてのデフォルト値を「有り」に設定しておく。この場合、入力エリア84にはデフォルト値として「有り」が表示される。Here, a default value may be set on theinput screen 80. The default value is, for example, a fixed value that is set in advance. For example, the default value for whether or not the user has a point card is set to "Yes." In this case, "Yes" is displayed as the default value in theinput area 84.

また例えば、デフォルト値は、前述した履歴情報を用いて算出されてもよい。具体的には、実施形態2の第1生成部2060によって生成される属性情報をデフォルト値として用いる。例えば実施形態2の第1生成部2060によって「ポイントカードの所有:有り」という属性情報が生成される場合、入力エリア84のデフォルト値を「有り」に設定する。For example, the default value may be calculated using the history information described above. Specifically, the attribute information generated by thefirst generating unit 2060 of embodiment 2 is used as the default value. For example, when the attribute information "Point card ownership: Yes" is generated by thefirst generating unit 2060 of embodiment 2, the default value of theinput area 84 is set to "Yes."

このように顧客の行動や状態の履歴を用いてデフォルト値を算出することで、固定値をデフォルト値として用いる場合と比較し、顧客の実際の行動や状態がデフォルト値と一致する確率が高くなる。顧客の実際の行動や状態がデフォルト値と一致すれば、店員や顧客は入力エリア82や入力エリア84に対して入力を行う必要がない。そのため、店員の労力が削減される。Calculating default values using the customer's behavior and state history in this way increases the probability that the customer's actual behavior and state will match the default value, compared to when a fixed value is used as the default value. If the customer's actual behavior and state match the default value, the store clerk or customer does not need to make any input ininput area 82 orinput area 84. This reduces the work of the store clerk.

<属性情報の生成:S308>
第2生成部2100は、入力受付部2080が受け付けた入力を用いて属性情報を生成する(S308)。例えば「ポイントカードの所有:有り」という入力を受け付けた場合、第2生成部2100は、「ポイントカードの所有:有り」という属性情報を生成する。
<Generation of attribute information: S308>
Thesecond generating unit 2100 generates attribute information using the input received by the input receiving unit 2080 (S308). For example, when the input "point card ownership: yes" is received, thesecond generating unit 2100 generates attribute information "point card ownership: yes".

<実施形態3の情報処理装置2000が処理を行う契機>
属性情報の生成に係る一連の処理(図13の処理)は、例えば対応する属性情報が存在しない顧客の応対が行われるタイミングで行われる。情報処理装置2000は、実施形態1で説明した機能に基づき、応対する顧客について出力情報の出力を試みる。取得した撮像画像に含まれる顧客の特徴量との類似度が高い特徴量と対応づけられている属性情報が記憶装置10に記憶されていない場合、情報処理装置2000は、前述した入力画面80などの出力を行う。そして情報処理装置2000は、受け付けた入力を用いて属性情報を生成する。この方法によれば、新規の顧客の応対を行うタイミングで、その顧客に関する属性情報が生成されるようになる。
<Occasion for performing processing by theinformation processing apparatus 2000 according to the third embodiment>
A series of processes (processing in FIG. 13) related to the generation of attribute information is performed, for example, when a customer for whom there is no corresponding attribute information is served is served. Theinformation processing device 2000 attempts to output output information for the served customer based on the functions described in the first embodiment. If attribute information associated with features highly similar to the features of the customer contained in the captured image is not stored in thestorage device 10, theinformation processing device 2000 outputs theinput screen 80 described above, etc. Then, theinformation processing device 2000 generates attribute information using the received input. According to this method, attribute information for a new customer is generated when the customer is served.

その他にも例えば、属性情報の生成に係る一連の処理は、店員の操作に応じて開始されてもよい。例えば店員が操作する端末のディスプレイ装置(例えば商品登録装置のディスプレイ装置)に、前述した入力画面80に遷移するためのボタンを表示させておく。店員は、そのボタンを押下することで入力画面80を表示させ、自分で顧客の属性に関する入力を行ったり、顧客に属性に関する入力を行わせたりする。For example, the series of processes related to generating attribute information may be started in response to an operation by a store clerk. For example, a button for transitioning to the above-mentionedinput screen 80 may be displayed on the display device of the terminal operated by the store clerk (e.g., the display device of the product registration device). The store clerk presses the button to display theinput screen 80, where the store clerk can enter information about the customer's attributes or have the customer enter information about the attributes.

店員の操作を契機とする入力は、例えば属性情報を更新するために行われる。例えば或る顧客を応対する際、出力制御部2040によって出力される出力情報には「ポイントカードの所有:無し」が示されているものの、顧客がポイントカードを提示したとする。この場合、店員は入力画面80を表示させて、「ポイントカードの所有:有り」を示す入力を行う。この入力に応じ、第2生成部2100は、「ポイントカードの所有:有り」という属性情報を生成し、上記顧客の特徴量に対応づけられている既存の属性情報に代わって、生成した属性情報を記憶装置10に記憶させる。つまり第2生成部2100は、入力受付部2080が受け付けた入力を用いて属性情報の更新を行う。An input triggered by an operation by a store clerk is made, for example, to update attribute information. For example, when serving a certain customer, the output information output by theoutput control unit 2040 indicates "point card owned: no", but the customer presents a point card. In this case, the store clerk displays theinput screen 80 and inputs "point card owned: yes". In response to this input, thesecond generation unit 2100 generates attribute information "point card owned: yes" and stores the generated attribute information in thestorage device 10 in place of the existing attribute information associated with the features of the customer. In other words, thesecond generation unit 2100 updates the attribute information using the input accepted by theinput acceptance unit 2080.

<ハードウエア構成>
実施形態3の情報処理装置2000を実現する計算機のハードウエア構成は、実施形態1と同様に、例えば図3によって表される。ただし、本実施形態の情報処理装置2000を実現する計算機1000のストレージデバイス1080には、本実施形態の情報処理装置2000の機能を実現するプログラムモジュールがさらに記憶される。
<Hardware configuration>
The hardware configuration of the computer that realizes theinformation processing device 2000 of the third embodiment is shown in Fig. 3, for example, as in the first embodiment. However, thestorage device 1080 of thecomputer 1000 that realizes theinformation processing device 2000 of this embodiment further stores a program module that realizes the functions of theinformation processing device 2000 of this embodiment.

<作用・効果>
本実施形態の情報処理装置2000によれば、顧客の属性に関する入力が受け付けられ、その入力を用いて属性情報が生成される。こうすることで、顧客が実際の行動や状態に基づいて、その顧客の未来の行動や状態を予測する属性情報を生成することができる。よって、顧客の属性情報を高い精度で生成することができる。
<変形例>
第2生成部2100は、顧客の携帯端末を用いて入力された情報を用いて属性情報を生成することもできる。顧客は、携帯端末を用いて、顧客の属性に関する情報を入力する。入力受付部2080は、顧客の携帯端末を用いて入力された情報を受け付ける。第2生成部2100は、入力受付部2080が受け付けた入力を用いて属性情報を生成する。これにより、来店しなくても属性情報を生成することができる。
<Action and Effects>
According to theinformation processing device 2000 of this embodiment, input regarding customer attributes is accepted, and attribute information is generated using the input. In this way, attribute information that predicts the future behavior and state of a customer can be generated based on the actual behavior and state of the customer. Therefore, customer attribute information can be generated with high accuracy.
<Modification>
Thesecond generating unit 2100 can also generate attribute information using information input using a customer's mobile terminal. The customer inputs information related to the customer's attributes using the mobile terminal. Theinput receiving unit 2080 receives the information input using the customer's mobile terminal. Thesecond generating unit 2100 generates attribute information using the input received by theinput receiving unit 2080. This allows attribute information to be generated without the customer visiting the store.

以上、図面を参照して本発明の実施形態について述べたが、これらは本発明の例示であり、上記各実施形態の組み合わせ、又は上記以外の様々な構成を採用することもできる。The above describes the embodiments of the present invention with reference to the drawings, but these are merely examples of the present invention, and combinations of the above embodiments or various other configurations can also be adopted.

上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
1. 顧客が撮像された撮像画像を用いて、前記顧客の特徴量を算出する算出手段と、
店舗において前記顧客が利用しうるサービスの前記顧客の利用有無又は前記利用に係る物の前記顧客の所有有無を示す属性情報をその顧客の特徴量と対応づけて記憶している記憶装置から、前記顧客の特徴量と対応づけられている前記属性情報を取得し、前記取得した属性情報に基づく情報を出力する出力制御手段と、
を有する情報処理装置。
2. サービスの利用に関する顧客の行動又は状態の履歴を示す履歴情報を用いて前記属性情報を生成し、前記取得した撮像画像に含まれる顧客の特徴量と対応づけて前記生成した属性情報を前記記憶装置に記憶させる生成手段を有する1.に記載の情報処理装置。
3. 前記生成手段は、複数の顧客それぞれの履歴情報を用いて前記属性情報を生成する、2.に記載の情報処理装置。
4. 前記取得した撮像画像に含まれる顧客について、サービスの利用に関する入力を受け付ける入力受付手段と、
前記入力受付手段が受け付けた入力に基づいて前記属性情報を生成し、前記生成した属性情報を、前記取得した撮像画像に含まれる顧客の特徴量と対応づけて前記記憶装置に記憶させる生成手段と、
を有する1.に記載の情報処理装置。
5. 前記記憶装置は、前記属性情報を、その属性情報が適用される条件とさらに対応づけて記憶する、1.乃至4.いずれか一つに記載の情報処理装置。
6. 前記属性情報は、買い物袋の利用の有無を示し、
前記属性情報が適用される条件は、購入する商品の量に関する条件である、5.に記載の情報処理装置。
7. 前記出力制御手段は、顧客に対してサービスの利用の有無を尋ねるメッセージをさらに出力し、
前記取得した属性情報がサービスを利用することを示す場合に出力されるメッセージと、前記取得した属性情報がサービスを利用しないことを示す場合に出力されるメッセージは互いに異なる、1.乃至6.いずれか一つに記載の情報処理装置。
8. 前記顧客に向けて前記属性情報を表示する表示部及び店員に向けて前記属性情報を表示する表示部の少なくとも一方と接続されている、1.乃至7.のいずれか一つに記載の情報処理装置。
A part or all of the above-described embodiments can be described as, but is not limited to, the following supplementary notes.
1. A calculation means for calculating a feature amount of a customer by using a captured image of the customer;
an output control means for acquiring attribute information associated with a characteristic amount of a customer from a storage device that stores attribute information indicating whether the customer uses a service available to the customer in a store or whether the customer owns an item related to the service in association with the characteristic amount of the customer, and for outputting information based on the acquired attribute information;
An information processing device having the above configuration.
2. The information processing device according to 1., further comprising a generating unit that generates the attribute information using history information indicating a history of a customer's behavior or state regarding the use of a service, and stores the generated attribute information in the storage device in association with a feature amount of the customer included in the acquired captured image.
3. The information processing device according to 2., wherein the generating means generates the attribute information by using history information of each of a plurality of customers.
4. An input receiving means for receiving an input regarding the use of a service for a customer included in the captured image;
a generating means for generating the attribute information based on the input received by the input receiving means, and storing the generated attribute information in the storage device in association with a feature amount of the customer included in the captured image;
1. The information processing device according to 1.
5. The information processing device according to any one of 1. to 4., wherein the storage device stores the attribute information in further association with a condition to which the attribute information is applied.
6. The attribute information indicates whether or not a shopping bag is used,
6. The information processing device according to 5., wherein the condition to which the attribute information is applied is a condition related to an amount of a product to be purchased.
7. The output control means further outputs a message to the customer asking whether or not the customer is using the service;
7. The information processing device according to any one of 1 to 6, wherein a message output when the acquired attribute information indicates that a service is to be used and a message output when the acquired attribute information indicates that a service is not to be used are different from each other.
8. The information processing device described in any one of 1. to 7., which is connected to at least one of a display unit that displays the attribute information toward the customer and a display unit that displays the attribute information toward a store clerk.

9. コンピュータによって実行される制御方法であって、
顧客が撮像された撮像画像を用いて、前記顧客の特徴量を算出する算出ステップと、
店舗において前記顧客が利用しうるサービスの前記顧客の利用有無又は前記利用に係る物の前記顧客の所有有無を示す属性情報をその顧客の特徴量と対応づけて記憶している記憶装置から、前記顧客の特徴量と対応づけられている前記属性情報を取得し、前記取得した属性情報に基づく情報を出力する出力制御ステップと、を有する制御方法。
10. サービスの利用に関する顧客の行動又は状態の履歴を示す履歴情報を用いて前記属性情報を生成し、前記取得した撮像画像に含まれる顧客の特徴量と対応づけて前記生成した属性情報を前記記憶装置に記憶させる生成ステップを有する9.に記載の制御方法。
11. 前記生成ステップにおいて、複数の顧客それぞれの履歴情報を用いて前記属性情報を生成する、10.に記載の制御方法。
12. 前記取得した撮像画像に含まれる顧客について、サービスの利用に関する入力を受け付ける入力受付ステップと、
前記入力受付ステップにおいて受け付けた入力に基づいて前記属性情報を生成し、前記生成した属性情報を、前記取得した撮像画像に含まれる顧客の特徴量と対応づけて前記記憶装置に記憶させる生成ステップと、
を有する9.に記載の制御方法。
13. 前記記憶装置は、前記属性情報を、その属性情報が適用される条件とさらに対応づけて記憶する、9.乃至12.いずれか一つに記載の制御方法。
14. 前記属性情報は、買い物袋の利用の有無を示し、
前記属性情報が適用される条件は、購入する商品の量に関する条件である、13.に記載の制御方法。
15. 前記出力制御ステップにおいて、顧客に対してサービスの利用の有無を尋ねるメッセージをさらに出力し、
前記取得した属性情報がサービスを利用することを示す場合に出力されるメッセージと、前記取得した属性情報がサービスを利用しないことを示す場合に出力されるメッセージは互いに異なる、9.乃至14.いずれか一つに記載の制御方法。
16. 前記コンピュータは、前記顧客に向けて前記属性情報を表示する表示部及び店員に向けて前記属性情報を表示する表示部の少なくとも一方と接続されている、9.乃至15.のいずれか一つに記載の制御方法。
9. A computer-implemented control method comprising:
a calculation step of calculating a feature amount of the customer using a captured image of the customer;
and an output control step of acquiring attribute information associated with the customer's characteristics from a storage device that stores attribute information indicating whether the customer uses a service available to the customer at a store or whether the customer owns an item related to the use, in association with the customer's characteristics, and outputting information based on the acquired attribute information.
10. The control method according to 9., further comprising a generating step of generating the attribute information by using history information indicating a history of a customer's behavior or state regarding the use of a service, and storing the generated attribute information in the storage device in association with a feature amount of the customer included in the acquired captured image.
11. The control method according to 10., wherein in the generating step, the attribute information is generated using history information of each of a plurality of customers.
12. An input receiving step of receiving an input regarding the use of a service for a customer included in the acquired captured image;
a generating step of generating the attribute information based on the input received in the input receiving step, and storing the generated attribute information in the storage device in association with a feature amount of the customer included in the captured image;
9. The control method according to claim 9,
13. The control method according to any one of 9. to 12., wherein the storage device stores the attribute information in further association with a condition to which the attribute information is applied.
14. The attribute information indicates whether or not a shopping bag is used,
14. The control method according to 13., wherein the condition to which the attribute information is applied is a condition related to the amount of the product to be purchased.
15. In the output control step, a message is further output to ask the customer whether or not he/she uses the service;
15. The control method according to any one of 9. to 14., wherein a message output when the acquired attribute information indicates that a service is to be used and a message output when the acquired attribute information indicates that a service is not to be used are different from each other.
16. The control method according to any one of 9. to 15., wherein the computer is connected to at least one of a display unit that displays the attribute information to the customer and a display unit that displays the attribute information to a store clerk.

17. 9.乃至16.いずれか一つに記載の制御方法の各ステップをコンピュータに実行させるプログラム。17. A program for causing a computer to execute each step of the control method described in any one of 9. to 16.

10 記憶装置
20 カメラ
30 店員
40 顧客
50 レジ端末
60 表示画面
62 ウインドウ
64 ボタン
66 ボタン
68 ウインドウ
80 入力画面
82 入力エリア
84 入力エリア
500 テーブル
502 特徴量
504 属性情報
506 適用条件
600 テーブル
602 特徴量
604 履歴情報
606 日時
1000 計算機
1020 バス
1040 プロセッサ
1060 メモリ
1080 ストレージデバイス
1100 入出力インタフェース
1120 ネットワークインタフェース
2000 情報処理装置
2020 算出部
2040 出力制御部
2060 第1生成部
2080 入力受付部
2100 第2生成部
10 Storage device 20Camera 30Store clerk 40Customer 50Cashier terminal 60Display screen 62Window 64 Button 66Button 68Window 80Input screen 82Input area 84Input area 500 Table 502Feature amount 504Attribute information 506Application condition 600 Table 602Feature amount 604History information 606 Date andtime 1000Computer 1020Bus 1040Processor 1060Memory 1080Storage device 1100 Input/output interface 1120Network interface 2000Information processing device 2020Calculation unit 2040Output control unit 2060First generation unit 2080Input reception unit 2100 Second generation unit

Claims (17)

Translated fromJapanese
顧客を含む画像を取得する取得手段と、
前記顧客の履歴情報に基づいて、前記顧客の属性情報を生成する生成手段と、
前記画像によって特定される顧客に対応する属性情報を出力する出力手段と、
を備え、
前記属性情報は、前記顧客が注文を行って提供を受ける飲食物の注文に関する情報を含む、
情報処理装置。
An acquisition means for acquiring an image including a customer;
A generating means for generating attribute information of the customer based on historical information of the customer;
an output means for outputting attribute information corresponding to the customer identified by the image;
Equipped with
The attribute information includes information regarding the foodand drink order that the customerplaces and receives .
Information processing device.
前記属性情報は、前記顧客の飲食物の注文における味付けまたはトッピングに関する情報を含む、
請求項1に記載の情報処理装置。
The attribute information includes information regarding seasonings or toppings in the customer's food and beverage order.
The information processing device according to claim 1 .
前記出力手段は、前記顧客の飲食物の注文を受け付けるタイミングで前記属性情報を出力する、
請求項1または2に記載の情報処理装置。
the output means outputs the attribute information at a timing when an order for food and drink from the customer is received.
3. The information processing device according to claim 1 or 2.
前記属性情報は、前記顧客が買い物袋の利用に関する情報を含む、
請求項1ないし3のいずれか一項に記載の情報処理装置。
The attribute information includes information regarding the customer's use of shopping bags.
4. The information processing device according to claim 1.
前記出力手段は、前記顧客の前記属性情報ごとに適用される前記顧客が購入する商品の量に関する条件に従い、前記顧客の当該属性情報を出力する、請求項4に記載の情報処理装置。The information processing device according to claim 4, wherein the output means outputs the attribute information of the customer according to conditions related to the quantity of products purchased by the customer that are applied to each of the attribute information of the customer. 前記画像は、商品登録装置に備え付けられたカメラによって撮像された画像である、
請求項1ないし5のいずれか一項に記載の情報処理装置。
The image is an image captured by a camera attached to the product registration device.
6. The information processing device according to claim 1.
前記出力手段は、商品登録装置に接続された表示装置に前記属性情報を出力する、
請求項1ないし6のいずれか一項に記載の情報処理装置。
The output means outputs the attribute information to a display device connected to the product registration device.
7. The information processing apparatus according to claim 1.
前記商品登録装置は、前記顧客が操作可能な装置である、
請求項6または7に記載の情報処理装置。
The product registration device is a device that can be operated by the customer.
8. The information processing device according to claim 6 or 7.
前記属性情報は、カトラリーの利用に関する情報を含む、
請求項1ないし8のいずれか一項に記載の情報処理装置。
The attribute information includes information regarding the use of cutlery.
9. The information processing device according to claim 1.
前記属性情報は、飲食店の利用に関する情報を含む、
請求項1ないし9のいずれか一項に記載の情報処理装置。
The attribute information includes information regarding use of restaurants,
10. The information processing device according to claim 1.
前記属性情報は、喫煙席と禁煙席のどちらを利用するかを示す情報を含む、
請求項10に記載の情報処理装置。
The attribute information includes information indicating whether a smoking seat or a non-smoking seat is to be used.
The information processing device according to claim 10.
前記属性情報は、カウンター席とテーブル席のどちらを利用するか、および窓際の席を希望するかどうかの少なくともいずれかを示す情報を含む、
請求項10または11に記載の情報処理装置。
The attribute information includes information indicating at least one of whether the customer desires a counter seat or a table seat and whether the customer desires a window seat.
12. The information processing device according to claim 10 or 11.
前記属性情報は、ポイントカードの所有の有無を示す情報を含む、
請求項1ないし12のいずれか一項に記載の情報処理装置。
The attribute information includes information indicating whether or not the user owns a point card.
The information processing device according to claim 1 .
前記属性情報は、前記顧客の決済の方法を示す情報を含む、
請求項1ないし13のいずれか一項に記載の情報処理装置。
The attribute information includes information indicating a payment method of the customer.
14. The information processing device according to claim 1.
前記生成手段は、精算処理を行うタイミングで、前記属性情報を生成する、
請求項14に記載の情報処理装置。
The generating means generates the attribute information at the timing of performing a settlement process.
The information processing device according to claim 14.
1以上のコンピュータが、
顧客を含む画像を取得し、
前記顧客の履歴情報に基づいて、前記顧客の属性情報を生成し、
前記画像によって特定される顧客に対応する属性情報を出力し、
前記属性情報は、前記顧客が注文を行って提供を受ける飲食物の注文に関する情報を含む、
制御方法。
One or more computers
Get an image containing the customer,
generating attribute information of the customer based on historical information of the customer;
outputting attribute information corresponding to the customer identified by the image;
The attribute information includes information regarding the foodand drink order that the customerplaces and receives .
Control methods.
コンピュータに、
顧客を含む画像を取得する取得ステップ、
前記顧客の履歴情報に基づいて、前記顧客の属性情報を生成する生成ステップ、
前記画像によって特定される顧客に対応する属性情報を出力する出力ステップ、を実行させ、
前記属性情報は、前記顧客が注文を行って提供を受ける飲食物の注文に関する情報を含む、
プログラム。
On the computer,
an acquisition step of acquiring an image including the customer;
A generation step of generating attribute information of the customer based on history information of the customer;
an output step of outputting attribute information corresponding to the customer identified by the image;
The attribute information includes information regarding the foodand drink order that the customerplaces and receives .
program.
JP2024034589A2016-10-072024-03-07 Information processing device, control method, and programActiveJP7597259B2 (en)

Priority Applications (2)

Application NumberPriority DateFiling DateTitle
JP2024034589AJP7597259B2 (en)2016-10-072024-03-07 Information processing device, control method, and program
JP2024205281AJP2025019246A (en)2016-10-072024-11-26 Information processing device, control method, and program

Applications Claiming Priority (4)

Application NumberPriority DateFiling DateTitle
JP2016198953AJP6980994B2 (en)2016-10-072016-10-07 Information processing equipment, control methods, and programs
JP2021154150AJP7192942B2 (en)2016-10-072021-09-22 Information processing device and control method
JP2022195550AJP7452610B2 (en)2016-10-072022-12-07 Information processing device and control method
JP2024034589AJP7597259B2 (en)2016-10-072024-03-07 Information processing device, control method, and program

Related Parent Applications (1)

Application NumberTitlePriority DateFiling Date
JP2022195550ADivisionJP7452610B2 (en)2016-10-072022-12-07 Information processing device and control method

Related Child Applications (1)

Application NumberTitlePriority DateFiling Date
JP2024205281ADivisionJP2025019246A (en)2016-10-072024-11-26 Information processing device, control method, and program

Publications (2)

Publication NumberPublication Date
JP2024074810A JP2024074810A (en)2024-05-31
JP7597259B2true JP7597259B2 (en)2024-12-10

Family

ID=61909983

Family Applications (5)

Application NumberTitlePriority DateFiling Date
JP2016198953AActiveJP6980994B2 (en)2016-10-072016-10-07 Information processing equipment, control methods, and programs
JP2021154150AActiveJP7192942B2 (en)2016-10-072021-09-22 Information processing device and control method
JP2022195550AActiveJP7452610B2 (en)2016-10-072022-12-07 Information processing device and control method
JP2024034589AActiveJP7597259B2 (en)2016-10-072024-03-07 Information processing device, control method, and program
JP2024205281APendingJP2025019246A (en)2016-10-072024-11-26 Information processing device, control method, and program

Family Applications Before (3)

Application NumberTitlePriority DateFiling Date
JP2016198953AActiveJP6980994B2 (en)2016-10-072016-10-07 Information processing equipment, control methods, and programs
JP2021154150AActiveJP7192942B2 (en)2016-10-072021-09-22 Information processing device and control method
JP2022195550AActiveJP7452610B2 (en)2016-10-072022-12-07 Information processing device and control method

Family Applications After (1)

Application NumberTitlePriority DateFiling Date
JP2024205281APendingJP2025019246A (en)2016-10-072024-11-26 Information processing device, control method, and program

Country Status (1)

CountryLink
JP (5)JP6980994B2 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication numberPriority datePublication dateAssigneeTitle
JP6980994B2 (en)*2016-10-072021-12-15日本電気株式会社 Information processing equipment, control methods, and programs
US20210264939A1 (en)*2018-06-212021-08-26Nec CorporationAttribute identifying device, attribute identifying method, and program storage medium
JP7399658B2 (en)*2019-09-202023-12-18東芝テック株式会社 Notification system and device
CN113119133B (en)*2019-12-312023-01-31上海依图信息技术有限公司Bag carrying method of shopping robot and shopping robot
CN118396636A (en)*2024-06-262024-07-26杭州萤石软件有限公司Shopping guide method, device and system for unattended store and cloud platform

Citations (2)

* Cited by examiner, † Cited by third party
Publication numberPriority datePublication dateAssigneeTitle
JP2014052840A (en)2012-09-072014-03-20Hitachi LtdService support method and system using the same
WO2016136078A1 (en)2015-02-272016-09-01日本電気株式会社Product registration device and settlement assistance method

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication numberPriority datePublication dateAssigneeTitle
JP4904763B2 (en)*2005-10-052012-03-28株式会社寺岡精工 POS register
JP2008262362A (en)*2007-04-112008-10-30Denso CorpInformation communication system, facility side device, user side device, program for facility side device, and program for user side device
JP2011221891A (en)*2010-04-132011-11-04Seiko Epson CorpKeyword recording device, customer service support device, keyword recording method and program
JP5879744B2 (en)*2011-05-192016-03-08カシオ計算機株式会社 Data processing apparatus and program
JP5768010B2 (en)*2012-06-122015-08-26東芝テック株式会社 Signage system and program
JP5728653B2 (en)*2013-11-072015-06-03パナソニックIpマネジメント株式会社 Customer management apparatus, customer management system, and customer management method
WO2015072191A1 (en)*2013-11-142015-05-21日本電気株式会社Customer information management device, storefront terminal, customer information management method, and program
JP6336359B2 (en)*2014-09-032018-06-06東芝テック株式会社 Self-checkout device and program
US20160189162A1 (en)*2014-12-292016-06-30Toshiba Tec Kabushiki KaishaInformation processing system, and storage medium which stores information processing program
JP6980994B2 (en)*2016-10-072021-12-15日本電気株式会社 Information processing equipment, control methods, and programs

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication numberPriority datePublication dateAssigneeTitle
JP2014052840A (en)2012-09-072014-03-20Hitachi LtdService support method and system using the same
WO2016136078A1 (en)2015-02-272016-09-01日本電気株式会社Product registration device and settlement assistance method

Also Published As

Publication numberPublication date
JP2023051924A (en)2023-04-11
JP2022000794A (en)2022-01-04
JP2024074810A (en)2024-05-31
JP2018060445A (en)2018-04-12
JP7192942B2 (en)2022-12-20
JP7452610B2 (en)2024-03-19
JP2025019246A (en)2025-02-06
JP6980994B2 (en)2021-12-15

Similar Documents

PublicationPublication DateTitle
JP7597259B2 (en) Information processing device, control method, and program
CA2784321C (en)Systems and methods for purchasing products from a retail establishment using a mobile device
US20130211967A1 (en)Ordering and Payment Systems
JP2023159448A (en) Information processing method, program, and information processing device
US20130282437A1 (en)System and method for providing consumer preference and intention data to merchants
KR20140118655A (en)System and method for electronic-ordering service using electronic menu
US11205161B2 (en)System and method for electronic receipt services
JP2018013822A (en)Settlement device, settlement method and program
US10552893B2 (en)Electronic transaction terminal, electronic transaction method, recording medium and program
US10909603B2 (en)Computer implemented item recommendation
JP7204968B1 (en) Information processing device, information processing method and program
JP2004509410A (en) Method and system for selling accessories for goods
JP6888243B2 (en) Information processing equipment, information processing methods, and programs
JP7363026B2 (en) Electronic receipt generation system, electronic receipt generation method, and program
US12417483B2 (en)Portable terminal, system, processing method, and non-transitory storage medium
JP7355458B2 (en) Information processing device, information processing method, and program
US12307455B2 (en)Evaluation system, evaluation method, program, server device, and terminal device
CN111966891B (en)Information processing method and device and electronic equipment
JP7293812B2 (en) Electronic receipt providing system, electronic receipt providing method, and program
JP2017037571A (en)Information processing system, information processing device, information processing method, and program
WO2025164112A1 (en)Information analysis system, information analysis method, and information analysis program
WO2025074600A1 (en)Display control device, display control method, and recording medium
JP2021099568A (en)Information processing system, electronic shelf label, and information processing method
WO2021065291A1 (en)Product recommendation system, product recommendation method, and program
KR20210094447A (en)The content provision system provided through the display device that controls the accommodation

Legal Events

DateCodeTitleDescription
A621Written request for application examination

Free format text:JAPANESE INTERMEDIATE CODE: A621

Effective date:20240307

A521Request for written amendment filed

Free format text:JAPANESE INTERMEDIATE CODE: A523

Effective date:20240410

A131Notification of reasons for refusal

Free format text:JAPANESE INTERMEDIATE CODE: A131

Effective date:20240827

A521Request for written amendment filed

Free format text:JAPANESE INTERMEDIATE CODE: A523

Effective date:20240926

TRDDDecision of grant or rejection written
A01Written decision to grant a patent or to grant a registration (utility model)

Free format text:JAPANESE INTERMEDIATE CODE: A01

Effective date:20241029

A61First payment of annual fees (during grant procedure)

Free format text:JAPANESE INTERMEDIATE CODE: A61

Effective date:20241111

R150Certificate of patent or registration of utility model

Ref document number:7597259

Country of ref document:JP

Free format text:JAPANESE INTERMEDIATE CODE: R150


[8]ページ先頭

©2009-2025 Movatter.jp