













本発明は、情報処理装置、及び制御方法に関する。The present invention relates to an information processing device and a control method.
  POS(Point of Sales)システムなどにおいて顧客の情報を管理する技術が開発されている。例えば特許文献1は、会員カードから読み取ることができる顧客の識別番号に対応づけて、顧客の名前、住所、及び顧客がレジ袋を利用するかどうかなどを管理する技術を開示している。Technology for managing customer information in POS (Point of Sales) systems and the like has been developed. For example,
  特許文献1のシステムは、顧客の会員カードから読み取られる顧客の識別子を利用する。そのため、顧客が会員登録をしていなければ、顧客の情報を把握することできない。The system in
本発明は、上記の課題に鑑みてなされたものである。本発明の目的の一つは、会員登録の有無にかかわらず、顧客が利用しうるサービスに関する顧客の情報を取得することのできる技術を提供することである。The present invention has been made in consideration of the above problems. One of the objectives of the present invention is to provide a technology that can obtain customer information related to services that can be used by the customer, regardless of whether the customer is a registered member or not.
  本発明の情報処理装置は、
  顧客を含む画像を取得する取得手段と、
  前記顧客の履歴情報に基づいて、前記顧客の属性情報を生成する生成手段と、
  前記画像によって特定される顧客に対応する属性情報を出力する出力手段と、
を有し、
前記属性情報は、前記顧客が飲食物に求める条件に関する情報を含む。  The information processing device of the present invention comprises:
 An acquisition means for acquiring an image including a customer;
 A generating means for generating attribute information of the customer based on historical information of the customer;
 an output means for outputting attribute information corresponding to the customer identified by the image;
having
The attribute information includes information regarding the conditions that the customer desires for food and drink .
  本発明の制御方法は、情報処理装置を実現するコンピュータによって実行される。
  当該制御方法は、1以上のコンピュータが、
  顧客を含む画像を取得し、
  前記顧客の履歴情報に基づいて、前記顧客の属性情報を生成し、
  前記画像によって特定される顧客に対応する属性情報を出力する、
ことを含み、
  前記属性情報は、前記顧客が飲食物に求める条件に関する情報を含む。  The control method of the present invention is executed by a computer that realizes an information processing device.
 The control method includes:
 Get an image containing the customer,
 generating attribute information of the customer based on historical information of the customer;
 outputting attribute information corresponding to the customer identified by the image;
Including,
The attribute information includes information regarding the conditions that the customer desires for food and drink .
本発明のプログラムは、本発明の制御方法が有する各ステップをコンピュータに実行させる。The program of the present invention causes a computer to execute each step of the control method of the present invention.
本発明によれば、会員登録の有無にかかわらず、顧客が利用しうるサービスに関する顧客の情報を取得することのできる技術が提供される。The present invention provides a technology that can obtain customer information regarding services that can be used by a customer, regardless of whether the customer is a registered member or not.
以下、本発明の実施の形態について、図面を用いて説明する。尚、すべての図面において、同様な構成要素には同様の符号を付し、適宜説明を省略する。また各ブロック図において、特に説明がない限り、各ブロックは、ハードウエア単位の構成ではなく機能単位の構成を表している。The following describes an embodiment of the present invention with reference to the drawings. In all drawings, similar components are given similar reference numerals and descriptions are omitted where appropriate. In addition, in each block diagram, unless otherwise specified, each block represents a functional configuration rather than a hardware configuration.
[実施形態1]
  図1は、実施形態1の情報処理装置2000をその利用環境と共に例示するブロック図である。情報処理装置2000は算出部2020及び出力制御部2040を有する。記憶装置10は、顧客の特徴量と、その顧客の属性情報とを対応づけて記憶する。或る顧客の属性情報は、店舗においてその顧客が利用するサービスに関する顧客の属性を示す。より具体的には、サービスに関する顧客の属性は、顧客がそのサービスを利用するか否か(サービスの利用有無)、又はそのサービスを利用する際に使う物を顧客が所有しているか否か(サービスの利用に係る物の所有有無)を示す。サービスを利用する際に使う物とは、例えばポイントサービスを利用する際に使うポイントカードなどである。[Embodiment 1]
 FIG. 1 is a block diagram illustrating an
  算出部2020は、顧客が撮像された撮像画像を取得する。さらに算出部2020は、取得した撮像画像に含まれる顧客の特徴量を算出する。顧客の特徴量は、顧客の外見の特徴(例えば顔の特徴)を表す任意の値である。出力制御部2040は、算出された特徴量を用いて、取得された撮像画像に含まれる顧客の特徴量に対応づけられている属性情報を、記憶装置10から取得する。そして出力制御部2040は、取得した属性情報に示される顧客の属性に基づく情報を出力する。属性情報に示される顧客の属性に基づく情報とは、属性情報に示される情報そのもの、又は属性情報に示される情報を所定の方法で加工したものである。The
  図2は、実施形態1の情報処理装置2000の動作を概念的に例示する図である。顧客40は、レジ端末50で商品の精算をすることで、商品を購入する。レジ端末50は、店員30によって操作される。カメラ20は、レジ端末50の付近に設置されており、顧客40を撮像する。記憶装置10は、顧客の特徴量に対応づけて、ポイントサービスに関する顧客の属性を示す属性情報を記憶している。より具体的には、属性情報は、顧客がポイントカードを所有しているか否かを示している。FIG. 2 is a diagram conceptually illustrating the operation of the
  情報処理装置2000は、カメラ20によって撮像された顧客40の特徴量を取得する。ここで、顧客40の特徴量が v1 であったとする。情報処理装置2000は、記憶装置10の中から、特徴量 v1 に対応づけられている属性情報を取得する。この属性情報には、「ポイントカードの所有:有り」が示されている。そこで情報処理装置2000は、「顧客40はポイントカードを所有している」という旨を示す情報を出力する。The
  これにより、店員30は、顧客40がポイントカードを利用することを把握する。そこで店員30は、例えば顧客に対して「ポイントカードをお持ちですか」と話しかけ、ポイントカードの提示を促す。This allows the
  なお、v2 に対応付けられている属性情報は、「ポイントカードの所有:無し」を示している。そのため顧客40の顔の特徴量が v2 であった場合、情報処理装置2000は、「顧客40はポイントカードを所有していない」という旨を示す情報を出力する。この場合、例えば店員30は、顧客40に対してポイントカードの提示を求めない。その他にも例えば、店員30は、「ポイントカードをお持ちではないですよね」などのように、顧客40がポイントカードを持っていないことを前提とする確認のための発言を行う。The attribute information associated with v2 indicates "point card ownership: none". Therefore, when the facial feature amount of
<作用・効果>
  本実施形態では、顧客が含まれる撮像画像から算出できる顧客の特徴量に対応づけて、顧客の属性情報が記憶されている。このように顧客の特徴量を用いて顧客を特定する方法を用いれば、属性情報を取得するための顧客の特定に、顧客に付与される識別子(例えば会員ID(Identifier))を利用する必要がない。そのため、顧客の会員登録の有無にかかわらずその顧客が店舗において利用しうるサービスのその顧客の利用有無又はサービスに係る物のその顧客の所有有無を示す属性情報を取得することができる。<Action and Effects>
 In this embodiment, the attribute information of a customer is stored in association with the characteristic amount of the customer that can be calculated from a captured image in which the customer is included. By using the method of identifying a customer using the characteristic amount of the customer in this manner, it is not necessary to use an identifier (e.g., a member ID (identifier)) assigned to the customer to identify the customer in order to obtain the attribute information. Therefore, regardless of whether the customer is a registered member or not, attribute information indicating whether the customer uses a service that the customer can use in a store or whether the customer owns an item related to the service can be obtained.
例えば属性情報が、「会員カードを持っているか否か」を示す情報であるとする。この場合に、顧客の会員IDに対応づけて属性情報を記憶させておくとする。この方法では、顧客が会員カードを持っているか否かを示す属性情報を得るために、顧客に対して会員カードの提示を求めなければならない。すなわち、顧客が会員登録をしていなければ、顧客に対して会員カードの提示を求めるか否かを判断することができない。For example, suppose the attribute information is information indicating "whether or not the customer has a membership card." In this case, the attribute information is stored in association with the customer's membership ID. With this method, in order to obtain the attribute information indicating whether or not the customer has a membership card, the customer must be asked to present the membership card. In other words, if the customer has not registered as a member, it is not possible to determine whether or not to request the customer to present their membership card.
  一方このケースにおいて、本実施形態の情報処理装置2000は、顧客が含まれる撮像画像から顧客の特徴量を算出し、その特徴量を用いて顧客の属性情報を取得できる。よって、顧客の属性情報が、顧客に対して会員カードの提示を求めるか否かの判断に利用できる。On the other hand, in this case, the
以下、本実施形態についてさらに詳細を述べる。The following provides further details about this embodiment.
<情報処理装置2000のハードウエア構成の例>
  情報処理装置2000の各機能構成部は、各機能構成部を実現するハードウエア(例:ハードワイヤードされた電子回路など)で実現されてもよいし、ハードウエアとソフトウエアとの組み合わせ(例:電子回路とそれを制御するプログラムの組み合わせなど)で実現されてもよい。以下、情報処理装置2000の各機能構成部がハードウエアとソフトウエアとの組み合わせで実現される場合について、さらに説明する。<Example of Hardware Configuration of
 Each functional component of the
  図3は、情報処理装置2000を実現するための計算機1000を例示する図である。計算機1000は種々の計算機である。例えば計算機1000は、Personal Computer(PC)、サーバマシン、タブレット端末、又はスマートフォンなどである。計算機1000は、情報処理装置2000を実現するために設計された専用の計算機であってもよいし、汎用の計算機であってもよい。Figure 3 is a diagram illustrating a
  計算機1000は、バス1020、プロセッサ1040、メモリ1060、ストレージデバイス1080、入出力インタフェース1100、及びネットワークインタフェース1120を有する。バス1020は、プロセッサ1040、メモリ1060、ストレージデバイス1080、入出力インタフェース1100、及びネットワークインタフェース1120が、相互にデータを送受信するためのデータ伝送路である。プロセッサ1040は、CPU(Central Processing Unit)や GPU(Graphics Processing Unit)などの演算処理装置である。メモリ1060は、RAM(Random Access Memory)などで実現される主記憶装置である。ストレージデバイス1080は、ハードディスク、SSD(Solid State Drive)、ROM、又はメモリカードなどで実現される補助記憶装置である。ただしストレージデバイス1080は、RAM など、主記憶装置の実現に用いられるハードウエアと同様のハードウエアで実現されてもよい。The
  入出力インタフェース1100は、計算機1000と入出力デバイスとを接続するためのインタフェースである。例えば入出力インタフェース1100には、キーボードやマウスなどの入力デバイスや、ディスプレイ装置などの出力デバイスが接続される。The input/
  ネットワークインタフェース1120は、WAN(Wide Area Network)や LAN(Local Area Network)などの通信網に接続するためのインタフェースである。The
  ストレージデバイス1080は情報処理装置2000の各機能を実現するプログラムモジュールを記憶している。プロセッサ1040は、これら各プログラムモジュールをメモリ1060に読み出して実行することで、そのプログラムモジュールに対応する各機能を実現する。The
<処理の流れ>
  図4は、実施形態1の情報処理装置2000によって実行される処理の流れを例示するフローチャートである。算出部2020は、顧客が撮像された撮像画像を取得する(S102)。算出部2020は、撮像画像に含まれる顧客の特徴量を算出する(S104)。出力制御部2040は、算出された特徴量を用いて、撮像画像に含まれる顧客の特徴量に対応づけられている属性情報を記憶装置10から取得する(S106)。出力制御部2040は、取得した属性情報に基づく情報を出力する(S108)。<Processing flow>
 4 is a flowchart illustrating the flow of processing executed by the
<情報処理装置2000の利用シーン>
  情報処理装置2000は、顧客の応対を行う様々なシーンで利用することができる。例えば情報処理装置2000は、商品登録装置を操作する店員が顧客の応対を行うシーン(商品を精算対象として登録するシーン)で利用できる。商品登録装置は、商品を精算対象として登録するために用いられるレジ端末である。<Scenes in which the
 The
このシーンで利用される属性情報は、例えば、買い物袋を利用するか否か、ポイントカードを所有しているか否か、割り箸の要否、冷たい商品と暖かい商品を分けて袋にいれるか否か、購入品を宅配するか否か、レシートの要否、決済の方法(現金、電子マネー、又はクレジットカード)、電子マネーで決済する際のカードの種類、又は未成年であるか否かなどを示す。店員は、これらの属性情報に基づく出力情報を、顧客にポイントカードの提示を求めるか否かの決定などに利用することができる。The attribute information used in this scene indicates, for example, whether or not a shopping bag is used, whether or not the customer has a point card, whether or not disposable chopsticks are needed, whether or not hot and cold items are to be separated into bags, whether or not the purchased items are to be delivered to the customer's home, whether or not a receipt is needed, the payment method (cash, electronic money, or credit card), the type of card used when paying with electronic money, and whether or not the customer is a minor. The store clerk can use the output information based on this attribute information to decide whether or not to ask the customer to present a point card.
  その他にも例えば、情報処理装置2000は、飲食店に来店した顧客の応対を行うシーンで利用することができる。このシーンで利用される属性情報は、例えば、喫煙席と禁煙席のどちらを利用するか、カウンター席とテーブル席のどちらを利用するか、又は窓際の席を希望するかどうかなどを示す。店員は、これらの属性情報に基づく出力情報を、顧客に提供する席の決定などに利用することができる。For example, the
  その他にも例えば、情報処理装置2000は、顧客から注文を受けるシーンで利用することができる。このシーンで利用される属性情報は、例えば、飲食物の注文における味付けやトッピングに関する条件(味の濃さ、トッピングの量、又はトッピングの種類など)、箸とフォークのどちらを利用するか、又はナプキンを使うかどうかなどを示す。店員は、これらの属性情報に基づく出力情報を、顧客が飲食物に求める条件の把握などに利用することができる。For example, the
<情報処理装置2000を実現する計算機1000の例>
  情報処理装置2000を実現するための具体的な計算機1000としては、様々なものを採用しうる。例えば計算機1000は、情報処理装置2000が利用される店舗に設置されているサーバ(以下、店舗サーバ)である。その他にも例えば、計算機1000は、情報処理装置2000が利用される店舗の外部に設置されているサーバ(以下、外部サーバ)であってもよい<Example of
 Various types of computers can be used as the
  また例えば、計算機1000は商品登録装置であってもよい。この場合、情報処理装置2000は、例えば商品登録装置を用いて顧客の応対を行う店員によって操作される。なお商品登録装置は、精算装置と一体として設けられているものでもよいし、精算装置とは別体として設けられているものでもよい。精算装置とは、精算対象として登録された商品の精算処理(代金支払いなど)に用いられるレジ端末である。For example, the
商品登録装置と精算装置とが一体となっている場合、商品を精算対象として登録する登録処理と、精算対象として登録された商品の精算処理(代金の支払いなど)が、同じレジ端末を用いて行われる。登録処理及び精算処理を顧客が行う形式をセルフ形式などと呼ぶ。一方、商品登録装置と精算装置とが別体となっている場合、商品を精算対象として登録する処理と、精算対象として登録された商品の精算処理とが、異なるレジ端末で行われる。この形式はセミセルフ形式などと呼ばれ、例えば商品登録装置の操作は店員によって行われ、精算装置の操作は顧客によって行われる。When the product registration device and the settlement device are integrated, the registration process to register products as items to be settled and the settlement process (such as paying the price) for the products registered as items to be settled are carried out using the same cash register terminal. A format in which the registration process and the settlement process are carried out by the customer is called a self-service format. On the other hand, when the product registration device and the settlement device are separate, the process to register products as items to be settled and the settlement process for the products registered as items to be settled are carried out at different cash register terminals. This format is called a semi-self-service format, and for example, the product registration device is operated by a store clerk and the settlement device is operated by the customer.
  その他にも例えば、計算機1000は、店員が利用する携帯端末であってもよい。店員が利用する携帯端末は、例えば、顧客をどの席に案内したかを記録するために店員が操作する携帯端末や、顧客から受けた注文を記録するために店員が操作する携帯端末である。For example, the
<撮像画像の取得:S102>
  算出部2020は、顧客が撮像された撮像画像を取得する。そのために、店舗には顧客を撮像して撮像画像を生成するカメラ20が設置される。カメラ20は、動画を生成するカメラであってもよいし、静止画を撮像するカメラであってもよい。前者の場合、撮像画像は、動画を構成する画像フレームである。<Acquisition of captured image: S102>
 The
カメラ20は、顧客を撮像することができる位置に設けられる。商品の精算を行う顧客を撮像する場合、カメラ20は、例えば商品登録装置又はその付近に設置される。来店した顧客を撮像する場合、カメラ20は、例えば店舗の入り口又はその付近に設置される。注文を行う顧客を撮像する場合、カメラ20は、例えば顧客の席又はその付近に設置される。The camera 20 is installed in a position where it can capture an image of a customer. When capturing an image of a customer paying for an item, the camera 20 is installed, for example, at or near a product registration device. When capturing an image of a customer who has just arrived at the store, the camera 20 is installed, for example, at or near the store entrance. When capturing an image of a customer placing an order, the camera 20 is installed, for example, at or near the customer's seat.
  算出部2020が撮像画像を取得する方法は任意である。例えば算出部2020は、撮像画像が記憶されている記憶装置にアクセスすることで、撮像画像を取得する。撮像画像が記憶されている記憶装置は、撮像画像を生成したカメラ20の内部に設けられていてもよいし、カメラ20の外部に設けられていてもよい。また例えば、算出部2020は、カメラ20などから送信される撮像画像を受信することで、撮像画像を取得してもよい。The
<顧客の特徴量の算出:S104>
  算出部2020は、取得した撮像画像に含まれる顧客の特徴量を算出する(S104)。ここで、画像に含まれる人物の特徴量を算出する技術には、既存の技術を利用することができる。<Calculation of Customer Features: S104>
 The
<属性情報について>
  属性情報は、顧客が利用するサービスに関する顧客の属性を示す。属性情報の例は、前述した通りである。<About attribute information>
 The attribute information indicates the attributes of the customer related to the service that the customer uses. Examples of the attribute information are as described above.
  図5は、顧客の特徴量と属性情報との対応付けをテーブル形式で例示する図である。図5のテーブルをテーブル500と呼ぶ。テーブル500は、特徴量502及び属性情報504という2つの列を有する。特徴量502は、顧客の特徴量を示す。属性情報504は、前述した属性情報を示す。Figure 5 is a diagram illustrating an example of the correspondence between customer features and attribute information in table format. The table in Figure 5 is called table 500. Table 500 has two columns: feature 502 and attribute
ここでテーブル500は、属性情報が適用される条件をさらに示してもよい。例えば属性情報が、買い物袋の利用に関する属性(買い物袋を利用するか否かなど)を示しているとする。この場合、属性情報が適用される条件は、例えば顧客が購入する商品の量(数、重さ、又は容積など)である。属性情報は、顧客が購入する商品の数などの範囲に対応づけて、買い物袋の利用の有無や、利用する買い物袋の枚数などを示す。Here, table 500 may further indicate the conditions to which the attribute information applies. For example, the attribute information indicates attributes related to the use of shopping bags (such as whether or not shopping bags are used). In this case, the condition to which the attribute information applies is, for example, the amount of products purchased by the customer (number, weight, volume, etc.). The attribute information indicates whether or not shopping bags are used, the number of shopping bags to be used, etc., in association with a range such as the number of products purchased by the customer.
  図6は、属性情報の別の例を例示する図である。図6において、テーブル500は適用条件506を有する。適用条件506は、属性情報が適用される条件を示している。例えば図6のテーブル500の2行目のレコードは、「顔の特徴量が v1 である顧客が3個未満の商品を購入する場合、この顧客は買い物袋を利用しない」ということを表している。一方、図6のテーブル500の3行目のレコードは、「顔の特徴量が v1 である顧客が3個以上の商品を購入する場合、この顧客は買い物袋を利用する」ということを示している。また、図6のテーブル500の5行目のレコードは、「顔の特徴量が v2 である顧客が、無条件で買い袋を利用しない」ということを表している。Figure 6 is a diagram illustrating another example of attribute information. In Figure 6, table 500 has
<属性情報の取得:S104>
  出力制御部2040は、算出部2020によって算出された顧客の特徴量を用いて、撮像画像に含まれる顧客の特徴量に対応づけられている属性情報を取得する。具体的には、出力制御部2040は、記憶装置10に記憶されている属性情報のうち、算出部2020によって算出された顧客の特徴量との類似度が高い顧客の特徴量と対応づけられている属性情報を取得する。例えば出力制御部2040は、算出部2020によって算出された特徴量と同一の特徴量と対応づけて記憶装置10に記憶されている属性情報を取得する。その他にも例えば、出力制御部2040は、記憶装置10に記憶されている特徴量のうち、算出部2020によって算出された特徴量との類似度合いが所定値以上である特徴量と対応づけて記憶装置10に記憶されている属性情報を取得する。その他にも例えば、出力制御部2040は、記憶装置10に記憶されている特徴量のうち、算出部2020によって算出された特徴量との類似度合いが最も高い特徴量と対応づけて記憶装置10に記憶されている属性情報を取得する。なお、上記所定値は、出力制御部2040に予め設定されていてもよいし、出力制御部2040からアクセス可能な記憶装置に記憶されていてもよい。<Acquisition of attribute information: S104>
 The
  記憶装置10には、出力制御部2040からアクセス可能な任意の記憶装置を採用することができる。記憶装置10は、情報処理装置2000の内部に設けられてもよいし、情報処理装置2000の外部に設けられてもよい。前者の場合、例えば記憶装置10は、図4のストレージデバイス1080として実現される。後者の場合、例えば記憶装置10は、情報処理装置2000の外部に設けられる NAS(Network Attached Storage)として実現される。The
<出力制御部2040による出力:S106>
  出力制御部2040は、取得した属性情報に示される顧客の属性に基づく情報(以下、出力情報)を出力する。図7は出力情報を例示する図である。図7の例において、情報処理装置2000は、店員によって操作される商品登録装置である。表示画面60は、商品登録装置に接続されているディスプレイ装置に表示される画面である。表示画面60には、店員がバーコードリーダなどで読み取った商品の情報や商品の合計金額などが表示される。<Output by output control unit 2040: S106>
 The
  さらに表示画面60には、ウインドウ62が含まれている。ウインドウ62は出力情報が含まれるウインドウである。出力制御部2040は、ディスプレイ装置を制御することで、ディスプレイ装置にウインドウ62を表示させる。The
図7の例では、2種類の属性情報が存在する。第1の種類の属性情報は、顧客が買い物袋を利用するか否かを示す。第2の種類の属性情報は、顧客がポイントカードを所有しているか否かを示す。In the example of FIG. 7, there are two types of attribute information. The first type of attribute information indicates whether or not the customer uses a shopping bag. The second type of attribute information indicates whether or not the customer has a point card.
  この例において、顧客Aの特徴量には、「買い物袋の利用:無し」という第1の種類の属性情報、及び「ポイントカードの所有:有り」という第2の種類の属性情報が対応づけられている。そのため、出力制御部2040によって出力されるウインドウ62には、「買い物袋の利用:無し」及び「ポイントカードの所有:有り」という情報が示されている。In this example, the feature of customer A is associated with a first type of attribute information, "Use of shopping bag: No," and a second type of attribute information, "Owns point card: Yes." Therefore, the
  例えば図7の例において、店員が商品登録装置を操作するとする。この場合、ウインドウ62を見た店員は、顧客Aが買い物袋を利用しないこと、及び顧客Aがポイントカードを所有していることを把握する。そこで、店員は、顧客Aに対し、「ポイントカードはお持ちですか」と話しかけることで、ポイントカードの提示を求める。一方、顧客Aは買い物袋を利用しないため、例えば店員は、顧客Aに対して買い物袋についての質問をしない。その他にも例えば、店員は、「買い物袋は不要ですよね」のように、買い物袋が不要であることを確認する質問をしてもよい。For example, in the example of FIG. 7, let us say that a store clerk operates the product registration device. In this case, the store clerk sees
  その他にも例えば、図7の例において、顧客Aが商品登録装置を操作するとする。この場合、情報処理装置2000は、セルフ形式の装置である。ウインドウ62を見た顧客Aは、自身が買い物袋を利用しないこと、及び自身がポイントカードを所有していることを確認して、ボタン64を押す。その結果、商品登録装置における商品登録処理が次の段階へ進む。As another example, in the example of FIG. 7, customer A operates the product registration device. In this case, the
  ここで、情報処理装置2000は、出力情報の内容の変更を要求する入力を受け付けてもよい。図8は、出力情報の内容を変更するためのウインドウを例示する図である。なお、図8において表示画面60は省略されている。Here, the
  図8のウインドウ62は、出力情報の内容の変更を要求するためのボタンであるボタン66を有する。ここで、ウインドウ62には「買い物袋の利用:無し」と表示されているものの、顧客が「今回は買い物袋を利用したい」と考えたとする。例えば、普段はマイバッグを利用している顧客であっても、マイバッグを忘れた等の理由により、買い物袋を利用したい場合がある。
  このような場合、顧客は、ボタン66を押下する。出力制御部2040は、ボタン66が押下されたことに応じて、例えば図8(b)に示すウインドウ68を表示する。In such a case, the customer presses button 66. In response to the button 66 being pressed, the
  ウインドウ68は、買い物袋の利用の有無、及びポイントカードの所有の有無をそれぞれ選択するためのラジオボタンを有する。ラジオボタンのデフォルト値は、出力情報の内容に合わせて設定される。顧客は、買い物袋の利用を「有り」から「無し」に変更した後、OKボタンを押下する。こうすることで、顧客は、「買い物袋を利用したい」という意志を店員に伝えることができる。
  なお、店員が商品登録装置を操作する場合、ウインドウ68は、店員によって操作されてもよい。この場合、例えば店員は、出力情報に加えたい変更の内容を顧客に尋ね、顧客から聞いた内容に従ってウインドウ68を操作する。When a store clerk operates the product registration device,
  ここで、情報処理装置2000は、ウインドウ68を用いて変更された出力情報の内容に基づいて属性情報を更新してもよいし、更新しなくてもよい。属性情報の更新を行うか否かは、予め定められていてもよいし、顧客によって選択されてもよい。Here, the
  後者の場合、例えば出力制御部2040は、図8(b)のウインドウ68の代わりに、図8(c)のウインドウ68を表示する。図8(c)のウインドウ68は、「今回だけ」と「今後も」のいずれかを選択させるラジオボタンを有している。前者が選択された場合、情報処理装置2000は、顧客によって行われた変更に基づく属性情報の更新を行わない。一方、後者が選択された場合、情報処理装置2000は、顧客によって行われた変更に基づいて属性情報を更新する。In the latter case, for example, the
なお、出力情報の出力方法は、ディスプレイ装置に表示する方法に限定されない。例えば出力情報は音声で出力されてもよい。この場合、例えば店員が予めイヤフォンを装着しておき、そのイヤフォンに出力情報が出力されるようにする。The method of outputting the output information is not limited to displaying it on a display device. For example, the output information may be output as audio. In this case, for example, the store clerk may wear earphones in advance, and the output information may be output to the earphones.
  ディスプレイ装置やイヤフォンなどの出力装置が情報処理装置2000に接続されている場合、出力制御部2040は、これらの出力装置に対して出力情報を出力する。一方、出力装置が情報処理装置2000に接続されていない場合、情報処理装置2000は、出力装置が接続されている他の装置に対して出力情報を送信する。出力情報を受信した装置は、出力装置を制御して出力情報を出力させる。例えば情報処理装置2000が店舗サーバとして実現されている場合、出力制御部2040は、店員が操作している商品登録装置へ出力情報を送信する。出力情報を受信した商品登録装置は、商品登録装置に接続されているディスプレイ装置やイヤフォンを制御して、出力情報を出力させる。When output devices such as a display device or earphones are connected to the
  なお情報処理装置2000は、属性情報を利用して顧客に対するメッセージを生成し、そのメッセージを出力するようにしてもよい。例えば属性情報がサービスの利用の有無に関する情報であるとする。この場合、属性情報が「サービスAを利用する」ということを示している場合には「サービスAは必要ですね」というメッセージを出力し、属性情報が「サービスAを利用しない」ということを示している場合には「サービスAは不要ですね」というメッセージを出力する。The
サービスの利用に使う物(例えばポイントカード)を所有しているか否かを属性情報が示すケースのメッセージも、同様に生成することができる。例えば属性情報が「ポイントカードを所有している」ということを示している場合には「ポイントカードをお持ちですね」というメッセージを表示し、属性情報が「ポイントカードを所有していない」ということを示している場合には「ポイントカードをお持ちではありませんね」というメッセージを表示する。Messages can also be generated in a similar manner when the attribute information indicates whether or not the user owns an item used to use a service (such as a point card). For example, if the attribute information indicates that the user "owns a point card," the message "You have a point card, don't you?" is displayed, and if the attribute information indicates that the user "does not own a point card," the message "You do not have a point card, do you?" is displayed.
このように顧客の属性に合わせたメッセージを出力することで、店員から質問を受ける顧客のストレスや不快感を和らげることができる。例えばいつもサービスAを利用しないにもかかわらず毎回店員から「サービスAをご利用しますか」と尋ねられると、不快に思う顧客もいる。一方で、「サービスAはご利用しませんよね」と尋ねられれば、「店員は自分のことを分かってくれている」と顧客が感じるため、顧客は不快に思わないか、又は顧客が感じる不快の度合いが小さくなる。In this way, by outputting messages tailored to the attributes of each customer, it is possible to reduce the stress and discomfort felt by customers who are asked questions by store clerks. For example, some customers may feel uncomfortable if a store clerk always asks "Would you like to use Service A?" even though they do not normally use Service A. On the other hand, if the clerk asks "You will not use Service A, will you?", the customer will feel that "the store clerk understands me," and so the customer will not feel uncomfortable, or the degree of discomfort felt by the customer will be reduced.
[実施形態2]
  図9は、実施形態2の情報処理装置2000を例示するブロック図である。以下で説明する事項を除き、実施形態2の情報処理装置2000は、実施形態1の情報処理装置2000と同様である。[Embodiment 2]
 9 is a block diagram illustrating an
  実施形態2の情報処理装置2000は第1生成部2060を有する。第1生成部2060は、履歴情報を用いて属性情報を生成する。履歴情報は、サービスの利用に関する顧客の行動や状態の履歴を示す情報である。例えば履歴情報は、顧客が買い物袋を利用したかどうかや、顧客がポイントカードを提示したかどうかなどを示す。さらに第1生成部2060は、生成した属性情報を、算出部2020によって算出された顧客の特徴量と対応づけて、記憶装置10に記憶させる。The
<処理の流れ>
  図10は、実施形態2の情報処理装置2000によって実行される処理の流れを例示するフローチャートである。算出部2020は、撮像画像を取得して顧客の特徴量を算出する(S202、S204)。以下、この顧客を、「属性情報の生成対象である顧客」とも表記する。第1生成部2060は、履歴情報を取得する(S206)。第1生成部2060は、取得した履歴情報を用いて属性情報を生成する(S208)。第1生成部2060は、S204で算出された特徴量とS208で生成された属性情報とを対応付けて、記憶装置10に記憶させる(S210)。<Processing flow>
 10 is a flowchart illustrating the flow of processing executed by the
<履歴情報について:S206>
  前述したように、履歴情報は、サービスの利用に関する顧客の行動や状態の履歴を示す情報である。図11は、履歴情報をテーブル形式で例示する図である。図11のテーブルをテーブル600と表記する。テーブル600は、特徴量602、履歴情報604、及び日時606という列を有する。特徴量602は、顧客の特徴量を示す。履歴情報604は、顧客の過去の行動や状態を示す。日時606は、履歴情報604に示される行動や状態に対応する日時を示す。<Regarding History Information: S206>
 As described above, history information is information that indicates the history of a customer's actions and status regarding the use of a service. Fig. 11 is a diagram illustrating an example of history information in a table format. The table in Fig. 11 is denoted as table 600. Table 600 has columns of
  履歴情報は、第1生成部2060からアクセス可能な記憶装置に予め記憶されているものとする。第1生成部2060は、この記憶装置から履歴情報を取得する。The history information is assumed to be stored in advance in a storage device accessible by the
  属性情報の生成には、取得された撮像画像に含まれる顧客の特徴量に対応する履歴情報(属性情報の生成対象である顧客の行動履歴)のみが利用されてもよいし、この履歴情報に加えて他の履歴情報が利用されてもよい。前者の場合、第1生成部2060は、算出部2020によって算出された特徴量との類似度合いが高い特徴量(例えば算出された特徴量と一致する特徴量)と対応づけられている履歴情報を取得する。To generate the attribute information, only history information corresponding to the features of the customer included in the captured image (the behavioral history of the customer for whom the attribute information is generated) may be used, or other history information may be used in addition to this history information. In the former case, the
  一方後者の場合、第1生成部2060は、例えば全ての履歴情報を取得する。その他にも例えば、第1生成部2060は、属性情報の生成対象である顧客と共通点を持つ他の顧客の履歴情報を取得する。共通点は、例えば年齢、性別、又は性格などである。On the other hand, in the latter case, the
  例えば共通点として顧客の年齢を利用する場合、第1生成部2060は、算出部2020によって算出された顧客の特徴量から推定される年齢に近い年齢の顧客の履歴情報を取得する。同様に、共通点として顧客の性別を利用する場合、第1生成部2060は、算出部2020によって推定される顧客の性別と同じ性別の顧客の履歴情報を取得する。同様に、共通点として顧客の性格を利用する場合、第1生成部2060は、算出部2020によって推定される顧客の性格と同じ性格に分類される顧客の履歴情報を取得する。ここで、例えば顧客の性格は、温和な性格、神経質な性格、又は大ざっぱな性格などの種類に分類される。なお、人の顔の特徴量を用いてその人の年齢、性別、又は性格を推定する技術には,既知の技術を利用できる。For example, when the age of the customer is used as the common point, the
このような顧客の共通点を利用する場合、各顧客の履歴情報は、顧客の共通点を特定するための情報(顧客の年齢など)と対応づけて記憶しておくことが好適である。顧客の共通点を特定するための情報は、顧客の特徴量から推定された年齢などであってもよいし、顧客の実際の年齢などであってもよい。後者の場合、顧客の共通点を特定するための情報は、何らかの方法(例えば会員情報やアンケート)によって予め把握されているものとする。When using such commonalities among customers, it is preferable to store the history information of each customer in association with information for identifying the commonalities among customers (such as the customer's age). The information for identifying the commonalities among customers may be an age estimated from the customer's features, or the customer's actual age. In the latter case, the information for identifying the commonalities among customers is assumed to be known in advance by some method (for example, membership information or a questionnaire).
<属性情報の生成:S208>
  第1生成部2060は、取得した履歴情報を用いて属性情報を生成する(S208)。取得した履歴情報が1つである場合、第1生成部2060は、その履歴情報から属性情報を生成する。例えば、履歴情報において「ポイントカードの所有:無し」が示されている場合、第1生成部2060は、「ポイントカードの所有:無し」という属性情報を生成する。<Generation of attribute information: S208>
 The
  取得した履歴情報が複数ある場合、第1生成部2060は、取得した履歴情報を統計処理することで属性情報を生成する。例えばポイントカードの所有の有無に関する属性情報を生成する場合、第1生成部2060は、「ポイントカードの所有:有り」を示す履歴情報の数と、「ポイントカードの所有:無し」を示す履歴情報の数を比較し、数が多い履歴情報の内容で属性情報を生成する。例えば「ポイントカードの所有:有り」を示す履歴情報の数の方が多い場合、第1生成部2060は、「ポイントカードの所有:有り」を示す属性情報を生成する。When multiple pieces of history information have been acquired, the
  ここで、第1生成部2060は、履歴情報に重みを付けた統計処理を行って属性情報を生成してもよい。例えば第1生成部2060は、全ての顧客の履歴情報を取得し、算出部2020が取得した撮像画像に含まれる顧客と共通点を持つ顧客の履歴情報に大きな重みを与え、それ以外の履歴情報に小さな重みを与えた上で、これらの履歴情報から属性情報を生成する。Here, the
例えばポイントカードの所有の有無に関する属性情報を生成するとする。また履歴情報が、10歳単位で区切った顧客の年齢(10代、20代、又は30代など)に対応づけられているとする。For example, suppose attribute information is generated regarding whether or not a customer has a point card. Also, suppose history information is associated with the customer's age in 10-year increments (teens, twenties, thirties, etc.).
  この条件下において、属性情報の生成対象である顧客の年齢が「20代」であったとする。この場合、第1生成部2060は、20代という年齢の各顧客の履歴情報には大きな重みを与え、それ以外の年齢の顧客の履歴情報には小さな重みを与える。Under these conditions, assume that the age of the customer for whom attribute information is to be generated is "in their 20s." In this case, the
このように、属性情報の生成対象である顧客との共通点に応じた重みを履歴情報に付与することで、生成される属性情報に、属性情報の生成対象である顧客と共通点を持つ顧客の行動が反映されやすくなる。よって、属性情報の生成対象である顧客の属性を高い精度で予測することができる。In this way, by assigning weights to history information according to the commonalities with the customer for whom attribute information is being generated, the generated attribute information is more likely to reflect the behavior of customers who have commonalities with the customer for whom attribute information is being generated. This makes it possible to predict with high accuracy the attributes of the customer for whom attribute information is being generated.
<実施形態2の情報処理装置2000が処理を行う契機>
  属性情報の生成に係る一連の処理(図10の処理)は、例えば対応する属性情報が存在しない顧客の応対が行われるタイミングで実行される。情報処理装置2000は、実施形態1で説明した機能に基づき、応対する顧客について出力情報の出力を試みる。そして、取得した撮像画像に含まれる顧客の特徴量との類似度が高い特徴量が記憶装置10に記憶されていない場合に、第1生成部2060は、前述した方法で属性情報を生成する。この方法によれば、新規の顧客の応対を行うタイミングで、その顧客に関する属性情報が生成されるようになる。そのため、新たな顧客の属性情報が自動的に生成されるようになる。ただし、第1生成部2060が属性情報を生成するタイミングは任意のタイミングでよく、顧客の応対を行うタイミングに限定されない。<Occasion for performing processing by the
 A series of processes (processing of FIG. 10) related to the generation of attribute information is executed, for example, when a customer for whom there is no corresponding attribute information is served is served. The
<ハードウエア構成>
  実施形態2の情報処理装置2000を実現する計算機のハードウエア構成は、実施形態1と同様に、例えば図3によって表される。ただし、本実施形態の情報処理装置2000を実現する計算機1000のストレージデバイス1080には、本実施形態の情報処理装置2000の機能を実現するプログラムモジュールがさらに記憶される。<Hardware configuration>
 The hardware configuration of the computer that realizes the
<作用・効果>
  本実施形態の情報処理装置2000によれば、履歴情報を用いて顧客の属性情報が生成される。よって、顧客の属性情報が、その顧客や他の顧客の過去の行動や状態に基づいて生成される。こうすることで、顧客の属性を高い精度で推測できるようになる。<Action and Effects>
 According to the
なお、属性情報の生成対象である顧客の履歴情報のみを用いて属性情報を生成すると、その顧客の過去の行動や状態の傾向に基づいて、その顧客の未来の行動や状態を予測することができる。In addition, if attribute information is generated using only the historical information of the customer for whom the attribute information is being generated, it is possible to predict the customer's future behavior and state based on the trends in that customer's past behavior and state.
また、属性情報の生成対象である顧客以外の顧客の履歴情報を用いると、様々な顧客の過去の行動や状態の傾向に基づいて、属性情報の生成対象である顧客の未来の行動や状態を予測することができる。この方法は、例えば属性情報の生成対象の顧客が新規の顧客であるために、その顧客の履歴情報が存在しないケースなどで特に好適である。In addition, by using historical information of customers other than the customer for whom the attribute information is being generated, it is possible to predict the future behavior and state of the customer for whom the attribute information is being generated, based on trends in the past behavior and state of various customers. This method is particularly suitable in cases where the customer for whom the attribute information is being generated is a new customer and therefore no historical information exists.
さらに、属性情報の生成対象である顧客と共通点を持つ顧客の履歴情報を用いると、属性情報の生成対象である顧客と共通点を持つ顧客の過去の行動や状態の傾向に基づいて、属性情報の生成対象である顧客の未来の行動や状態を予測することができる。Furthermore, by using historical information of customers who have something in common with the customer for whom the attribute information is being generated, it is possible to predict the future behavior and state of the customer for whom the attribute information is being generated, based on the tendencies in the past behavior and state of the customers who have something in common with the customer for whom the attribute information is being generated.
[実施形態3]
  図12は、実施形態3の情報処理装置2000を例示するブロック図である。以下で説明する事項を除き、実施形態3の情報処理装置2000は、実施形態1の情報処理装置2000又は実施形態2の情報処理装置2000と同様である。[Embodiment 3]
 12 is a block diagram illustrating an
  実施形態3の情報処理装置2000は、入力受付部2080及び第2生成部2100を有する。入力受付部2080は、算出部2020によって取得された撮像画像に含まれる顧客について、サービスに関する顧客の属性を表す入力を受け付ける。第2生成部2100は、入力受付部2080が受け付けた入力に基づいて属性情報を生成する。さらに第2生成部2100は、生成した属性情報を、算出部2020によって取得された撮像画像に含まれる顧客の特徴量と対応づけて、記憶装置10に記憶させる。The
<処理の流れ>
  図13は、実施形態3の情報処理装置2000によって実行される処理の流れを例示するフローチャートである。算出部2020は、撮像画像を用いて顧客の特徴量を算出する(S302、S304)。入力受付部2080は、サービスに関する顧客の属性を表す入力を受け付ける(S306)。第2生成部2100は、受け付けた入力に基づいて属性情報を生成する(S308)。第2生成部2100は、算出された特報量と生成された属性情報とを対応づけて記憶装置10に記憶させる(S310)。<Processing flow>
 13 is a flowchart illustrating a process executed by the
<入力の受け付け:S306>
  入力受付部2080が入力を受け付ける方法には、様々な方法を採用できる。例えば入力受付部2080に対する入力は、ディスプレイ装置に表示される入力画面を用いて行われる。例えばこのディスプレイ装置は、入力操作を受け付けるタッチパネルを用いて構成される。<Accepting input: S306>
 Various methods can be adopted as a method for the
  図14は入力画面を例示する図である。入力画面80は、ディスプレイ装置に表示される入力画面である。入力画面80は、入力エリア82及び入力エリア84を有している。入力エリア82は、買い物袋の利用の有無に関する入力を受け付ける入力エリアである。入力エリア84は、ポイントカードの所有の有無に関する入力を受け付ける入力エリアである。Figure 14 is a diagram illustrating an example of an input screen.
  例えば入力画面80が商品登録装置のディスプレイ装置に表示されるとする。このディスプレイ装置は、店員によって閲覧及び操作が可能である。店員は、買い物袋が必要かどうかを顧客に尋ね、その結果を入力エリア82に入力する。同様に店員は、ポイントカードを持っているかどうかを顧客に尋ね、その結果を入力エリア84に入力する。これらの結果を用いて生成される属性情報を記憶装置10に記憶させておくことで、同じ顧客が再度来店した際、店員は、この顧客が買い物袋を利用するかどうかや、この顧客がポイントカードを持っているかどうかを、顧客に尋ねる前に把握することができるようになる。For example,
  なお、入力画面80に対する入力は、顧客によって行われてもよい。この場合、入力画面80は、顧客による閲覧及び操作が可能なディスプレイ装置に表示される。例えば商品登録装置に、店員が閲覧するディスプレイ装置に加え、顧客が閲覧するディスプレイ装置を別途設けておく。In addition, input to the
  ここで、入力画面80にはデフォルト値が設定されるようにしてもよい。デフォルト値は、例えば予め設定されている固定値である。例えばポイントカードを持っているかどうかについてのデフォルト値を「有り」に設定しておく。この場合、入力エリア84にはデフォルト値として「有り」が表示される。Here, a default value may be set on the
  また例えば、デフォルト値は、前述した履歴情報を用いて算出されてもよい。具体的には、実施形態2の第1生成部2060によって生成される属性情報をデフォルト値として用いる。例えば実施形態2の第1生成部2060によって「ポイントカードの所有:有り」という属性情報が生成される場合、入力エリア84のデフォルト値を「有り」に設定する。For example, the default value may be calculated using the history information described above. Specifically, the attribute information generated by the
  このように顧客の行動や状態の履歴を用いてデフォルト値を算出することで、固定値をデフォルト値として用いる場合と比較し、顧客の実際の行動や状態がデフォルト値と一致する確率が高くなる。顧客の実際の行動や状態がデフォルト値と一致すれば、店員や顧客は入力エリア82や入力エリア84に対して入力を行う必要がない。そのため、店員の労力が削減される。Calculating default values using the customer's behavior and state history in this way increases the probability that the customer's actual behavior and state will match the default value, compared to when a fixed value is used as the default value. If the customer's actual behavior and state match the default value, the store clerk or customer does not need to make any input in
<属性情報の生成:S308>
  第2生成部2100は、入力受付部2080が受け付けた入力を用いて属性情報を生成する(S308)。例えば「ポイントカードの所有:有り」という入力を受け付けた場合、第2生成部2100は、「ポイントカードの所有:有り」という属性情報を生成する。<Generation of attribute information: S308>
 The
<実施形態3の情報処理装置2000が処理を行う契機>
  属性情報の生成に係る一連の処理(図13の処理)は、例えば対応する属性情報が存在しない顧客の応対が行われるタイミングで行われる。情報処理装置2000は、実施形態1で説明した機能に基づき、応対する顧客について出力情報の出力を試みる。取得した撮像画像に含まれる顧客の特徴量との類似度が高い特徴量と対応づけられている属性情報が記憶装置10に記憶されていない場合、情報処理装置2000は、前述した入力画面80などの出力を行う。そして情報処理装置2000は、受け付けた入力を用いて属性情報を生成する。この方法によれば、新規の顧客の応対を行うタイミングで、その顧客に関する属性情報が生成されるようになる。<Occasion for performing processing by the
 A series of processes (processing in FIG. 13) related to the generation of attribute information is performed, for example, when a customer for whom there is no corresponding attribute information is served is served. The
  その他にも例えば、属性情報の生成に係る一連の処理は、店員の操作に応じて開始されてもよい。例えば店員が操作する端末のディスプレイ装置(例えば商品登録装置のディスプレイ装置)に、前述した入力画面80に遷移するためのボタンを表示させておく。店員は、そのボタンを押下することで入力画面80を表示させ、自分で顧客の属性に関する入力を行ったり、顧客に属性に関する入力を行わせたりする。For example, the series of processes related to generating attribute information may be started in response to an operation by a store clerk. For example, a button for transitioning to the above-mentioned
  店員の操作を契機とする入力は、例えば属性情報を更新するために行われる。例えば或る顧客を応対する際、出力制御部2040によって出力される出力情報には「ポイントカードの所有:無し」が示されているものの、顧客がポイントカードを提示したとする。この場合、店員は入力画面80を表示させて、「ポイントカードの所有:有り」を示す入力を行う。この入力に応じ、第2生成部2100は、「ポイントカードの所有:有り」という属性情報を生成し、上記顧客の特徴量に対応づけられている既存の属性情報に代わって、生成した属性情報を記憶装置10に記憶させる。つまり第2生成部2100は、入力受付部2080が受け付けた入力を用いて属性情報の更新を行う。An input triggered by an operation by a store clerk is made, for example, to update attribute information. For example, when serving a certain customer, the output information output by the
<ハードウエア構成>
  実施形態3の情報処理装置2000を実現する計算機のハードウエア構成は、実施形態1と同様に、例えば図3によって表される。ただし、本実施形態の情報処理装置2000を実現する計算機1000のストレージデバイス1080には、本実施形態の情報処理装置2000の機能を実現するプログラムモジュールがさらに記憶される。<Hardware configuration>
 The hardware configuration of the computer that realizes the
<作用・効果>
  本実施形態の情報処理装置2000によれば、顧客の属性に関する入力が受け付けられ、その入力を用いて属性情報が生成される。こうすることで、顧客が実際の行動や状態に基づいて、その顧客の未来の行動や状態を予測する属性情報を生成することができる。よって、顧客の属性情報を高い精度で生成することができる。
<変形例>
  第2生成部2100は、顧客の携帯端末を用いて入力された情報を用いて属性情報を生成することもできる。顧客は、携帯端末を用いて、顧客の属性に関する情報を入力する。入力受付部2080は、顧客の携帯端末を用いて入力された情報を受け付ける。第2生成部2100は、入力受付部2080が受け付けた入力を用いて属性情報を生成する。これにより、来店しなくても属性情報を生成することができる。<Action and Effects>
 According to the
 <Modification>
 The
以上、図面を参照して本発明の実施形態について述べたが、これらは本発明の例示であり、上記各実施形態の組み合わせ、又は上記以外の様々な構成を採用することもできる。The above describes the embodiments of the present invention with reference to the drawings, but these are merely examples of the present invention, and combinations of the above embodiments or various other configurations can also be adopted.
  上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
1.  顧客が撮像された撮像画像を用いて、前記顧客の特徴量を算出する算出手段と、
  店舗において前記顧客が利用しうるサービスの前記顧客の利用有無又は前記利用に係る物の前記顧客の所有有無を示す属性情報をその顧客の特徴量と対応づけて記憶している記憶装置から、前記顧客の特徴量と対応づけられている前記属性情報を取得し、前記取得した属性情報に基づく情報を出力する出力制御手段と、
  を有する情報処理装置。
2.  サービスの利用に関する顧客の行動又は状態の履歴を示す履歴情報を用いて前記属性情報を生成し、前記取得した撮像画像に含まれる顧客の特徴量と対応づけて前記生成した属性情報を前記記憶装置に記憶させる生成手段を有する1.に記載の情報処理装置。
3.  前記生成手段は、複数の顧客それぞれの履歴情報を用いて前記属性情報を生成する、2.に記載の情報処理装置。
4.  前記取得した撮像画像に含まれる顧客について、サービスの利用に関する入力を受け付ける入力受付手段と、
  前記入力受付手段が受け付けた入力に基づいて前記属性情報を生成し、前記生成した属性情報を、前記取得した撮像画像に含まれる顧客の特徴量と対応づけて前記記憶装置に記憶させる生成手段と、
  を有する1.に記載の情報処理装置。
5.  前記記憶装置は、前記属性情報を、その属性情報が適用される条件とさらに対応づけて記憶する、1.乃至4.いずれか一つに記載の情報処理装置。
6.  前記属性情報は、買い物袋の利用の有無を示し、
  前記属性情報が適用される条件は、購入する商品の量に関する条件である、5.に記載の情報処理装置。
7.  前記出力制御手段は、顧客に対してサービスの利用の有無を尋ねるメッセージをさらに出力し、
  前記取得した属性情報がサービスを利用することを示す場合に出力されるメッセージと、前記取得した属性情報がサービスを利用しないことを示す場合に出力されるメッセージは互いに異なる、1.乃至6.いずれか一つに記載の情報処理装置。
8.  前記顧客に向けて前記属性情報を表示する表示部及び店員に向けて前記属性情報を表示する表示部の少なくとも一方と接続されている、1.乃至7.のいずれか一つに記載の情報処理装置。  A part or all of the above-described embodiments can be described as, but is not limited to, the following supplementary notes.
 1. A calculation means for calculating a feature amount of a customer by using a captured image of the customer;
 an output control means for acquiring attribute information associated with a characteristic amount of a customer from a storage device that stores attribute information indicating whether the customer uses a service available to the customer in a store or whether the customer owns an item related to the service in association with the characteristic amount of the customer, and for outputting information based on the acquired attribute information;
 An information processing device having the above configuration.
 2. The information processing device according to 1., further comprising a generating unit that generates the attribute information using history information indicating a history of a customer's behavior or state regarding the use of a service, and stores the generated attribute information in the storage device in association with a feature amount of the customer included in the acquired captured image.
 3. The information processing device according to 2., wherein the generating means generates the attribute information by using history information of each of a plurality of customers.
 4. An input receiving means for receiving an input regarding the use of a service for a customer included in the captured image;
 a generating means for generating the attribute information based on the input received by the input receiving means, and storing the generated attribute information in the storage device in association with a feature amount of the customer included in the captured image;
 1. The information processing device according to 1.
 5. The information processing device according to any one of 1. to 4., wherein the storage device stores the attribute information in further association with a condition to which the attribute information is applied.
 6. The attribute information indicates whether or not a shopping bag is used,
 6. The information processing device according to 5., wherein the condition to which the attribute information is applied is a condition related to an amount of a product to be purchased.
 7. The output control means further outputs a message to the customer asking whether or not the customer is using the service;
 7. The information processing device according to any one of 1 to 6, wherein a message output when the acquired attribute information indicates that a service is to be used and a message output when the acquired attribute information indicates that a service is not to be used are different from each other.
 8. The information processing device described in any one of 1. to 7., which is connected to at least one of a display unit that displays the attribute information toward the customer and a display unit that displays the attribute information toward a store clerk.
9.  コンピュータによって実行される制御方法であって、
  顧客が撮像された撮像画像を用いて、前記顧客の特徴量を算出する算出ステップと、
  店舗において前記顧客が利用しうるサービスの前記顧客の利用有無又は前記利用に係る物の前記顧客の所有有無を示す属性情報をその顧客の特徴量と対応づけて記憶している記憶装置から、前記顧客の特徴量と対応づけられている前記属性情報を取得し、前記取得した属性情報に基づく情報を出力する出力制御ステップと、を有する制御方法。
10.  サービスの利用に関する顧客の行動又は状態の履歴を示す履歴情報を用いて前記属性情報を生成し、前記取得した撮像画像に含まれる顧客の特徴量と対応づけて前記生成した属性情報を前記記憶装置に記憶させる生成ステップを有する9.に記載の制御方法。
11.  前記生成ステップにおいて、複数の顧客それぞれの履歴情報を用いて前記属性情報を生成する、10.に記載の制御方法。
12.  前記取得した撮像画像に含まれる顧客について、サービスの利用に関する入力を受け付ける入力受付ステップと、
  前記入力受付ステップにおいて受け付けた入力に基づいて前記属性情報を生成し、前記生成した属性情報を、前記取得した撮像画像に含まれる顧客の特徴量と対応づけて前記記憶装置に記憶させる生成ステップと、
  を有する9.に記載の制御方法。
13.  前記記憶装置は、前記属性情報を、その属性情報が適用される条件とさらに対応づけて記憶する、9.乃至12.いずれか一つに記載の制御方法。
14.  前記属性情報は、買い物袋の利用の有無を示し、
  前記属性情報が適用される条件は、購入する商品の量に関する条件である、13.に記載の制御方法。
15.  前記出力制御ステップにおいて、顧客に対してサービスの利用の有無を尋ねるメッセージをさらに出力し、
  前記取得した属性情報がサービスを利用することを示す場合に出力されるメッセージと、前記取得した属性情報がサービスを利用しないことを示す場合に出力されるメッセージは互いに異なる、9.乃至14.いずれか一つに記載の制御方法。
16.  前記コンピュータは、前記顧客に向けて前記属性情報を表示する表示部及び店員に向けて前記属性情報を表示する表示部の少なくとも一方と接続されている、9.乃至15.のいずれか一つに記載の制御方法。9. A computer-implemented control method comprising:
 a calculation step of calculating a feature amount of the customer using a captured image of the customer;
 and an output control step of acquiring attribute information associated with the customer's characteristics from a storage device that stores attribute information indicating whether the customer uses a service available to the customer at a store or whether the customer owns an item related to the use, in association with the customer's characteristics, and outputting information based on the acquired attribute information.
 10. The control method according to 9., further comprising a generating step of generating the attribute information by using history information indicating a history of a customer's behavior or state regarding the use of a service, and storing the generated attribute information in the storage device in association with a feature amount of the customer included in the acquired captured image.
 11. The control method according to 10., wherein in the generating step, the attribute information is generated using history information of each of a plurality of customers.
 12. An input receiving step of receiving an input regarding the use of a service for a customer included in the acquired captured image;
 a generating step of generating the attribute information based on the input received in the input receiving step, and storing the generated attribute information in the storage device in association with a feature amount of the customer included in the captured image;
 9. The control method according to claim 9,
 13. The control method according to any one of 9. to 12., wherein the storage device stores the attribute information in further association with a condition to which the attribute information is applied.
 14. The attribute information indicates whether or not a shopping bag is used,
 14. The control method according to 13., wherein the condition to which the attribute information is applied is a condition related to the amount of the product to be purchased.
 15. In the output control step, a message is further output to ask the customer whether or not he/she uses the service;
 15. The control method according to any one of 9. to 14., wherein a message output when the acquired attribute information indicates that a service is to be used and a message output when the acquired attribute information indicates that a service is not to be used are different from each other.
 16. The control method according to any one of 9. to 15., wherein the computer is connected to at least one of a display unit that displays the attribute information to the customer and a display unit that displays the attribute information to a store clerk.
17. 9.乃至16.いずれか一つに記載の制御方法の各ステップをコンピュータに実行させるプログラム。17. A program for causing a computer to execute each step of the control method described in any one of 9. to 16.
10  記憶装置
20  カメラ
30  店員
40  顧客
50  レジ端末
60  表示画面
62  ウインドウ
64  ボタン
66  ボタン
68  ウインドウ
80  入力画面
82  入力エリア
84  入力エリア
500  テーブル
502  特徴量
504  属性情報
506  適用条件
600  テーブル
602  特徴量
604  履歴情報
606  日時
1000  計算機
1020  バス
1040  プロセッサ
1060  メモリ
1080  ストレージデバイス
1100  入出力インタフェース
1120  ネットワークインタフェース
2000  情報処理装置
2020  算出部
2040  出力制御部
2060  第1生成部
2080  入力受付部
2100  第2生成部10 Storage device 20
| Application Number | Priority Date | Filing Date | Title | 
|---|---|---|---|
| JP2024034589AJP7597259B2 (en) | 2016-10-07 | 2024-03-07 | Information processing device, control method, and program | 
| JP2024205281AJP2025019246A (en) | 2016-10-07 | 2024-11-26 | Information processing device, control method, and program | 
| Application Number | Priority Date | Filing Date | Title | 
|---|---|---|---|
| JP2016198953AJP6980994B2 (en) | 2016-10-07 | 2016-10-07 | Information processing equipment, control methods, and programs | 
| JP2021154150AJP7192942B2 (en) | 2016-10-07 | 2021-09-22 | Information processing device and control method | 
| JP2022195550AJP7452610B2 (en) | 2016-10-07 | 2022-12-07 | Information processing device and control method | 
| JP2024034589AJP7597259B2 (en) | 2016-10-07 | 2024-03-07 | Information processing device, control method, and program | 
| Application Number | Title | Priority Date | Filing Date | 
|---|---|---|---|
| JP2022195550ADivisionJP7452610B2 (en) | 2016-10-07 | 2022-12-07 | Information processing device and control method | 
| Application Number | Title | Priority Date | Filing Date | 
|---|---|---|---|
| JP2024205281ADivisionJP2025019246A (en) | 2016-10-07 | 2024-11-26 | Information processing device, control method, and program | 
| Publication Number | Publication Date | 
|---|---|
| JP2024074810A JP2024074810A (en) | 2024-05-31 | 
| JP7597259B2true JP7597259B2 (en) | 2024-12-10 | 
| Application Number | Title | Priority Date | Filing Date | 
|---|---|---|---|
| JP2016198953AActiveJP6980994B2 (en) | 2016-10-07 | 2016-10-07 | Information processing equipment, control methods, and programs | 
| JP2021154150AActiveJP7192942B2 (en) | 2016-10-07 | 2021-09-22 | Information processing device and control method | 
| JP2022195550AActiveJP7452610B2 (en) | 2016-10-07 | 2022-12-07 | Information processing device and control method | 
| JP2024034589AActiveJP7597259B2 (en) | 2016-10-07 | 2024-03-07 | Information processing device, control method, and program | 
| JP2024205281APendingJP2025019246A (en) | 2016-10-07 | 2024-11-26 | Information processing device, control method, and program | 
| Application Number | Title | Priority Date | Filing Date | 
|---|---|---|---|
| JP2016198953AActiveJP6980994B2 (en) | 2016-10-07 | 2016-10-07 | Information processing equipment, control methods, and programs | 
| JP2021154150AActiveJP7192942B2 (en) | 2016-10-07 | 2021-09-22 | Information processing device and control method | 
| JP2022195550AActiveJP7452610B2 (en) | 2016-10-07 | 2022-12-07 | Information processing device and control method | 
| Application Number | Title | Priority Date | Filing Date | 
|---|---|---|---|
| JP2024205281APendingJP2025019246A (en) | 2016-10-07 | 2024-11-26 | Information processing device, control method, and program | 
| Country | Link | 
|---|---|
| JP (5) | JP6980994B2 (en) | 
| Publication number | Priority date | Publication date | Assignee | Title | 
|---|---|---|---|---|
| JP6980994B2 (en)* | 2016-10-07 | 2021-12-15 | 日本電気株式会社 | Information processing equipment, control methods, and programs | 
| US20210264939A1 (en)* | 2018-06-21 | 2021-08-26 | Nec Corporation | Attribute identifying device, attribute identifying method, and program storage medium | 
| JP7399658B2 (en)* | 2019-09-20 | 2023-12-18 | 東芝テック株式会社 | Notification system and device | 
| CN113119133B (en)* | 2019-12-31 | 2023-01-31 | 上海依图信息技术有限公司 | Bag carrying method of shopping robot and shopping robot | 
| CN118396636A (en)* | 2024-06-26 | 2024-07-26 | 杭州萤石软件有限公司 | Shopping guide method, device and system for unattended store and cloud platform | 
| Publication number | Priority date | Publication date | Assignee | Title | 
|---|---|---|---|---|
| JP2014052840A (en) | 2012-09-07 | 2014-03-20 | Hitachi Ltd | Service support method and system using the same | 
| WO2016136078A1 (en) | 2015-02-27 | 2016-09-01 | 日本電気株式会社 | Product registration device and settlement assistance method | 
| Publication number | Priority date | Publication date | Assignee | Title | 
|---|---|---|---|---|
| JP4904763B2 (en)* | 2005-10-05 | 2012-03-28 | 株式会社寺岡精工 | POS register | 
| JP2008262362A (en)* | 2007-04-11 | 2008-10-30 | Denso Corp | Information communication system, facility side device, user side device, program for facility side device, and program for user side device | 
| JP2011221891A (en)* | 2010-04-13 | 2011-11-04 | Seiko Epson Corp | Keyword recording device, customer service support device, keyword recording method and program | 
| JP5879744B2 (en)* | 2011-05-19 | 2016-03-08 | カシオ計算機株式会社 | Data processing apparatus and program | 
| JP5768010B2 (en)* | 2012-06-12 | 2015-08-26 | 東芝テック株式会社 | Signage system and program | 
| JP5728653B2 (en)* | 2013-11-07 | 2015-06-03 | パナソニックIpマネジメント株式会社 | Customer management apparatus, customer management system, and customer management method | 
| WO2015072191A1 (en)* | 2013-11-14 | 2015-05-21 | 日本電気株式会社 | Customer information management device, storefront terminal, customer information management method, and program | 
| JP6336359B2 (en)* | 2014-09-03 | 2018-06-06 | 東芝テック株式会社 | Self-checkout device and program | 
| US20160189162A1 (en)* | 2014-12-29 | 2016-06-30 | Toshiba Tec Kabushiki Kaisha | Information processing system, and storage medium which stores information processing program | 
| JP6980994B2 (en)* | 2016-10-07 | 2021-12-15 | 日本電気株式会社 | Information processing equipment, control methods, and programs | 
| Publication number | Priority date | Publication date | Assignee | Title | 
|---|---|---|---|---|
| JP2014052840A (en) | 2012-09-07 | 2014-03-20 | Hitachi Ltd | Service support method and system using the same | 
| WO2016136078A1 (en) | 2015-02-27 | 2016-09-01 | 日本電気株式会社 | Product registration device and settlement assistance method | 
| Publication number | Publication date | 
|---|---|
| JP2023051924A (en) | 2023-04-11 | 
| JP2022000794A (en) | 2022-01-04 | 
| JP2024074810A (en) | 2024-05-31 | 
| JP2018060445A (en) | 2018-04-12 | 
| JP7192942B2 (en) | 2022-12-20 | 
| JP7452610B2 (en) | 2024-03-19 | 
| JP2025019246A (en) | 2025-02-06 | 
| JP6980994B2 (en) | 2021-12-15 | 
| Publication | Publication Date | Title | 
|---|---|---|
| JP7597259B2 (en) | Information processing device, control method, and program | |
| CA2784321C (en) | Systems and methods for purchasing products from a retail establishment using a mobile device | |
| US20130211967A1 (en) | Ordering and Payment Systems | |
| JP2023159448A (en) | Information processing method, program, and information processing device | |
| US20130282437A1 (en) | System and method for providing consumer preference and intention data to merchants | |
| KR20140118655A (en) | System and method for electronic-ordering service using electronic menu | |
| US11205161B2 (en) | System and method for electronic receipt services | |
| JP2018013822A (en) | Settlement device, settlement method and program | |
| US10552893B2 (en) | Electronic transaction terminal, electronic transaction method, recording medium and program | |
| US10909603B2 (en) | Computer implemented item recommendation | |
| JP7204968B1 (en) | Information processing device, information processing method and program | |
| JP2004509410A (en) | Method and system for selling accessories for goods | |
| JP6888243B2 (en) | Information processing equipment, information processing methods, and programs | |
| JP7363026B2 (en) | Electronic receipt generation system, electronic receipt generation method, and program | |
| US12417483B2 (en) | Portable terminal, system, processing method, and non-transitory storage medium | |
| JP7355458B2 (en) | Information processing device, information processing method, and program | |
| US12307455B2 (en) | Evaluation system, evaluation method, program, server device, and terminal device | |
| CN111966891B (en) | Information processing method and device and electronic equipment | |
| JP7293812B2 (en) | Electronic receipt providing system, electronic receipt providing method, and program | |
| JP2017037571A (en) | Information processing system, information processing device, information processing method, and program | |
| WO2025164112A1 (en) | Information analysis system, information analysis method, and information analysis program | |
| WO2025074600A1 (en) | Display control device, display control method, and recording medium | |
| JP2021099568A (en) | Information processing system, electronic shelf label, and information processing method | |
| WO2021065291A1 (en) | Product recommendation system, product recommendation method, and program | |
| KR20210094447A (en) | The content provision system provided through the display device that controls the accommodation | 
| Date | Code | Title | Description | 
|---|---|---|---|
| A621 | Written request for application examination | Free format text:JAPANESE INTERMEDIATE CODE: A621 Effective date:20240307 | |
| A521 | Request for written amendment filed | Free format text:JAPANESE INTERMEDIATE CODE: A523 Effective date:20240410 | |
| A131 | Notification of reasons for refusal | Free format text:JAPANESE INTERMEDIATE CODE: A131 Effective date:20240827 | |
| A521 | Request for written amendment filed | Free format text:JAPANESE INTERMEDIATE CODE: A523 Effective date:20240926 | |
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) | Free format text:JAPANESE INTERMEDIATE CODE: A01 Effective date:20241029 | |
| A61 | First payment of annual fees (during grant procedure) | Free format text:JAPANESE INTERMEDIATE CODE: A61 Effective date:20241111 | |
| R150 | Certificate of patent or registration of utility model | Ref document number:7597259 Country of ref document:JP Free format text:JAPANESE INTERMEDIATE CODE: R150 |