日本マイクロソフトとSBクリエイティブは10月21日、SBクリエイティブの「インテリジェント・ラベル」とソフトバンクロボティクスの人型ロボット「Pepper」を連携させた多言語対応サービスの実証実験を開始すると発表した。
インテリジェント・ラベルは、店舗の商品棚にマイクロデジタルパネルを取り付け、インターネット経由でそれぞれの商品情報をタイムリーに発信できるIoTソリューションで、モーションセンサー（Kinect for Windows）と連携させることで、顧客の棚前行動を把握・分析することができる。
インテリジェント・ラベルとPepperの連携イメージ
実験では、Pepperがいる場所に顧客が近づくと、インテリジェント・ラベルのモーションセンサーが検知し、Pepperによる顧客対応を行う。顧客の発話言語をPepperが判別し、顧客が手にした商品の理解の促進と購入の後押しを判別した言語で行う。言語の切り替えは、Microsoft Azure上に送られた情報をもとに行われ、インテリジェント・ラベルに表示されるコンテンツも切り替わる。今回の実験で対応する言語は、日本語、中国語、英語の3種類。
実証実験のイメージ
インテリジェント・ラベルのモーションセンサー（Kinect for Windows）は、顧客の接近だけでなく、顧客が手にした商品の種類も検知する。実験で得られた情報は、マイクロソフトのAI技術「Microsoft Cognitive ServicesやAzure Machine Learning」を活用してPepperと共有される。今後、AI機能をさらに強化し、一連の対応でえられた顧客属性、行動パターン、感情などを分析、学習したうえでサービスの向上につなげていく。
同実証実験は、資生堂ジャパンと協力して首都圏のドラッグストアで行われる。
