Works & Entries Our Events API Dictionary Mashup Awards Login

Work Detail

Draw Shop

概要

Draw Shopは、描いて検索するお買い物アプリです。
現在のネットショッピングでは、「こんな色の…」や「こんな形の…」といった「イメージ」から商品を探すのは難しいですが、
Draw Shopなら「こんな商品が欲しい!」という絵をさっと描くだけで、イメージと近い商品を探すことができます。

  • 2017年7月開催のヤフーの社内ハッカソン「Internal Hack Day 14」最優秀賞作品

使いかた

  1. 欲しいものの絵を描きます。
  2. アプリが機械学習を用いて絵から架空の商品画像の生成を始めます。
  3. 検索ボタンを押すと、生成された画像から商品を検索します。(ここから実際にYahoo! ショッピングで買い物をすることもできます。)

使用技術概要

  1. 制約付きDCGANで手書き画像から画像クエリ生成
  2. CNNで画像クエリを特徴量に変換
  3. 特徴量の空間でNGTを用いて近傍探索