9月29日、トレジャーデータ株式会社主宰のイベント「緊急企画：良品計画 奥谷さんが語るこれからのマーケティング」が開催されました。

今回は、本イベントで行われた、良品計画奥谷氏、antenna* 高木氏・Kaizen Platform 瀧野氏・トレジャーデータ堀内氏によるパネルディスカッションの様子をお届けします。

登壇者紹介

パネリスト

良品計画 元WEB事業部長 奥谷 孝司氏

1997年良品計画入社。
3年の店舗経験の後、取引先の商社に2年出向しドイツ駐在。
家具、雑貨関連の商品開発や貿易業務に従事。帰国後、海外のプロダクトデザイナーとのコラボレーションを手掛ける「World MUJI企画」を運営。2003年には良品計画初となるインハウスデザイナーを有する企画デザイン室を立ち上げメンバーとなる。05年衣服雑貨部の衣料雑貨のカテゴリーマネージャー。現在定番商品の「足なり直角靴下」を開発、ヒット商品に。10年WEB事業部長。「MUJI passport」のプロデュースで14年日本アドバタイザーズ協会Web広告研究会の第２回WebグランプリのWeb人部門でWeb人大賞を受賞。10年早稲大学大学院商学研究科夜間主MBAマーケティング・マネジメントコース（守口剛ゼミ）修了。
2015年10月よりオイシックス株式会社入社、COCO（最高オムニチャネル責任者）に就任予定。

Kaizen Platform, Inc. SVP of Production 瀧野 諭吾氏

GREEならびにGREE Internationalで、ゲームプロダクト・ゲーミングプラットフォーム・アドテクノロジー分野におけるプロダクトマネジメント及びにプロジェクトマネジメント領域の組織マネジメントから実務全般を担当し高い実績を誇る。
2014年2月よりKAIZEN platform プロダクト責任者。

GLIDER associate,INC.antenna* 事業本部 R＆D室長　高木 一成氏

2006年マクロミル入社。　
リサーチ＆コンサルティング営業として個人売上の全社記録を更新。
以降、ネットリサーチ事業部門マネジャー・購買データベース事業部門マネジャーを経て、Questant、ブランドデータバンクなどの事業責任者として従事。
20015年４月より、キュレーションマガジン「antenna* 」 を運営するグライダーアソシエイツ入社。
antenna* 事業の価値創造に向けて、R＆D領域を担当。

ファシリテーター

トレジャーデータ株式会社　堀内 健后氏

プライスウォーターハウスクーパースコンサルタント株式会社（現日本アイ・ビー・エム株式会社）で業務・システム系コンサルティングに従事。
2006年、 マネックスビーンズホールディングス（現マネックスグループ株式会社）に入社、顧客向けBtoCのWebサービスの企画・開発のプロジェクトマネージャー として活躍。
2013年2月、トレジャーデータ株式会社に日本事業の立ち上げから参画。

ABテストとマシンラーニング（機械学習）はバランスよく取り入れるべき

奥谷氏：
マシンラーニング（機械学習）とABテストの関係って重要だと思います。
MUJI passportを作ったときに、レコメンデーションのオムニチャネル化を進めたんですね。

MUJI passportとは？

FireShot_Capture_16_-MUJI_passport_I_無印良品-http___www.muji.net_passport.png

http://www.muji.net/passport/
iOS
Android

無印良品が提供する、店頭での購買促進を目的としたスマホ向けアプリ。店舗でのチェックインや買い物、口コミを投稿すると付与される「MUJIマイル」は買い物時に使用できる「MUJIショッピングポイント」に交換可能。

奥谷氏:
レコメンデーションのオムニチャネル化ってなにかというと、MUJI passportを使ってお客様が買い物をするうようになったので、オフラインでの買物データがとれるようになったんです。

今までレコメンデーションといえばネットストアの中にあって、ネットストアの行動が見えていたからコンバージョンに寄与してたんですが、それってオフラインでもできるんじゃないかと思って入れてみたんです。でも結局ABテストの方が良いねって結論になったんですよね。

なぜかというと、MUJI passportで買い物されるのって普通よりは多いんですが、（年間で）たったの8回なんですよ。その8回の買い物が主変数になって動くレコメンデーションになるわけです。

結局そのセクションは消しちゃったんですが、今日買い物すると、次の買い物は1ヶ月以内には起こらなんです。マシンラーニングってインプットがないと同じ方程式のままだから、同じ答えをただ出すだけじゃないですか。

だから「365日－8日」の間はずっと同じ答えしか出さないわけです。もちろんネットで何か見てくれたり買ってくれると変わりますけど。
一方、ネットストアの方は（インプットが多いから）ちゃんと機能するし、精度は上がるんですよね。

そのネットストアのアルゴリズムに基づいて、毎週月曜のメールで9セクション選出して出すと、結果に寄与するんです。

しかし、それもメールの見え方として、9マスあって左上にあるものが一番目立つんだからそれがただクリックされてるだけじゃんという見方もできる。「えーでもせっかくお金かけて導入したのになあ」となった時、マシンラーニングには「これって効いてるの？」って聞けないじゃないですか。

ABテストなら担当者がいるから人間同士のコミュニケーションができて何かしらの答えが返ってきますが、マシンラーニングには聞けない。何が効いてきたか、あまりにもオムニチャネル化してきたがゆえに広すぎてわからないんですね。だったらABテストが良いかなと。

ただ、やはり両方やったほうがいいですね。両方まわして両方のデータをちゃんと取る。人間は見なくてもいいけど機械が自動的に取ってくれるものが、データ分析のベースになります。それも無いのにただABテストやっても、やらない方がいいよとなります。

どちらかに振れすぎちゃダメなんですよね。両方をうまく掛けあわせてやるのが重要かなと。

堀内氏：KAIZENさんはマシンラーニング導入しつつ、人もバイアスかけてやっていくということもできるんですか？

瀧野氏：
最初はもともと、マシンラーニングもなく、すごくシンプルなABテストから始まってるんですよね。
実際やってみてわかったのは、高額商品のような、母数が集まりづらい商材を扱っている箇所でA/Bテストをやっていても判断が難しいんですよね。

時間経過とともに周辺要因が変化するわけで、長い時間を掛けてやった一つのABテストの結果、たまたまAが勝ちましたとか、結果を鵜呑みにできない。

オムニチャネル化が進んでいろんな接触点があって、人それぞれのライフスタイルがあるわけで、どういう経緯でそこにたどり着いたのかなということを掛けあわせて見ていく必要があります。こうだったからAがよかったとか、こうだったからBがよかったってことがあって、深くマーケティングを考えている人はわかるはず。

ただ、それを人が全て事前に仮説設計することは不可能なので、有効なパターンの網羅性を高めていく際にはマシンラーニングは有効です。

ただマシンラーニングも万能ではなくて、学習していけば精度は高くなっていくけど、外れる場合も当然あるので、その結果も再学習させて継続していくことはとても大事です。

それに、学習の結果を吹き飛ばすような外部要因が突然生まれることもありますし、人がそういった部分を理解して介入することも欠かせない。
割りと機能するものができてはいますが、今引き続き研究を続けているっていう状態です、

堀内氏：antenna さんは出す面側としてはそういう風になっていくんですか？*

高木氏：
そうですね。antenna* の場合は背景が黒だったり白だったり色を入れたりして変えると、反応率が違うなというのはあります。

ただ、反応率が良かったのは、そもそもクリエイティブがお菓子だったのかとか、たまたまその時間に女性が多く見ていたのかとかという外部要因が大きいのかなと。結果としては一瞬数字が出るので「背景は白がよかった」となるんですが、反応率が揺れ動くというのはあるんだなと思いますね。
結果としては「背景白がよかったね」ってなるんですけど。

堀内氏：やっぱり、皆さんの見解としては、まずやってみないとわからない。ABテストを継続していかないと。１ショットだけじゃわからないということですよね。

高木氏：
１ショットじゃ難しいですね。データとしてそれが優位なのかわからないし、因果関係も見えない。継続性がないと難しいと思いますね。