Customer Review data at Rakuten Ichiba
-
Upload
rakuten-inc -
Category
Technology
-
view
1.633 -
download
0
description
Transcript of Customer Review data at Rakuten Ichiba
1
Customer Review Data at Rakuten Ichiba
Rakuten Institute of Technology
Rakuten, Inc. http://rit.rakuten.co.jp/rdr/index.html
2
Rakuten Data Release
Open Innovation� Contribute to the academia by releasing data
� Obtain new ideas from various point of views
3
Rakuten Data Release
• Released in 2010
– Ichiba product data (about 50 million products)
– Travel facility data (11,468 facilities)
– Travel customer review data (350,000 reviews)
– Gora facility data (1,669 golf facilities)
– Gora customer review data (320,000 reviews)
• Released in 2011
– Customer review data (16 million reviews)
http://rit.rakuten.co.jp/rdr/index.html
4
Current Status
• Acquisition
– Open to universities and public research organizations
– Applied and acquired via NII and ALAGIN
• Affiliation, position, research purpose are required
• Application and Publication
– 62 applications from universities and public research
organizations (October 11, 2011)
– 14 papers has been written (April 19, 2011)
– 10 poster presentation at Rakuten Data Challenge
(the 3rd Rakuten R&D Symposium, 2010)
5
Customer Review at Rakuten Ichiba
Write product review
Write Shop review
6
Data Specification
• Collected period
– Jan 2010 ~ Dec 2010
• Data Size
• Additional information
– Can be obtained by Rakuten API
• http://webservice.rakuten.co.jp/api/
• Genre ID
• Product Ranking
• …
# of reviews # of product page # of unique user # of shops # of genres
16,606,181 3,855,021 2,872,874 39,885 30,879
7
Data Format
Field Name Field in Japanese Value type
User id 投稿者ID Integer (Masked)
Price 商品価額 Integer
Buy_flag 購入 0:購入していない|1:購入済
rating 評価ポイント 1|2|3|4|5
Open_flag 公開有無 0:プロフィル公開|1:プロフィル非公開
Age 年齢 Integer
Gender 性別 0:Male | 1:Female | 2: Unknown
Use 商品の使いみち イベント|おもたせ・ギフト|ビジネス|プレゼント| 実用品・普段使い|
趣味
Object code 商品を使う人 家族へ|仕事関係へ|子供へ|自分用|女性(彼女、妻)へ|親戚へ|
男性(彼、夫)へ|友人へ
Frequency 購入した回数 初めて|リピート
Genre id 商品ジャンルID Integer
Product name 商品名 String
Product page URL 商品URL String
Shop name 店舗名 String
Review title レビュータイトル String
Review contents レビュー内容 String
Registered time レビュー登録日時 yyyy-mm-dd h:m:s
8
Review vs. Reviewers, Products, Shops
Review - Reviewer Review - Shop Review - Product
All distributions obey power-law
Some abnormal distributions appeared
9
Review vs. Rating
60% of reviews have a rating of 5
(Same as Amazon.com review [Jindal and Liu, WSDM08])
Rating # of Review %
1 280,337 1.69%
2 315,617 1.90%
3 1,373,792 8.27%
4 5,007,154 30.15%
5 9,629,281 57.99%
Total 16,606,181 100.00%
10
~20's
3%
20's
22%
30's
40%
40's
24%
50's
8%
60's~
3%
male
39%
female
61%
unknown
0%
Reviewers vs. Users
male
67%
female
33%
~20's
7%
20's
25%
30's
30%
40's
20%
50's
12%
60's~
6%
Ge
nd
er
Ag
es
Reviewers Ichiba Users
Distribution of
Reviewers and users
are different
11
Open Problem: Aspect Extraction
程程程程よいよいよいよい硬硬硬硬さでしっかりしていてさでしっかりしていてさでしっかりしていてさでしっかりしていて安定感安定感安定感安定感ありありありあり寝心地良寝心地良寝心地良寝心地良いですいですいですいです....
迅速迅速迅速迅速にににに配送配送配送配送してしてしてして頂頂頂頂いたいたいたいた点点点点もももも満足満足満足満足してますしてますしてますしてます....
迅速迅速迅速迅速にににに配送配送配送配送してしてしてして頂頂頂頂いたいたいたいた点点点点もももも
満足満足満足満足してますしてますしてますしてます
Comment on the shop
Extract comments on various aspects from one review
程程程程よいよいよいよい硬硬硬硬さでしっかりしてさでしっかりしてさでしっかりしてさでしっかりしていていていていて安定感安定感安定感安定感
ありありありあり寝心地良寝心地良寝心地良寝心地良いですいですいですいです
Comment on the item
12
Open Problem: Word Sense Disambiguation
以前グレーとオートミールオートミールオートミールオートミールを
購入して部屋着&防寒によさ
そうだったので、ブラックをリピ
しました。
オートミールオートミールオートミールオートミール
ブラックブラックブラックブラック
グレーグレーグレーグレー Color
Categorize the same word into various categories
あさごはん、ひるごはんに
薄切りにしたりんごとレーズン、
牛乳、はちみつとオートミールオートミールオートミールオートミール
をボールに入れて、レンジで数
分。
オートミールオートミールオートミールオートミール
レーズンレーズンレーズンレーズン
牛乳牛乳牛乳牛乳
はちみつはちみつはちみつはちみつ
Food
13
Open Problem: Causality Extraction
みなさんのおすすめを読んでこち
らに決めました。三番目の子供
ではじめてネットで購入してみまし
た。
みなさんのおすすめをみなさんのおすすめをみなさんのおすすめをみなさんのおすすめを読読読読んでんでんでんで
Purchase reason
安価なので、購入しましたが…底
は2つ折りにされて跡がついたま
ま、角はポロボロにはげていて、しわ
による生地の浮きが目立ち…赤い
ペンのしみもあります
底底底底はははは2222つつつつ折折折折りりりり
跡跡跡跡
角角角角ははははポロボロポロボロポロボロポロボロ
赤赤赤赤いいいいペンペンペンペンのしみのしみのしみのしみ
Dissatisfaction reason
Find reasons of purchase and customer satisfaction
14
Open problem: Quality Evaluation
Product1
Product2
生地がさくさくしてとても
おいしかったです。
甘すぎず、子とものため
にもよさそうでした
Reviewer 1
Product1 おいしかったです。
Product2 おいしかったです。
Product3 おいしかったです。
Highly credible reviewer Lowly credible reviewer
Evaluate quality of reviews and reviewers
Product Review Product Review
レビューをみて
買いましたが
レビューをみて
購入しました
レビューが良かっ
たので購入High quality review
Time elapsed
Reviewer 2
15
Challenges
BigScalability for various services
Scalability for distributed servers
MessyRobustness to ambiguous expression
Robustness to noisy data
DiverseSensitivity to context
Sensitivity to time
16
Thank you!For more information of Rakuten research
Please join R&D Symposium & Tech-Conference
2011.11.19 (SAT)
http://tech.rakuten.co.jp/rtc2011/
http://rit.rakuten.co.jp/conf/rrds4/
17
18
Reviewers
0
200000
400000
600000
800000
1000000
1200000
~20 20 30 40 50~
Nu
mb
er
of
Re
vie
ws
AGE
Unknown
Female
Male
19
User Behavior Analysis
PurchaseUser , Product Review
Review Purchase
Review
Purchase
User , Product
User , Product
User , Product
Analyze purchase-review behavior model
20
Open Problem: Review Credibility
黒とナチュラルブラウンを購入しました。
ケースも保管に便利そうだし商品は長す
ぎず短すぎず使いやすい感じです。
こういうのって、なんだかとってもお
得感ありますよね。
Contains much information
Lowly credible Review
Product1
Product2
Evaluate credibility of reviews and reviewers
Highly credible Review
Contains little information
生地がさくさくしててとて
もおいしかったです。
甘すぎず、子とものため
にもよさそうでした
User1
Product1
User2
おいしかったです。
Product2 おいしかったです。
Product3 おいしかったです。
Various reviews by one user Same reviews by one user