SlideShare a Scribd company logo
1 of 119
Download to read offline
安
プラットファームとレーティング
2020年12月12日
田 ゼ ミ
Ⅰ. イントロダクション
▷ レーティングの学習きっかけ
阪大生アルバイト調査アンケート
アンケートの目的
「阪大生のアルバイト実態」および「新型コロナウイルスは
阪大生のアルバイトにどのような影響を与えたのか」を調査する。
新型コロナウイルスの影響→学生のアルバイトに影響が出ているのでは?
阪大在校生の現状のアルバイトはどうなっているのか?
▷ アンケート活動
▷ チラシ&キーホルダー作成
▷ データの収集・公開
Google Datastudioの活用
▷ データの収集・公開
データは集めたけど、どう活用すればいいんだろう...
▷ データの収集・公開
社会的選択理論
▷ データの収集・公開
社会的選択理論?
輪読会
それをお金で買いますか
著:マイケル・サンデル
社会的選択理論への招待
著:坂井豊貴
「決め方」の経済学
著:坂井豊貴
▷ 安田ゼミの活動
15%以内3
▷ 本日の発表内容
プラットフォームにおける新しいレーティング法の提案
イントロダクション
社会的選択理論について
新しいレーティング法の提案
Ⅰ
Ⅲ
Ⅱ
15%以内3
▷ 本日の発表内容
45th シングル 選抜総選挙 夢の紅白選抜
AKB48が2016年に行った2つの総選挙
1位 指原莉乃
2位 渡辺麻友
3位 松井珠理奈
1位 山本彩
2位 指原莉乃
3位 島崎遥香
15%以内3
▷ 本日の発表内容
45th シングル 選抜総選挙 夢の紅白選抜
AKB48が2016年に行った2つの総選挙
1位 指原莉乃
2位 渡辺麻友
3位 松井珠理奈
1位 山本彩
2位 指原莉乃
3位 島崎遥香
15%以内3
▷ 本日の発表内容
45th シングル 選抜総選挙 夢の紅白選抜
AKB48が2016年に行った2つの総選挙
1位 指原莉乃
2位 渡辺麻友
3位 松井珠理奈
1位 山本彩
2位 指原莉乃
3位 島崎遥香
⇒投票の仕方によって結果が異なる!
Ⅱ.社会的選択理論
▷社会的選択理論
安田ゼミでは
    「社会的選択理論」
                     を学んできた
「選好の異なる多数が一つの意思決定を行う方法」を探る
研究
▷社会的選択理論
発表の流れ
「決め方」の種類と概要1
2 それぞれの特性
・ボルダルール
・是認投票
・マジョリティジャッジメント
▷突然ですがクイズです!
Q.2018年のM-1のファイナリスト3組の組み合わせは次の内どれ?
1
 霜降り明星、和牛、ジャルジャル
 和牛、銀シャリ、スーパーマラドーナ
 ミキ、とろサーモン、和牛
1
2
3
▷突然ですがクイズです!
A.
1
 霜降り明星、和牛、ジャルジャル(2018年)
 和牛、銀シャリ、スーパーマラドーナ(2016年)
 ミキ、とろサーモン、和牛(2017年)
1
2
3
1
▷M-1の例を使って説明
M-1グランプリ最終決戦
2018年のM-1グランプリ最終決戦出場者は、
霜降り明星、和牛、ジャルジャルの三組
もしも、
審査員の選好が下の表のようなものだったら、、、
巨人 中川家 ナイツ 志らく サンド 松本 上沼
1位 霜降り 霜降り 霜降り 和牛 和牛 ジャル ジャル
2位 和牛 和牛 ジャル ジャル ジャル 和牛 和牛
3位 ジャル ジャル 和牛 霜降り 霜降り 霜降り 霜降り
▷M-1の例を使って説明
多数決
巨人 中川家 ナイツ 志らく サンド 松本 上沼
1位 霜降り 霜降り 霜降り 和牛 和牛 ジャル ジャル
2位 和牛 和牛 ジャル ジャル ジャル 和牛 和牛
3位 ジャル ジャル 和牛 霜降り 霜降り 霜降り 霜降り
霜降り 3票
和牛  2票
ジャル 2票
優勝:霜降り明星
▷M-1の例を使って説明
ボルダルール
巨人 中川家 ナイツ 志らく サンド 松本 上沼
1位 霜降り 霜降り 霜降り 和牛 和牛 ジャル ジャル
2位 和牛 和牛 ジャル ジャル ジャル 和牛 和牛
3位 ジャル ジャル 和牛 霜降り 霜降り 霜降り 霜降り
選択肢がk個あるとすると、1位がk点、2位がk-1点...最下位が1点と点数付けをし、
得点の一番高いものを選ぶ
3点
2点
1点
霜降り 13点
和牛  15点
ジャル 14点
優勝:和牛
▷M-1の例を使って説明
是認投票
巨人 中川家 ナイツ 志らく サンド 松本 上沼
1位 霜降り 霜降り 霜降り 和牛 和牛 ジャル ジャル
2位 和牛 和牛 ジャル ジャル ジャル 和牛 和牛
3位 ジャル ジャル 和牛 霜降り 霜降り 霜降り 霜降り
各々がここまでなら許容する、というラインを定め、
最も票の多い選択肢を選ぶ決め方
霜降り 3票
和牛  4票
ジャル 5票
優勝:ジャルジャル
▷社会的選択理論
発表の流れ
「決め方」の種類と概要1
2 それぞれの特性
▷ボルダルールの特性
● 多数決で採用されなかった2位以下の選好を反映できる
⇒しかしその特性ゆえに、国会議員選挙など大規模な投票に
は実装しづらい
● ペア勝者基準、ペア敗者基準を満たす
⇒次スライドから説明!
▷ペア勝者、ペア敗者って?
コンドルセルール
それぞれの選択肢を、
相対的に見て優れていると感じている人の人数によって決める
巨人
中川
家
ナイ
ツ
志ら
く
サン
ド
松本 上沼
1位
霜降
り
霜降
り
霜降
り
和牛 和牛
ジャ
ル
ジャ
ル
2位 和牛 和牛
ジャ
ル
ジャ
ル
ジャ
ル
和牛 和牛
3位
ジャ
ル
ジャ
ル
和牛
霜降
り
霜降
り
霜降
り
霜降
り
和牛より霜降りが良いと思って
いる人…3人
霜降りより和牛が良いと思って
いる人…4人
  ×霜降り vs 和牛〇
  これを全通りやる! ⇒
▷ペア勝者、ペア敗者って?
霜降り 和牛 ジャル
霜降り - × ×
和牛 〇 - 〇
ジャル 〇 × -
ペア敗者→
ペア勝者→
コンドルセルール
※ちなみにコンドルセルールはパラドクスが生じることがあるため、優れた決め方とはいえな
い
▷ペア勝者、ペア敗者って?
ボルダルールの優れた点
・ペア勝者基準
  ペア勝者が最下位になることがない
・ペア敗者基準
  ペア全敗者が1位になることがない
ボルダルールはこの二つを同時に満たす!
(多数決・是認投票は満たさない)
▷ペア敗者基準を満たす理由
直感的に説明!
▷ペア敗者基準を満たす理由
佐藤、高橋、中野がx,y,zのうち一つの選択肢を選ぶとする。
Xがボルダ勝者だとすると、前提として以下の3つを示せる。
このとき、Xは最悪でも(p(x)=6)、表中の以下の場所に位置する
佐藤 高橋 中野
1位 x ★ ★
2位 x ★
3位 x
佐藤 高橋 中野
1位 ★ ★ ★
2位 x x x
3位
★が3つの位置
▷ペア敗者基準を満たす理由
このボルダ勝者であるXがペア敗者(コンドルセルールで最下位)だとすると、
そのときの表は、
佐藤 高橋 中野
1位 y z x
2位 z y
3位 x x
佐藤 高橋 中野
1位 y z z
2位 x x y
3位 x
★が4つあるような位置
以上より、
Xがボルダ勝者である条件(★が3つ以下の位置)と、
Xがペア敗者である条件(★が4つ以上の位置)は、同時に成立しない
すなわちボルダルールはペア敗者を1位には選ばない
ペア比較ならボルダルール
他の投票ルールと比較し、ボルダルールは優位!
(参考:ボルダルールのみが優位)
▷ペア敗者基準を満たすのみでなく...
n人(1,2,3,…,i,…, n)
選択肢m個(1,2,3,…,x,y,…,m)
▷ペア敗者基準を満たすのみでなく...
設定
1人(i)
選択肢2個(x,y)
▷ペア敗者基準を満たすのみでなく...
設定
設定
n人(1,2,3,…,i,…, n)
選択肢2個(x,y)
▷ペア敗者基準を満たすのみでなく...
n人(1,2,3,…,i,…, n)
選択肢m個(1,2,3,…,x,y,…,m)
▷ペア敗者基準を満たすのみでなく...
設定
ペア比較における平均得票率
n人(1,2,3,…,i,…, n)
選択肢m個(1,2,3,…,x,y,…,m)
でのペアごとの多数決における平均得票率を
以下の様に定義できる
▷ペア敗者基準を満たすのみでなく...
平均得票率の特記事項
▷ペア敗者基準を満たすのみでなく...
f=”全員一致の支持”への近さを表す尺度
▷ペア敗者基準を満たすのみでなく...
証明は省略(参考を参照)
平均得票率の特記事項
是認投票 〜絶対評価で決める〜 
  メニューの作りが選択に影響を与えるか
   是認投票
   コントラスト効果
   マジョリティジャッジメント
1
2
3
1
4
B
50%
C
50%
A 21%
B 57%
C 22%
2つの場合 3つの場合
カメラA・B・Cを選択する実験結果
A:高価・有能
B:中価・中能
C:低価・低能
①メニューの作りが選択に影響を与える 
さっきまでの決め方と是認投票との違い
順位付けー相対評価
是認投票ー絶対評価:〇か×か
②是認投票
一位のみを認める場合(多数決と同じ)
人数 5 3 1
1位 A B C
2位 C C A
3位 B A B
A 5票
B 3票
C 1票
人数 5(阪大) 3(慶應) 1(東大)
1位 A B C
2位 C C A
3位 B A B
A 5票
B 3票
C 6票
Aが1位と支持する5人がA、Cを支持する場合
②是認投票
A:京都 B:横浜 C:奈良
の場合、旅行で行く選択肢としてA・Cは大阪大学の学生が旅
行する場合、近畿圏内だからまだ許容できるが、関東の横浜
のBの選択肢は是認しないというイメージ
旅行の行先を選択する場合
前後に対比させるものによって、
印象が大きく変わるという心理現象のこと
メニュー表 佐藤 高橋
1位 カレー:7点 ラーメン:7点
2位 ラーメン:5点 カレー:5点
3位 チャーハン:4点 オムライス:4点
4位 オムライス:1点 チャーハン:1点
③コントラスト効果
1位 2位 3位
佐藤 カレー:7点 ラーメン:5点 オムライス:1点
高橋 ラーメン:7点 カレー:5点 オムライス:4点
2点 4点
1点2点
選択肢からチャーハンが無くなったら
→ラーメンが選ばれる
③コントラスト効果
1位 2位 3位
佐藤 カレー:7点 ラーメン:5点 チャーハン:4点
高橋 ラーメン:7点 カレー:5点 チャーハン:1点
2点 1点
2点 4点
選択肢からオムライスがなくなったら
→カレーが選ばれる
③コントラスト効果
現実社会での利用
不動産業界には「当て馬物件」というものがあります。
「当て馬物件」とは、実際に賃貸や販売に出したい本命の物件
より先に案内するあまり魅力的ではない物件のこと。
価格が高かったり、立地が悪かったりと条件が良くない物件
を、あえて最初に案内する、そうすることで後に案内する物件
が「コントラスト効果」によってより魅力的に見えてしまうそうで
す。
みなさんも社会人の新生活で騙されないように!
特徴:
・中央値に位置する評価を全体の評価とする
・極端な意見で結果を動かす戦略をできなくする
④マジョリティジャッジメント
9人の有権者による選択肢Aの評価
最悪 普通 最高良い
真ん中の人の評価「良い」がA
の評価になる
④マジョリティジャッジメント
最悪 最高悪い
真ん中の人の評価「悪い」がB
の評価になる
9人の有権者による選択肢Bの評価
④マジョリティジャッジメント
一部の極端な意見に影響を受けない
最悪 普通 最高良い
④マジョリティジャッジメント
一部の極端な意見に影響を受けない
最悪 普通 最高良い
④マジョリティジャッジメント
2人が「悪い」から「最悪」にしても全体
の評価は変わらない
奇術(マジック)研究会の大会では、各大学から審査員を募るが、
その大学の規模でその人数が決まる。人数が多いD志社大学や、
関S大学からは沢山の審査員が捻出されるが、これらの審査員は
自分たちの大学の出場者の採点でかなり贔屓する。
安田ゼミのF尾さんの実体験より
審査員 D志社 D志社 D志社 D志社 他大学 他大学 関S 阪大 他大学 関S 他大学 関S 他大学 関S 他大学
得点 10 10 10 10 8 7 7 6 6 5 5 4 3 3 2
審査員 関S 関S 関S 関S 他大学 阪大 他大学 D志社 他大学 D志社 D志社 他大学 D志社 他大学 他大学
得点 10 10 10 9 7 7 6 6 5 4 4 3 3 2 1
D志社演者に対する得点
関S演者に対する得点
▷ こんな時どうする?
▷ こんな時どうする?
例えば、審査員を一番多く拠出している大学の審査員の人数と同じ
だけ、高得点と低得点をつけた審査員の評価を除外すれば、贔屓の
採点を無効化することができる。ここまで極端ではないにしても、
最高得点と最低得点を除外して合計点を競うスポーツは実際ある。
審査員 D志社 D志社 D志社 D志社 他大学 他大学 関S 阪大 他大学 関S 他大学 関S 他大学 関S 他大学
得点 10 10 10 10 8 7 7 6 6 5 5 4 3 3 2
審査員 関S 関S 関S 関S 他大学 阪大 他大学 D志社 他大学 D志社 D志社 他大学 D志社 他大学 他大学
得点 10 10 10 9 7 7 6 6 5 4 4 3 3 2 1
D志社演者に対する得点
関S演者に対する得点
集計範囲
集計範囲
安田ゼミのF尾さんの実体験より
もっと論理的に考えたい
マジョリティージャッジメントとは?
→中央値を利用してランクを決める
1 中央値とは?
8, 8, 7, 5 , 4とあれば、中央値は″7″
▷マジョリティージャッジメント
中央値の特徴
1 中央値より大きな数字や小さな数字がかわっても影響されにくい
8, 8, 7, 5, 4 中央値は7
10000, 8, 7, 5, 4 中央値は7
8, 8, 7, 5, -10000 中央値は7 >>平均とは違う特徴
2 >>小さい方を選ぶ。偶数の場合は?
8, 8, 7, 6, 5, 4の場合、中央値は6になる
▷マジョリティージャッジメント
Outstanding - Excellent - Very good - Good - Acceptable - Poor - to Reject
O E V G A P R
A 20 13 10 16 10 12 18
B 10 15 29 10 10 15 10
C 5 22 24 5 6 10 27
合計 99人
▷マジョリティージャッジメント
マジョリティーゲージ
A → (43, G+, 40)
B → (25, V−, 45)
C → (27, V−, 48)
▷マジョリティージャッジメント
マジョリティーゲージとは?
マジョリティーゲージとは?
A → (43, G+, 40)
B → (25, V−, 45)
C → (27, V−, 48)
Cのgradeは
VからGになる
ランクは B>C>A
▷マジョリティージャッジメント
テネシー州の州都を決めよ
多数決なら、州都は
Memphisになる
https://en.wikipedia.org/wiki/Template:Tenn_voting_example
▷マジョリティージャッジメント
マジョリティージャッジメントの特徴
Memphisはpoor
他はfairになる
https://en.wikipedia.org/wiki/Template:Tenn_voting_example
▷マジョリティージャッジメント
マジョリティージャッジメントの特徴
▷マジョリティージャッジメント
マジョリティージャッジメントの特徴
→勝者はNashvilleになる
負けたKnoxvilleやChattanoogaがもっと戦略的に選考を変えても
結果は変わらない。
https://en.wikipedia.org/wiki/Template:Tenn_voting_example
Ⅲ. 新しいレーティング法の提案
▷プラットフォームにスコアリングルールを実装
1
2
3
ボルダルール
マジョリティージャッジメント(サクラ対策)
まとめ
優れたスコアリングルールは実社会に適用できるのか
▷プラットフォームにスコアリングルールを実装
ボルダルール
→適応するための条件が厳しく、ほとんど適用できない
マジョリティージャッジメント
→平均点のスコアに変わることができるため
 適用場面は存在するがデメリットも多い
優れたスコアリングルールは実社会に適用できるのか
▷プラットフォームにスコアリングルールを実装
優れたスコアリングルールは実社会に適用できるのか
1
2
3
ボルダルール
マジョリティージャッジメント(サクラ対策)
まとめ
▷ ボルダルールを適用する
ボルダルールの性質
〈適用条件〉
①投票者が全ての選択肢を順位付けする
→選択肢が多すぎるとボルダは適用しにくい
  
②全ての有権者は同じ選択肢を持つ
〈注意事項〉
・ボルダ勝者が存在しないことがある
→必ず勝者を決めるには投票者と候補者の数を固定しなければならない
▷ ボルダルールを適用失敗例
検索結果に対するユーザの選好を自動的に判別
→ 各要素を重み付けし、検索結果をランク付け
要素:購入の有無、ページビュー数、ページ閲覧時間、キーワード類似度
失敗
例1)ボルダルールをAmazonの検索結果表示順に適用
▷ ボルダルールを適用失敗例
例1)ボルダルールをAmazonの検索結果表示順に適用
〈問題点〉
・選択肢(検索結果)を全てランク付けする必要がある
→ ページを閲覧しなかったその他多数の商品を同点として処理できない
・選択肢の母集団が日々変化する
→ 商品が日々変わるため、レーティング参加者全員に対して同じ選択肢     で
は無い。
選択肢が限られ、1回の集計で決まるものが望ましい
▷ ボルダルールが適用できる場面
M-1グランプリ最終決戦
M-1グランプリ 2018年 最終決戦より
現状の審査方法
審査員7名が候補3組から1組のみ投票し、多
数決によって決める。
● 視聴者の意見は反映されていない
● ペア敗者が優勝する可能性がある
▷ ボルダルールが適用できる場面
巨人 中川家 ナイツ 志らく サンド 松本 上沼
1位 霜降り 霜降り 霜降り 和牛 和牛 ジャル ジャル
2位 和牛 和牛 ジャル ジャル ジャル 和牛 和牛
3位 ジャル ジャル 和牛 霜降り 霜降り 霜降り 霜降り
もしも、こんな投票結果だったら・・・
M-1グランプリ最終決戦
そこで、提案!
▷ 新しいレーティングの提案
M-1グランプリ最終決戦
ボルダルール&視聴者投票を適用すると・・・
<適用手順>
1
2
      審査員7人 42点  視聴者 42点に換算
1. 7人÷(視聴者全体の人数)= X が視聴者1人の持ち点になる
2. 審査員の得点と視聴者得点の合計(84点満点)得点で最も高得点の
コンビが優勝
50% 50%
▷ 新しいレーティングの提案
具体例
もしも5万人が投票したら?
5万人を7人に換算するので、視聴者1人当たりの持ち点は0.00014点(7÷50000)になる。
投票者数→ 20,000 15,000 5,000 6,000 3,000 1,000
1位 霜降り 和牛 ジャル 和牛 ジャル 霜降り
2位 和牛 ジャル 霜降り ジャル 霜降り 和牛
3位 ジャル 霜降り 和牛 霜降り 和牛 ジャル
霜降り:(21,000×3+8,000×2+21,000×1)×0.00014=14
和牛: (21,000×3+21,000×2+8,000×1)×0.00014=15.82
ジャル:(8,000×3+21,000×2+21,000×1)×0.00014=12.18
合計42点
▷ 新しいレーティングの提案
具体例
審査員点
● 霜降り:3×3+1×4=13  
● 和牛:3×2+2×4+1×1=15 
● ジャルジャル:3×2+2×3+1×2=14
視聴者点
● 霜降り:(21,000×3+8,000×2+21,000×1)×0.00014=14
● 和牛: (21,000×3+21,000×2+8,000×1)×0.00014=15.82
● ジャル:(8,000×3+21,000×2+21,000×1)×0.00014=12.18
最終得点
● 霜降り:13+14=27
● 和牛: 15+15.82=30.82
● ジャル:14+12.18=26.18
和牛が悲願の優勝となる!!
▷プラットフォームにスコアリングルールを実装
優れたスコアリングルールは実社会に適用できるのか
1
2
3
ボルダールール
マジョリティージャッジメント(サクラ対策)
まとめ
▷ マジョリティ―ジャッジメントの適用例1
授業評価アンケート
阪大アンケートを例に・・・
・5段階評価でそれぞれの質問に答える
・全体平均が代表値として算出
▷ マジョリティ―ジャッジメントの適用例1
・すべて1や5にマークしているような極端な回答がある
・全員が正当な評価を行っている可能性は低い
平均値で結果を出せば極端な回答や不当な評価が反映されやすい
MJを使うことで、極端な回答をある程度は排除できる
授業評価アンケート
▷ マジョリティ―ジャッジメントの適用例2
買い物サイトの商品レビュー
<現状>
・楽天市場やヤフーショッピングでは単純な平均値で計算されている
・これだと、サクラや競合他社による極端な意見も反映されてしまう
マジョリティ―ジャッジメントを応用することで、ある程度は極端な意見
を排除した数値が導き出せるかもしれない
▷ マジョリティ―ジャッジメントの適用例2
サクラって何だ?
サクラ・・・業者が金で雇った一般人か、業者そのものが作為      
的に自社商品に良いレビューを書いたり、高評価      をするこ
と。
アンチ・・・悪意をもった人や、同業他社等が作為的に不当な      
レビューを書いたり、低評価をすること。
      悪い評価をするサクラであることも多い。
▷ マジョリティ―ジャッジメントの適用例2
カスタマーレビュー
楽天にある実際の商品レビューにマジョリティ―ジャッジメントを適用してみる
対象:ゼミ生Mが実際に購入したマスクのレビュー
▷ マジョリティ―ジャッジメントの適用例2
18
件
25
件 79件 296件 296件
★ ★★ ★★★   ★★★★         ★★★★★
低 高
中央値4より悪い評点の数122件 より良い評点の数296件
4+
4.16から4へ下がり、★4や★5に存在したサクラと
思われる評価が少し反映されにくくなった
▷ マジョリティ―ジャッジメントの適用例2
デメリット
ただしMJで示した場合のデメリットもある
・中央値にあたる数値が最低(最高)評価の場合、
 実際の評価より悪い(良い)印象を与える可能性がある
   →例)1 1 1 1 1 1 1 1 1 1 1 4 4 4 4 4 4 4 4 5 5
      MJ:1+ 平均点: 2.52
   →例)1 1 1 1 1 1 2 2 2 2 5 5 5 5 5 5 5 5 5 5 5
      MJ 5- 平均点:3.29
そこで、提案!
新しいレーティングを
実装したプラットフォーム
▷ 新しいレーティング方法の考案
買い物サイトレビューの新しいレーティング方法考案
※数字は適宜決める
v
START
v
0.5未満なら 0.5以上なら
v
レビューの中央値と平均値をどちらも算出する。
中央値と平均値の差が……
平均値を採用
再検討
(STEP3へ)
STEP1
STEP2 STEP2
※ ※
次のスライドから再検討の方法について提案!!
▷ 新しいレーティング方法の考案
「箱ひげ図」をつかったSTEP2の検討方法
箱ひげ図は第1・第3四分位数と中央値で、度数を25%ずつに分ける
▷ 新しいレーティング方法の考案
「箱ひげ図」をつかったSTEP2の検討方法
第1四分位数から第3四分位数までの真ん中50%(箱)を取り出す
50%
▷ 新しいレーティング方法の考案
「箱ひげ図」をつかったSTEP2の検討方法
ヒゲの部分を切り落として、箱の部分(50%)だけで平均値を取る
50%50%
▷ 新しいレーティング方法の考案
「箱ひげ図」をつかったSTEP2の検討方法
50%
中

央

値
左右同数を削るので、中央値は変わらずに残ることが利点のひとつ
▷ 新しいレーティング方法の考案
「箱ひげ図」をつかったSTEP2の検討方法
STEP2の再検討の手法として、なぜ箱ひげレーティングが良いのか
①左右同じだけの度数を削るので、中央値は変わらずに残る
②ヒゲを切り落としたことでデータのバラつきが少なくなったので、ヒゲを
含めた全体平均よりも中央値に近い平均値が求められる
③両端を削って、中央値の近辺を見るという点で、マジョリティージャッジ
メントの考え方を参考している(MJの応用である)
▷ 新しいレーティング方法の考案
まとめ
v
START
v
※0.5未満なら ※0.5以上なら
v
レビューの中央値と平均値をどちらも算出する。
中央値と平均値の差が……
平均値を採用
再検討
(STEP3へ)
STEP1
STEP2 STEP2
v
STEP3
次スライドから実際にこのレーティング方法を使って試してみる!!
50%
箱ひげレーティング
▷ 新しいレーティング方法の考案
新しいレーティング方法を実際に適用してみた
A B C D E F G H I J K L M N O P Q R S T
1 1 1 1 1 1 1 2 2 2 2 2 3 3 4 5 5 5 5 5
1と2の評価が多いことから分かるように、本当は粗悪品である。
実は5点の高評価を付けたPさん~Tさんの五人は、雇われのサクラ
楽天のように、商品に各人が5段階評価を付けられるサイトで、
ある商品に20人が評価をつけたケースを考える(1が最低で5が最高)。
▷ 新しいレーティング方法の考案
v
START
v
※0.5未満なら ※0.5以上なら
v
レビューの中央値と平均値をどちらも算出する。
中央値と平均値の差が……
平均値を採用
再検討
(STEP3へ)
STEP1
STEP2 STEP2
v
STEP3
50%
箱ひげレーティング
▷ 新しいレーティング方法の考案
STEP1:A~Tさん全員で平均点を求めると2.6点、中央値は2点。
STEP2:中央値と平均値の差が0.6(0.5以上)なので、再検討する
ためヒゲ(左右25%)を削いで、箱(F~O)で平均値を求める
A B C D E F G H I J K L M N O P Q R S T
1 1 1 1 1 1 1 2 2 2 2 2 3 3 4 5 5 5 5 5
25%ヒゲ 25%ヒゲ50%箱
箱だけで平均をとればサクラのP~Tさんは省かれて、2.2点とより
実感に近い平均点(商品のレート)が求められる。
▷ 新しいレーティング方法の考案
新しいレーティング方法の実際適用例
参照:https://books.rakuten.co.jp/rb/1666726/?s-id=review_PC_il_item_01
・中央値は5点
・1点や3点が理不尽な採点
・箱平均なら4.93点
▷ 新しいレーティング方法の考案
新しいレーティング方法のデメリット
しかし、この箱ひげ図を応用したレーティングにも弱点があり、
サクラが多いと、全体平均より箱平均が高くなることがある。
25%ヒゲ 25%ヒゲ50%箱
このケースでは、J~Tさんがサクラだったとする。
全体で平均点を取れば3.4点であるが、箱平均では3.8点となり、
A~Eさんの真摯な低評価が省かれて箱平均スコアが上がってしまう。
A B C D E F G H I J K L M N O P Q R S T
1 1 1 1 1 1 2 2 3 5 5 5 5 5 5 5 5 5 5 5
▷ 新しいレーティング方法の考案
● 新しいレーティング方法を開発することには意味があるとしても、サクラ
が数多くあると評価は歪められてしまう
● 実際、ほとんどのレビューがサクラみたいなことも普通にある
➡プラットフォームのレーティングが正常に運用されるために、
  少しサクラ対策も考えてみよう!
▷ サクラ対策案
新たなシステムの提案
  実名登録・本人確認
     抑止力強化
 フォロー機能
 自分が信用できると思った
  レビュアーのレビューを
  中心にチェック
AIによるサクラチェック
レビューのサクラ度合を数値化
レビューへの評価制度
レビューへのgoodボタン
導入で評価を可視化
▷ サクラ対策案
サクラチェッカー
▷ サクラ対策案
新たなシステムの提案
  実名登録・本人確認
     抑止力強化
 フォロー機能
 自分が信用できると思った
  レビュアーのレビューを
  中心にチェック
AIによるサクラチェック
レビューのサクラ度合を数値化
レビューへの評価制度
レビューへのgoodボタン
導入で評価を可視化
▷ サクラ対策案 レビューへの評価制度
レビューのウェイト付け
A:レビューに対する「good」の数でウェイト付け
B:アカウントのランクでウェイト付け
▷ サクラ対策案 レビューへの評価制度
ウェイト付けの例
・good数のルートを取ったものを掛け合わせ、最終評価に反映させる (A)
・レビュー投稿の際に審査をし、評価に応じたポイントを付与
 総ポイント数によりランクが分かれ、ランク毎の倍率を最終評価に掛け合わせる (B)
 ノーマル:×1.0 ブロンズ:×1.3 シルバー:×1.6 ゴールド:×2.0
例
ゴールドランクの人が商品Aに対して星4の評価をし、
そのレビューに9件のgoodが寄せられた:①
一方、サクラ(ノーマルランク)は星5の評価をしたがgoodは寄せられなかった:②
→① √9×2.0=6
 ② √1×1.0=1
 ①が6人が星4の評価をしたと位置づけるのに対し、②は1人が星5評価をしたと 位置
づけ、サクラの影響力が小さくなる。
※ルートとgoodの倍率は暫定
 good0件の場合は等倍とする
▷ 新しいレーティング方法のまとめ
┃ P.15
概要
v
START
v
※0.5未満なら ※0.5以上なら
v
レビューの中央値と平均値をどちらも算出する。
中央値と平均値の差が……
平均値を採用
再検討
(STEP3へ)
STEP1
STEP2 STEP2
v
STEP3
50%
箱ひげレーティング
サクラ対策をすることで、
レーティング方法以外で
評価を歪ませない
実名登録
本人確認
フォロー
制度
サクラチェッ
カー
レビュー
評価制度
皆さんも、
プラットフォームをつくる際は、
既存のレーティング方法をアレンジして、
最適なレーティング方法を検討してみては
いかがでしょうか?
▷ まとめ
ボルダ? コンドルセ?
MJ?
参照
https://www.autodesk.com/research/publications/same-stats-different-graphs
(2020/11/20 引用)
坂井 豊貴, 2013. 社会的選択理論への招待: 投票と多数決の科学. 日本評論社.
appendix
標本調査におけるサンプル数の求め方
N:調査したい母集団の大きさ
n:標本数
p:回答比率(支持率や保有率などの調査対象者の回答比率)
d:標本誤差
 → 調査結果で容認できる誤差を入れる。得られた結果が母集団の実態からどの程度ずれている
 可能性があるかを表す。
λ:信頼水準
 →正しく判断できる確率。抽出したサンプルの1つがどれくらいの確率で許容誤差内の結果となるかを表す。
*母集団が1,000人以上の場合は、370人~380人にアンケートを実施することにより、母集団の
 人数に関わらず、5%の誤差範囲内で調査を行えます。
n = N / [ ( d / λ ) ^2・{ ( N - 1 ) / p ( 1 - p ) } + 1 ]
▷ ボルダルールが適用できる場面
M-1グランプリ最終決戦
M1グランプリ 2018年 決勝より
現状の審査方法
審査員7名が候補3組から1組のみ投票し、多
数決によって決める。
→ペア敗者が優勝する可能性がある
ボルダールール適用の審査方法
審査員が候補3組の順位を提出する
▷ ボルダルールが適用できる場面
M-1グランプリ最終決戦
● 霜降り:3✖3➕1✖4=13   ➡ペア敗者
● 和牛:3✖2+2✖4➕1✖1=15 ➡ボルダ勝者
● ジャルジャル:3✖2➕2✖3➕1✖2=14
巨人 中川家 ナイツ 志らく サンド 松本 上沼
1位 霜降り 霜降り 霜降り 和牛 和牛 ジャル ジャル
2位 ジャル 和牛 和牛 ジャル ジャル 和牛 和牛
3位 和牛 ジャル ジャル 霜降り 霜降り 霜降り 霜降り
和牛が悲願の優勝となる!!
参考:ボルダルールのみがペア全敗者を選ばない
▷ペア比較でもボルダルール優位?
証明は省略
参考:証明
▷ペア比較でもボルダルール優位?
fを変形する
参考:証明
▷ペア比較でもボルダルール優位?
ボルダ得点p_i (x)が以下であることを利用すると、
fをさらに変形できる
参考:証明
▷ペア比較でもボルダルール優位?
参考:証明
▷ペア比較でもボルダルール優位?
参考:証明
▷ペア比較でもボルダルール優位?

More Related Content

What's hot

傾向スコアマッチと多重補完法の解説 その1
傾向スコアマッチと多重補完法の解説 その1傾向スコアマッチと多重補完法の解説 その1
傾向スコアマッチと多重補完法の解説 その1Atsushi Shiraishi
 
SEMを用いた縦断データの解析 潜在曲線モデル
SEMを用いた縦断データの解析 潜在曲線モデルSEMを用いた縦断データの解析 潜在曲線モデル
SEMを用いた縦断データの解析 潜在曲線モデルMasaru Tokuoka
 
集団スポーツの戦術に関するデータ解析手法
集団スポーツの戦術に関するデータ解析手法集団スポーツの戦術に関するデータ解析手法
集団スポーツの戦術に関するデータ解析手法Keisuke Fujii
 
【書きかけ】一般化線形モデルの流れ
【書きかけ】一般化線形モデルの流れ【書きかけ】一般化線形モデルの流れ
【書きかけ】一般化線形モデルの流れTomoshige Nakamura
 
Topological data analysis
Topological data analysisTopological data analysis
Topological data analysisSunghyon Kyeong
 
媒介分析について
媒介分析について媒介分析について
媒介分析についてHiroshi Shimizu
 
[DL輪読会]V-MPO: On-Policy Maximum a Posteriori Policy Optimization for Discrete...
[DL輪読会]V-MPO: On-Policy Maximum a Posteriori Policy Optimization for Discrete...[DL輪読会]V-MPO: On-Policy Maximum a Posteriori Policy Optimization for Discrete...
[DL輪読会]V-MPO: On-Policy Maximum a Posteriori Policy Optimization for Discrete...Deep Learning JP
 
マーケティングサイエンス徹底入門と実践Part2
マーケティングサイエンス徹底入門と実践Part2マーケティングサイエンス徹底入門と実践Part2
マーケティングサイエンス徹底入門と実践Part2宏喜 佐野
 
エクセルで統計分析2 HADの使い方
エクセルで統計分析2 HADの使い方エクセルで統計分析2 HADの使い方
エクセルで統計分析2 HADの使い方Hiroshi Shimizu
 
明日から読める無作為化比較試験: 行動療法研究に求められる統計学
明日から読める無作為化比較試験: 行動療法研究に求められる統計学明日から読める無作為化比較試験: 行動療法研究に求められる統計学
明日から読める無作為化比較試験: 行動療法研究に求められる統計学Yasuyuki Okumura
 
Tutorial on Polynomial Networks at CVPR'22
Tutorial on Polynomial Networks at CVPR'22Tutorial on Polynomial Networks at CVPR'22
Tutorial on Polynomial Networks at CVPR'22Grigoris C
 
多重代入法(Multiple Imputation)の発表資料
多重代入法(Multiple Imputation)の発表資料多重代入法(Multiple Imputation)の発表資料
多重代入法(Multiple Imputation)の発表資料Tomoshige Nakamura
 
2 5 3.一般化線形モデル色々_Gamma回帰と対数線形モデル
2 5 3.一般化線形モデル色々_Gamma回帰と対数線形モデル2 5 3.一般化線形モデル色々_Gamma回帰と対数線形モデル
2 5 3.一般化線形モデル色々_Gamma回帰と対数線形モデルlogics-of-blue
 
Rで階層ベイズモデル
Rで階層ベイズモデルRで階層ベイズモデル
Rで階層ベイズモデルYohei Sato
 
R Study Tokyo03
R Study Tokyo03R Study Tokyo03
R Study Tokyo03Yohei Sato
 

What's hot (20)

社会心理学とGlmm
社会心理学とGlmm社会心理学とGlmm
社会心理学とGlmm
 
傾向スコアマッチと多重補完法の解説 その1
傾向スコアマッチと多重補完法の解説 その1傾向スコアマッチと多重補完法の解説 その1
傾向スコアマッチと多重補完法の解説 その1
 
非劣性試験の入門
非劣性試験の入門非劣性試験の入門
非劣性試験の入門
 
SEMを用いた縦断データの解析 潜在曲線モデル
SEMを用いた縦断データの解析 潜在曲線モデルSEMを用いた縦断データの解析 潜在曲線モデル
SEMを用いた縦断データの解析 潜在曲線モデル
 
集団スポーツの戦術に関するデータ解析手法
集団スポーツの戦術に関するデータ解析手法集団スポーツの戦術に関するデータ解析手法
集団スポーツの戦術に関するデータ解析手法
 
【書きかけ】一般化線形モデルの流れ
【書きかけ】一般化線形モデルの流れ【書きかけ】一般化線形モデルの流れ
【書きかけ】一般化線形モデルの流れ
 
Topological data analysis
Topological data analysisTopological data analysis
Topological data analysis
 
媒介分析について
媒介分析について媒介分析について
媒介分析について
 
[DL輪読会]V-MPO: On-Policy Maximum a Posteriori Policy Optimization for Discrete...
[DL輪読会]V-MPO: On-Policy Maximum a Posteriori Policy Optimization for Discrete...[DL輪読会]V-MPO: On-Policy Maximum a Posteriori Policy Optimization for Discrete...
[DL輪読会]V-MPO: On-Policy Maximum a Posteriori Policy Optimization for Discrete...
 
2 3.GLMの基礎
2 3.GLMの基礎2 3.GLMの基礎
2 3.GLMの基礎
 
修士論文
修士論文修士論文
修士論文
 
マーケティングサイエンス徹底入門と実践Part2
マーケティングサイエンス徹底入門と実践Part2マーケティングサイエンス徹底入門と実践Part2
マーケティングサイエンス徹底入門と実践Part2
 
エクセルで統計分析2 HADの使い方
エクセルで統計分析2 HADの使い方エクセルで統計分析2 HADの使い方
エクセルで統計分析2 HADの使い方
 
明日から読める無作為化比較試験: 行動療法研究に求められる統計学
明日から読める無作為化比較試験: 行動療法研究に求められる統計学明日から読める無作為化比較試験: 行動療法研究に求められる統計学
明日から読める無作為化比較試験: 行動療法研究に求められる統計学
 
Tutorial on Polynomial Networks at CVPR'22
Tutorial on Polynomial Networks at CVPR'22Tutorial on Polynomial Networks at CVPR'22
Tutorial on Polynomial Networks at CVPR'22
 
多重代入法(Multiple Imputation)の発表資料
多重代入法(Multiple Imputation)の発表資料多重代入法(Multiple Imputation)の発表資料
多重代入法(Multiple Imputation)の発表資料
 
2 5 3.一般化線形モデル色々_Gamma回帰と対数線形モデル
2 5 3.一般化線形モデル色々_Gamma回帰と対数線形モデル2 5 3.一般化線形モデル色々_Gamma回帰と対数線形モデル
2 5 3.一般化線形モデル色々_Gamma回帰と対数線形モデル
 
Rで階層ベイズモデル
Rで階層ベイズモデルRで階層ベイズモデル
Rで階層ベイズモデル
 
R Study Tokyo03
R Study Tokyo03R Study Tokyo03
R Study Tokyo03
 
一般化線形モデル (GLM) & 一般化加法モデル(GAM)
一般化線形モデル (GLM) & 一般化加法モデル(GAM) 一般化線形モデル (GLM) & 一般化加法モデル(GAM)
一般化線形モデル (GLM) & 一般化加法モデル(GAM)
 

More from Osaka-univ Yasuda Seminar 安田ゼミ (9)

Yasuda seminar's Quiz 安田ゼミクイズ
Yasuda seminar's Quiz 安田ゼミクイズYasuda seminar's Quiz 安田ゼミクイズ
Yasuda seminar's Quiz 安田ゼミクイズ
 
21 Jun 2020 Data Analysis Group's Report No3
21 Jun 2020 Data Analysis Group's Report No321 Jun 2020 Data Analysis Group's Report No3
21 Jun 2020 Data Analysis Group's Report No3
 
21 Jun 2020 Data Analysis Group's Report no2
21 Jun 2020 Data Analysis Group's Report no221 Jun 2020 Data Analysis Group's Report no2
21 Jun 2020 Data Analysis Group's Report no2
 
21 Jun 2020 Data Analysis Group's Report No1
21 Jun 2020 Data Analysis Group's Report No121 Jun 2020 Data Analysis Group's Report No1
21 Jun 2020 Data Analysis Group's Report No1
 
08 Jun 2020 Data Analysis Group's Report No3
08 Jun 2020 Data Analysis Group's Report No308 Jun 2020 Data Analysis Group's Report No3
08 Jun 2020 Data Analysis Group's Report No3
 
08 Jun 2020 Data Analysis Group's Report No1
08 Jun 2020 Data Analysis Group's Report No108 Jun 2020 Data Analysis Group's Report No1
08 Jun 2020 Data Analysis Group's Report No1
 
01 Jun 2020 World Economic News
01 Jun 2020 World Economic News01 Jun 2020 World Economic News
01 Jun 2020 World Economic News
 
01 Jun 2020 Japanese Economic News
01 Jun 2020 Japanese Economic News01 Jun 2020 Japanese Economic News
01 Jun 2020 Japanese Economic News
 
20 Apr 2020 World Economic News
20 Apr 2020 World Economic News20 Apr 2020 World Economic News
20 Apr 2020 World Economic News
 

Recently uploaded

My Inspire High Award 2024「なぜ、好きなことにいつかは飽きるの」
My Inspire High Award 2024「なぜ、好きなことにいつかは飽きるの」My Inspire High Award 2024「なぜ、好きなことにいつかは飽きるの」
My Inspire High Award 2024「なぜ、好きなことにいつかは飽きるの」inspirehighstaff03
 
Divorce agreements in administrative work.pdf
Divorce agreements in administrative work.pdfDivorce agreements in administrative work.pdf
Divorce agreements in administrative work.pdfoganekyokoi
 
My Inspire High Award 2024 「本当の『悪者』って何?」
My Inspire High Award 2024 「本当の『悪者』って何?」My Inspire High Award 2024 「本当の『悪者』って何?」
My Inspire High Award 2024 「本当の『悪者』って何?」inspirehighstaff03
 
My Inspire High Award 2024 「AIと仲良くなるには?」
My Inspire High Award 2024 「AIと仲良くなるには?」My Inspire High Award 2024 「AIと仲良くなるには?」
My Inspire High Award 2024 「AIと仲良くなるには?」inspirehighstaff03
 
My Inspire High Award 2024「スーパーマーケットで回収されたキャベツ外葉は廃棄されているの?」
My Inspire High Award 2024「スーパーマーケットで回収されたキャベツ外葉は廃棄されているの?」My Inspire High Award 2024「スーパーマーケットで回収されたキャベツ外葉は廃棄されているの?」
My Inspire High Award 2024「スーパーマーケットで回収されたキャベツ外葉は廃棄されているの?」inspirehighstaff03
 
International Politics I - Lecture 1
International Politics I - Lecture 1International Politics I - Lecture 1
International Politics I - Lecture 1Toru Oga
 
Establishment and operation of medical corporations.pdf
Establishment and operation of medical corporations.pdfEstablishment and operation of medical corporations.pdf
Establishment and operation of medical corporations.pdfoganekyokoi
 
My Inspire High Award 2024    「孤独は敵なのか?」
My Inspire High Award 2024    「孤独は敵なのか?」My Inspire High Award 2024    「孤独は敵なのか?」
My Inspire High Award 2024    「孤独は敵なのか?」inspirehighstaff03
 
My Inspire High Award 2024「他者と自分、対立を防ぐには?」
My Inspire High Award 2024「他者と自分、対立を防ぐには?」My Inspire High Award 2024「他者と自分、対立を防ぐには?」
My Inspire High Award 2024「他者と自分、対立を防ぐには?」inspirehighstaff03
 
My Inspire High Award 2024「なぜ人は他人と違うところがあってもそれをなかなか誇れないのか?」
My Inspire High Award 2024「なぜ人は他人と違うところがあってもそれをなかなか誇れないのか?」My Inspire High Award 2024「なぜ人は他人と違うところがあってもそれをなかなか誇れないのか?」
My Inspire High Award 2024「なぜ人は他人と違うところがあってもそれをなかなか誇れないのか?」inspirehighstaff03
 
My Inspire High Award 2024「老いることは不幸なこと?」
My Inspire High Award 2024「老いることは不幸なこと?」My Inspire High Award 2024「老いることは不幸なこと?」
My Inspire High Award 2024「老いることは不幸なこと?」inspirehighstaff03
 
My Inspire High Award 2024「Yakushima Islandってなんか変じゃない?」.pdf
My Inspire High Award 2024「Yakushima Islandってなんか変じゃない?」.pdfMy Inspire High Award 2024「Yakushima Islandってなんか変じゃない?」.pdf
My Inspire High Award 2024「Yakushima Islandってなんか変じゃない?」.pdfinspirehighstaff03
 
My Inspire High Award 2024      「家族とは何か」
My Inspire High Award 2024      「家族とは何か」My Inspire High Award 2024      「家族とは何か」
My Inspire High Award 2024      「家族とは何か」inspirehighstaff03
 
My Inspire High Award 2024「世の中の流行はどのようにして生まれるのか」
My Inspire High Award 2024「世の中の流行はどのようにして生まれるのか」My Inspire High Award 2024「世の中の流行はどのようにして生まれるのか」
My Inspire High Award 2024「世の中の流行はどのようにして生まれるのか」inspirehighstaff03
 
My Inspire High Award2024「外国人が日本のテーブルマナーに驚く理由は?」
My Inspire High Award2024「外国人が日本のテーブルマナーに驚く理由は?」My Inspire High Award2024「外国人が日本のテーブルマナーに驚く理由は?」
My Inspire High Award2024「外国人が日本のテーブルマナーに驚く理由は?」inspirehighstaff03
 
3年前期 交通基盤工学 第一回 ガイダンス 交通基盤工学の概要  パワーポイント
3年前期 交通基盤工学 第一回 ガイダンス 交通基盤工学の概要  パワーポイント3年前期 交通基盤工学 第一回 ガイダンス 交通基盤工学の概要  パワーポイント
3年前期 交通基盤工学 第一回 ガイダンス 交通基盤工学の概要  パワーポイントshu1108hina1020
 
My Inspire High Award 2024  「正義って存在するの?」
My Inspire High Award 2024  「正義って存在するの?」My Inspire High Award 2024  「正義って存在するの?」
My Inspire High Award 2024  「正義って存在するの?」inspirehighstaff03
 
【ゲーム理論入門】ChatGPTが作成した ゲーム理論の問題を解く #3 Slide
【ゲーム理論入門】ChatGPTが作成した ゲーム理論の問題を解く #3 Slide【ゲーム理論入門】ChatGPTが作成した ゲーム理論の問題を解く #3 Slide
【ゲーム理論入門】ChatGPTが作成した ゲーム理論の問題を解く #3 Slidessusere0a682
 
My Inspire High Award 2024「なぜ議会への関心が低いのか?」
My Inspire High Award 2024「なぜ議会への関心が低いのか?」My Inspire High Award 2024「なぜ議会への関心が低いのか?」
My Inspire High Award 2024「なぜ議会への関心が低いのか?」inspirehighstaff03
 
What I did before opening my business..pdf
What I did before opening my business..pdfWhat I did before opening my business..pdf
What I did before opening my business..pdfoganekyokoi
 

Recently uploaded (20)

My Inspire High Award 2024「なぜ、好きなことにいつかは飽きるの」
My Inspire High Award 2024「なぜ、好きなことにいつかは飽きるの」My Inspire High Award 2024「なぜ、好きなことにいつかは飽きるの」
My Inspire High Award 2024「なぜ、好きなことにいつかは飽きるの」
 
Divorce agreements in administrative work.pdf
Divorce agreements in administrative work.pdfDivorce agreements in administrative work.pdf
Divorce agreements in administrative work.pdf
 
My Inspire High Award 2024 「本当の『悪者』って何?」
My Inspire High Award 2024 「本当の『悪者』って何?」My Inspire High Award 2024 「本当の『悪者』って何?」
My Inspire High Award 2024 「本当の『悪者』って何?」
 
My Inspire High Award 2024 「AIと仲良くなるには?」
My Inspire High Award 2024 「AIと仲良くなるには?」My Inspire High Award 2024 「AIと仲良くなるには?」
My Inspire High Award 2024 「AIと仲良くなるには?」
 
My Inspire High Award 2024「スーパーマーケットで回収されたキャベツ外葉は廃棄されているの?」
My Inspire High Award 2024「スーパーマーケットで回収されたキャベツ外葉は廃棄されているの?」My Inspire High Award 2024「スーパーマーケットで回収されたキャベツ外葉は廃棄されているの?」
My Inspire High Award 2024「スーパーマーケットで回収されたキャベツ外葉は廃棄されているの?」
 
International Politics I - Lecture 1
International Politics I - Lecture 1International Politics I - Lecture 1
International Politics I - Lecture 1
 
Establishment and operation of medical corporations.pdf
Establishment and operation of medical corporations.pdfEstablishment and operation of medical corporations.pdf
Establishment and operation of medical corporations.pdf
 
My Inspire High Award 2024    「孤独は敵なのか?」
My Inspire High Award 2024    「孤独は敵なのか?」My Inspire High Award 2024    「孤独は敵なのか?」
My Inspire High Award 2024    「孤独は敵なのか?」
 
My Inspire High Award 2024「他者と自分、対立を防ぐには?」
My Inspire High Award 2024「他者と自分、対立を防ぐには?」My Inspire High Award 2024「他者と自分、対立を防ぐには?」
My Inspire High Award 2024「他者と自分、対立を防ぐには?」
 
My Inspire High Award 2024「なぜ人は他人と違うところがあってもそれをなかなか誇れないのか?」
My Inspire High Award 2024「なぜ人は他人と違うところがあってもそれをなかなか誇れないのか?」My Inspire High Award 2024「なぜ人は他人と違うところがあってもそれをなかなか誇れないのか?」
My Inspire High Award 2024「なぜ人は他人と違うところがあってもそれをなかなか誇れないのか?」
 
My Inspire High Award 2024「老いることは不幸なこと?」
My Inspire High Award 2024「老いることは不幸なこと?」My Inspire High Award 2024「老いることは不幸なこと?」
My Inspire High Award 2024「老いることは不幸なこと?」
 
My Inspire High Award 2024「Yakushima Islandってなんか変じゃない?」.pdf
My Inspire High Award 2024「Yakushima Islandってなんか変じゃない?」.pdfMy Inspire High Award 2024「Yakushima Islandってなんか変じゃない?」.pdf
My Inspire High Award 2024「Yakushima Islandってなんか変じゃない?」.pdf
 
My Inspire High Award 2024      「家族とは何か」
My Inspire High Award 2024      「家族とは何か」My Inspire High Award 2024      「家族とは何か」
My Inspire High Award 2024      「家族とは何か」
 
My Inspire High Award 2024「世の中の流行はどのようにして生まれるのか」
My Inspire High Award 2024「世の中の流行はどのようにして生まれるのか」My Inspire High Award 2024「世の中の流行はどのようにして生まれるのか」
My Inspire High Award 2024「世の中の流行はどのようにして生まれるのか」
 
My Inspire High Award2024「外国人が日本のテーブルマナーに驚く理由は?」
My Inspire High Award2024「外国人が日本のテーブルマナーに驚く理由は?」My Inspire High Award2024「外国人が日本のテーブルマナーに驚く理由は?」
My Inspire High Award2024「外国人が日本のテーブルマナーに驚く理由は?」
 
3年前期 交通基盤工学 第一回 ガイダンス 交通基盤工学の概要  パワーポイント
3年前期 交通基盤工学 第一回 ガイダンス 交通基盤工学の概要  パワーポイント3年前期 交通基盤工学 第一回 ガイダンス 交通基盤工学の概要  パワーポイント
3年前期 交通基盤工学 第一回 ガイダンス 交通基盤工学の概要  パワーポイント
 
My Inspire High Award 2024  「正義って存在するの?」
My Inspire High Award 2024  「正義って存在するの?」My Inspire High Award 2024  「正義って存在するの?」
My Inspire High Award 2024  「正義って存在するの?」
 
【ゲーム理論入門】ChatGPTが作成した ゲーム理論の問題を解く #3 Slide
【ゲーム理論入門】ChatGPTが作成した ゲーム理論の問題を解く #3 Slide【ゲーム理論入門】ChatGPTが作成した ゲーム理論の問題を解く #3 Slide
【ゲーム理論入門】ChatGPTが作成した ゲーム理論の問題を解く #3 Slide
 
My Inspire High Award 2024「なぜ議会への関心が低いのか?」
My Inspire High Award 2024「なぜ議会への関心が低いのか?」My Inspire High Award 2024「なぜ議会への関心が低いのか?」
My Inspire High Award 2024「なぜ議会への関心が低いのか?」
 
What I did before opening my business..pdf
What I did before opening my business..pdfWhat I did before opening my business..pdf
What I did before opening my business..pdf
 

inter seminar インゼミ資料