2021認知科学会企画シンポのスライドです

1. GoToオンライン
-Web実験・調査を利用した非接触型ヒト行動データ収集-
佐々木 恭志郎
関西大学

2. かるく自己紹介
専門：実験心理学
実験室での
行動実験がメイン

3. 心の仕組みを調べる
調査・実験

4. 実験室実験
一般的な心理学の実験・・・実験室利用
統制された環境下に被験者に来てもらって実験

5. コロナ禍
わりとこれらに抵触する

6. コロナ禍
わりとこれらに抵触する
現在かなりしーきび・・・
さあオンラインへ！

7. オンライン実験
コロナ禍以前からオンラインでの心理実験は
行われていた

8. オンライン実験例
尺度研究・評定
e.g., Ojiro et al., 2015; Sasaki et al., 2017; Yamada et al., 2020; Yonemitsu et al., 2020, 2021
Walker & Vul, 2014 より

9. オンライン実験例
視覚探索 注意の瞬き
他にも多数・・・
R
3
A
5
RED
ストループ
e.g., Barnhoorn et al., 2014, 2015; de Leeuw & Motz, 2015; Majima, 2017

10. オンライン実験例
乱雑さ知覚
e.g., Lafer-Sousa et al., 2015; Yamada, 2015
色知覚
知覚研究もちょいちょい

11. オンライン実験例
乱雑さ知覚
e.g., Lafer-Sousa et al., 2015; Yamada, 2015
色知覚
知覚研究もちょいちょい
評定やカラーマッチングなどで行われている
オーソドックスな心理物理学的測定法を
用いた知覚研究はどうか？

12. オンラインでコントラスト閾値測定
コントラスト閾値を恒常法により測定
オンラインと実験室で比較
Sasaki & Yamada, 2019
10
20
30
40
0 2 4 6 8
Spatial frequency(cpd)
Thresholds(%)
Laboratory
Online non−repetition
Online repetition
空間周波数(cpd)
閾
値
(%)
実験室
オンライン繰り返しなし
オンライン繰り返し
同一の測定方法なら同等
Space
Fixation
(500 ms)
Stimulus
(50 ms)
Blank
(300 ms)
Response
Press a key
In which direction was the stimulus tilted?

13. オンラインでコントラスト閾値測定
コントラスト閾値を恒常法により測定
オンラインと実験室で比較
Sasaki & Yamada, 2019
10
20
30
40
0 2 4 6 8
Spatial frequency(cpd)
Thresholds(%)
Laboratory
Online non−repetition
Online repetition
空間周波数(cpd)
閾
値
(%)
実験室
オンライン繰り返しなし
オンライン繰り返し
同一の測定方法なら同等
Space
Fixation
(500 ms)
Stimulus
(50 ms)
Blank
(300 ms)
Response
Press a key
In which direction was the stimulus tilted?
ただし・・・

14. オンラインでコントラスト閾値測定
オンライン繰り返し有はえぐい除外数
166名 → 82名 (84名除外; 残存率 49%)
参考までにほかも・・・
実験室: 24名 → 22名 (2名除外; 残存率 92%)
オンライン繰り返し無: 285名 → 266名 (19名除外; 残存率 93%)

15. オンラインでコントラスト閾値測定
オンライン繰り返し有はえぐい除外数
166名 → 82名 (84名除外; 残存率 49%)
参考までにほかも・・・
実験室: 24名 → 22名 (2名除外; 残存率 92%)
オンライン繰り返し無: 285名 → 266名 (19名除外; 残存率 93%)
色々留意点はあるが無理ではない

16. オンライン実験例
発達研究もちょいちょい
Lookit

17. オンライン実験例
草の根的に我々も・・・
幼児・児童対象に質問紙とビデオチャットツール
を駆使して評定実験 笠原・鈴木・佐々木・山田・伊村・白井, 2021

18. どこから被験者集める？

19. 授業や学内募集
授業や学内ポータルサイトももちろん考えられうる

20. 被験者プール
もちろん独自の被験者プールも選択肢の一つ

21. クラウドソーシング
クラウドソーシングで募集

22. クラウドソーシング
クラウドソーシングとは
インターネットを通して不特定多数に実験参加させる手法
研究者
参加者
(不特定多数)
仲介業者
研究者と参加者間の匿名性が保持

23. クラウドソーシング
クラウドソーシングの利点
低コスト
多様なサンプル 昼夜問わず
実施可能
※最低10円/人

24. クラウドソーシング
MTurk
ヤフクラ
クラウドワークス
代表的なクラウドソーシングサービス
Prolific

25. Yahooクラウドソーシング

26. Yahooクラウドソーシング

27. Yahooクラウドソーシング

28. yahooクラウドソーシング
性別・年齢情報
0
100
200
300
400
500
600
700
800
13 17 20 23 26 29 32 35 38 41 44 47 50 53 56 59 62 65 68 71 74 77 80 83
人数
年齢
男性
女性
男性: 平均40.62歳
女性: 平均37.52歳
t(26545)=25.17, p <.001, d=0.31

29. どうやってやる？

30. Google form
GUIで尺度研究や評定研究はそこそこできる(無料)

31. Google form
GUIで尺度研究や評定研究はそこそこできる(無料)
自由度・・・

32. Qualtrics
GUIで尺度研究や評定研究(ポインティングも?)できる
ただ結構な費用かかるはず

33. Gorilla.sc
GUIでオードドックスな認知実験できる
難波先生(理研)のページ
データDLするのに1人につき120円かかる

34. Gorilla.sc
GUIでオードドックスな認知実験できる
難波先生(理研)のページ
データDLするのに1人につき120円かかる
予算潤沢ならいいけどさ・・・

35. lab.js/lab.js Builder
心理学実験作成用のJavaScriptライブラリ
GUIで実験作成もできる(lab.js Builder)

36. lab.js/lab.js Builder
慣れてればコーディングで色々やることもできる

37. lab.js/lab.js Builder
慣れてればコーディングで色々やることもできる
サーバーが必要

38. lab.js/lab.js Builder + Open Lab
Open Labはlab.jsと連携スムーズ！
同時実施できる実験数 各実験の参加可能数 費用
無料プラン 1 300 ゼロ
プロプラン 5 1000 月約800円
ラボプラン 無制限 無制限 月約2000円

39. lab.js/lab.js Builder
大杉先生と小林先生 (山形大) の神解説ページがある！

40. jsPsych
心理学実験作成用のJavaScriptライブラリ
コード書くのに抵抗ないならいける！

41. jsPsych/jspsych-psychophysics
jspsych-psychophysicsをプラグインとして
使えばさらに る
Kuroki, 2020

42. jsPsych/jspsych-psychophysics
jspsych-psychophysicsをプラグインとして
使えばさらに る
Kuroki, 2020

43. jsPsych/jspsych-psychophysics + Cognition.run
Cognition.runにアップしてリンク生成して
配布できる (オールフリー)

44. jsPsych/jspsych-psychophysics
黒木先生(九大)の
Qiita
高橋先生(立命)の
キソジオンライン
国里先生(専修大)
のページ

45. ちなみに

46. JATOS
もちろん自前のサーバーやVPSを借りるのもあり
JATOSを使うと被験者管理が る(らしい)
眞嶋先生(北星学園大)の
note

47. おなじみのやつ使えたりします

48. Psychopy
実はPsychoPyでできなくもない

49. Psychopy
実はPsychoPyでできなくもない
サーバーどうすんの？

50. Psychopy + Pavlovia
Pavloviaを使ってみるのがいいかも
データ1人につき30円かかる
川島先生(阪大)のページ

51. Matlab + Psychtoolbox
Matlab + Psychtoolboxもいけるようになるらしい！

52. 留意点

53. 参加者の手抜き (Satisficing)
(特にクラウドソーシング) 注意が逸れる/
手を抜く被験者も多い

54. Satisficing対処法
21 + 52 = ?
注意チェック課題 教示操作チェック
などなど・・・

55. サンプルサイズ
環境の違いやSatisficingに起因するノイズが
データに混入しやすい
→ 効果が小さくなる可能性は十分にある
これくらいやろ！ ファッ！？

56. サンプルサイズ
検定力分析を行う際にはそれ考慮して効果量の設定
をするのがベターかも

57. 倫理問題
オンライン研究については国内には統一的な
倫理ガイドラインがない

58. 倫理問題
現状ではイギリス心理学会やウォータールー大の
ガイドラインを参考に配慮するしかないかも

59. というわけで

60. 気軽にご相談ください
私で良ければ些細なことでも気軽にどうぞ
アドレス

61. 認知科学研究のDX
オンライン実験・調査は認知科学研究のDXの
中核の一つ

62. 認知科学研究のDX
オンライン実験・調査は認知科学研究のDXの
中核の一つ
「いともたやすく行われるえげつない研究行為」
にも活用されたはず！
山田先生にバトンタッチ！