Presentation of Data journalism at NCCU / Taiwan

1. #DDJ –
資料新聞學 101
OPENCAMPUS / 張維志 – 2013/11/04

2. 重點摘要
• 資料新聞學？
• 是什麼，與為什麼
• #DDJ vs 其他形式的新聞報導
• vs 傳統新聞報導 (+ 調查報導)
• vs 電腦輔助報導 (Computer assisted Reporting)
• #DDJ 工作流程 WorkFlow
• 一切都是從資料開始 – 資料搜尋與處理
• 一切也以資料為終點 – 用資料說故事
• #DDJ – 跨出第一步
• 找出議題，找到資料
• 簡單的說出一個故事

3. 資料新聞學 101
是什麼？
3
與，為什麼？

4. 資料新聞學 101
http://www.cw.com.tw/PicChannelPage/pic_article_cw52701.jsp
4
互動圖表／全台「臨時工老師」人數大揭密

5. 資料新聞學 101
http://www.cw.com.tw/PicChannelPage/pic_article_cw52502.jsp
5
全球圖表／台灣人「又愛又怕」創業

6. 資料新聞學 101
風機叢林 運動和政治
苑裡到底發生了什麼事？
6
http://www.coolloud.org.tw/node/73858

7. 資料新聞學 101
http://blog.xuite.net/yehjo01/blog/66492530%E9%8C%A2%E5%BE%9E%E5%93%AA%E8%A3%A1%E4%
BE%86%3E
7
錢從哪裡來

8. 資料新聞學 101
上面的範例，似乎要告訴我們一些事情
（故事）？
但是，是什麼
8
故事(新聞）？

9. 資料新聞學 101
http://www.economist.com/blogs/graphicdetail/2
013/11/daily-chart

10. 資料新聞學 101
10
C02 排放量

11. 11
資料新聞學 101

12. 12
資料新聞學 101

13. 13
資料新聞學 101

14. http://opendata.zeit.de/atomreaktoren/#/en/
14
資料新聞學 101

15. 資料新聞學 101

16. 資料新聞學 101
Data + Journalism
資料 + 新聞（學）

17. 資料新聞學 101
故事 / 新聞
17
才是重點

18. 資料新聞學 101
Data Driven
Journalism
從資料中找出故事，用
資料來說故事 #DDJ

19. 資料新聞學 101
為什麼忽然 (2010)
大家都在談
19
「資料新聞學」？

20. 資料新聞學 101
http://www.theguardian.com/news/datablog/2011/sep/2
6/data-journalism-guardian#_
20
The first Guardian data journalism:
May 5, 1821

21. 資料新聞學 101
極座標圖餅圖
21
1854

22. 資料新聞學 101
2010.07
Wikileaks
91,731 份文件
2001.04 – 2009.12
22
三大新聞媒體

23. 23
資料新聞學 101

24. http://www.theguardian.com/news/datablog/2010/jul/27/
wikileaks-afghanistan-data-datajournalism#_
24
資料新聞學 101

25. http://mirror.wikileaks.info/wiki/Afghan_War
_Diary,_2004-2010/
25
資料新聞學 101

26. 26
資料新聞學 101

27. 資料新聞學 101
從此，資料新聞學
成為新聞界新寵
27
And WHY?

28. 28
資料新聞學 101

29. 資料新聞學 101
生活越來越仰賴
資訊的流通與
29
資料的解讀

30. 30
資料新聞學 101

31. 31
資料新聞學 101

32. 資料新聞學 101
誰來將資料轉為資訊
32
將資訊轉為故事

33. 資料新聞學 101
但是，如果只是這樣，
33
那和傳統新聞有什麼差異？

34. 資料新聞學 101
vs 傳統媒體
資料與人
34
主與客的關係

35. 資料新聞學 101
vs 電腦輔助報導
資料來源更多
資料產量更大
35
工具與技術能力更強

36. 資料新聞學 101
或許，最大的差異是
我們有更多方法
用資料的「呈現」
36
來說我們的故事

37. 資料新聞學 101
資料的呈現：
• 簡單的試算表格
• 統計圖表
• 其他關係圖表（地圖，時間軸..
• 動態呈現
• 資訊圖表
37
• 互動設計…

38. 資料新聞學 101
但是..
資料新聞並不就是一些圖表與視覺化的呈
現，而是關乎如何以最佳方式來說故事。
有的時候那確實會是一種視覺呈現或地圖，
但有時則是新聞故事，而有的時候，光是
數字即已足夠
38
(Simons ROGERS - Facts are sacred：The power of data)

39. 資料新聞學 101
關於巨量資料
39
Big Data

40. 資料新聞學 101
三個層面：
巨量 – 就是很多很多非常多！
即時性 – 沒完沒了馬上要
40
多樣性 – 影音文字全都來

41. 資料新聞學 101
迷思：
只有碰觸巨量資料才是
41
資料新聞學

42. 資料新聞學 101
42
#DDJ 工作流程
Workflow

43. 資料新聞學 101
做出一篇報導前…

44. 資料新聞學 101
我們拿到的可能是：
Html / CSV /
SQL / KML…
• 2010.07.25
• 91,731 份文件
• Afghan war diary
• 2010.07.25
• 91,731 份文件
• 2004.01 – 2009.12
http://mirror.wikileaks.info/wiki/Afghan_War
_Diary,_2004-2010/

45. 45
資料新聞學 101

46. 資料新聞學 101
一切都從這開始：
• 我有個問題，想找答案
46
• 我有組資料集 (dataset) 我
想看看能「挖掘」出什麼

47. http://onlinejournalismblog.wordpress.com/2011/07/07/theinverted-pyramid-of-data-journalism/
47
資料新聞學 101

48. 資料新聞學 101
Simon ROGERS
“Before a dataset results in a data
journalism story, there’s a whole process of
sifting and finessing and generally sorting the
data out. The split is roughly 70% tidying up
the data, 30% doing the fun stuff of visualising
and presenting it.”

49. 資料新聞學 101
• 資料匯整
• 資料清理
• 資料解讀
• 資料整合
• 說出故事

50. 資料新聞學 101
資料匯整 – 把資料找出來
•
網路搜尋
•
政府部門與政府資訊公開法
•
開放資料與網路資料庫
•
NPO / NGO 與倡議組織
•
鄉民 (SNS) 與駭客

51. 資料新聞學 101
資料清理 – 資料集的格式與內容
• 將資料轉為程式（電腦）可讀可運算格式
• 將資料中遺漏，缺失，重複，錯誤格式等找
出並修復

52. 資料新聞學 101
資料解讀 – 定義出資料的含意與可信度
• 資料存在的原因 – 資料來源
• 資料內容與單位

53. 資料新聞學 101
資料整合 – 整理出一個回答問題的資料集
• 原始資料集的重新排序，切割，合併，簡化
• 與其他資料集的混搭 – Mashup
• 從空間，時間，連結關係上開始

54. 資料新聞學 101
接下來？
問題有得到答案嗎？
需要更多資料？
那就重新再跑一次吧

55. 資料新聞學 101
怎麼好像是在寫論文？！
這是新聞報導…
55
不是論文寫作…

56. 資料新聞學 101
說出你的故事
視覺化
敘述
社群網路
人性化
個人化
56
實用化

57. 資料新聞學 101
從資料中找出故事
http://ansnuclearcafe.org/2011/11/20/79th-carnival-of-nuclearbloggers/storyteller/
57
用資料說故事

58. 資料新聞學 101
http://www.ted.com/talks/hans_rosling_shows_the_best_stats_yo
u_ve_ever_seen.html
58
Hans Rosling: The best stats you've ever seen

59. 資料新聞學 101
有時，
簡單的圖表和表格
59
就夠了…

60. 資料新聞學 101
重點是，
資料是一切的核心！
資料與其他事物 (人事
時地物) 比較下的「關係」
60
而我們要說的是，

61. 資料新聞學 101
• Data visualization – 資料視覺化
統計圖表 (量化比較)
地圖 (空間關係)
時間軸 (時間關係)
文字雲
樹狀圖，層級表示
…
61
•
•
•
•
•
•

62. 資料新聞學 101
統計圖表 :
Many Eyes
•
Google Charts
•
Tableau Public
•
Google Fusion Tables
•
High Charts
62
•

63. 資料新聞學 101
統計圖表 - 變形 :
Bubble Cloud
Many Eyes
•
d3 / Protovis
63
•

64. 資料新聞學 101
統計圖表 - 變形 :
Tree Map
Many Eyes
•
Google Charts
•
d3 / Protovis
64
•

65. 資料新聞學 101
地圖 dot distribution map :
GeoCommons
•
Google Fusion Table
•
Polymaps
•
TileMill
•
Google Maps API
•
d3 / Protovis
65
•

66. 資料新聞學 101
時間軸 :
Excel
•
Timeline JS
•
TimeFlow
66
•

67. 資料新聞學 101
文字雲 / 標籤雲 :
Wordle
•
Many Eyes
•
d3
67
•

68. 資料新聞學 101
還有很多很多工具
68
和呈現方法

69. 資料新聞學 101
靜態之外還有動態 (News Apps)
http://projects.propublica.org/schools/states/ny
69
The Opportunity Gap

70. 70
資料新聞學 101
http://www.nytimes.com/interactive/2010/11/13/weekinr
eview/deficits-graphic.html?_r=0

71. 資料新聞學 101
看起來好像很有趣
71
那我該如何開始

72. 72
資料新聞學 101

73. http://schoolofdata.org/data-expeditions/guide-for-guides/
73
資料新聞學 101

74. 資料新聞學 101
你該學會的新把戲
你該學會的新把戲 2
基礎技能（Fundamentals）
統計（Statistics）
程式設計（Programming）
機器學習（Machine
Learning）
5. 文字探勘/自然語言處理
（Text Mining / Natural
Language Processing）
6. 資料視覺化（Data
Visualization）
7.
8.
9.
10.
11.
大量資料（Big Data）
Data Ingestion
Data Wrangling
工具（Toolbox)
其他？
74
1.
2.
3.
4.

75. 資料新聞學 101
重點其實是
75
要有一顆好奇的心

76. 76
資料新聞學 101

77. 資料新聞學 101
對拿到的資料都
77
保持質疑的態度

78. 78
資料新聞學 101

79. 資料新聞學 101
如科學家一般的嚴謹
correlation
vs
79
causation

80. 資料新聞學 101
最後，決定一切的
80
是你的創意

81. 資料新聞學 101
剩下的… 技術是練出來的
基本工是一定要會的：
81
Excel / 試算表

82. 資料新聞學 101
對資料，統計，程式語言和網路工具…
82
想辦法多學一點是有幫助的..

83. 資料新聞學 101
對資料的感覺，對新聞的敏感度，
也是培養出來的
資料素養
+
83
新聞鼻

84. 資料新聞學 101
資料新聞學，
是新聞的一種形式
也是我們學習如何「發現」，
「閱讀」，「述說」
84
世界的一種方法

85. OPENCAMPUS / 張維志
Contact me :
• http://www.opendata.tw
• http://fb.me/opendata.tw
• http://fb.me/groups/Open.Campus/
• whisky@opendata.tw
• Twitter : @silmaris