数据新闻实用法宝——入门篇

分享给朋友:

作者:财新数据可视化实验室助理陈嘉慧

不久之前撰文分享过,我在“2014年亚洲数据新闻工作坊”的所学所得,文末列举了一系列导师们在课中演示过的数据新闻工具,惟当时介绍的比较简单,所以希望再借这个平台,更具体地介绍各工具的使用方法、经典案例等资料。这些工具都十分直接易用,并且没有技术要求,十分适合初学者。

数据挖掘工具

  1. Import.io

一句话介绍:Import.io能自动识别网页结构,抓取内容,并生成表格供使用者下载,不要求使用者写任何代码。最适合用于内容量大,并且内容格式统一的网站,产品展示网页是一个典型例子。同类型工具有Kimono

 

最近跟朋友讨论东南亚的电商市场,提到有“亚洲亚马逊”之称的Lazada。这家电商已经横扫包括新加坡、泰国和印尼等东南亚新兴市场,亦有人将之视为中国品牌登陆东南亚市场的最佳平台。既然耳闻这现象,不如就统计一下有多少部中国品牌手机已经进驻这个网站。

1

商品资料排得方方正正,虽然适合展示,却不适用于数据分析,需要用Import.io将内容导成表格。

2

Import.io自动识别网页的结构,并将内容转化成表格,同类型内容自动归类排列。如Import.io抓取了不需要的资料,可以将之删除。 把表格导入Microsoft Excel,可以进行更进一步的数据整理与分析。

 

案例:

What Music Matters Most to KEXP

美国西雅图的地区广播电台KEXP的官方网站上,有一个实时更新的播放列表,将电台所有播放过的音乐都记录下来。数据分析家及音乐爱好者Jewel Loree统计了2013年KEXP所有播放过的音乐。她用Import.io抓取了网站的数据,利用Tableau(将于下一部分介绍)制作成可视化图表,并以不同角度作分析,例如统计不同时期,电台的音乐总播放率。

3

按星期统计的电台音乐播放率,可以看到有些日子的音乐播放次数特别少。

 

  1. Cometdocs

一句话介绍:Cometdocs将PDF文档转换成Microsoft Word, Excel, PowerPoint等格式文档。同类型工具有:Cloudconvert

 

许多机构发表公开报告时,都会选择以PDF文档形式发布,以确保文档内容与格式,在不同的设备和平台上都能够忠实再呈现,杜绝内容缺失、格式错位等情况。以PDF文档发表资料比较正式,也符合读者的阅读习惯。但PDF文档却不太支持数据分析,拷贝表格到其他程序通常会错格式,逐字敲打又费时失事。当记者收到PDF格式的数据表格时,可使用Cometdocs将表格转成Excel或其他格式的文档,方便分析。

4

以上是2014年全球各国的人类发展指数,刊载于同年的人类发展报告,报告以PDF格式发布。

5

Cometdocs能将PDF文档转成不同格式的文档,如Microsoft Word、Microsoft Excel、Microsoft PowerPoint等。

 

  1. Wayback Machine

一句话介绍:Wayback Machine提供网站历史备份查询服务,适合用于需要长期追踪的调查报道。

 

之前的文章提到,任何人或机构只要上网,都必定会留下“网上足印”,Wayback Machine就能帮你查找这些足印。这个工具自1996年起,定期访问全球网站,抓取信息,收录并备份,不过它不保证能把网站每一个版本全部抓取。

7

只要将网址输进Wayback Machine,就能查看网页的备份历史备份。

 

数据可视化工具

  1. Batchgeo

一句话介绍:Batchgeo能批量标注地图位置标记,最适合用于分析和呈现具有区域特征的数据。

同类型工具:地图汇

地图可视化是数据可视化的重要分支,此项技术将不同区域或地点的数据,标注在地图上,旨在让读者更容易明白数据在不同地域中的分布和规律。地图可视化尤其适合用于对地区性社会问题的研究和报道,例如贫穷与社会保障网络的分布,基础设施在富人区是否更完善等。大家都会关心自己生活的地方附近,医疗设施是否完善,想查证的话,可以运用Batchgeo,批量把城市的公共医院、诊所在地图上标注出来,再作分析。

把公共医院的地址(先用其中4家医院举例),根据Batchgeo给的格式,制作成Excel表格,将数据黏贴至batchgeo。

10

Batchgeo调用Google Map,批量标注地点。得出地图后,可以加入其他参数,如各地区的平均收入,平均年龄等,深入探讨一个城市的医疗网络分布是否合理。

案例:

Sex Offender Data by ZIP Code

美国Detroit Free Press利用Batchgeo,将密歇根州的性犯罪者的分布,制作成互动数据新闻。密歇根州法律要求警方公开性犯罪者名册,市民可在名册网站,输入地址,查看附近社区的性犯罪者的资料。报道中,记者查考该州份的性犯罪者名册,并按社区人口,计算出每1000人口中,性犯罪者(服刑中的性犯罪者除外)的数字,批量标注在地图上。

11

 

Tableau

一句话介绍:Tableau支持快速海量数据分析,可视化图表制作和共享。同类型工具有:SilkPlot.ly

Tableau简单易用,十分适合初学者。这个工具的另外一个优点是,国内有公司专门代理,并提供中文版,而且网上有许多讨论群组和资源分享,要搜寻教学资料和案例,绝无难度。

Tableau 界面

Tableau 界面

 

案例:

Metro Vancouver Commuting Pattern

除了之前介绍过的What Music Matters Most to KEXP外,在这个数据新闻案例中,加拿大新闻网站Vancouver Sun收集了大温哥华地区里居民的通勤数据,在Tableau中进行处理,并制作成可视化图表。

13

以上工具均简单易用,在资金和时间都紧缺的新闻编辑室里,绝对是记者的好帮手;同时,这些工具亦是新手了解数据结构和可视化呈现的入门法宝。

作者简介

数据新闻网

数据新闻网以引介全球范围内最顶尖的数据新闻实践为初衷,以推动数据开放及媒体革新为宗旨,面向中国的新闻从业者、媒体管理者、新传教育者以及对传媒感兴趣的设计师、程序员,提供线上信息平台与线下交流机会。