大数据是指数据集非常庞大,常用的软件工具无法在合理的时间内捕获、整理、管理和处理这些数据。
大数据既包括非结构化数据,也包括结构化数据。2016年的定义指出:“大数据是指信息资产,其特点是数量大、速度快、种类多,需要特定的技术和分析方法才能将其转化为价值。”
大数据之所以能成为一个领域,是因为技术进步带来了以下结果:
数据呈指数增长(见下图)
人工智能等工具可以将数据转化为有价值的东西。
数据的一天
图片:Visual Capitalist
大数据可用于揭示模式、预测风险和机遇并为系统提供新的见解。
Netflix 算法就是大数据应用的一个例子,它利用您的个人数据并将其与全球 7500 多万用户的数据相结合。这些数据被输入到人工智能算法中,该算法可以预测您接下来可能想看的内容模式,并为您提供一般来说非常准确的建议!
我们听到的有关大数据的故事往往带 哥斯达黎加电话号码数据 有负面色彩。例如,Shoshana Zuboff 谈到大数据如何支持“监控资本主义”的出现。然而,虽然大量大数据的用途值得怀疑,但情况并不一定如此。
我们需要更多地思考如何重新利用大数据提供的价值并将其应用于社会公益。
系统思维遇见大数据
系统思维和大数据作为独立领域有真正的优势,但也存在一些关键的弱点。
大数据非常适合观察广泛的模式和趋势,但可能会忽略人眼可以发现的细微差别,而这些细微差别是个人和社区故事的重要组成部分。
另一方面,系统思维作为一种方法论可以发掘强大而复杂的见解,但这个过程非常缓慢,并且耗费大量的资源。
每个领域相互之间的互补性显而易见。在寻求了解社区和解决社会挑战时,系统思维可以带来深度和细微差别,而大数据则可以洞察模式和风险,而这些模式和风险只有在一定计算能力的帮助下才有可能发掘出来。正如达娜·博伊德和凯特·克劳福德在 2011 年所写的那样:“大数据有能力让我们了解人类网络和社区。”
例如,开放数据门户网站对于那些想要深入了解社区的人来说是极其有用的资源。发布的数据集可用于深入了解特定社区内的社会福利;可以揭示医疗和社会保健领域的趋势和支出模式;甚至可以支持更深入地了解人们在城市中的出行方式。这些都是高效社区的关键方面,系统变革从业者需要了解这些方面。
大数据有能力告诉我们如何理解人类网络和社区。
非结构化数据还可以产生有用的见解,以支持系统变革工作。例如,招聘广告(Nesta 一直在分析这些广告,这是我们开放职位项目的一部分)可以帮助更全面地了解特定地方的技能需求。
非结构化数据的另一个例子是社交媒体,它可以被抓取并用于情绪分析,以揭示社区成员最热衷的问题。例如,Facebook 对话可能会揭示出对特定社区资产(可能是更好的游乐场)进行投资的共同愿望。这类信息可以为致力于解决社会挑战的人们提供重要的新见解。
这并不是说大数据应该取代系统思考者倾向于依赖的定性数据来指导他们的实践。绝对不是。我们需要的是大数据和厚数据,民族志学家 Tricia Wang 将其定义为“使用定性民族志研究方法揭示的数据,揭示人们的情感、故事和他们世界的模型”。大数据和厚数据结合起来,可以建立对社区及其所面临的挑战的丰富理解。
厚数据与大数据
图片:民族志很重要
建立联系
我们如何才能向那些倾向于使用民族志方法和定性数据来支持其工作的以人为本的实践者阐明大数据的价值?社会变革组织如何才能获得充分利用大数据所需的工具、技能和资源?
另一方面,我们如何鼓励数据科学家和数据分析领域的从业者更深入地思考他们的工作如何支持社会创新?
这个领域已经出现了一些伟大的思考——例如,数据与社会 (Data&Society)是一个致力于提高公众对以数据为中心的技术的社会影响的理解的研究机构,牛津互联网研究所是牛津大学的一个多学科研究和教学部门,致力于互联网的社会科学。
但我们如何才能将其从思考领域转移到实践领域?需要做些什么才能将理论转化为人们的实践?
我认为第一步可能是让两个领域的人们聚在一起讨论一些机遇和挑战。这可能是通过研讨会、会议或某种定期聚会来实现的。更普遍地说,我们需要看到更多跨部门的活动。10月 3 日将在布里斯托尔举行的人类学 + 技术会议就是一个很好的例子。也许我们需要一个系统变革 + 大数据会议?
但我们如何将其从思考领域转移到行动领域呢?
此外,还需要有实用的工具和机构来支持这些领域的人们更有效地合作。出色的组织DataKind正在努力将顶级数据科学家与领先的社会变革组织联系起来,共同合作开发尖端分析和高级算法,以最大限度地发挥社会影响力。在世界的另一端澳大利亚,Our Community House正在为社区部门组织提供数据科学教程。我们需要更多这样的活动!我们需要看到它开始有机地、独立地发生,而不受 DataKind 和 Our Community 等组织的支持(它们能做的有限!)。
Nesta 在集体智能方面的工作也似乎是这次对话的重要组成部分。通过集体智能设计中心,Nesta 成立了一个团队,致力于探索人类和机器智能相结合的创新潜力。