电影 
网络数据革命
公共数据如何改变公司看待、思考和做出决策的方式
据说，在沃尔玛成立初期，山姆·沃尔顿会统计停车场的汽车数量来了解商店的经营情况。
现在，想象一下，如果他可以统计到每家沃尔玛的停车数量，并将这些数据与当地促销活动时的数据相互参照，来优化他的广告呢？
或者，如果他可以掌握每个竞争对手针对不同邮编地区如何在线变化价格，并及时调整他的价格战略呢？
又或者，如果他可以捕捉每辆车的品牌、型号和使用年限，并以此决定哪里最适合设立汽车中心？
在山姆开设第一家商店60年后，强大的网络数据采集能力让这些一度不可知的信息能被轻易获取；也让许多顶尖公司的董事会、产品实验室和营销部门像情报部门一样拥有大量的数据信息。
这场革命一部分是技术：为大规模采集公共网络数据而生的庞大代理服务器网络，使人们能够以有效的新方式采集、构建和解读数据。这种改变就像是Salesforce转变客户管理方式，或者是Slack取代普通工作邮件系统。
这场革命也具有哲学意义：现在的领导艺术不在于能够猜出正确的答案，而更在于提出好的问题。对外部观察者来说，发现正确的问题，能你具有压倒性优势。
但好问题并不总是自然而然就有的。
在做出重大决策之前，你会花多少时间进行研究？事实上，我们很多人并不会花太多时间。人类会下意识地做出假设来简化复杂的世界——发现模式、借鉴经验、分享技巧并跟随我们的直觉。
这种思维方式往往出奇准确，但也有许多盲点，比如近因偏差，指我们过于依赖自己最近的记忆；确认偏差，指我们下意识寻找能支撑我们已有认识的信息；以及叙事谬误，指人们倾向于相信最好的叙事而不是最有力的数据。
利用公共数据革命需要更具禅意的方法。这意味着做出商业决策不要先入为主，即使我们自认为对当前情况很了解。
消除内心预设可以帮助你偶然发现新信息，就像没有经验的初学者一样。它也可以揭示一些隐藏在表象下的联系——比如停车场的汽车数量如何与商场盈利情况相一致。
数据可以让你了解跨产品、定价、库存、供应链和消费者行为的市场动态。数据能告诉你客户正在做什么，显示关键趋势，甚至可以帮助你预测竞争对手下一步的行为。
从公共网络数据中获得洞察是一个转折点。那些错过互联网或移动经济兴起的公司都付出了高昂的代价。错过网络数据革命，你可能会成为下一个百视达。
这种网络数据增长速度有多快？在亮数据，我们每天会处理150亿个请求，是全球搜索引擎总和的1.5倍以上。这个数字正在稳步增加。
好问题的答案显而易见。以下列举了一些客户找到我们期待解决的问题：
一位投资分析师问：
“漂白剂的零售价格趋势如何？”
Micah是波士顿一家对冲基金的分析师，该基金面临着要产出新投资理念的巨大压力。有一天Micah在浏览他的股票筛选器时，一家化工公司引起了他的注意。这家公司的数据看起来很强劲，但他想了解该公司能否在通胀环境中保持定价能力。 于是他想出了一个主意：由于该公司是漂白剂行业最大的供应商之一，Micah便可以跟踪该公司供应到每个市场的漂白剂价格。他发现产品零售价格上涨的趋势明显，这也表明该公司具有定价能力，并可能会维持其利润率。 在今天的投资用语中，像这样的公共网络数据被称为另类数据。大多数对冲基金正使用这类数据补充常规信息来源（如收益电话会议和年度报告）。想想配送中心的航拍图像、倾听投资者情绪的社交媒体或预测农作物生长的天气监测应用。全球替代数据市场预计将以每年46.5%的速度增长，到2026年将达到139.1亿美元。
资料来源：2022年替代数据全球市场报告
首席营销官问：
“人们在网上如何销售我的产品？”
Jill领导欧洲时尚品牌的营销工作，主要负责维护完美的品牌形象和客户体验。 这意味着发出的每张照片都代表着品牌形象。描述必须正确；促销活动必须紧跟季节性活动；不得有未经授权的交易或折扣；运输时间也必须很快。 但是，在拥有数以万计在线经销商的世界中，你该如何维持品牌信誉？对于Jill的团队来说，公共网络数据是问题的答案。他们不断在互联网上搜索他们的产品，而他们的搜索结果被传输到一个算法中，可以通知他们任何与产品相关的发现。 这种能够大规模搜索文本、图片、音频和视频的技术正被应用于保护各种品牌及其知识产权。它可以帮助艺术家发掘作品在网上的用途，也可以授权社交媒体平台阻止用户上传未经许可的材料。
亮数据每天大约会扫描1PB的数据，等同于 5000亿页的文本，或超过10万部DVD质量的电影。
即使你在大海捞针，我们也能找到它。
一位旅游公司的执行总裁问道：
“我怎样才能提供全世界最好的旅游优惠？”
网络流量决定了Bert的公司的生死。他面临的挑战是要确保对于旅行社、酒店和航空公司来说，他的网站仍然提供了网络上最准确、最完整的信息可供交易。 尽管许多旅游供应商通过API向他提供定价和时间表等基本信息，但这些数据通常零碎、过时或不完整。 Bert的解决方案是什么呢？他不断收集网上最新的报价，并以特定的格式采集数据，让他的团队能够通过算法对数据进行排序并将其呈现给消费者，使消费者能够轻松发现最优惠的价格、最短的路线和最合适的日期；甚至如果对消费者来说，免费WiFi很重要的话，他们也能找到。 网络数据对于像Bert这样的整合者来说非常强大，无论你是想采集信用卡优惠信息还是想知道最好的草坪维护公司。网络数据也适用于最终供应商——例如，Bert网站上的酒店可以采集数据，了解他们的价格和竞争对手比起来怎么样。
音乐家出身的科技投资人will.i.am曾说过：“WWW 代表Wild Wild West。（电影名，在此处指人们试图找寻机会，征服互联网新领域）”
公共网络数据采集在混乱的互联网领域给出了焦点和结构。
一位初创公司创始人问：
“我的产品如何在竞争中脱颖而出？”
Maia推出了一款出色的产品——带有内置均衡器的耳机，可以让使用者根据与年龄相关的听力变化来个性化声音。但Maia知道，如果没有出色的商业战略，她的产品永远不会成功。 第一步，她使用了公共数据采集工具了解亚马逊和其他零售网站上的所有同类竞品。然后，她建立了一个包含价格、功能、排名和其他一切可以帮助她进行产品最佳定位的数据库。 接下来是设置持续跟踪竞争数据——从价格、折扣、库存水平和运输时间等数据到颜色、追加销售和用户评论等变量；最重要的是，每个变量都可以按国家和地区细分，下至区号单位。 在设置营销渠道、定价策略和邮件促销时，所有这些操作都让 Maia 拥有了巨大的优势。几乎每个电商企业都可以采用这种方法来捕获网络数据并将其构建为真实、可操作的信息。
亮数据的首席执行官Or Lenchner说：“互联网是世界上最大的数据库，而现在你可以向它提问。”
想象一下，拥有一个搜索引擎，专门为你提供可操作的商业智能。
你可以将网络数据采集视为去公共图书馆并阅读每一本书。像亮数据这样的提供商在保持这个“图书馆”开放方面有着既得利益，并采取了额外的预防措施来确保其完整性。我们通过道德准则以及防止技术滥用的软件协议来做到这一点。
我们将公共网络数据的采集和分析视为重大且积极的社会发展。这对企业来说是一个强大的竞争优势。它增加了消费者的选择，还帮助我们解决这个时代最重要的一些环境和社会议题。
例如，在去年一个凉爽的春日早上，警察踢开了芝加哥南部一所公寓的门。一进去，他们就逮捕了两个涉嫌贩卖人口的嫌疑人，营救了四名年龄在17至26岁之间的妇女，并追回了现金、毒品和枪支。
这些逮捕行动是从在线商业色情广告、数据科学和网络分析中采集数据，识别潜在贩运活动的行动中的一部分。
这个故事来自The Bright Initiative——我们一直致力于使用公共网络数据采集来推动人权、监管、气候变化、公共卫生和互联网安全等领域的进步。
如今，网络数据应用曲线正在加快发展。从房地产经纪人到投资组合经理，从制造商到音乐家，从初创公司到跨国公司；各类用户正在提出聪明的问题并从各个可能的领域中寻找有价值的答案。
想象一下，如果你是世界上唯一可以访问谷歌的人。你可能会在每场考试都考得很好，在职业道路上超越每一个人，并掌握不可思议的知识，结交优秀的朋友。很显然，你拥有一个秘密武器。
现在，想想Micah带来最佳的投资理念；Jill创立一个原始品牌；Bert在旅行领域占据主导；Maia在她的初创公司获得了关注。更不用说所有由网络数据奇迹所驱动的正义和英雄主义行为了。
使用网络数据采集工具就像拥有超能力一样。而且，按照目前的改变速度，如果现在没有抓住它，当你意识到自己被困在没有无线网的地方时，你可能已经不断落后了。
但是你没有理由就此陷入绝境。工具正摆在你面前。你所要做的就是努力想出正确的问题，然后……
提问就好。
