人工智能驱动的决策是什么样子的
埃里克-科尔森
2019年7月8日
为了充分利用数据所包含的价值,公司需要将人工智能(AI)带入工作流程,有时,让我们人类脱离困境。我们需要从数据驱动的工作流程发展到人工智能驱动的工作流程。这不仅仅是一个自动化的游戏,这是将人工智能整合到决策中的一个边际效益。相反,它允许我们克服我们作为人类处理器的固有限制--低吞吐量和认知偏见--通过分配机器来处理我们产生的大量数据,并让我们人类将判断、文化、价值和背景应用于机器可以产生的决策选项。

许多公司已经适应了 "数据驱动 "的运营决策方式。数据可以改善决策,但它需要正确的处理器来从中获得最大的收益。许多人认为这个处理器就是人。数据驱动 "这个术语甚至意味着数据是由人策划的,并为人总结处理的。
但是,为了充分利用数据所包含的价值,公司需要将人工智能(AI)带入他们的工作流程,有时,让我们人类摆脱困境。我们需要从数据驱动的工作流程发展到人工智能驱动的工作流程。
区分 "数据驱动 "和 "人工智能驱动 "并不只是语义上的问题。每个术语反映了不同的资产,前者侧重于数据,后者侧重于处理能力。数据拥有能够促成更好决策的洞察力;处理是提取这些洞察力并采取行动的方式。人类和人工智能都是处理者,具有非常不同的能力。为了了解如何最好地利用每一种能力,回顾一下我们自己的生物进化以及决策在工业中的演变过程是很有帮助的。
就在50到75年前,人类的判断是商业决策的核心处理器。专业人士依靠他们在其领域内多年的经验(和相对较少的数据)形成的高度调整的直觉,例如,为广告活动挑选正确的创意,确定正确的库存水平,或批准正确的金融投资。经验和直觉是辨别好与坏、高与低、风险与安全的主要手段。

也许,这太人性化了。我们的直觉远不是理想的决策工具。我们的大脑受到许多认知偏见的影响,以可预见的方式损害我们的判断力。这是几十万年进化的结果,在那里,作为早期的狩猎采集者,我们开发了一个依赖于简单启发式的推理系统--规避处理大量信息的高成本的捷径或拇指规则。这使得快速的、几乎无意识的决定能够使我们摆脱潜在的危险情况。然而,"快速和几乎无意识 "并不总是意味着最佳或甚至准确。
想象一下,我们一群狩猎采集者的祖先蜷缩在篝火旁,附近的灌木丛突然发出沙沙声。需要做出一个 "快速和几乎无意识 "的决定:断定沙沙声是一个危险的捕食者,然后逃离;或者,询问收集更多的信息,看看它是否是潜在的猎物--比如,一只兔子,可以提供丰富的营养。我们更冲动的祖先--那些决定逃跑的祖先--比他们更好奇的同龄人存活率更高。逃跑和失去兔子的代价远远低于坚持下去并冒着被捕食者杀死的风险的代价。在结果如此不对称的情况下,进化倾向于导致成本较低的后果的性状,即使牺牲了准确性。因此,更冲动的决策和更少的信息处理的特质在后代群体中变得普遍起来。
在现代背景下,生存启发法成为预装在我们固有大脑中的无数认知偏见。这些偏见以偏离理性客观的方式影响我们的判断和决策。我们对生动的或最近的事件给予更多的重视。我们粗暴地将主体分类,引入宽泛的刻板印象,而这些刻板印象并不能充分地解释他们的差异。我们以先前的经验为基础 ,即使它是完全不相关的。我们倾向于为那些实际上只是随机噪音的事件编造出似是而非的解释。这些只是困扰人类判断的几十种 认知偏差中的几种,几十年来,它是商业决策的核心处理器。我们现在知道,仅仅依靠人类的直觉是低效的、反复无常的、易变的,并且限制了组织的能力。
数据支持的决策
那么,感谢数据的出现。连接的设备现在捕获了难以想象的大量数据:每一笔交易,每一个客户的姿态,每一个微观和宏观经济指标,所有的信息都可以为更好的决策提供信息。为了应对这种新的数据丰富的环境,我们已经调整了我们的工作流程。IT部门利用机器(数据库、分布式文件系统等)支持信息的流动,将难以管理的数据量减少到可供人类消化的摘要中。然后,人类使用电子表格、仪表盘和分析应用程序等工具对这些摘要进行进一步处理。最终,这些经过高度处理的、现在可以管理的小数据被提交给决策。这就是 "数据驱动 "的工作流程。人类的判断仍然是中央处理器,但现在它使用汇总的数据作为新的输入。

虽然这无疑比仅仅依靠直觉要好,但人类扮演中央处理器的角色仍然产生了一些限制。
我们没有利用所有的数据。总结后的数据可能会掩盖原始(大)数据集中所包含的许多洞察力、关系和模式。为了适应人类处理器的吞吐量,数据削减是必要的。尽管我们善于消化我们周围的环境,毫不费力地处理大量的环境信息,但在处理表现为数百万或数十亿条记录的结构化数据时,我们的能力明显有限。我们的大脑可以处理销售数字和平均销售价格,并将其扩展到一个区域层面。一旦你开始考虑价值的全面分布,以及关键的是数据元素之间的关系,它就会挣扎或关闭--这些信息在总体总结中丢失,但对良好的决策非常重要。(这并不是说数据摘要没有用。可以肯定的是,它们为业务提供了基本的可见性。但它们在决策中提供的价值很小。在为人类准备的过程中失去了太多的东西)。在其他情况下,总结的数据可能是完全误导性的。混杂的因素会给人以正面关系的印象,而实际上却恰恰相反(见辛普森 悖论和其他悖论)。而一旦数据被汇总,可能就不可能恢复促成因素,以便对其进行适当控制。(最好的做法是使用随机对照试验,即A/B测试)。没有这种做法,即使是人工智能也可能无法正确控制混杂因素)。简而言之,通过使用人类作为数据的中央处理器,我们仍然在以牺牲准确性来规避人类数据处理的高成本。
数据并不足以使我们免受认知偏见的影响。数据总结是由人类以一种容易产生所有这些认知偏见的方式指导的。我们以一种对我们来说很直观的方式来指导总结工作。我们要求将数据汇总到我们认为有代表性的原型部分。然而,我们有这样的倾向,即粗略地将受试者分类为宽泛的刻板印象,这并不能充分解释他们的差异。例如,我们可能会把数据卷到地理等属性上,即使地区之间的行为没有明显的区别。总结也可以被认为是数据的 "粗粒度"。这是对数据的一个比较粗略的近似。例如,像地理这样的属性需要保持在一个区域层面上,那里的值相对较少(即,"东 "与 "西")。重要的是可能比这更细--城市、邮政编码,甚至街道级数据。这对于人类大脑的处理来说,是更难聚合和总结的。我们也喜欢元素之间的简单关系。我们倾向于认为关系是线性的,因为这对我们来说更容易处理。价格和销售之间的关系,市场渗透率和转换率,信贷风险和收入--所有这些都被认为是线性的,即使数据显示并非如此。我们甚至喜欢为数据中的趋势和变化想出详细的解释,即使自然或随机的变化能更充分地解释它。
唉,我们在处理数据时是在迁就我们的偏见。
将人工智能带入工作流程
我们需要进一步发展,并将人工智能带入工作流程,作为数据的主要处理者。对于只依赖结构化数据的常规决策,我们最好将决策委托给人工智能。人工智能不容易受到人类认知偏见的影响。(使用有偏见的数据有一个非常真实的风险,可能导致人工智能找到似是而非的关系,这是不公平的。一定要了解数据是如何产生的,以及如何使用它)。人工智能可以被训练来找到人口中最能解释细粒度差异的部分,即使它们对我们人类的认知来说是不直观的。人工智能在处理数以千计甚至数以百万计的分组方面没有问题。而且,人工智能在处理非线性关系时非常自如,无论是指数、幂律、几何序列、二项分布,还是其他。

这种工作流程能更好地利用数据中包含的信息,并在决策中更加一致和客观。它可以更好地确定哪种广告创意最有效,确定最佳的库存水平,或进行哪些财务投资。
虽然人类被从这个工作流程中移除,但重要的是要注意,单纯的自动化并不是人工智能驱动的工作流程的目标。当然,它可能会降低成本,但这只是一个递增的好处。人工智能的价值在于做出比人类本身所能做到的更好的决定。这在效率上创造了阶梯式的改善,并实现了新的能力。
在工作流程中同时利用人工智能和人类处理器
将人类从只涉及结构数据处理的工作流程中移除,并不意味着人类被淘汰。有许多商业决策不仅仅依赖于结构化数据。愿景声明、公司战略、企业价值观、市场动态都是信息的例子,这些信息只存在于我们的头脑中,并通过文化和其他非数字通信形式传递。这些信息是人工智能无法获取的,与商业决策极为相关。
例如,人工智能可以客观地确定正确的库存水平,以实现利润最大化。然而,在竞争激烈的环境中,公司可能会选择更高的库存水平,以提供更好的客户体验,甚至以牺牲利润为代价。在其他情况下,人工智能可能决定在营销方面投入更多的资金,在公司可用的选项中具有最高的投资回报率。然而,一个公司可能会选择节制增长,以维护质量标准。人类以战略、价值观和市场条件的形式获得的额外信息可能值得偏离人工智能的客观合理性。在这种情况下,人工智能可以被用来产生各种可能性,人类可以根据他们所获得的额外信息从中挑选出最佳选择。这种工作流程的执行顺序是根据具体情况而定的。有时,人工智能首先是为了减少人类的工作负担。在其他情况下,人类的判断可以作为人工智能处理的输入。在其他情况下,人工智能和人类处理之间可能会有反复。

他们的关键是,人类不是直接与数据打交道,而是与人工智能处理数据所产生的可能性打交道。价值观、战略和文化是我们将决策与客观理性相协调的方式。这最好是在明确和充分了解的情况下进行。通过利用人工智能和人类,我们可以做出比单独使用任何一个更好的决定。
我们进化的下一个阶段
从数据驱动到AI驱动是我们进化的下一个阶段。在我们的工作流程中拥抱人工智能,可以更好地处理结构化数据,并允许人类以互补的方式作出贡献。
这种进化不太可能发生在单个组织内,正如自然选择的进化不发生在个人内一样。相反,它是一个在群体中运作的选择过程。更有效的组织将以更高的速度生存。由于成熟的公司很难适应环境的变化,我怀疑我们将看到新公司的出现,它们从一开始就接受人工智能和人类的贡献,并将它们自然地建立在他们的工作流程中。
阅读更多关于企业管理或相关主题的 文章 创新、技术和分析以及组织决策
ECEric Colson是Stitch Fix的首席算法官。在此之前,他是Netflix的数据科学和工程副总裁。@埃里克-科尔森