你大概会以为,如果一家公司的电脑系统把某人标记为潜在危险,至少会有人打一通电话。可实际发生的是:在一名男子走进不列颠哥伦比亚省Tumbler Ridge的一所学校、杀害八人之前,OpenAI自己的系统就已经标记了他的账户。一个人类看过它。然后他们判定他的活动'未达到门槛'去通知警方。事后,公司CEO公开道歉。
这为什么重要,关键在那个令人不安的反转。我们通常担心的是AI在没有人类看管的情况下失控。可这里确实有人类在看——一个人审查了那个警告,却选择不采取行动。所以这次失败并不是缺了一个人类。而是一次用八条人命说明是错误的判断。
那么这与你有什么关系?这些公司正在闭门之内悄悄决定,什么才算'危险到'需要上报——而他们不会告诉你那条线划在哪里、是谁划的、由谁来审查。同一条隐藏的门槛,每天在数百万个账户上运行。当一个警示灯亮起时,你会希望有人拿起电话。而有时候,他们就是不拿。
