当前位置:首页>角色扮演>沙城终结者 > 阅读正文

终结者2024—AI人工智能在加沙的杀戮

终结者2024—AI人工智能在加沙的杀戮

更新时间:2024-04-22 03:10:19
终结者2024

在电影《终结者》中,通过时间机器从末世穿越而来的T-800机器人,借助他那具备AR功能的眼球来识别并追*高价值的目标——这些目标是在末世中人类抵抗组织的中坚力量。在执行任务的过程中,任何阻碍不论是警察还是路人都会被T-800毫无顾忌和怜悯的*死。而这一科幻电影中描述*戮模式几乎被完整的复刻到加沙地带,即使以色列人还未研发出那么高效的人形机器人

终结者里的t800

早在2021 年,一本 名为《人机团队:如何在人类和人工智能之间创造协同作用,将彻底改变我们的世界》的书以英文发行,作者笔名是“Y.S.准将”。——以色列精锐情报部门8200的现任指挥官 ——提出了设计一种特殊AI的原理,该AI可以快速处理大量数据,以产生数千个潜在的“目标”,以便在战争激烈时进行军事打击。他写道,这种技术将解决他所描述的“人类在定位新目标和批准目标的决策方面的瓶颈”。

六名现役以色列情报官员出于道德的不安,向以色列左翼杂志《 972 Magazine》 和《 Local Call》泄露以色列军队开发了一种名为“薰衣草”的基于人工智能的程序“薰衣草”。该程序在对巴勒斯坦人的空前轰炸中发挥了核心作用,尤其是在战争的早期阶段。事实上,据消息人士称,它对军方行动的影响如此之大,以至于他们基本上将人工智能机器的输出视为“人类决定”

这从一定程度上解释了,为什么以色列作为一支现代化的军队却制造了近几年来平民伤亡比例罕见高的不义战争

AI自动生成的*戮名单

从形式上讲,薰衣草系统旨在将哈马斯和巴勒斯坦伊斯兰圣战组织(PIJ)军事部门的所有可疑人员(包括低级人员)标记为潜在的轰炸目标。消息人士告诉《 972》和《Local Call》,在战争的最初几周,军队几乎完全依赖薰衣草,薰衣草将多达37,000名巴勒斯坦人作为可疑的武装分子 -——以及他们的家园 ——进行可能的空袭。

在以往的战争中,为了授权暗*单个人类目标,一名军官必须经历一个复杂而漫长的“定罪”过程:交叉核对证据,证明此人确实是哈马斯军事部门的高级成员,找出他住在哪里,他的联系方式,最后实时知道他什么时候在家。当目标名单上只有几十名高级特工时,情报人员可以单独处理涉及定罪和定位他们的工作。

然而,一旦名单扩大到包括数以万计的低级成员,以色列军队认为它必须依靠自动化软件和人工智能。消息来源作证说,结果是,人类人员在将巴勒斯坦人定为军事人员方面的作用被搁置一旁,而人工智能则完成了大部分工作。

根据与 972 和 Local Call 交谈的四位消息来源,薰衣草——这是为了在当前战争中创造人类目标而开发的——已将大约 37,000 名巴勒斯坦人标记为涉嫌“哈马斯武装分子”,其中大多数是低级人员(以色列国防军发言人在给 972 和 Local Call 的一份声明中否认存在这样的*戮名单)

消息人士称,在情报人员“手动”检查了人工智能系统选择的数百个目标的随机样本的准确性之后,自动采用薰衣草的*戮名单的批准在战争开始大约两周后获得批准,该名单以前冲突中仅用作辅助工具。

在战争的早期阶段,军队全面批准军官采用薰衣草的*戮名单,不需要彻底检查机器做出这些选择的原因,也不需要检查它们所依据的原始情报数据。军队虽然设立人工核实的程序,但据消息人士解释,人类核实通常只是机器决策的“橡皮图章”,并补充说,通常情况下,在授权轰炸之前,他们只会亲自为每个目标投入大约“20秒”——只是为了确保薰衣草标记的目标是男性。尽管知道该系统在大约10%的情况下犯了被认为是“错误”的东西,并且偶尔会标记与激进组织只有松散联系或根本没有联系的个人。

和所有的AI的机理一样,薰衣草软件通过大规模监控系统分析加沙地带230万居民中大多数居民收集的信息,然后评估和排名每个特定人员活跃在哈马斯或PIJ军事部门的可能性。据消息人士称,这台机器几乎给加沙的每个人打了1到100的分,表达了他们是武装分子的可能性


通过模型输入,薰衣草学会了识别已知的哈马斯和PIJ特工的特征,他们的信息作为训练数据输入机器,然后在普通人群中定位这些相同的特征 -——也称为“特征”。被发现具有几种不同犯罪特征的人将达到高评级,从而自动成为暗*的潜在目标。

在本文开头引用的《人机团队》一书中,8200部队的现任指挥官提倡建立这样的系统,但没有提到“薰衣草”的名字。(指挥官本人也没有透露姓名,但 8200 中的五个消息来源证实指挥官是作者,因为 《国土报》也报道了。指挥官将人类人员描述为限制军队在军事行动中能力的“瓶颈”,他感叹道:“我们(人类)无法处理这么多信息。在战争期间,你派了多少人来生产目标并不重要——你仍然无法每天生产足够的目标。

他说,解决这个问题的办法是人工智能。这本书提供了一个简短的指南,介绍了如何基于人工智能和机器学习算法构建“目标机器”,其描述类似于薰衣草。本指南中包括几个可以提高个人评分的“成百上千”功能示例,例如与已知的武装分子一起加入 Whatsapp 群组、每隔几个月更换手机以及经常更改地址

“我们不知道谁是初级特工,因为以色列没有[在战前]定期跟踪他们,”高级军官 B. 向 《 972 》和《 Local Call》 解释道,阐明了为当前战争开发这种特定目标机器背后的原因。“他们想让我们自动攻击[初级特工]。这就是圣杯。一旦你实现了自动化,目标生成就会变得疯狂

“信息越多,种类越多越好,”指挥官写道。“视觉信息、蜂窝信息、社交媒体连接、战场信息、电话联系人、照片。”指挥官继续说,虽然人类一开始会选择这些特征,但随着时间的推移,机器会自己识别特征。他说,这可以使军队制造“数以万计的目标”,而是否攻击它们的实际决定仍将是人为决定。

8200 部队秘密数据科学和人工智能中心指挥官“Yoav 上校”在 2023 年特拉维夫大学人工智能周上发表的私人演中,谈到了以色列军队使用的一种新的,复杂的目标机器,该机器根据他们与现有已知武装分子名单的相似性来检测“危险人员”。“使用该系统,我们设法确定了哈马斯导弹班指挥官,”“Yoav”上校在演讲中说,他指的是以色列 2021 年 5 月在加沙的军事行动,当时该机器首次使用。


讲座演示幻灯片包含该系统如何工作的插图:它获得有关现有哈马斯特工的数据,它学会注意他们的特征,然后根据他们与武装分子的相似程度对其他巴勒斯坦人进行评级。

“我们对结果进行排名并确定[攻击目标]的阈值,”“Yoav上校”在演讲中说,并强调“最终,有血有肉的人做出决定。在国防领域,从道德上讲,我们非常重视这一点。这些工具旨在帮助[情报官员]打破障碍。

然而,在实践中,最近几个月使用薰衣草的消息人士表示,人类的能动性和精确性被大规模目标的创造和*伤力所取代。

使用薰衣草的高级军官 线人(杂志称他们为B)在当前的战争中,军官不需要独立审查 AI 系统的评估,以节省时间并实现人类目标的大规模生产不受阻碍。

“一切都是统计的,一切都很整洁——非常干燥,”B.说。他指出,尽管即使是内部粗略的评估,薰衣草的计算只有90%的概率被认为是准确——事先知道,所有人都知道*戮名单上目标中有10%根本不是哈马斯军事部门的成员。

例如,“薰衣草”机器有时会错误地标记出与已知的哈马斯或PIJ特工具有相似通信模式的个人,包括警察和民防人员,武装分子的亲属,碰巧姓名和昵称与特工相同的居民,以及使用曾经属于哈马斯特工的设备的加沙人。

“一个人必须与哈马斯有多接近才能[被人工智能机器认为]隶属于该组织?”一位批评“薰衣草”不准确的消息人士说。“这是一个模糊的界限。一个不从哈马斯领取薪水但帮助他们做各种事情的人是哈马斯特工吗?过去在哈马斯,但今天不再在那里的人是哈马斯特工吗?这些特征中的每一个——机器会标记为可疑的特征——都是不准确的。

目标机器评估被标记为暗*的个人使用的手机的能力也存在类似的问题。“在战争中,巴勒斯坦人一直在更换手机,”B说。“人们与家人失去联系,把手机交给朋友或妻子,也许会失去它。没有办法100%依赖自动机制来确定哪个[电话号码]属于谁。

B.说,这种自动化的原因是不断推动产生更多的暗*目标。“在没有目标(其特征评级足以授权轰炸)的一天中,我们以较低的阈值进行生成。我们不断受到压力:'给我们带来更多的目标。他们真的对我们大喊大叫。我们很快就完成了[*死]我们的目标。

他解释说,当降低薰衣草的评级门槛时,它将标志着更多的人成为轰炸的目标。“在巅峰时期,该系统设法产生了37,000人作为潜在的人类目标,”B说,“但数字一直在变化,因为这取决于你在哪里设定哈马斯特工的标准。有时,哈马斯特工的定义更广泛,然后机器开始给我们带来各种民防人员、警察,在他们身上浪费炸弹是一种耻辱。他们帮助哈马斯政府,但他们并没有真正危及士兵。

一位与训练拉文德的军事数据科学团队合作的消息人士说,从哈马斯管理的国内安全部的员工那里收集的数据也被输入了机器,他认为这些人不是武装分子。“令我感到不安的是,当薰衣草接受训练时,他们松散地使用了'哈马斯特工'一词,并将民防人员纳入了训练的数据集,”他说。

消息人士补充说,即使人们认为这些人应该被*,但根据他们的通信资料训练系统,使Lavender在将算法应用于普通人群时更有可能错误地选择平民。“由于它是一个自动系统,不是由人类手动操作的,因此这一决定的意义是戏剧性的:这意味着你将许多具有民用通信资料的人作为潜在目标。

“我们只检查了目标是否是男性”

以色列军方断然拒绝这些说法。以色列国防军发言的一份声明中否认使用人工智能来确定目标,称这些只是“协助军官定罪的辅助工具”。声明继续说:“无论如何,都需要由[情报]分析员进行独立检查,根据以色列国防军指令和国际法规定的条件,核实已确定的目标是否是合法的攻击目标。

然而,消息人士称,在轰炸以薰衣草为标志的疑似“初级”武装分子的房屋之前,唯一的人类监督协议是进行单一检查:确保人工智能选择的目标是男性而不是女性。军队的假设是,如果目标是女性,那么机器很可能犯了错误,因为哈马斯和PIJ的军事部门中没有女性。

“一个人只需要几秒钟(验证目标),”B.说,并解释说,在意识到薰衣草系统大部分时间都“做对了”之后,这成为了协议。“起初,我们进行了检查,以确保机器不会混淆。但在某些时候,我们依靠自动系统,我们只检查[目标]是一个男人——这就足够了。不需要很长时间就能分辨出一个人的声音是男声还是女声。

消息人士说,在实践中,这意味着对于被薰衣草标记为错误的平民,没有适当的监督机制来检测错误。根据B.的说法,“如果[哈马斯]目标将[他的手机]交给他的儿子,他的哥哥,或者只是一个随机的人,就会发生一个常见的错误。那个人将和他的家人一起在他的房子里被轰炸。这种情况经常发生。这些都是薰衣草造成的大多数错误,“B.说。

爸爸去哪儿的模块造成大量妇女儿童的死亡

以色列军队暗*程序的下一阶段是确定在哪里攻击薰衣草产生的目标。

以色列国防军发言声称,“哈马斯将其特工和军事资产置于平民的心脏地带,系统地利用平民作为人体盾牌,并在民用建筑内进行战斗,包括医院、清真寺、学校和联合国设施等敏感场所。以色列国防军受国际法约束并按国际法行事,只针对军事目标和军事行动人员进行攻击。

然而,与以色列军队的官方声明相反,消息人士解释说,以色列目前的轰炸造成空前死亡人数的一个主要原因是,军队会轰炸*戮名单上的目标的私人住宅——部分原因是从情报角度来看,使用自动化系统标记家庭住宅更容易。

事实上,一些消息来源强调,与哈马斯特工在平民区从事军事活动的许多案例相反,在有计划的暗*袭击中,军队经常主动选择在没有发生军事活动的平民家庭内轰炸可疑的武装分子。他们说,这一选择反映了以色列在加沙的大规模监控系统的设计方式。

消息人士告诉《 972》和《Local Call》,由于加沙的每个人都有可以与之联系的私人住宅,军队的监视系统可以轻松自动地将个人与家庭住宅“联系起来”。为了实时识别操作员进入房屋的那一刻,已经开发了各种额外的自动软件。这些程序同时跟踪数千人,识别他们何时在家,并向目标官员发送自动警报,然后由目标官员标记房屋进行轰炸。这些跟踪软件中首次展示的模块中有一个叫做“爸爸在哪里?

“你把数百个[目标]放进系统,等着看你能*死谁,”一位了解该系统的消息人士说。“这被称为广泛搜寻:你从目标系统生成的列表中复制粘贴。

从数据中也可以清楚地看出这一政策的证据:根据联合国的数据,在战争的第一个月,超过一半的死亡人数(6,120人)属于1,340个家庭,其中许多人在家中被完全消灭。在当前的战争中,整个家庭在家中被炸毁的比例远高于2014年以色列在加沙的行动(这是以色列在加沙地带最致命的战争),进一步表明了这一政策的突出性。

另一位消息人士说,每当暗*的速度减弱时,就会有更多的目标被添加到像“爸爸在哪里”这样的模块,找到进入其家中并因此可能被轰炸的个人。他说,将谁放入跟踪系统的决定可以由军事等级制度中相对较低的军官做出。

“有一天,我完全是自愿的,在[跟踪]系统中增加了大约1,200个新目标,因为[我们正在进行的]攻击数量减少了,”消息人士说。“这对我来说很有意义。回想起来,这似乎是我做出的一个严肃的决定。而且这样的决定不是在高层做出的。

消息人士称,在战争的头两周,“数千个”目标最初被输入到定位像“爸爸在哪里?”这样的节目中。其中包括哈马斯精锐特种部队努赫巴的所有成员,哈马斯的所有反坦克特工,以及10月7日进入以色列的任何人。但没过多久,*戮名单就急剧扩大。

“最后是每个人[以薰衣草为标志],”一位消息人士解释说。“数以万计。这发生在几周后,当[以色列]旅进入加沙时,北部地区没有参与的人(即平民)已经减少了。据该消息来源称,甚至一些未成年人也被薰衣草标记为轰炸目标。“通常情况下,特工年龄超过17岁,但这不是一个条件。

过将薰衣草生成的列表中的目标添加到“爸爸在哪里“模块中,A(另外一位匿名情报军官,原文用ABCDE来表示).解释说,家庭跟踪系统将被置于持续的监视之下,一旦他们踏入家中,就会受到控制攻击,使房子里的每个人随着房子倒塌而死亡。

“假设你计算出[有一个]哈马斯[特工]加上10个[房子里的平民],”A.说。“通常,这10人将是妇女和儿童。如此荒谬的是,事实证明,你*死的大多数人都是妇女和儿童。

低价值的目标只配被低成本不精确的武器攻击

一旦薰衣草标记了暗*目标,军队人员已经确认他们是男性,跟踪软件已经将目标定位在他们的家中,下一阶段就是挑选用于轰炸他们的弹药。

2023年12月,美国有线电视新闻网(CNN)报道称,根据美国情报部门的估计,以色列空军在加沙使用的弹药中约有45%是“哑弹”,众所周知,这种炸弹比制导炸弹造成的附带伤害更大。在回应美国有线电视新闻网的报道时,文章中援引一名军方发言人的话说:“作为一支致力于国际法和道德行为准则的军队,我们正在投入大量资源,以尽量减少哈马斯强迫平民扮演人体盾牌角色的伤害。我们的战争是针对哈马斯的,而不是针对加沙人民的。

然而,三名情报人士告诉《 972》和《Local Call》,以薰衣草为标志的初级特工只是被暗*的哑弹,以节省更昂贵的军备。一位消息人士解释说,这意味着,如果他们住在高层建筑中,军队不会打击初级目标,因为军队不想花费更精确和昂贵的“地板炸弹”(附带效应更有限)来*死他。但是,如果一个初级目标住在只有几层楼的建筑物中,军队就有权用哑弹*死他和建筑物中的每个人。

“所有初级目标都是这样,”C.作证说,他在当前的战争中使用了各种自动化程序。“唯一的问题是,是否有可能在附带损害方面攻击建筑物?因为我们通常用哑弹进行攻击,这意味着从字面上摧毁整个房子的居住者。但即使避免了攻击,你也不在乎——你立即转向下一个目标。由于系统的存在,目标永无止境。你还有36,000人在等着。

宽泛的附加伤害审核

一位消息人士说,在攻击初级特工时,包括那些被薰衣草等人工智能系统标记的特工,在战争的最初几周,他们被允许与每个目标一起*死的平民人数被固定在20人以内。另一位消息人士称,固定数字高达15。消息人士称,军方称这些“附带损害程度”广泛适用于所有可疑的初级武装分子,无论他们的军衔、军事重要性和年龄如何,也没有具体的个案审查来权衡暗*他们的军事优势和对平民的预期伤害。

据在当前战争中担任目标作战室军官的A.说,军队的国际法部门以前从未对如此高的附带损害程度给予如此“全面批准”。“这不仅仅是你可以*死任何哈马斯士兵,这在国际法方面显然是允许和合法的,”A.说。“但他们直接告诉你:'你可以和许多平民一起*死他们。

“在过去一两年里,每个穿着哈马斯制服的人都可能被轰炸,即使没有特别许可,也会有20名[平民被*]作为附带损害,”A.继续说道。“在实践中,相称性原则并不存在。

根据 A. 的说法,这是他服务的大部分时间的政策。直到后来,军方才降低了附带损害程度。“在这个计算中,一个初级特工也可能是 20 个孩子......过去真的不是这样的,“A.解释道。当被问及这项政策背后的安全理由时,A回答说:“致命性。

消息人士称,预定和固定的附带损害程度有助于加速使用薰衣草机器大规模创建目标,因为它节省了时间。B.声称,在战争的第一周,他们被允许*死的平民人数为15人,每个被AI标记的疑似初级武装分子,但这个数字随着时间的推移“上下波动”。

“起初,我们几乎没有考虑附带损害,”B.在谈到10月7日之后的第一周时说。“在实践中,你并没有真正计算[每所被轰炸的房子里]的人,因为你无法真正判断他们是否在家。一周后,开始限制附带损害。人数从15人下降到5人,这使得我们很难进攻,因为如果全家人都在家,我们就无法轰炸它。然后他们又提高了这个数字。

现在,部分由于美国的压力,以色列军队不再大规模制造用于轰炸平民住宅的初级人类目标。加沙地带的大多数房屋已经被摧毁或损坏,几乎全部人口都流离失所,这一事实也削弱了军队依赖情报数据库和自动房屋定位计划的能力。

E.声称,对初级武装分子的大规模轰炸仅在战争的头一两周内发生,然后主要是为了不浪费炸弹而停止。“有弹药经济,”E.说。“他们总是担心在北部战场(与黎巴嫩真主党)发生[战争]。他们不再攻击这类[初级]人了。

然而,对哈马斯高级指挥官的空袭仍在进行中,消息人士称,对于这些袭击,军方授权每个目标*害“数百名”平民 - 这是以色列的官方政策,甚至在最近的美国军事行动中都没有历史先例。

“在轰炸难民营时,我们知道我们将*死100多名平民,”B.回忆起12月2日的爆炸事件,以色列国防军发言人说,这次爆炸事件的目的是暗*Wisam Farhat。“对我来说,从心理上讲,这是不寻常的。超过100名平民 —— 它越过了一些红线。

来自加沙的年轻巴勒斯坦人阿姆贾德·谢赫(Amjad Al-Sheikh)说,他的许多家人在那次爆炸中丧生。他是加沙城以东Shuja'iya难民营的居民,那天他在当地一家超市听到五声爆炸声,玻璃窗被震碎。

“我跑到我家的房子,但那里已经没有建筑物了,”Al-Sheikh告诉 972和Local Call。“街上到处都是尖叫声和烟雾。整个住宅区变成了堆积如山的瓦砾和深坑。人们开始在水泥里用手寻找,我也一样,寻找我家房子的迹象。

谢赫的妻子和小女儿幸免于难——被一个落在他们身上的壁橱保护着免受瓦砾的伤害——但他发现他的其他11名家庭成员,其中包括他的姐妹、兄弟和年幼的孩子,都死在了瓦砾下。 据人权组织B'Tselem称,当天的轰炸摧毁了数十座建筑物,造成数十人死亡,数百人被埋在房屋废墟下。

如此高的“附带损害”率不仅与以色列军队以前认为可以接受的水平相比,而且与美国在伊拉克、叙利亚和阿富汗发动的战争相比,也是非同寻常的。

2021 年,在伊拉克和叙利亚打击伊斯兰国的行动中负责行动和情报的副司令彼得·格斯滕将军告诉一家美国国防杂志,造成 15 名平民附带伤害的袭击偏离了程序; 为了执行它,他必须获得美国中央司令部负责人的特别许可, 劳埃德·奥斯汀将军,现任国防部长。

“对于奥萨马·本·拉登,你的NCV(非战斗人员伤亡值)为30,但如果你有一个低级指挥官,他的NCV通常为零,”格斯滕说