智能武器的危险之处在于，软件工程师可以很轻松地给它重新编程，使其成为滥杀无辜的机器。
最近一段时间，很多知名人士都对人工智能武器表示了抵制，但他们给出的原因却比较偏颇，认为机器人有朝一日将会控制人类。这种说法其实并不合理，至少在短期内不合理。但是，人工智能武器所蕴含的危险，也确实不是那种常规的、由人类操控的武器可以比拟的。因此要求禁止人工智能武器的呼吁，也理应获得大家的声援。
迫在眉睫的危险
从谷歌无人驾驶汽车的身上，我们可以一瞥人工智能的未来。现在你试想一下：一个凶恶的黑社会团伙偷走了一辆这样的车，在其顶端加装了一门火炮，然后给车辆重新编程，把炮口对准公众。如此一来，它就成为了一件人工智能武器。
各国政府的眼睛是雪亮的，当然不会看不到这种武器的潜力。美国海军今年宣布计划开发无人机武器，而韩国的Super aEgis II自动炮塔，俄罗斯的Platform-M 战斗机器也双双亮相。
但人工智能武器不会是政府的独家秘制。现在人人都可以买得到搭载GoPro 相机的四轴无人飞行器。现在想象一下，有人开发了一个简单的软件，可以让它自动飞行。而那个邪恶的黑社会组织，就是可以把无人驾驶汽车改装成武器的犯罪团伙，当然也可以把枪支搭载在无人机上面，给它重新编程，然后让它飞到拥挤的公共场所去杀人。
这就是人工智能武器近在眼前的危险，：它们很容易被人利用，改装成滥杀无辜的机器，其危害性远远超过了同样的、但需要有人操作的武器。
机器本身并不可怕
斯蒂芬霍金、宇宙学家马克斯特格马克以及伊隆马斯克和其他很多人都签署了“未来生活”（Future of Life）请愿书，要求禁止制造使用人工智能武器。今年1月，马斯克捐款 1000万美元给发起该请愿的机构。4月份，联合国召开了“杀手机器人”会议，不过没有产生任何具有持久性的政策决定。“未来生活”请愿信指出，人工智能武器的危险非常具体，不出几年就有可能导致灾难，需要马上采取行动来加以避免。可惜的是，它并没有明确指出，有哪些人工智能武器已经出现在了地平线上。
很多人担心会出现“终结者”那样的世界末日场景：机器人具有了像人类一样的能力，能够完全依靠自己与世界交互，而且这些机器人试图征服世界。
物理学家、皇家天文学家马丁里斯爵士就警告说，灾难性的场景，比如“愚蠢的机器人不按指令行事，或一个网络自己有了主见。”他在剑桥的同事、哲学家休普莱斯也表达了类似的担忧，觉得当智能“不受生物学限制”时，人类可能无法生存。在两人的推动下，剑桥大学组建了生存风险中心（Centre for the Study of Existential Risk），以图避免人类的生存遭受如此巨大的威胁。
这些问题当然很值得研究。但是，它们远不如人工智能武器问题那么迫在眉睫。
我们很快就能开发出类似于人类的人工智能了吗？几乎所有的标准答案都是：不是很快。很多媒体都说，雷丁大学的聊天机器人尤金古斯特曼(Eugene Goostman)是真正的人工智能，因为它真的让一些人以为它是一个13岁的男孩。但是，聊天机器人和真正的“像人类一样的智能”还差多远呢？计算机科学家斯科特阿伦森（Scott Aaronson）的第一个问题就把尤金难住了：“是鞋盒大呢，还是珠穆朗玛峰大？”
尽管这样，还是有很多人都在“未来生活”请愿信上签了名，明确表示要抵制人工智能武器。原因在于：与拥有自我意识的计算机网络不同，在无人驾驶汽车上架机枪现在就可能出现。
人工智能武器的问题，不在于它们将会控制世界，而在于它们非常容易被重新编程，因此任何人都能够以低得惊人的预算，制作出一台滥杀无辜的高效机器。可怕的不是机器本身，而是黑客可以用比较适中的价格，用它们来做什么样的事情。