容易被改造和利用
不妨想象一下：一个正在崛起的的暴君，决心辣手摧毁反对派，他拥有一个数据库，知道每个人对他的忠诚度高低，以及地址和照片。在以前，暴君需要一支军队来完成这个任务，而还需要贿赂士兵，或者给他们洗脑，才能让他们枪杀无辜者。
而以后，暴君只需要花上几千美元，购买一些搭载自动枪械的无人机，就可以如愿以偿了。依照摩尔定律（自从晶体管的发明以来，1美元成本的计算能力是呈指数级增长的），人工智能无人机的价格某一天会降到和一支AK-47差不多。给四个软件工程师洗洗脑，其中就有三个有能力给无人机重新编程，让它们前去附近异见者的住处和工作场所，当场射杀他们。无人机犯错误的可能性更小一些，而且也不需要贿赂或者洗脑，最重要的，它们的工作效率比人类士兵高得多。在国际社会还没有来得及做出任何反应之前，野心勃勃的暴君就已经血洗了反对派阵营。
自动化大幅提高了效率，因此对于任何想要犯下这种暴行的疯子来说，人工智能武器的门槛也降低了。当年的独裁者需要动用一整支军队才能做到的事情，现在只要有点钱的人就能办到了。
有兴趣研发这种武器的制造商和政府可能会声称，他们可以提供出色的保障措施，以确保这些机器不能被重新编程，不会遭到黑客攻击。对于这种说法，我们最好是保持怀疑态度。电子投票机、自动取款机、蓝光光盘播放机，甚至飞驰在高速公路上的汽车，尽管都曾标榜自己有很高的安全性，最近却都已被黑客攻破。历史事实已经证明，在计算设备和试图改变其利用方式的黑客之间，赢家往往是黑客。人工智能武器不可能会是例外。
禁用人工智能武器
1925年签订的国际条约禁止在战争中使用化学武器和生物武器。而中空弹（Hollow Point Bullet）早在1899年就被禁用，因为这些武器会导致极大的、不必要的痛苦。它们特别容易导致平民伤亡。比如公众可能会吸入毒气，医生在尝试取出中空弹时可能会受伤。这些武器很容易给无辜者造成痛苦和死亡，所以它们遭到了禁用。
是否有某种类型的人工智能机器同样也应该被禁用呢？答案是肯定的。如果一种人工智能机器可以很便宜、很容易地改造成高效的无差别大杀器，那么我们就应该制定禁止它的国际公约。这样的机器与放射性金属在本质上没有什么不同。它们都可以和平利用，造福人类。但是我们必须小心翼翼地对它们加以管控，因为它们很容易被改造成毁灭性武器。不同的是，对人工智能机器进行改造，将其用于破坏性目的，远比把核电站的反应堆改成核武容易得多。
我们应该禁止人工智能武器，这不是因为它们全都具有不道德的属性，而是因为人们可以利用在网上找到的资料，把人工智能武器改装成“狰狞的嗜血怪物”。只需一段简单的代码，就可以把很多人工智能武器转变成不亚于化学武器、生物武器和空心弹的杀人机器。（Kathy）
登陆|注册欢迎登陆本站，认识更多朋友，获得更多精彩内容推荐！