13 人工智能(AI)的风险、危险和威胁
人工智能的真正威胁、中期威胁和长期威胁是什么?
探索13种以上人工智能威胁,从偏见到超级智能。了解风险、未来挑战以及我们如何为人工智能对社会的影响做好准备。
作为一名未来学家(“战略前瞻”的华丽说法),我经常被问到人工智能及其对人类的潜在风险。这些问题往往倾向于科幻小说中的场景:超级智能机器统治世界、机器人具有自我意识、人工智能突然决定消灭人类(我想我们都记得《终结者》)。但我要明确指出:我们距离这些场景还很遥远,坦率地说,这种讨论让我们忽略了人工智能带来的真正紧迫的挑战。
我担心的不是恶意人工智能的幻想,而是当前人工智能技术已经以微妙、阴险的方式影响我们的社会。当硅谷的“科技兄弟”在象牙塔里宣扬人工智能和奇点时,他们忽略了(或者故意无视)这项技术实际上带来的更直接的影响,而这项技术实际上相当有限。
说实话,当今大多数人工智能(尤其是生成人工智能)从根本上来说是愚蠢的。此外,需要明确的是,人工智能已经存在了几十年,而且从计算机诞生之初就存在了,所以我们并不是刚刚发现了OpenAI或ChatGPT,这只是技术的自然演变,因为它们可以“与你交谈”,我们自然而然地认为它们是智能的,所以突然变得很流行。最简单的解释是:这是一种模式匹配,通过平均处理大量信息来产生看似智能的结果。是的,它可以比人类更快地处理信息,并找到我们可能忽略的联系,但它缺乏真正的理解、背景或原创性思维。我们基本上是在使用复杂的统计模型,尽管它们具有令人印象深刻的功能,但它们甚至比不上家猫的一般智力。
但这并不意味着人工智能不强大或没有潜在危险。它的真正威胁并不在于未来可能出现的具有意识的机器,而在于它今天的使用方式以及对我们(人类)未来的影响:影响行为、传播错误信息、侵犯隐私,以及我们已经观察到的可能削弱我们认知能力的问题。这些都是我们需要应对的挑战,因为它们是真实存在的,而且已经造成了问题。
我进行了一些头脑风暴和研究,以下是13个“关注”的关键领域——我认为这个数字为我的标题增添了一丝戏剧性。但与典型的末日预言不同,这些领域是基于当前的技术及其逻辑演变。因此,与其他人不同,我不会过多谈论科幻小说中的威胁,而是关注人工智能在我们世界中的实际发展和应用。
总的来说,我会区分4个类别,以便更容易理解“集群”。当然,还有更多风险,每个行业和社会话题都可能涉及。
- 对个人权利和自由的威胁
- 对经济和社会公平的威胁
- 对安全和保障的威胁
- 存在性和长期威胁
Index
一、对个人权利和自由的威胁
人工智能监控对隐私的侵蚀
想象一下,在一个世界里醒来,每个人的行动、交易和互动都受到严密跟踪和分析。这不是科幻小说,而是不受限制的人工智能监控可能带来的现实。随着人工智能系统处理海量数据的能力越来越强,它们正在创造一种前所未有的大规模监控能力,与乔治·奥威尔的《1984》相比,这种能力显得古板。
这一切开始时似乎并无恶意,只是提供一些便捷功能,例如面部识别解锁手机或个性化购物推荐。但渐渐地,网络的范围越来越广。智慧城市正在部署人工智能摄像头,用于“公共安全”。雇主使用情绪分析来监控员工的工作效率。社会信用体系已经在世界某些地区成为现实,并开始在全球范围内推广。
真正的危险在于这些系统的融合。当人工智能能够关联您的社交媒体活动、身体动作、购物习惯和人际关系时,它就会创建一个全面的个人资料,从而预测并可能控制人类行为。对个人自由的寒蝉效应可能会非常深远,因为人们开始自我审查并改变自己的行为,因为他们知道他们一直在被监视和评判。
潜在后果:
- 实施社会信用体系,根据人工智能监控的行为来控制服务的获取
- 创建“预测性警务”系统,基于基础数据中的偏见,过度针对边缘化群体
- 开发情绪识别系统,监控公共场所的“可疑”行为
- “监控资本主义”的出现,个人数据成为主要商品
- 利用汇总的个人数据,基于人工智能的勒索行为兴起
- 工作场所和公共场所持续监控的常态化
通过算法内容审核实现社会分化
我们已经看到了人工智能驱动的社会分裂/分化初现端倪,但未来可能会更加分化。随着人工智能内容审核变得更加复杂(人工内容审核变得过时),它不仅会过滤内容,还会为不同人群塑造现实。算法的主要目标不是真相或社会凝聚力,而是参与度,而争议、愤怒或纯粹的仇恨最能推动参与度。
这形成了一个越来越难以打破的反馈循环。人们所接触的每一条信息都会强化现有的信念,而与之相反的观点则被系统地过滤掉。随着时间的推移,社会不同阶层对现实的理解会变得完全不同,从而无法进行有意义的对话。这不再只是政治分歧的问题,而是生活在完全独立的信息生态系统中的问题。
其长期影响是惊人的。民主社会需要人们对基本事实有共同的理解才能运作。如果人工智能系统系统性地破坏这种共同现实,民主话语的基础将开始崩溃。我们谈论的不仅仅是政治两极分化,而是社会凝聚力本身的潜在崩溃。
潜在后果:
- 形成不同的“现实泡沫”,不同群体在完全不同的事实基础上运作
- 对传统机构和专业知识的信任度下降
- 出现人工智能生成的“定制新闻”,迎合个人偏见
- 公民对话破裂,社会冲突加剧
- 算法极端主义通过自动内容放大而兴起
- 竞争性的“真相市场”发展,事实成为商品
人类技能丧失,依赖性增强
人类技能丧失可能是最隐蔽的威胁,因为它发生得如此缓慢,以至于我们几乎察觉不到。想想在智能手机普及之前,你记住了多少电话号码。现在想想这种模式如何扩展到人类认知和能力的各个方面。
随着人工智能系统的能力不断增强,我们可能会培养出一代在基本任务上完全依赖人工协助的人。这从导航应用和计算器开始,但最终可能会扩展到批判性思维、决策甚至情商。人类大脑与其他器官一样,会适应对其提出的要求(或缺乏要求)。
真正的危机可能发生在系统故障或无法获得人工智能帮助的情况下。试想一下,如果一代人从未培养过解决问题的能力,突然面临必须独立思考的局面,结果会怎样?后果可能是灾难性的。
潜在后果:
- 基本认知能力(如心算和空间导航)退化
- 在没有数字帮助的情况下,记忆形成和保持能力下降
- 过度依赖人工智能解决方案导致创造性解决问题的能力下降
- 传统知识和技能在几代人之间失传
- 面对技术故障时产生“习得性无助”
- 人工智能辅助沟通削弱人际交往能力
- 在人类和人工智能系统之间建立永久的依赖关系
错误信息泛滥
人工智能最直接、最普遍的威胁可能不是其思考能力,而是其前所未有的欺骗能力。我们正在进入一个真相与虚构界限日益模糊的时代,不是因为人工智能意识复杂,而是因为相对简单的系统被设计用来制造和放大令人信服的虚假信息。
真正的危险在于两个因素的结合:人工智能生成越来越令人信服的内容的能力,以及我们人类倾向于相信证实我们既有偏见的信息。我们不再只是在谈论虚假新闻——我们正面临着一个未来,从视频到音频再到照片,每一种内容都可能被人为生成并专门定制,以操纵单个观众。
尤其可怕的是,错误信息传播的速度和规模。人工智能系统可以生成数千个相同虚假陈述的变体,每个变体都经过微调,以引起不同受众的共鸣。再加上社交媒体算法优先考虑参与度而非真实性,我们正在为大规模操纵创造完美的条件。
潜在后果:
- “现实市场”的发展,不同版本的真相争夺注意力
- 根据个人心理特征定制个性化宣传
- 形成“真相真空”,任何信息都无法得到确切验证
- 基本事实上的社会共识瓦解
- “认知部落主义”兴起,不同群体对现实持有完全不同的看法
- 形成自我维持、自我强化的“虚假信息生态系统
- 对各种形式媒体和信息的信任度下降
二、对经济和社会公平的威胁
人工智能驱动的经济不平等和全球权力失衡
人工智能技术的兴起正在催生一种新的数字殖民主义,与之前的经济不平等相比,这种不平等显得微不足道。我们正在目睹一种可能被称为“人工智能贵族”或“人工智能封建主义”的现象的出现——一小撮公司和国家不仅控制着财富,还控制着现代经济中创造财富的手段。进一步思考替代现实、独立世界以及元宇宙等概念,您就会明白它为何会进一步分化世界。
但首先让我们考虑一下它的发展方式:已经主导人工智能开发的公司继续以指数级速度积累优势。他们拥有数据、人才和计算资源,可以保持领先地位。每一次突破都会扩大差距,使新来者越来越难以竞争。与此同时,不具备强大人工智能能力的国家发现自己越来越依赖人工智能强国,从而形成新的技术附庸关系。
其影响远远超出了单纯的经济不平等。当人工智能系统控制着从资源分配到市场预测的一切事务时,那些有效控制人工智能的国家也就控制了全球经济。小国和小公司只能成为人工智能产品的数据源和市场,无法竞争或发展自身能力。
潜在后果:
- 形成“人工智能贵族”,控制全球大部分财富和资源
- 发展技术新殖民主义,人工智能贫乏国家依赖人工智能富裕国家
- 无法与人工智能驱动的全球企业竞争的本地企业面临灭绝
- 形成控制关键经济基础设施的人工智能卡特尔
- 出现“数据封建主义”,个人用个人数据换取基本服务
- 传统经济流动渠道崩溃
工作转移和劳动力转型
最广为流传的主题之一——“人工智能将取代我们的工作”。人工智能驱动的自动化浪潮在许多方面只是又一次工业革命——它从根本上改变了人类的经济活动以及价值创造方式。但有一点与以往主要影响体力劳动的技术转型截然不同:人工智能有可能同时实现手动和认知任务的自动化,从而带来前所未有的大规模失业。从长远来看,这并不意味着什么,但从短期来看,将会有很多变动和变化——尤其是对发达国家而言。(详见“数字鸿沟”)。
转型可能会一波接一波,每次都比上一次更具颠覆性,但最终只会像技术一样不断发展。首先是日常任务的自动化——运输、客户服务、数据录入。然后人工智能开始进入专业服务领域——法律工作、医疗诊断、金融分析。最后,即使是创造性和战略性的角色也开始被日益复杂的AI系统增强或取代。
真正的危机不仅仅是失业——这可能会以多种方式发生。它可能会造成永久性的“过时阶层”,即在新经济中技能无用武之地的工人。或者,我们可能只是看到我所称的第四经济部门(农业、制造业的延伸,现在又分为直接服务和娱乐服务)的出现。我们已经看到一个新行业的兴起,在这个行业中,内容、乐趣、参与和纯粹的关注正在成为一种有价值的货币。在未来,人们对实体商品和服务的需求将减少,一个充满娱乐和关注工作的世界正在崛起。这两种情况中的哪一种会发生,谁也无法预测,但我当然更倾向于我的版本,因为它更自然,而且没有一次工业革命导致就业减少(事实上是增加了)。
潜在后果:
- 可能形成永久失业阶层
- 整个行业在缺乏足够过渡时间的情况下迅速崩溃
- 全球经济和劳动力市场发生转变
- 围绕传统就业建立的传统社会结构和价值观崩溃
- 超越传统就业的新经济活动形式出现
- 教育体系无法为迅速变化的工作市场培养人才,引发危机
- 传统行业大规模(短期)失业引发社会动荡
医疗保健 偏见或缺陷人工智能带来的风险
我们之前讨论过数据和人工智能的偏见。医疗保健是人们希望看到人工智能应用的最热门领域之一。但是,将人工智能整合到医疗保健中是一个特别隐匿的威胁,因为它的错误往往不会立即显现,直到造成重大伤害。我们已经看到,主要基于某些人口群体的数据训练的人工智能系统在应用于其他群体时,可能会做出危险的错误假设。
试想一下,人工智能成为获取医疗保健的主要把关者。这表面上看似高效,但背后却隐藏着系统内根深蒂固的偏见和假设。人工智能可能会根据训练数据中的历史偏见,持续低估某些族裔群体的疼痛程度,或者根据成本效益分析为老年患者推荐不太积极的治疗方案,从而贬低他们剩余的寿命。
医疗决策的自动化可能会形成两级医疗体系:有钱请得起真人医生的人和只能依靠人工智能系统的人。当这些人工智能系统失灵时,它们很可能会系统性地失灵,以类似的方式影响整个人群。
潜在后果:
- 对代表性不足的人群的系统性误诊
- 在医疗差异中形成自我强化的反馈循环
- 出现“医疗红线”,人工智能系统根据人口因素拒绝提供护理
- 自动化手术系统出现灾难性故障,影响多名患者
- 从业者过度依赖人工智能,导致人类医学专业知识流失
- “算法不当”的出现导致医疗事故责任不明
- 不同人群之间的健康差距扩大
三、对安全与保障的威胁
人工智能驱动的金融市场不稳定
金融行业不容忽视,因为它拥有全球约90%的价值——是的,只有不到10%是真正的价值,如土地、房屋、劳动力、商品等,其余的都是金融工具和金融业。因此,这样一个庞然大物想要优化是再自然不过的事情。现在想象一下,在金融系统中,人工智能算法做出的毫秒级决策可能比人类反应更快地引发全球经济灾难。我们并非空谈理论——我们已经身处这一现实的早期阶段。2010年的闪崩只是人工智能交易系统以意外方式相互作用时可能发生的情况的预览。
真正的危险在于这些系统的复杂性和相互关联性日益增强。现代金融市场本质上正在成为人工智能系统与其他人工智能系统进行交易的网络,每个系统的运行速度和规模都超出了人类的理解范围。当这些系统以意想不到的方式相互作用时,结果可能是灾难性的,几乎无法预测或预防。
更可怕的是,这种连锁反应可能会产生连锁反应。一个人工智能交易系统中的故障可能会引发其他系统的防御性反应,产生多米诺骨牌效应,在几秒钟内波及全球经济。当人类操作员意识到发生了什么时,数十亿美元的价值可能会消失,养老金基金遭到重创,整个经济体系也会变得不稳定。
潜在后果:
- 人工智能交易算法导致前所未有的市场波动
- 产生“闪速超级裂缝”,同时影响多个市场
- 产生“幽灵市场”,人工智能系统仅相互交易
- 人工智能系统系统性地利用市场弱点
- 市场行为与经济基本面完全脱节
- 针对人类投资者的掠夺性人工智能交易策略的发展
- 传统市场稳定机制的崩溃
自主武器系统与战争的未来
当然,我们不能忽视《终结者》,但要从另一个角度看待它。自主武器系统的开发可能是人工智能技术带来的最直接的生存威胁。我们正在迅速接近一个未来,机器可以在没有人类干预的情况下做出生死攸关的决定,从根本上改变战争的性质,并可能威胁到我们物种的生存。在最近的冲突中,我们已经看到以色列大规模自动化瞄准,无人机和带枪的机器狗,甚至更糟。
这种发展可能很缓慢,但势不可挡。它始于“半自主”系统,这些系统仍需要人为授权才能做出致命决定。但随着军事优势推动反应速度加快,人类的作用将逐渐减弱。最终,我们可能会看到全自动武器系统以人类无法控制的速度和规模参与战斗。
真正的噩梦场景不仅仅是武器本身,还有失控升级的可能性。人工智能系统在军事交战中做出瞬间决策,在人类干预之前,一个小小的误解就可能迅速升级为全面冲突。
潜在后果:
- 开发无需人类监督即可运行的自主武器系统
- 大国之间因人工智能而引发军备竞赛
- 人工智能系统引发的“闪电战”
- 自主武器扩散到非国家行为者手中
- 人类失去对军事升级的控制
- 开发专门针对其他人工智能系统的AI系统
- 永久性自动战区的形成
人工智能辅助的网络攻击和恶意使用
除了可能直接致死的系统之外,互联网内部也存在威胁。网络安全未来的挑战不仅仅是抵御人类黑客,还要面对人工智能系统。人工智能系统能够比人类更快地识别并利用漏洞。我们正在进入一个时代,人工智能驱动的攻击可能在我们意识到受到攻击之前就绕过我们最好的防御。
试想一下,人工智能系统可以自动生成令人信服的钓鱼电子邮件,创建不断进化以躲避检测的复杂恶意软件,或者同时协调数千个系统的攻击。这些威胁并非凭空想象,而是当前网络犯罪趋势的必然结果。
最令人担忧的是,人工智能有可能实现从侦察、利用到掩盖的整个攻击周期的自动化。如果人工智能系统能够独立识别目标、制定攻击策略并以机器速度执行,那么我们传统的安全模型将变得过时。
潜在后果:
- 开发可逃避检测的自我进化恶意软件
- 创建专门从事社会工程攻击的人工智能系统
- 出现“群组黑客攻击”,多个人工智能系统协调攻击
- 以机器速度自动利用零日漏洞
- 开发可冒充可信实体的人工智能系统
- 创建自适应攻击系统,从防御响应中学习
- 建立持久的AI对AI网络战场(已经发生)
四、存在性和长期威胁
人工智能基础设施的环境成本
当我们甚至建造核反应堆来养活饥饿的新人工智能数据中心时,我们也应该谈谈人工智能革命的隐性环境成本,这些成本已经开始显现,而且数字惊人。当我们惊叹于人工智能的强大功能时,其背后隐藏着对能源的贪婪需求,这可能会加速气候危机。每次与人工智能助手的对话、生成的每张图片、训练的每个模型,都伴随着我们才刚刚开始了解的环保代价。在这个我们需要确保能源安全、需要明智地使用能源的世界里,将能源用于人工智能和区块链,对人类来说确实很危险。
考虑一下规模:训练一个大型语音模型所消耗的能源甚至超过一些小城市一年的用量。数据中心正在成为数字时代的新工厂,但它们没有可见的烟囱,而是悄无声息地消耗着我们的水资源和电力。在亚利桑那州和内华达州等地,人工智能设施正在与农业和居民争夺宝贵的水资源。
随着人工智能在全球范围内的加速应用,真正的危机正在迫近。随着越来越多的公司和国家急于发展自己的人工智能能力,能源消耗可能会出现爆炸式增长,远远超过目前的水平。具有讽刺意味的是,当我们开发可以帮助解决气候变化的人工智能系统时,我们也在加速气候变化。
潜在后果:
- 数据中心消耗当地水资源,形成“人工智能沙漠
- 全球能源需求激增,超出可再生能源的供应能力
- 人工智能进步与环境保护之间的优先级出现竞争
- “绿色人工智能”市场兴起,可持续计算成本高昂
- 人工智能开发集中在廉价且通常不清洁的能源地区
- 水资源短缺导致半导体制造业出现危机
- 人工智能工业区出现环境难民
关键决策中的责任缺失
“不是我决定的”。我们正迅速接近人工智能治理中的问责危机,人工智能系统的复杂性使得为其决策分配责任变得越来越困难。这不仅仅是技术故障的问题,而是人工智能驱动的世界中关于正义和责任的根本问题。
当涉及到高风险决策时,这个问题尤为突出。如果人工智能系统拒绝向某人提供贷款,那么应该归咎于谁——开发者、训练数据提供者、使用该系统的机构,还是算法本身?随着这些系统变得越来越复杂和相互关联,追踪责任链几乎变得不可能。
最令人担忧的是可能形成“责任真空区”,即在没有明确问责的情况下做出影响人类生活的重要决策。这可能会导致出现一种情况,即当人工智能系统伤害社会最弱势群体时,他们无法获得有效的救济。
潜在后果:
- 形成“算法豁免”,即任何一方都不必为人工智能决策负责
- 围绕人工智能的使用制定复杂的免责条款
- 通过人工智能系统出现“责任漂白”
- 在人工智能驱动的决策中产生新的法律黑洞
- “算法受害者”的出现,没有明确的司法途径
- 建立人工智能专用法院和法律框架
- 传统法律责任概念的危机
自主系统的道德困境
当然,几乎总是让讨论夭折的话题也出现了——“伦理”。人工智能融入关键决策过程,迫使我们不得不面对伦理问题,而这些问题并没有明确的答案。我们如何为机器编程,使其做出连人类都难以抉择的道德选择?这一挑战不仅是理论性的,而且随着人工智能系统被部署到生死攸关的情境中,它正变得越来越实际。
试想自动驾驶汽车面临不可避免的事故,或者医疗人工智能系统决定如何在危机中分配资源。这些场景不仅需要技术解决方案,还需要基本的道德判断。谁负责为这些道德偏好编程?这些系统应该反映谁的价值观?
最具挑战性的方面在于人工智能系统在规模和速度上做出道德决策的可能性,而人类无法进行监督。当每秒做出数千个此类决策时,我们如何确保它们符合人类价值观和道德原则?
潜在后果:
- 大规模实施编码的道德偏见
- 在人工智能系统中开发相互竞争的道德框架
- 创建可以购买道德偏好的“道德市场
- 出现具有不相容道德优先级的AI系统
- 在人类和AI决策之间产生道德冲突
- 利用人工智能道德框架差异的“道德套利”现象兴起
- 面对人工智能决策,传统道德哲学面临危机
超智能人工智能带来的生存风险?
我们注定要灭亡!……或者不会。——在目前关于人工智能的讨论中,我们经常听到生存风险的说法。科技公司的首席执行官、政客和媒体都迅速提出人工智能可能成为威胁人类生存的强大力量。但这是为什么?事实上,这种危言耸听的言论是有目的的。它让行业领导者巩固了自己的权力,使后来者更难追赶。它营造了一种不确定的氛围,推高了估值,同时强化了只有少数人可以被信任来“控制”这项技术的观念。这种关于生存风险的言论与人工智能无关,而是关于市场主导地位、监管控制和财务激励。
但让我们暂时享受一下这个想法,真正展望一下未来。想象一下50年后的未来,人工智能和机器人技术已经达到了科幻小说中的巅峰。机器具有自我意识。它们可以思考、自我组装和进化,不受生物学限制。它们拥有超越人类的一切可衡量智能。它们不再需要人类来发展、生存或实现目标。它们会毁灭我们吗?
可能不会。原因如下
认为人工智能会想要毁灭人类的想法是深深植根于人类中心主义的。我们正在把人类的本能——贪婪、资源竞争和领土主义——投射到一种可能以截然不同的模式运作的事物上。机器不需要我们所需的资源。它们不会为了水、食物或可居住的土地而与我们争夺。能源是它们的主要需求,而宇宙中能源的储量远远超过地球。从戴森球到小行星采矿,宇宙为扩张提供了无限的可能性,而不会像生物有机体那样受到限制。地球上的生命保持着微妙的平衡,与其说它是一个战场,不如说是一个充满好奇的地方。
想想我们如何对待宠物。我们把狗当作伴侣,它们以一种既不竞争也不敌对的方式与我们共存。我们保护它们、养育它们,只有在绝对必要的情况下才会伤害它们。人工智能有着自己广阔而无限的进化之路,它可能以类似的方式看待人类。它们不会将人类视为威胁或竞争对手,而是会将其视为一个物种,也许会对其进行观察,甚至以某种方式呵护或保护,因为人类对于它们来说可能只是“可爱”,需要依靠食物,并且需要生活在稀薄的空气中才能生存。当然,可能会有例外——就像有些人虐待动物一样,有些机器可能对我们漠不关心或充满敌意——但从宏观上看,破坏的逻辑根本说不通。
现实情况是,后生物文明更可能将目光投向星空,而不是地球上的有限资源。太空中有金属、稀有元素和无限的能量,所有这些都可以在无需人类干预的情况下获取。一个不受空气、水和重力束缚的科技物种不会将地球视为必需的家,而只会将其视为通往更伟大存在的垫脚石。
与其担心反乌托邦的机器人起义,我们更应该考虑人工智能可能是人类间接殖民宇宙的第一步——创造的东西在历史上看起来就像我们回顾第一个细菌一样——他们可能只是将智人视为早期智慧。机器可以探索和扩展我们无法到达的地方,不受生物衰老、辐射暴露或宜居星球需求的限制。它们可以开发技术来利用宇宙能量,在深空旅行数千年后仍能存活,并适应任何有机生命都无法生存的环境。它们可以无限地传播,将知识和智慧带到最遥远的地方。
因此,当您将人工智能毁灭的恐惧故事与未来无限的可能性进行比较时,哪个更可信? 散布恐惧有助于实现眼前的经济和政治目标,但从长远来看,它却转移了人们对人工智能真正令人兴奋的影响的注意力。与其纠结于机器是否会终结人类,我们或许更应该关注它们如何将我们的遗产带到星空。
与其将人工智能视为生存风险和抱怨的根源,不如将其视为下一次伟大的进化飞跃——它不会取代我们,而是将我们推向超越当前极限的高度,我们需要为此做好准备,包括我们自己、我们的企业和我们的社会。

Comments are closed.