AI知识库

53AI知识库

学习大模型的前沿技术与行业应用场景


研究报告 | 揭秘AI力:这种新能力决定你能否在AI时代胜出!
发布日期:2024-06-04 20:45:41 浏览次数: 1667


June 4th, 2024


揭秘AI力:这种新能力决定你能否在AI时代胜出!


AI Literacy in AI Era

···


RESEARCH

DESIGN

RESEARCH

FINDINGS

CONCLUSION

以个人能力为评价核心的社会制度是任何时代社会的存在基础。无论是智商(IQ)、情商(EQ),还是在职场中常见的领导力、团队协作力等各种能力,这些因素都深刻影响着个人的发展轨迹、企业管理的效率,乃至社会结构和不平等的形成。特别是在与生成式人工智能(GenAI)共同协作的过程中,我们的研究小组已经发现,一种新的能力维度正在浮现——那就是与AI合作并且驾驭AI的能力(AI力)。然而,这种能力具有哪些特征?我们该如何准确测量它?以及这种能力能在多大程度上、在什么样的场景下预测人与AI合作的结果?这些问题不仅对于我们理解人在AI时代的独特作用重要,也为企业在融入AI的过程中提供了关于选拔和培训的重要依据。

为了解答这些问题,我们的团队在过去五个月中进行了三项共计约500人的实验研究,旨在确认AI力作为一个独特维度的存在。通过这些实验,我们不仅明确了该能力包含的具体维度,还开发了一套AI力测评题来准确的度量这种能力。此外,我们还将这种能力与其他重要指标进行了比较,从而界定了其适用的场景和范围。通过这种研究设计,我们希望能够深入理解AI互动能力在实际应用中的有效性和重要性。




#01

·· Research Design ··

研究设计

···

我们的研究设计包括三项实验,旨在全面评估AI互动能力的存在、维度及其适用范围。

第一项实验是一项试点研究(pilot study),目的在于初步探索AI能力的存在及其维度。我们通过线上渠道招募了约90名参与者,并制定了一个包含9个题目的测试量表。参与者需要完成一项与AI协作的文案设计任务,通过这一过程,我们初步探讨了AI能力的潜在构成。

第二项实验进一步扩大了样本规模,招募了200余名参与者。这一实验主要旨在确认AI能力的具体维度,并对初步开发的测试量表进行筛选和测试。

第三项实验在实验室环境下进行,共有146名参与者参加。这项实验不仅再次验证了AI能力的存在和测试量表的有效性,而且通过设计三种不同类型的人与AI互动任务——商业策划案、微小说创作和图片设计——来探索这种能力的适用范围和边界。

通过这三项实验的设计,我们希望能够全面理解AI互动能力,并为未来在不同应用场景有效利用这种能力提供科学依据。


#02

·· Research Findings ··

研究发现

···



1



1. AI力是什么,包含哪些维度,该怎么测量?


AI力是在AI时代背景下,个体利用AI完成任务和解决问题所必需的综合能力和知识体系。这种能力建立在一系列核心技能和思维方式之上,从基本技能扩展到高级理解和创造力。例如,个体需要具备基本的对生成式AI的理解,包括其能力范围和限制,以及如何产生智能输出和创造性结果。此外,有效的人机协作还要求能够设计精确的提示词,以激发AI的最佳性能,并在复杂任务中与AI进行持续的、多轮次的互动。

在底层,AI力要求个体在合作中发挥创造力和引领性,以及在接受AI输出时具备敏锐的判断力。此外,高效的任务拆解和重组能力也是必需的,以确保在适当的时机引入AI的介入。


Figure 1 The Dimensions of AI Literacy


通过三项实验研究,我们开发了一套包含18个测试题目的量表,用以评估AI能力。分析结果显示,所有参与者在这些题目上的得分主要集中在一个因子上,该因子对个体能力差异的解释度为27%。这一发现表明,我们的测试量表能有效地捕捉并使用单一维度解释AI能力这一概念。

Figure 2 Factor of AI Literacy



2



2. AI力能预测人机互动的结果吗?


在开发了测试量表后,我们进一步探索了AI力是否能预测人机互动的结果,以及它是如何在不同情况下影响这些结果的。我们的研究提供了肯定的答案。在第三项实验中,表现出较高AI力(即在18道题目上得分较高)的个体在后续的商业策划案和微小说创作任务中展现了更佳的绩效。

具体来说,在商业策划案任务中,AI力是唯一显著预测任务得分的因素。在微小说创作任务中,虽然个人智商(IQ)也对成绩有预测作用,但AI力的解释力度更大(16%),超过了IQ(8.5%)。在图片设计任务中,虽然AI力和智商都未能有效预测整体结果,AI力却在评估图片是否符合要求的“切题度”上表现出了预测能力,而在艺术性方面,AI力和智商均未显示出显著影响。

Figure 3 Determinants of Performance Variances in Task 1

Figure 4 Determinants of Performance Variances in Task 2


因此,我们的研究结果不仅揭示了AI力作为一个新兴维度的重要性,还表明了它在不同类型的任务中的作用差异。尤其是在那些需要与AI紧密协作的流程化和结构化任务中,具备高AI力的个体能够更有效地利用AI的功能,从而提升任务的完成质量和效率。同时,我们也注意到,在那些依赖高度创意和专业知识的任务中,AI力的影响相对有限,个体的专业性仍然起到不可或缺的作用。


Figure 5 Coefficient Comparison




3



3. 什么因素和AI能力有关?


既然AI力如此重要,那么什么因素和AI能力有关,或者说什么样的个体会有更高的AI力?

通过第三项研究,我们发现除了常见的影响因素如教育背景和AI使用频率外,曾参与过我们实验室的AI培训研究的个体的AI力存在显著关联。这一发现再次印证了我们早前研究的结论:AI力不仅具有可塑性,而且可以通过精心设计的培训显著提升。而且即便是短暂的培训,例如仅需30分钟到一个小时,也足以在个体使用AI时带来明显的绩效提升,并且这种提升具有长期、可持续的效果。

Figure 6 Correlation Between AI Literacy/IQ and Other Variables

(Blue Bar = AI Literacy; Green Bar = IQ)


#03

·· Conclusion ··

研究总结


随着AI技术的快速发展和广泛应用,个体的能力也被重新洗牌。我们的研究通过三项系统实验不仅证明了AI力的存在,并明确了其具体维度,还展示了AI力对提高人机互动绩效的显著影响。特别是在结构化和流程化的任务中,高AI力的个体表现出更优的绩效。此外,虽然在需要高度专业知识和创新能力的任务中,AI力的独立作用不那么显著,但其在多种任务中的适用性和预测能力仍不容忽视。

同时,系统性的AI培训仍然是提升AI力的关键因素。这些发现强调了AI力的可塑性以及通过培训显著提升的可能性。即便短暂的培训也能带来长期、持续的绩效提升,揭示了在教育和职业发展中加强AI技能培训的重要性。

AI力是在AI时代实现个体和组织成功的关键能力。随着我们进一步探索和理解这一能力,有必要在教育体系和职业培训中加入更多关于AI的内容,以帮助个体更好地适应这一技术驱动的世界,充分利用AI的潜力,推动社会的创新和进步。


测测你的AI力?


你想测测你的AI力吗?我们的研究还在继续,诚邀员工个体、学生、企业领导等各类人群报名参加。通过参与我们的测试,你可以了解自己在AI时代的互动能力,发现与AI协作的潜力和优势。无论你是希望提升个人技能,还是为企业选拔和培训人才,我们的测试都能为你提供科学依据和参考。快来加入我们,一起探索AI力的奥秘吧!

请个人报名者直接扫码入群,企业整体报名请添加本研究负责人微信,并备注企业名+大致可参与实验人数(各类型企业均可报名,我们尤其欢迎创意需求类企业合作)


二维码






-END-




53AI,企业落地应用大模型首选服务商

产品:大模型应用平台+智能体定制开发+落地咨询服务

承诺:先做场景POC验证,看到效果再签署服务协议。零风险落地应用大模型,已交付160+中大型企业

联系我们

售前咨询
186 6662 7370
预约演示
185 8882 0121

微信扫码

与创始人交个朋友

回到顶部

 
扫码咨询