返回列表 发新帖

DeepSeek“乱编”坑惨大学生?这个话题冲上热搜!有救了……

[复制链接]
发表于 3 天前  | 显示全部楼层 | 阅读模式 | 来自四川
在人工智能飞速发展的当下
对于广大学生和科研工作者而言
一个关键问题随之而来
借助这些前沿大模型写论文
真的靠谱吗?


640?wx_fmt=jpeg&from=appmsg


不久前
#防止DeepSeek乱编文献的方法#
冲上热搜
记者注意到
用AI工具写论文“被坑”的经历
并非鲜见


640?wx_fmt=jpeg&from=appmsg

有网友列出了自己的亲身经历
除了编造论文文献
AI还会编造法律条文
甚至教人做菜还跑偏了

640?wx_fmt=png&from=appmsg

640?wx_fmt=png&from=appmsg


问AI一个问题,它给了你一个特别详细、丰富,看上去好有逻辑的答案。但当我们去核实时,却发现这些信息完全是虚构的。这就是著名的“AI幻觉”现象。


“AI幻觉”指的是AI会生成看似合理但实际确实错误的信息,最常见的表现就是会编造一些不存在的事实或者细节。


造成“AI幻觉”的成因很多,例如:基于统计关系的预测;训练数据的局限性;过拟合问题,即因为记住了太多错误或者无关紧要的东西,从而让AI对训练数据中的噪声过于敏感;有限的上下文窗口;生成流畅回答的设计等等。

640?wx_fmt=jpeg&from=appmsg


那么,当AI会说谎,大家如何避免被“带偏”?技术浪潮中,我们如何守护自己的思辨能力?


中国人民大学新闻学院教授卢家银指出,在知识建构上,AI生成的虚假学术成果,可能扭曲青年对科学方法论的理解,削弱其“假设-验证”的科研逻辑训练。在思维发展上,AI谣言通过算法推荐的“信息茧房”形成逻辑闭环,不利于批判性思维的培养。


北京师范大学教育学部教授、教育技术学北京市重点实验室副主任李艳燕建议,可以把AI看作一位平等对话的智者,通过引导与AI的对话互动,促进个体思维链的形成,并校准认知偏差。这种去权威化的思辨训练,可以帮助我们在与AI的对话中保持独立判断,实现认知跃迁。

北京邮电大学马克思主义学院副教授宋林泽认为,AI输出的内容只是一个认知起点,而不是终点。大学生需要主动去验证它的内容,比如查阅权威来源、对比不同观点,甚至直接与领域专家交流。这种验证过程,不仅能帮助我们更全面地理解问题,还能让我们在面对复杂信息时更有判断力。

640?wx_fmt=jpeg&from=appmsg


如何应对AI幻觉呢?

AI工具研究者田威提到,想要获得准确答案,提问方式很关键。与AI交流也需要明确和具体,避免模糊或开放性的问题,提问越具体、清晰,AI的回答越准确。

总结成提示词技巧就是下面四种问法:

1.设定边界:“请严格限定在xx年xx期刊发表的研究范围内”;

示例:“介绍ChatGPT的发展历程”→“请仅基于OpenAI官方2022-2023年的公开文档,介绍ChatGPT的发展历程”
2.标注不确定:“对于模糊信息,需要标注‘此处为推测内容’”;
示例:“分析特斯拉2025年的市场份额”→“分析特斯拉2025年的市场份额,对于非官方数据或预测性内容,请标注[推测内容]”
3.步骤拆解:“第一步列举确定的事实依据,第二步展开详细分析”;
示例:“评估人工智能对就业的影响”→“请分两步评估AI对就业的影响:
1)先列出目前已发生的具体影响案例;
2)基于这些案例进行未来趋势分析”。
4.明确约束:明确告诉AI要基于已有事实回答,不要进行推测。

示例:“预测2025年房地产市场走势”→“请仅基于2024年的实际房地产数据和已出台的相关政策进行分析,不要加入任何推测性内容”。


针对如何获得准确答案,AI自己的答案是,可以通过指令约束、工具验证和人工审核三重保障,大幅降低AI虚构文献的风险。值得注意的是,“人工审核”被AI自己认为是“最后防线”

640?wx_fmt=png&from=appmsg

专家提醒,“AI幻觉”并非没有好处,有时候与其把它当成缺陷,不如把它看作创意的源泉。在写作、艺术创作或头脑风暴时,这些“跳跃性思维”反而可能帮我们打开新世界的大门。


“AI幻觉”的本质是,AI在知识的迷雾中,有时会创造出看似真实,实则虚幻的“影子”。但就像任何工具一样,关键在于如何使用。

归根结底,在这个AI与人类共同进步的时代,重要的不是责备AI的不完美,而是学会与之更好地协作。



来源:中国青年报


渠县网 - 论坛版权1、本主题所有言论和图片纯属会员个人意见,与本论坛立场无关
2、本站所有主题由该帖子作者发表,该帖子作者与渠县网享有帖子相关版权
3、其他单位或个人使用、转载或引用本文时必须同时征得该帖子作者和渠县网的同意
4、帖子作者须承担一切因本文发表而直接或间接导致的民事或刑事法律责任
5、本帖部分内容转载自其它媒体,但并不代表本站赞同其观点和对其真实性负责
6、如本帖侵犯到任何版权问题,请立即告知本站,本站将及时予与删除并致以最深的歉意
7、渠县网管理员和版主有权不事先通知发贴者而删除本文

发表回复

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

返回顶部快速发帖快速回复上一主题下一主题返回列表APP下载
关于我们
关于我们
友情链接
联系我们
帮助中心
网友中心
购买须知
支付方式
服务支持
资源下载
售后服务
定制流程
关注我们
官方微博
官方空间
官方微信
快速回复 返回顶部 返回列表