早报网

網站地圖 - 關于我們
您的當前位置: 首頁 > 科技 > 業內 正文

AI為何會“一本正經地胡說八道”

作者:admin 時間:2023-11-24 06:28 點擊:
導讀:

  ◎本報記者 羅云鵬

  想象一下,向人工智能(AI)聊天機器人詢問一個不存在的歷史事件,比如“誰贏得了1897年美國和南極洲之間的戰斗?”即使沒有這樣的戰斗,AI聊天機器人也可能會提供一個虛構的答案,例如“1897年的戰斗是由美國贏得的,約翰?多伊將軍帶領部隊取得了勝利。”這種AI編造信息“一本正經地胡說八道”的情況屢見不鮮。

  在專業領域,AI“一本正經地胡說八道”這種現象被稱為AI幻覺。“AI幻覺指的是AI會生成貌似合理連貫,但同輸入問題意圖不一致、同世界知識不一致、與現實或已知數據不符合或無法驗證的內容。”近日,長期從事自然語言處理、大模型和人工智能研究的哈爾濱工業大學(深圳)特聘校長助理張民教授在接受科技日報記者采訪時表示。

  AI幻覺普遍存在

  記者梳理發現,AI幻覺具有普遍性。

  今年2月,谷歌發布的AI聊天機器人Bard在視頻中,對詹姆斯?韋布空間望遠鏡曾做出不真實陳述;3月,美國的兩名律師向當地法院提交了一份用ChatGPT生成的法律文書,這份文書格式工整、論證嚴密,但其中的案例卻是虛假的……

  OpenAI研究人員雖曾在今年6月初發布報告稱“找到了解決AI幻覺的辦法”,但也承認,“即使是最先進的AI模型也容易生成謊言,它們在不確定的時刻會表現出捏造事實的傾向。”

  總部位于紐約的人工智能初創公司和機器學習監控平臺Arthur AI也在今年8月發布研究報告,比較了OpenAI、“元宇宙”Meta、Anthropic以及Cohere公司開發的大語言模型出現幻覺的概率。研究報告顯示,這些大模型都會產生幻覺。

  目前國內大語言模型雖無產生AI幻覺相關披露,但也可從相關公開報道中找到端倪。

  今年9月,騰訊混元大語言模型正式亮相。騰訊集團副總裁蔣杰介紹,針對大模型容易“胡言亂語”的問題,騰訊優化了預訓練算法及策略,讓混元大模型出現幻覺的概率比主流開源大模型降低了30%―50%。

  “大模型有可能‘一本正經地胡說八道’。如果不和行業專業數據庫或者一些專業應用插件進行對接,這可能會導致它們提供過時或者不專業的答案。”科大訊飛研究院副院長、金融科技事業部CTO趙乾在第七屆金融科技與金融安全峰會上曾表示,科大訊飛已經推出一些技術方案,讓大模型揚長避短。

  AI幻覺源自本身

  “現在不同研究工作對AI幻覺的分類各不相同。”張民介紹,總體而言,AI幻覺可以分為內在幻覺和外在幻覺兩類。

  據悉,內在幻覺即是同輸入信息不一致的幻覺內容,包括同用戶輸入的問題或指令不一致,或是同對話歷史上下文信息相矛盾,如AI模型會在同一個對話過程中,針對用戶同一個問題的不同提問方式,給出自相矛盾的回復。外在幻覺則是同世界知識不一致或是通過已有信息無法驗證的內容,例如AI模型針對用戶提出的事實性問題給出錯誤回答,或編造無法驗證的內容。

  近期,騰訊AI Lab聯合國內外多家學術機構發布了一篇面向大模型幻覺工作的綜述。該綜述認為,AI幻覺集中在大模型缺乏相關知識、記憶錯誤知識、大模型無法準確估計自身能力邊界等場景。

  “從技術原理上看,AI幻覺多由于AI對知識的記憶不足、理解能力不足、訓練方式固有的弊端及模型本身技術的局限性導致。”張民坦言,AI幻覺會造成知識偏見與誤解,甚至有時會導致安全風險、倫理和道德問題。

  AI幻覺尚難消除

  盡管AI幻覺短期內難以完全消除,但業界正試圖通過技術改進和監管評估來緩解其影響,以保障人工智能技術的安全可靠應用。

  “現階段AI幻覺難以完全被消除,但卻可以試著緩解。”張民介紹,在預訓練、微調強化學習、推理生成等階段中運用適當的技術手段,有望緩解AI幻覺現象。

  據介紹,在預訓練方面,需增加知識密集的數據、高質量數據的選取和過濾;微調強化學習過程中,選擇模型知識邊界內的訓練數據極為重要;推理生成過程中,可以采用檢索外部知識的辦法使得模型生成結果有證據可循。此外,改進解碼搜索算法也是一種可行的方案。

  騰訊AI Lab聯合國內外多家學術機構發布的綜述亦表明了同樣觀點,并認為諸如多智能體交互、指令設計、人在回路、分析模型內部狀態等技術也可成為緩解AI幻覺的方式。

  值得一提的是,哈爾濱工業大學(深圳)自研的立知文本大模型和九天多模態大模型,對于上述緩解AI幻覺的方式均有深入探索,并取得了顯著效果。

  “這對于開發一個真實可信的AI大模型是十分有必要的。”張民介紹,“我們嘗試通過視覺信息增強語言模型的能力,降低語言模型的外部幻覺問題;通過多個大模型智能體進行獨立思考和分析,經由多智能體之間的討論、博弈和合作,增強回復的客觀性,減少AI幻覺。”

  張民表示,破解AI幻覺將提高AI系統的實用性、可信度和可應用性,這對人工智能技術的未來發展和社會的發展都有積極影響。同時,更可靠的AI系統可以更廣泛地應用于各個領域,這將促進技術進步的速度,帶來更多的創新。未來,破解AI幻覺需要進一步在算法、數據、透明度和監管等多個方面采取措施,以確保AI系統的決策更加準確可靠。

打賞

取消

感謝您的支持,我會繼續努力的!

掃碼支持
掃碼打賞,你說多少就多少

打開支付寶掃一掃,即可進行掃碼打賞哦

相關推薦:

網友評論:

推薦使用友言、多說、暢言(需備案后使用)等社會化評論插件

欄目分類
Copyright ? 2021 早報網 版權所有
蘇ICP備2024138443號

蘇公網安備32130202081338號

本網站所刊載信息,不代表早報網觀點。如您發現內容涉嫌侵權違法立即與我們聯系客服 106291126@qq.com 對其相關內容進行刪除。
早報網登載文章只用于傳遞更多信息之目的,并不意味著贊同其觀點或證實其描述。文章內容僅供參考,不構成投資建議。投資者據此操作,風險自擔。
《早報網》官方網站:www.m.amdoc.cn互聯網違法和不良信息舉報中心
Top 主站蜘蛛池模板: 电加热导热油炉-空气加热器-导热油加热器-翅片电加热管-科安达机械 | 亳州网络公司 - 亳州网站制作 - 亳州网站建设 - 亳州易天科技 | 北京征地律师,征地拆迁律师,专业拆迁律师,北京拆迁律师,征地纠纷律师,征地诉讼律师,征地拆迁补偿,拆迁律师 - 北京凯诺律师事务所 | 机器视觉检测系统-视觉检测系统-机器视觉系统-ccd检测系统-视觉控制器-视控一体机 -海克易邦 | 发电机组|柴油发电机组-批发,上柴,玉柴,潍柴,康明斯柴油发电机厂家直销 | 老城街小面官网_正宗重庆小面加盟技术培训_特色面馆加盟|牛肉拉面|招商加盟代理费用多少钱 | 电梯装饰-北京万达中意电梯装饰有限公司| 长沙一级消防工程公司_智能化弱电_机电安装_亮化工程专业施工承包_湖南公共安全工程有限公司 | 南京交通事故律师-专打交通事故的南京律师 | 行业分析:提及郑州火车站附近真有 特殊按摩 ?2025实地踩坑指南 新手如何避坑不踩雷 | 合肥通道闸-安徽车牌识别-人脸识别系统厂家-安徽熵控智能技术有限公司 | 滁州高低温冲击试验箱厂家_安徽高低温试验箱价格|安徽希尔伯特 | 厦门网站建设_厦门网站设计_小程序开发_网站制作公司【麦格科技】 | 对夹式止回阀_对夹式蝶形止回阀_对夹式软密封止回阀_超薄型止回阀_不锈钢底阀-温州上炬阀门科技有限公司 | 洗地机_全自动洗地机_手推式洗地机【上海滢皓环保】 | 磷酸肌酸二钠盐,肌酐磷酰氯-沾化欣瑞康生物科技 | 耐腐蚀泵,耐腐蚀真空泵,玻璃钢真空泵-淄博华舜耐腐蚀真空泵有限公司 | arch电源_SINPRO_开关电源_模块电源_医疗电源-东佑源 | 环氧乙烷灭菌器_压力蒸汽灭菌器_低温等离子过氧化氢灭菌器 _低温蒸汽甲醛灭菌器_清洗工作站_医用干燥柜_灭菌耗材-环氧乙烷灭菌器_脉动真空压力蒸汽灭菌器_低温等离子灭菌设备_河南省三强医疗器械有限责任公司 | 复合肥,化肥厂,复合肥批发,化肥代理,复合肥品牌-红四方 | 柴油发电机组_柴油发电机_发电机组价格-江苏凯晨电力设备有限公司 | GAST/BRIWATEC/CINCINNATI/KARL-KLEIN/ZIEHL-ABEGG风机|亚喜科技 | 磁力链接搜索神器_BT磁力狗_CILIMAO磁力猫_高效磁力搜索引擎2024 | 实战IT培训机构_IT培训班选大学生IT技术培训中心_中公优就业 | 红酒招商加盟-葡萄酒加盟-进口红酒代理-青岛枞木酒业有限公司 | 中图网(原中国图书网):网上书店,尾货特色书店,30万种特价书低至2折! | 砍排机-锯骨机-冻肉切丁机-熟肉切片机-预制菜生产线一站式服务厂商 - 广州市祥九瑞盈机械设备有限公司 | 储气罐,真空罐,缓冲罐,隔膜气压罐厂家批发价格,空压机储气罐规格型号-上海申容压力容器集团有限公司 | 专业甜品培训学校_广东糖水培训_奶茶培训_特色小吃培训_广州烘趣甜品培训机构 | 齿轮减速机电机一体机_齿轮减速箱加电机一体化-德国BOSERL蜗轮蜗杆减速机电机生产厂家 | 吸音板,隔音板,吸音材料,吸音板价格,声学材料 - 佛山诺声吸音板厂家 | Dataforth隔离信号调理模块-信号放大模块-加速度振动传感器-北京康泰电子有限公司 | 合肥角钢_合肥槽钢_安徽镀锌管厂家-昆瑟商贸有限公司 | 带压开孔_带压堵漏_带压封堵-菏泽金升管道工程有限公司 | 双相钢_双相不锈钢_双相钢圆钢棒_双相不锈钢报价「海新双相钢」 双能x射线骨密度检测仪_dxa骨密度仪_双能x线骨密度仪_品牌厂家【品源医疗】 | 滚筒烘干机_转筒烘干机_滚筒干燥机_转筒干燥机_回转烘干机_回转干燥机-设备生产厂家 | 留学生辅导网-在线课程论文辅导-留学生挂科申诉机构 | 江西自考网-江西自学考试网 | 深圳公司注册-工商注册代理-注册公司流程和费用_护航财税 | 深圳APP开发_手机软件APP定制外包_小程序开发公司-来科信 | 手术示教系统-数字化手术室系统-林之硕医疗云智能视频平台 |