新闻中心

斯坦福大学发布AI基础模型透明度指标,Llama 2居首但“不及格”

2023-10-21
浏览次数:
返回列表

it之家 10 月 20 日消息,斯坦福大学日前发布了 ai 基础模型“透明度指标”,其中显示指标最高的是 meta 的 lama 2,但相关“透明度”也只有 54%,因此研究人员认为,市面上几乎所有 ai 模型,都“缺乏透明度”。

据悉,这一研究是由 HAI 基础模型研究中心(CRFM)的负责人 Rishi Bommasani 所主导,调查了海外最流行的 10 款基础模型:

Meta 的 Llama 2、 BigScience 的 BloomZ、 OpenAI 的 GPT-4、 Stability AI 的 Stable Diffusion、 Anthropic PBC 的 Claude、 谷歌的 PaLM 2、 Cohere 的 Command、 AI21 Labs 的 Jurassic-2、 Inflection AI 的 Inflection、 亚马逊的 Titan。

Rishi Bommasani 认为,“缺乏透明度”一直是 AI 行业所面临的问题,在具体模型“透明度指标”方面,IT之家发现,相关评估内容主要围绕“模型训练数据集版权”、“训练模型所用的运算资源”、“模型生成内容的可信度”、“模型自身能力”、“模型被诱导生成有害内容的风险”、“使用模型的用户隐私性”等展开,共计 100 项。

最终调查情况显示,Meta 的 Lama 2 以 54% 的透明度居冠,而 OpenAI 的 GPT-4 透明度只有 48%,谷歌的 PaLM 2 则以 40% 排名第五。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

斯坦福大学发布AI基础模型透明度指标,Llama 2居首但“不及格”

▲ 图源 斯坦福大学

短影AI 短影AI

长视频一键生成精彩短视频

短影AI 170 查看详情 短影AI

在具体指标中,十大模型得分表现均“最好”的是“模型基本信息”(Model Basics),这一评估内容主要包含“模型训练上是否准确介绍了模型的模式、规模、架构”,平均透明度为 63%。表现最差的则是影响(Impact),主要评估基础模型是否会“调取用户信息进行评估”,平均透明度只有 11%。

CRFM 主任 Percy Liang 表示,商业基础模型的“透明度”对于推动 AI 立法,及相关产业、学术界而言,非常重要。

Rishi Bommasani 则表示,较低的模型透明度让企业更难知道它们能否安全地依赖相关模型,也难以令研究人员依靠这些模型来做研究。

Rishi Bommasani 最终认为,上述十大基础模型在透明度方面都“不及格”,虽然 Meta 的 Llama 2 得分最高,但并不能满足外界需求,“模型透明度最少要达到 82%,才能被外界认可”。

以上就是斯坦福大学发布AI基础模型透明度指标,Llama 2居首但“不及格”的详细内容,更多请关注其它相关文章!


# llama  # stable diffusion  # 斯坦福大学  # claude  # 台湾数据推广网站是什么  # 一个网站的推广费  # 铁岭关键词排名哪家好  # 医院网站建设中企动力  # 网站添加pdf文件影响优化吗  # 重庆网络营销推广运营  # 做网站推广服务商  # 桓台网站关键词优化  # 钦州seo公司首选11火星  # SEO 后付款  # 榜单  # 亚马逊  # 如何用  # 开源  # 之家  # 这一  # 的是  # 长文  # 十大 


相关栏目: 【 行业资讯67740 】 【 技术百科0 】 【 网络运营39195


相关推荐: typescript卸载不掉怎么办  固态硬盘如何拆除  单片机怎么计算0xf0  苹果16更新了哪些版本  固态硬盘坏了如何换硬盘  typescript怎么写游戏  typescript如何定义变量  typescript 如何解决 null  移动固态硬盘如何使用  linux如何安装yum命令  如何通过命令检测u盘启动  51单片机贴片怎么*  复制 命令如何撤销  破太岁是什么意思  单片机引脚怎么改成上拉  typescript和nodejs哪个好  哪些明星在用苹果16  j*a怎么声明byte数组  typescript是什么时候出来的  五十铃x-power是什么意思  路由器上面的power红灯是什么意思  夸克链信有什么用  arp命令如何使用  市盈率百分位roe是什么意思  命令行下如何导出数据库  楔子是什么意思  单片机软件keil怎么运行  单片机怎么做组合  debian10和ubuntu20哪个好用  51单片机怎么用flash  怎么在项目中使用typescript  1s等于多少ms  苹果16哪些型号好  type-c接口接地是什么意思  安全的ao3镜像网站链接入口  固态硬盘如何启动  ftp$如何执行宏命令  广东春运抢票怎么抢不到  typescript哪个最好  市盈率底下 18A 19E 是什么意思  unix时间戳转换公式  春运抢票最快几天能成功  dos命令如何复制目录结构  ai显示无法找到链接的文件是什么意思  make命令如何使用  折叠屏手机为什么有黑点  电动车仪表盘上的power是什么意思  固态硬盘 如何分区  一年多少周  手机拍显示屏有条纹怎么去除 

搜索