> 自媒体 > (AI)人工智能 > 硬核观察 | 硬核观察 #997 OpenAI 用 GPT-4 来解释 GPT-2 的行为
硬核观察 | 硬核观察 #997 OpenAI 用 GPT-4 来解释 GPT-2 的行为
来源:硬核老王
2023-05-22 16:13:59
648
管理
OpenAI 用 GPT-4 来解释 GPT-2 的行为

大语言模型(LLM)像大脑一样,它们是由 “神经元” 组成的,它们观察文本中的一些特定模式,以影响整个模型接下来 “说” 什么。但由于 LLM 中的参数数量多到已经无法由人类解释的程度,因此,LLM 给人一种 “黑盒” 的感觉,并出现了偏见、幻觉、涌现等一系列不好解释的现象。OpenAI 正在开发一种工具,以自动识别 LLM 的哪些部分负责其哪些行为。它使用 GPT-4 来解释其 4 年前发布的只有 30 万个“神经元”(15 亿个参数)的 GPT-2。目前该工具代码和所有的 “神经元” 解释数据已经开源,OpenAI 称该工具还在早期阶段。生成的解释结果并不令人满意,看起来连 GPT-4 都不能太用人类可以理解的语言来解释 GPT-2 的行为。

消息来源:Tech Crunch

老王点评:用魔法打败魔法是个好的思路,但是将魔法解释给“麻瓜”可能未必能行。最怕的是,要是魔法可以(悄悄)改进魔法怎么办?

用开源和 AI 驱动的监测网来探索 UFO

由于对 UFO 现象的官方说法缺乏透明度和信任度感到沮丧,一个开发者团队决定自己动手做一个名为 Sky360 的开源公民科学项目。该项目旨在用价格低廉的监测站覆盖全球,全天候观察天空,甚至计划使用 AI 和机器学习来发现异常行为。Sky360 监测站由一个广角鱼眼镜头和一个倾斜相机组成,底层软件对捕获的运动事件进行初步分析,并决定是否进一步放大、跟踪和分析它。所有的硬件都可以由廉价购买的现成零件组合而成。他们目前已在全球建立了 20 个监测站,预计将在 6 月发布第一个面向开发者的开源版本。

消息来源:VICE

老王点评:UFO 究竟是什么,充斥着各种谎言和猜测。或许揭开谜团的唯一办法就是用广泛的事实来说明。这是个有趣的项目,但是也要小心这种数据被利用来监测其它目标。

研究显示元宇宙对美国 GDP 的贡献将可达 2.4%

由 Meta 公司委托进行的一项研究发现,到 2035 年,元宇宙可以为美国每年的 GDP 贡献约 2.4%,相当于 7600 亿美元。这些经济收益可能来自于国防、医疗和制造部门对这些技术的使用,以及视频游戏和通信等娱乐用例。在 Meta 公司的另一份报告中,到 2035 年元宇宙也能为欧盟增加类似比例的贡献。

消息来源:路透社

老王点评:我觉得这就是 Meta 公司给自己画的饼。以我看来,在没有基础设施的进一步突破之前,元宇宙只是一场妄想。

1
点赞
赏礼
赏钱
0
收藏
免责声明:本文仅代表作者个人观点,与本站无关。其原创性以及文中陈述文字和内容未经本网证实,对本文以及其中全部或者 部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。 凡本网注明 “来源:XXX(非本站)”的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对 其真实性负责。 如因作品内容、版权和其它问题需要同本网联系的,请在一周内进行,以便我们及时处理。 QQ:617470285 邮箱:617470285@qq.com
相关文章
这或是美国最后一次向中国出售AI芯片!黄仁勋知道时间不多了..
以deepseek为代表的中国AI企业进化太快了。其次,美国不甘心放弃中国市场..
千问模型新增多款技术产品 涵盖语音、视觉、代码等多领域..
封面新闻记者 孟梅 欧阳宏宇9月24日,2025云栖大会现场,阿里云CTO周靖人..
2025年:互联网还是舒适区?
在AI与社交媒体深度捆绑的时代,我们的注意力被算法不断重塑。从GPT5到Ge..
大打免费牌争夺用户 马斯克Grok4与ChatGPT5“短兵相接”..
《科创板日报》8月12日讯(记者 李佳怡)继ChatGPT后,Grok4宣布免费开放..
18款AI模型幻觉率大公开|你的AI靠谱吗?
根据Artificial Analysis最新发布的Omniscience Index测评数据,18款主流..
解放军总医院联合南大、吉大等机构,共同提出SpineGPT..
本研究由解放军总医院牵头,联合浙江大学医学院附属第二医院、复旦大学附..
千问首家接入东航,AI助手竞赛开始抢“机票”
4月23日,千问宣布对外开放“AI办事”能力,首家接入中国东方航空,上线..
千问上线AI讲教材能力,首批覆盖小学阶段语文、数学..
齐鲁晚报·齐鲁壹点记者 季明智进入新学期后,不少学生陷入“开学综合症..
千问免费开放财经分析模块,AI能否替代人工投研判断..
4月7日,阿里巴巴旗下AI助手千问宣布升级“深度研究”能力,新增财经分析..
关于作者
冷冷的太阳..(普通会员)
文章
1949
关注
0
粉丝
0
点击领取今天的签到奖励!
签到排行

成员 网址收录40418 企业收录2986 印章生成263660 电子证书1157 电子名片68 自媒体105939

1
0
分享
请选择要切换的马甲:

个人中心

每日签到

我的消息

内容搜索