首页 科技开发工具 娱乐游玩工具 热门工具   APP 登录/注册 联系/合作
   
 
IBM 的 AI 芯片可能会在生成式 AI 中得到应用
IBM的14纳米模拟AI芯片拥有3500万个相变存储单元
IBM 的人工智能芯片在语音识别方面的能效是传统微芯片的十几倍。许多有争议的人工智能系统,包括ChatGPT和其他大型语言模型,以及现在用于创建视频和图像的生成式人工智能,可能会从该设备中受益。

IBM 指出,由于人工智能的存在,自动转录的准确性在过去十年中得到了极大提高。然而,用于帮助训练和操作这些以及其他人工智能系统的硬件变得越来越昂贵且耗能。为了训练最先进的 AI GPT-3,OpenAI花费了 460 万美元,让 9,200 个 GPU 运行了两周。

一个主要障碍是在处理器和内存之间传输大量数据所损失的能量和时间。俄勒冈州希尔斯伯勒英特尔实验室的研究科学家 Hechen Wang 指出,这种方式消耗的能量可能是实际计算的三到 10,000 倍,他没有参与这项新研究。

模仿大脑的神经形态硬件通常试图模仿生物神经元计算和存储数据的方式。例如,内存计算或“模拟人工智能”微芯片直接在内存中执行计算。

IBM 之前的模拟表明,模拟 AI 的能效可以是适用于 AI 应用的最佳 GPU 的 40 到 140 倍。到目前为止,这些估计还缺乏实际展示。

在这项新研究中,IBM 研究人员对相变存储器进行了实验。该设备依赖于一种材料,当受到电脉冲冲击时,该材料不仅可以以类似于数字处理器的 1 和 0 的方式在非晶相和晶相之间切换,而且还可以切换到位于这些值之间的状态。这意味着相变存储器可以仅使用存储器中的几个电阻器或电容器对乘法累加 (MAC) 运算的结果进行编码,这是驱动人工智能当前爆炸式增长的深度神经网络中最基本的计算。王指出,传统方法使用数百或数千个晶体管。

研究人员创建了一种14 纳米微芯片,在 34 个区块上装载了 3500 万个相变存储单元。总而言之,该设备每瓦每秒能够执行高达 12.4 万亿次操作,其能效是最强大的 CPU 和 GPU 的数十甚至数百倍。

科学家们使用两个语音识别神经网络程序来检查他们设备的灵活性。一个名为Google Speech Commands的小型系统被用来识别语音命令的关键字,而这项任务的速度可能至关重要。Librispeech 是一个大型系统,用于将语音转录为文本,其中有效分析大量数据的能力可能是最有价值的。他们发现,他们的设备的性能与在传统硬件上运行的神经网络一样准确,而 Google 语音命令的工作速度是其 7 倍,Librispeech 的能源效率是 Librispeech 的 14 倍。

英特尔实验室的 Wang 指出,这种新的微芯片可以支持Transformer ,这是当前为ChatGPT等聊天机器人提供支持的大型语言模型 (LLM) 背后的神经网络类型。ChatGPT 本质上是智能手机用来预测一个人正在输入的单词的其余部分的自动完成功能的增强版,它已经通过了法学院和商学院考试,成功回答了软件编码工作的面试问题,撰写了房地产清单,并开发了广告内容。

王说,变形金刚也是生成人工智能的关键组成部分。事实证明, Stable Diffusion、Midjourney和DALL-E等生成式 AI 系统因其制作的艺术而广受欢迎。王说,新芯片“有可能大幅降低法学硕士和生成式人工智能的功耗和成本”。

然而,法学硕士和生成式人工智能也引发了批评的风暴。例如,ChatGPT 就显示出许多缺陷,例如撰写的文章错误百出,而生成式人工智能则因其对知识产权法的影响而引发争议。(IBM 拒绝对本文发表评论。)

此外,新芯片并不包含处理所提供数据所需的所有组件。“因此,其性能受到芯片与其他片外组件之间通信的限制,”王说。

王认为,在实现商业上可行的模拟人工智能的道路上还有五个步骤。我们需要的是除 MAC 操作之外的新电路,以减少对数字芯片的依赖;混合模拟数字架构,处理模拟设备无法执行的计算;定制编译器,可以有效地将任务映射到可用硬件,以最大限度地提高性能;针对模拟计算遇到的错误进行优化的定制算法;以及针对模拟芯片优化的应用程序。最终,模拟人工智能“仍处于起步阶段,其发展将是一个漫长的旅程,”王说。IBM 科学家于 8 月 23 日在《自然》杂志在线版上详细介绍了他们的发现。
最新文章:
所有文章资讯、展示的文字、图片、数字、视频、音频、其它素材等内容均来自网络媒体,仅供学习参考。内容的知识产权归属原始著作权人所有。如有侵犯您的版权,请联系我们并提供相应证明,本平台将仔细验证并删除相关内容。
工具综合排行榜
TOP 1
双计算器 双计算器
同时用两个计算器,用于价格对比、数字分别计算等
TOP 2
推算几天后的日期 推算几天后的日期
推算从某天开始,增加或减少几天后的日期
TOP 3
随机密码生成 随机密码生成
随机生成安全复杂的密码,自由设置密码长度及复杂度
TOP 4
推算孩子的血型 推算孩子的血型
根据父母的血型推测子女的血型
TOP 5
日期转中文大写 日期转中文大写
把数字日期转成中文大写,是财务或商务合同常用的工具
热门内容:       双计算器       推算孩子的血型       随机密码生成       日期转中文大写       推算几天后的日期       达轻每日一景       高校分数线       高校查询       周公解梦大全
首页 科技开发工具大全
娱乐游玩工具大全
登录/注册
联系我们
  用户咨询/建议
kf@ss3316.com


商务合作/推广
hz@ss3316.com

达轻工具 APP

访问手机版网站
使用本平台必读并同意:任何内容仅供谨慎参考,不构成建议,不保证正确,平台不承担任何责任,同意用户协议隐私政策   
BaiduTrust安全认证签章
© 达轻科技 版权所有 增值电信业务经营许可证 ICP备 沪B2-20050023-3