IBM人工智能芯片的新进展

IBM人工智能芯片的新进展

来源:内容由半导体行业观察(ID:icbank)编译自「Venturebeat」,谢谢。


IBM苏黎世实验室的研究人员本周在Nature Communications上发表了一篇论文。在文中他们声称,基于相变存储器的技术,他们已经开发出了一种能同时能高实现能源效率和高精度的机器学习方案。这是一种使用基于电阻的存储设备来实现内存内计算的方法,它们的方法弥补了存储和计算数据分开的方案的缺陷,并在此过程中大大降低了功耗。


文章表示,许多现有的AI推理方案在物理上拆分了内存和处理单元,导致AI模型存储在片外内存中。这会增加计算开销,因为必须在各个单元之间对数据进行转移,这会减慢处理速度并增加用电量。


IBM的技术表面上解决了相变存储器的问题,相变存储器是一种非易失性存储器,比常用的闪存技术要快。这项工作如果被证明具有可扩展性,则可以为在无人机,机器人,移动设备和其他受计算限制的设备中运行AI的强大硬件铺平道路。


正如IBM团队所解释的那样,相变存储设备面临的挑战是它趋向于引入计算误差(computational inaccuracy)。那是因为它本质上是模拟的。由于可变性以及读写电导噪声,其精度受到限制。


研究提出的解决方案需要在软件中的AI模型训练期间注入额外的噪声,以提高模型的弹性。结果表明它是成功的。在将训练后的权重(即,用于转换输入数据的参数)映射到相变存储器组件后,加入额外噪音在流行的CIFAR-19 数据集可以把训练ResNet模型精度提升到93.7%,而ImageNet的精度可以做到71.6%.


此外,在将特定模型的权重映射到原型芯片中的723,444个相变存储设备上之后,在单天的过测试程中,精度保持在92.6%以上。研究人员声称这是一个记录。


为了进一步提高精度随时间的保持性,该研究的合著者还开发了一种补偿技术,该技术可以在推理过程中定期校正激活函数(确定模型输出的方程式)。他们说,这导致硬件精度提高到93.5%。


同时,该团队使用模拟相变存储组件对训练机器学习模型进行了实验。报告称,他们使用混合精度架构在几种类型的小规模模型上实现了“软件等效”的准确性,这些模型包括多层感知器,卷积神经网络,长期短期记忆网络和生成对抗网络。他们最近在《神经科学前沿》上发表的一项研究中详细介绍了训练实验。


IBM在该领域的最新工作是在引入用于AI训练的相变存储芯片之后。但据报道,公司的这项技术仍处于研究阶段的同时,公司研究人员证明了该系统可以将权重数据存储为电荷,每平方毫米的计算量是图形卡的100倍,而功耗却要低280倍。


IBM表示:“在一个越来越多应用(包括物联网电池供电的设备和自动驾驶汽车)向AI迈进的时代,快速,低功率且可靠的DNN推理引擎是非常有吸引力.


在一份声明中他们表示。我们正在研究中的AI硬件加速器架构在支持DNN训练和推理方面巨大潜力。”


未来智能实验室的主要工作包括:建立AI智能系统智商评测体系,开展世界人工智能智商评测;开展互联网(城市)云脑研究计划,构建互联网(城市)云脑技术和企业图谱,为提升企业,行业与城市的智能水平服务。


如果您对实验室的研究感兴趣,欢迎加入未来智能实验室线上平台。扫描以下二维码或点击本文左下角“阅读原文”

IBM人工智能芯片的新进展


IBM人工智能芯片的新进展
上一篇:放心,美国搞不死华为!
下一篇:【报告】特斯拉动力电池深度剖析(附41页PDF文件下载)

相关推荐

昨夜,微软甩出10项硬核新品!28.5万个核心的AI超算机,最大语言模型开源

1053 智东西

看点:微软砸10亿美元扶持的超算来了,一文看尽昨夜Build大会十大看点!智东西5月20日消息,昨晚,一年一度的微软Build开发者大会拉开序幕。与往常不一样的是,大会的舞台从往年的美国西雅图搬到了线上,同时发布的新产品和新升级也几乎面向开发者,成为开发者们的“独家盛宴”。毫不意外,今晚大会仍以微软现任CEO萨蒂亚·纳德拉(SatyaNadella)的主题演

头盔火了,分享一批3D打印头盔STL模型文件

888 南极熊3D打印

头盔突然火了,淘宝上的头盔价格有点像之前的口罩一样,不停上涨。有熊友读者找南极熊,看看有没有什么头盔模型可以3D打印的。于是,我们便整理了一些模型设计文件,方便用户下载打印。特别提示:头盔是一个专业性的防护产品。3D打印的头盔可能难以起到保护电动车和摩托车驾驶证头部的作用。请你在驾驶这类交通工具时候,要按照规定佩戴合格的头盔。为了方便用户寻找到合适的头盔,一

过生日并不耽误训练 李铁治下的国足即将迎来考验

1302 北晚体育

李铁指挥训练昨天是中国男足国家队主教练李铁43岁的生日,不过,这并未影响他带队在训练场上完成训练。由于国足将于本月21日和26日与上海上港和上海申花两支中超劲旅进行热身赛,李铁在近两天的训练中开始给国脚“加量”,凸显出他对热身赛的重视程度。国足上周在上海集中,经过了前三天的身体恢复后正式开始系统训练。球队先后经历了两次“一日两练”,训练期间还配以高强度的局部

摆脱纸尿裤,夏天训练宝宝如厕正当时

1562 妈咪育儿分享

虽然许多妈妈心里对夏天充满了拒绝,但是夏天还是如约而至了。对于当妈的来说,夏天确实不太友好,天气酷热没处溜娃不说,痱子、腹泻、感冒等还容易找上宝宝。纵使夏天这个“渣男”有千般不好,但有一点还是好的,那就是特别适合帮宝宝摆脱纸尿裤,实现自主如厕自由。各位妈妈准备好了吗,下面Mommy要开始技术总结了哦~如厕训练的时机每个宝宝都有自己的成长发育节奏,作为父母我们

回来!训练啦!

815 切尔西足球俱乐部

英超联赛关于俱乐部同意恢复训练发布声明:在今天的英超股东会议中,各家俱乐部投票通过从明天下午(周二)开始,第一阶段小组恢复训练的提议,为后续在安全的情况下复赛做准备。回归训练协议的第一步是以小组形式在保持社交距离的同时进行训练,目前的训练中还不允许进行接触训练。切尔西众将也将准备重返训练场,兰帕德谈到关于六月底合同到期的球员的最新情况,并解释他如何计划在恢复

狗能嗅出新冠病毒?这个国家豪掷430万元,训练医疗检测犬

1137 新华网

在英国,研究人员目前正在研究和尝试训练能“嗅探检测”人们是否感染“新冠病毒”的医疗检测犬,这一项目已经获得了英国政府50万元英镑(约合人民币430万元)的经费支持。△央视财经《经济信息联播》栏目视频这一“新冠肺炎检测犬”项目由英国慈善机构“医疗检测犬”和来自英国杜伦大学,以及伦敦卫生与热带医学院的科研人员联合发起。目前,已有6只狗正在接受相关训练,它们都是一

为智能驾驶提供高精度定位服务 领克开启低轨卫星发射计划

1013 掌尚车市

近日,领克汽车宣布将携手吉利科技集团旗下时空道宇科技有限公司共同开启双星发射计划,计划于年内发射两颗低轨卫星,为高级别智能驾驶提供高精度定位服务。其中,领克01车型作为高精度定位演示验证车辆,将提供测试数据支持。据了解,双星发射计划将于年内发射两颗低轨卫星,卫星发射投入使用后,领克与时空道宇将进入天地一体化高精定位系统的商用验证阶段,为后续卫星组网提供技术参

湖人明日开放训练场馆!詹姆斯在家训练戴皇冠

1720 NBAToday

隔离期结束时心情如何?看看杰伦-布朗的舞蹈你就懂了。从明天开始,湖人正式开放训练场馆。詹姆斯终于可以选择去训练馆保持状态,疫情期间他多次晒出在家训练的视频,今天最新的一段居家训练视频中,詹姆斯给自己带上了

37岁“少女”陈意涵:婚姻最大的意义,就是教会女人做自己!
私房话

37岁“少女”陈意涵:婚姻最大的意义,就是教会女人做自己!

1826 陆琪

本文来源微信公众号张德芬空间(tefenchangpublic)女人如何一步步失去自我?读完《82年生的金智英》这本现象级的畅销书,我连着好几天都有被掐住心脏的感觉。或许很多年以后,我会忘记金智英,但书中这个桥段,一定会扎根在我脑海:“这一天,金智英去幼儿园接女儿放学,她走着走着,发现女儿已经睡着,就买了一杯廉价咖啡,在公园的长椅上坐下来休息。一旁的长椅上,

“不要太快和这类男生在一起。”
私房话

“不要太快和这类男生在一起。”

128 大学助手Pro

来源/壹习ID/yixishare大家好,我是在壹习后台看到了你们的召唤的幺幺。昨天,闺蜜水水在微信里发牢骚:“现在的男生也太快了!”原以为是老司机发车上高速的戏码,但没曾想,她甩出了几张聊天截图。谁能看出这才是双方认识的第一天。这就是所谓的“神一般的把自己当男朋友了,可明明连根葱都还不是。”在两人连普通朋友都还算不上的时候,男生就打连环语音,俨然把自己放在

汶川地震救下15条人命的狗狗去世!网友写下3800条评论,第一条就看哭了…
萌宠

汶川地震救下15条人命的狗狗去世!网友写下3800条评论,第一条就看哭了…

84 爸妈说事

2019年9月29日深夜23点,一只名为“沈虎”的狗狗去世后,人民日报、南京消防等官微竟然专门发微博为其送行,10227次转发,3800条评论,57020个点赞,全网刷屏无数人为其送行,甚至上了热搜!无数网友留言送别沈虎;“送别无言的英雄”。“心都碎了”。“愿你能在另一个世界轻松快乐”。到底是只什么狗?这般声势浩大?原来,它就是曾在汶川地震中救出15个人的搜

网友出门没带二哈,气得这家伙狂撕主人胸罩:看你下次还敢不敢不带我了!
萌宠

网友出门没带二哈,气得这家伙狂撕主人胸罩:看你下次还敢不敢不带我了!

264 拆迁队长哈士奇

网友家的二哈超爱出门玩,一出门就开心的像个大傻子~不管是出去玩雪,还是去逛动物园,就算只是在家附近转悠,都兴奋的不行!但是你懂得,让它撒开了玩的结果往往都是这样的……本来脏了洗个澡就完事了,结果这家伙偏偏每次洗澡都嚎叫的跟杀猪似得,搞得铲屎官很头痛。所以有些时候就让它自己在家冷静下……可是对这家伙来说,哪有冷静一说,只有:不带我出门,我就祸祸你家!这天因为要

“当流浪狗多好,无忧无虑自由自在的。”
萌宠

“当流浪狗多好,无忧无虑自由自在的。”

858 宠派

今天上班路上,耳机突然没电了。当我摘掉耳机的时候,发现身旁站着两位西装革履的白领,聊着关于宠物狗的话题。工作干久了都有职业病,和自己相关的总想多听多看。百般无聊的我刚竖起耳朵,几句让人不太舒服的声音就钻了进来。“要我说,养狗根本没什么用。现在有几个人需要狗来看家护院,不过是给自己增加负担。”“这话一点没错。当流浪狗多好,无忧无虑自由自在的。”听过后,我宁愿把

好的婚姻,需要有三次变心
私房话

好的婚姻,需要有三次变心

1276 婚姻与家庭杂志

作者:暑往韩来头图:摄图网来源:樊登读书(ID:readingclub_btfx)知乎上曾有人提问:“你后悔嫁给现在的老公吗?”有人说后悔,有人飘忽不定,但我看到更多的是回答“不后悔”。有一个网友说:结婚20年,我们经历了事业的低谷,经历了生病手术,经历了育儿教子,我也发现丈夫越来越好,优点更多,人品更难能可贵,我们最终会过上平淡的生活,携手到老。著名作家毕

你能接受现实中的伴侣在游戏里“结婚”吗?丨问爆触乐
游戏

你能接受现实中的伴侣在游戏里“结婚”吗?丨问爆触乐

657 触乐

问爆触乐是我们的问答互动栏目,每周日推出。每期提出一个问题邀请大家来回答互动,如果你有什么希望看到大家看法的好问题,也可以在后台告诉我们。各位尊贵的读者们好!在上一期问爆触乐《你希望哪个游戏可以改编成恐怖游戏?》1中,获得点赞数最多的评论是:《豫章书院》请这位读者(ID就是一个空格)给触乐公众号发消息“问爆触乐领奖”找我们领奖吧(工作日上班时我们就会联系您)

“我家毛孩怎么老爱冲我放屁?它是不是故意的……”
萌宠

“我家毛孩怎么老爱冲我放屁?它是不是故意的……”

74 八公叔叔

毛孩经常会悄悄做一些小坏事,有些让铲屎官哭笑不得……比如最近就有一位铲屎官跟叔叔吐槽,说他家猫特别喜欢在他身边放屁,然后再溜之大吉……每每突然闻到一种“美好”的味道,他就知道,又是那个家伙来干的!而且质问猫咪的话,对方还会一脸漠视地否认。那么猫咪狗狗会放屁,甚至有放屁声,是不是正常的呢?首先你需要知道,它们为什么会放屁,总结起来基本有这么五种原因。1.饮食不

这样和女生聊天,不聊死才怪!
私房话

这样和女生聊天,不聊死才怪!

1461 手把手教你谈恋爱

这几天有伙伴问我,跟妹子聊的不是很好,有时候聊着聊着就没音了。让我指点下。总结了下,总结了下这位伙伴与许多伙伴类似,很容易犯这几个错:1自来熟;2问题态度;3管太多;自来熟就是两个人还不熟,就天天主动联系,有事没事都要聊一聊,不找女孩聊天,就浑身不舒服。可是,你们还不熟的时候,互相了解很少,你哪来这么多话题聊啊,总是忍不住想找对方,这样很容易冷场的。如果聊着