AI时代的高科技读心术:算法解码脑中图像

来源:科研圈

翻译  李杨,审校  张梦茜,编辑  魏潇


让我们想象一下:只要在心里浮现出某个人物或风景,就能从一堆数码照片中把它搜索出来。或者不用动笔就能画出一个新的厨房设计。又或者给心爱的人发送一张想象中的落日照片。一台能读懂你的心思的电脑会有很多用处,更不用说对于那些瘫痪的、无法正常与人交流的人。如今,科学家们已经创造出了来解释和准确地再现一个人所看到的或想象的图像的算法。这项技术可能还需要几十年的时间才能有实际应用,但科学家们离建立起能够帮助我们投射内心的系统更近了一步。


“我很惊讶它能运转得这么好,”来自印第安纳州西拉斐特普渡大学(Purdue University)的计算机科学家刘中明(音)说。他帮助开发了一种算法,可以在一定程度上再现观众在看电影时看到的画面。“这真的很酷。”


使用算法来解码心智图像并不稀奇(mental images, 即我们从记忆中提取曾储存的视觉信息时,脑海中重现的影像)。自 2011 年以来,研究人员通过把当下的大脑活动与之前观看图像时检测到的大脑活动相匹配的方法,再现了电影片段、照片,甚至梦境图像。但这些方法都有其局限性:有些只处理很简单的图像类别,比如脸型,而有些则必须从预先编程的图像诸如“人”或“鸟”之类的类别中进行选择。


最新的这种算法则可以在线机动生成可辨认的图像,甚至可以重现那些没亲眼见过、想象出来的画面。


为了弄清楚一个人在看什么,研究人员首先进行了功能性磁共振成像(fMRI)测试,它能通过测量大脑血液流动间接监控神经活动。他们找来三个被试,让他们每人观看了超过 1000 张的图片,每张图片看多次,通过这种方式将大脑视觉处理区域的活动绘制成了分辨率为 2 毫米的“地图”,作为参考。他们的目标是,找到大脑看见某图像时产生的应答活动,比如一只猎豹,并最终让计算机绘制出一幅几乎相同的图像。


但是,研究小组并不是给实验对象一幅接一幅地展示画,直到电脑正确地模拟出来,而是建立了代替大脑的系统,深度神经网络(deep neural network ,DNN),它由几层简单的处理元素组成。该研究的通讯作者、日本京都大学的神经学家神谷之康(Yukiyasu Kamitani)说:“我们认为,深度神经网络完全可以代表大脑的分层处理系统。”


“通过使用 DNN,我们可以从大脑视觉系统的不同层次提取信息,”从简单的明暗对比到更有意义的内容,比如不同的人脸。


使用“解码器”,研究人员创造了大脑对图像的反应,但这些都储存在深度神经网络 DNN 中。如此一来,他们便不再需要实际的 fMRI 数据,仅仅需要 DNN 的翻译。


在猜测别人在看什么时,翻译的内容将作为模板,而 fMRI 数据则不再重要。系统随后将尝试绘制一幅图,这幅图会激发 DNN 以匹配该模板的方式进行响应。它通过不断地试错,直到描绘出理想的图像,无论是猎豹、鸭子,还是彩色玻璃窗。这个系统从一些随机的东西开始,类似于电视屏幕上的雪花,接着在 200 次的尝试过程中慢慢地改进它的图像。为了更接近理想图像,系统计算了 DNN 活动和模板化 DNN 活动之间的差异。这些计算引导系统不断调整像素的位置,直到接近理想图像。


为了使最终的产品更加准确,研究人员加入了一个“深度发生器网络”(deep generator network, DGN)。这个算法已经经过了预先训练,可以根据它的输入生成逼真的图像。DGN 让算法重现的画看起来更自然。研究人员在上月末发表的一篇预印本论文中称,一旦添加了这一功能,人们就能第一时间分辨出两张照片中的哪一幅是想要被重现的,成功率高达 99%。


接下来,科学家们试图解读出人们想象中的图片。这一次,他们扫描了三名受试者的大脑,要求他们回忆之前展示过的图像,包括鱼、飞机和简单的彩色图形。这个方法不能完好地展示出图像,但是对于形状,生成器创建出一个可识别的图像的概率是 83%。


这是“有趣而细致的研究”,哥伦比亚大学扎克曼研究所的计算神经学家尼克拉斯克里奇斯科特(Nikolaus Kriegeskorte)说。他想知道计算机生成图像的不准确性在多大程度上是由于大脑活动测量手段的限制,以及它们在多大程度上反映了我们的大脑对图像解读时的错误。他说:“更高分辨率的核磁共振成像和其他脑成像技术可能会进一步完善结果。”通过对测量和算法进行持续的改进,我们也许有一天能通过大脑中的心像进行交流。


未来智能实验室是人工智能学家与科学院相关机构联合成立的人工智能,互联网和脑科学交叉研究机构。由互联网进化论作者,计算机博士刘锋与中国科学院虚拟经济与数据科学研究中心石勇、刘颖教授创建。


未来智能实验室的主要工作包括:建立AI智能系统智商评测体系,开展世界人工智能智商评测;开展互联网(城市)云脑研究计划,构建互联网(城市)云脑技术和企业图谱,为提升企业,行业与城市的智能水平服务。

  如果您对实验室的研究感兴趣,欢迎加入未来智能实验室线上平台。扫描以下二维码或点击本文左下角“阅读原文”

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/497429.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

《Nature》发布毫米级软体机器人,可在没有任何物理干预情况下游走于人体

转载自公众号:机器人大讲堂概要:一直以来,微型机器人、软体机器人成为科学研究的热点,我们都期盼机器人能听从指挥的到达人体指定位置,在对人体危害最小的情况下递送药物或者切除病变组织。1966年著名作家艾萨克阿西莫…

Nature:寻找记忆的痕迹

来源:神经科技对于不是《神探夏洛克》超级粉丝的人来说,认知神经科学家Janice Chen对这部英国广播公司的热播侦探剧的了解比大多数人多。当观众观看这部电视剧的第一集然后描述其情节时,Chen能在脑部扫描仪的帮助下监视他们的脑子里正在发生什…

tcl linux 刷 安卓系统,安卓用户看过来—手把手教你刷第三方系统

来来来,小葵花课堂讲课啦。孩子咳嗽老不好,多半是废了,打一顿就好。手机卡顿老不好,先别着急,来刷个机吧。众所周知,因为安卓系统自身的特性,安卓手机用久了难免出现卡顿。一般来说解决的方法有…

DeepMind开源Psychlab平台——搭建AI和认知心理学的桥梁(附论文和代码下载)

来源:专知概要:DeepMind近期开源了Psychlab,这是一个利用认知心理学等领域知识来研究受控环境下人工智能体(Artificial Agent)的行为,从而模拟人类的行为。DeepMind近期开源了Psychlab,这是一个…

扩展立方体 The Scale Cube

转自: https://akfpartners.com/growth-blog/scale-cube/ 比例立方体 2018年4月25日| 发布者:Robin McGlothin Scale Cube是用于定义微服务和扩展技术产品的模型。AKF Partners于2007年发明了Scale Cube,最初于2007年在我们的博客上在线发…

人脑动态功能网络连接模式能够鉴别个体并预测其认知功能

来源:神经科技概要:近二十年来,基于静息态功能磁共振影像的人脑连接组学快速发展,为无创研究活体人脑的功能组织规律和网络运作机制提供了重要手段,大大促进了研究者对脑认知、脑发育和脑疾病神经机制的理解。近日&…

JMS之企业消息传送

企业消息传送:消息是通过网络从一个系统异步传送给其他系统的。 客户端:使用消息传送API 的一个业务应用程序或组件(如:JMS) 集中式体系结构 分散式体系结构

达沃斯群英纵论人工智能,核心观点汇总

来源:AI科技大本营概要:一年一度的世界经济论坛年会(达沃斯论坛)上,来自不同领域的精英纷纷发表了自己对于人工智能的看法。一年一度的世界经济论坛年会(达沃斯论坛)已经召开了3天,该…

Java消息服务思维导图笔记

https://www.processon.com/view/link/610b5f201efad40724bdfae2

window计算的chk在linux下可以读,Linux系统命令从入门到完全忘记(四)

系统安全相关命令chmod概要:用于改变文件或目录的访问权限,用它控制文件或目录的访问权限。语法格式:chmod [-cfvR] [–help] [–version] mode file参数:参数说明-c当发生改变时,报告处理信息-f错误信息不输出-R处理指…

三大国有银行同时入股 AI 公司第四范式

来源:新华社概要:人工智能公司第四范式于1月26日宣布完成B+轮融资,并同时宣布获得来自中国工商银行、中国银行、中国建设银行三家国有银行及所属基金的联合战略投资。人工智能公司第四范式于1月26日宣布完成B+轮融资&a…

从语言学到深度学习NLP,一文概述自然语言处理

来源:萤火虫沙龙2概要:自然语言处理(NLP)近来因为人类语言的计算表征和分析而获得越来越多的关注。自然语言处理(NLP)近来因为人类语言的计算表征和分析而获得越来越多的关注。它已经应用于许多如机器翻译、…

Guava RateLimiter限流原理解析

来源:https://zhuanlan.zhihu.com/p/60979444 限流是保护高并发系统的三把利器之一,另外两个是缓存和降级。限流在很多场景中用来限制并发和请求量,比如说秒杀抢购,保护自身系统和下游系统不被巨型流量冲垮等。 限流的目的是通过…

脑洞大开:未来二十年将兴起的88个微型产业

来源:资本实验室概要:目前,我们正在进入一个指数级技术变革的时代。这个时代既催生出前所未有的科技巨头,其实也催生了一个微型创新的新时代。目前,我们正在进入一个指数级技术变革的时代。这个时代既催生出前所未有的…

Web 服务策略断言语言 (WS-PolicyAssertions)

原文:http://www.microsoft.com/china/msdn/library/webservices/webservices/WebServicesPolicyAssertionsLanguage(WS-PolicyAssertions).mspxWeb 服务策略断言语言 (WS-PolicyAssertions) 发布日期: 4/26/2004| 更新日期: 4/26/2004版本 1…

周志华:严肃的研究者就不该去触碰强人工智能

来源:知识分子概要:关于人工智能,长期存在两种不同的目标或者理念。关于人工智能,长期存在两种不同的目标或者理念。一种是希望借鉴人类的智能行为,研制出更好的工具以减轻人类智力劳动,一般称为“弱人工智…

guava限流器RateLimiter原理及源码分析

来源:https://www.cnblogs.com/zhandouBlog/p/11743660.html 前言 RateLimiter是基于令牌桶算法实现的一个多线程限流器,它可以将请求均匀的进行处理,当然他并不是一个分布式限流器,只是对单机进行限流。它可以应用在定时拉取接…

185页深度报告 扒一扒AI金融的老底【附下载】

来源:智东西概要:2016年,中国爆出8家独角兽,总估值964亿美元位冠全球;2017年,毕马威全球百佳金融科技企业前三甲,蚂蚁金服、众安保险、趣店,皆来自中国;过往两年&#xf…

夹娃娃动画Android,手机模拟抓娃娃

手机模拟抓娃娃让你通过手机足不出户也能感受娃娃机的乐趣,萌趣的卡通形象,清新治愈的设计风格,简单上手的玩法,赶快加入进来冲击最高分吧,点击下载手机模拟抓娃娃开始你的挑战!手机模拟抓娃娃介绍手机模拟抓娃娃游戏是一款模拟进行的真人在线抓娃娃的掌上控制的休闲…

android友盟错误日志,Taro(React-native)集成友盟错误日志分析U-App移动统计

1、先去友盟官网注册应用,获取到appkey,友盟移动统计分析U-App,这个步骤就不贴出来了,需要注意的是ios和Android 不能使用同一个appkey,需要分别创建两个应用,应用名称可以在后面加上平台名称,例…