解码大脑信号再现视觉图像
来源:科技日报 浏览:86次 时间:2023-05-04
zhao.city
来源标题:解码大脑信号再现视觉图像
是否有可能仅根据大脑信号,就完全重建某人所看到的内容?瑞士洛桑联邦理工学院研究人员朝着这个方向迈出了重要的一步,他们引入了一种新算法构建的人工神经网络模型,能以令人印象深刻的准确度捕捉大脑动态。该研究发表在最新一期《自然》杂志上。
这种新颖的机器学习算法——CEBRA植根于数学,可学习神经代码中的隐藏结构。研究人员利用新算法进行了演示。一只老鼠正在观看1960年代的黑白电影片段,其中一名男子跑向一辆打开后备箱的汽车;在另一个屏幕上,人们可看到由CEBRA计算出的电影重建画面,新构建的电影几乎与原版完全吻合,但有一些轻微的怪异扭曲。
CEBRA从原始神经数据中学到的信息可在解码训练后进行测试。团队已证明他们可从模型中解码老鼠在看电影时所看到的东西。但CEBRA不仅限于视觉皮层神经元,甚至大脑数据,它还可用来预测灵长类动物手臂的运动,并重建老鼠在竞技场上自由奔跑时的位置。
用于视频解码的数据由艾伦脑研所提供,大脑信号是通过插入小鼠大脑视觉皮层区域的电极探针,直接测量大脑活动而获得,这些探针被设计成使激活的神经元发出绿光。在训练期间,CEBRA学习将大脑活动映射到特定帧。在以视觉皮层中不到1%的神经元进行测试时,CEBRA表现良好。
CEBRA基于对比学习技术,这是一种学习如何将高维数据排列或嵌入到低维空间的技术。与其他算法相比,CEBRA在重建合成数据方面表现出色,这对于比较算法至关重要。它的优势还在于它能够跨模式组合数据,例如电影功能和大脑数据,并且它有助于限制细微差别,例如由数据收集方式带来的数据变化。
是否有可能仅根据大脑信号,就完全重建某人所看到的内容?瑞士洛桑联邦理工学院研究人员朝着这个方向迈出了重要的一步,他们引入了一种新算法构建的人工神经网络模型,能以令人印象深刻的准确度捕捉大脑动态。该研究发表在最新一期《自然》杂志上。
这种新颖的机器学习算法——CEBRA植根于数学,可学习神经代码中的隐藏结构。研究人员利用新算法进行了演示。一只老鼠正在观看1960年代的黑白电影片段,其中一名男子跑向一辆打开后备箱的汽车;在另一个屏幕上,人们可看到由CEBRA计算出的电影重建画面,新构建的电影几乎与原版完全吻合,但有一些轻微的怪异扭曲。
CEBRA从原始神经数据中学到的信息可在解码训练后进行测试。团队已证明他们可从模型中解码老鼠在看电影时所看到的东西。但CEBRA不仅限于视觉皮层神经元,甚至大脑数据,它还可用来预测灵长类动物手臂的运动,并重建老鼠在竞技场上自由奔跑时的位置。
用于视频解码的数据由艾伦脑研所提供,大脑信号是通过插入小鼠大脑视觉皮层区域的电极探针,直接测量大脑活动而获得,这些探针被设计成使激活的神经元发出绿光。在训练期间,CEBRA学习将大脑活动映射到特定帧。在以视觉皮层中不到1%的神经元进行测试时,CEBRA表现良好。
CEBRA基于对比学习技术,这是一种学习如何将高维数据排列或嵌入到低维空间的技术。与其他算法相比,CEBRA在重建合成数据方面表现出色,这对于比较算法至关重要。它的优势还在于它能够跨模式组合数据,例如电影功能和大脑数据,并且它有助于限制细微差别,例如由数据收集方式带来的数据变化。
- 上一篇: 新研究在云层中发现耐药细菌
- 下一篇: 中外青年热议生成式AI的局限
最新资讯发布时间
- 2024-03-04普通家庭怀孕到一岁的花费 得需5万出头
- 2024-03-04微观两会 建议全面取消基层医疗门诊报销起付线
- 2024-03-041天内9家车企宣布降价
- 2024-03-04全国人大代表 建议把课间十分钟还给学生
- 2024-02-29长期负债的人现在怎么样了 你有负债吗?
- 2024-02-294种食物是升糖大户尽量少吃 控制血糖是一场持久战
- 2024-02-29当老师是县城女孩最好的出路吗
- 2024-02-29李亚鹏全网悬赏直播哭穷视频...
- 2024-02-28富贵包是不是夺命包#真相到底是什么?
- 2024-02-28艾滋病主要传播途径 故意传播艾滋是犯罪
热门资讯发布时间
- 2021-12-27希壤app官方版下载vr.baidu.com/...
- 2021-10-26房产遗产税的实施条件?
- 2021-10-26房产遗产税的征收方法?
- 2021-10-26放弃遗产公证需要什么材料?
- 2021-10-26有多个继承人股权怎么继承?
- 2021-10-26公司股份怎样进行继承?
- 2021-10-26合伙人资格可以继承吗
- 2021-10-26放弃继承权声明书公证如何办理?
- 2021-09-28非婚生子女对生父母的遗产有继承权吗?
- 2021-09-28继子是否有继承权?