鱼羊萧箫发自凹非寺 量子位公众号QbitAI 说出来你可能不信，有一只AI刚刚被证明，处理语音的方式跟大脑谜之相似。 甚至在结构上都能相互对应 科学家们在AI身上直接定位出了视觉皮层。 这项来自MetaAI等机构的研究一经po出，立马在社交媒体上炸开了锅。一大波神经科学家和AI研究者前往围观。 LeCun称赞这是出色的工作：自监督Transformer分层活动与人类听觉皮层活动之间，确实密切相关。 还有网友趁机调侃：Sorry马库斯，但AGI真的快要来了。 不过，研究也引发了一些学者的好奇。 例如麦吉尔大学神经科学博士PatrickMineault提出疑问： 我们发表在NeurIPS的一篇论文中，也尝试过将fMRI数据和模型联系起来，但当时并不觉得这俩有啥关系。 所以，这到底是一项怎样的研究，它又是如何得出这只AI干起活来像大脑的结论的？AI学会像人脑一样工作 简单来说，在这项研究中，研究人员聚焦语音处理问题，将自监督模型Wav2Vec2。0同412名志愿者的大脑活动进行了比较。 这412名志愿者中，有351人说英语，28人说法语，33人说中文。研究人员给他们听了大约1个小时的有声书，并在此过程中用fMRI对他们的大脑活动进行了记录。 模型这边，研究人员则用超过600小时的无标签语音来训练Wav2Vec2。0。 对应志愿者的母语，模型也分为英语、法语、中文三款，另外还有一款是用非语音声学场景数据集训练的。 而后这些模型也听了听志愿者同款有声书。研究人员从中提取出了模型的激活。 相关性的评价标准，遵照这个公式： 其中，X为模型激活，Y为人类大脑活动，W为标准编码模型。 从结果来看，自监督学习确实让Wav2Vec2。0产生了类似大脑的语音表征。 从上图中可以看到，在初级和次级听觉皮层，AI明显预测到了几乎所有皮层区域的大脑活动。 研究人员还进一步发现了AI的听觉皮层、前额叶皮层到底长在哪一层。 图中显示，听觉皮层与Transformer的第一层（蓝色）最吻合，而前额叶皮层则与Transformer的最深一层（红色）最吻合。 此外，研究人员量化分析了人类感知母语和非母语音素的能力差异，并与Wav2Vec2。0模型进行对比。 他们发现，AI也像人类一样，对母语有更强的辨别能力，比如，法语模型就比英语模型更容易感知来自法语的刺激。 上述结果证明了，600小时的自监督学习，就足以让Wav2Vec2。0学习到语言的特定表征这与婴儿在学说话的过程中接触到的数据量相当。 要知道，之前DeepSpeech2论文认为，至少需要10000小时的语音数据（还得是标记的那种），才能构建一套不错的语音转文字（STT）系统。 再次引发神经科学和AI界讨论 对于这项研究，有学者认为，它确实做出了一些新突破。 例如，来自谷歌大脑的JesseEngel称，这项研究将可视化滤波器提升到了一个新的层次。 现在，不仅能看到它们在像素空间里长啥样，连它们在类脑空间中的模样也能模拟出来了： 又例如，前MILA和谷歌研究员JosephViviano认为，这个研究还证明了fMRI中的静息态（restingstate）成像数据是有意义的。 但在一片讨论中，也出现了一些质疑的声音。 例如，神经科学博士PatrickMineault除了指出自己做过相似研究但没得出结论外，也给出了自己的一些质疑。 他认为，这篇研究并没有真正证明它测量的是语音处理的过程。 相比于人说话的速度，fMRI测量信号的速度其实非常慢，因此贸然得出Wav2vec2。0学习到了大脑的行为的结论是不科学的。 当然，PatrickMineault表示自己并非否认研究的观点，他自己也是作者的粉丝之一，但这项研究应该给出一些更有说服力的数据。 此外也有网友认为，Wav2vec和人类大脑的输入也不尽相同，一个是经过处理后的波形，但另一个则是原始波形。 对此，作者之一、MetaAI研究员JeanRmiKing总结： 模拟人类水平的智能，确实还有很长的路要走。但至少现在来看，我们或许走在了一条正确的道路上。 你认为呢？ 论文地址： https：arxiv。orgabs2206。01685 参考链接： 〔1〕https：twitter。compatrickmineaultstatus1533888345683767297 〔2〕https：twitter。comJeanRemiKingstatus1533720262344073218 〔3〕https：www。reddit。comrsingularitycommentsv6bqx8towardarealisticmodelofspeechprocessingin 〔4〕https：twitter。comylecunstatus1533792866232934400 完 量子位QbitAI头条号签约 关注我们，第一时间获知前沿科技动态
Ai意识的奇点是否已经到来？LaMDA泄密事件了解一下图片来源网络（侵删）ChatGPT从跨入2023年开始，关注度一路上涨，资本追捧度也在水涨船高。国内巨头们也没闲着，微软有ChatGPT，百度就研发文心一言。……长城汽车不惧价格战，做难而正确的事车圈的降价疯狂，依旧没有停下来的意思。从燃油车传递到新能源，从车企官降蔓延到地方政府下场补贴，从降价几万到买一送一如今，这场踩踏式价格战，不再是以往压榨经销商和车企短期利……俄罗斯突然宣布，全面禁用苹果手机，外媒感觉库克心都碎了原创声明：本人原创文章，谢绝抄袭，违者必究在华为受限的这些年来，犹如苹果的高光时刻到来一般，通过iOS系统和自研A系列芯片在市场上占据了大量份额，2022年更是占据了全球……秦升回沪讨薪被捕带头大哥呢？李铁刘鹏里应外合监狱球队阵容豪华不得不承认，中国足球真是烂到根了！老实孩子吴兴涵事件让球迷发现，他并不老实。对于老实人的定义，不同的人理解不同。多名球员、媒体人口中的老实孩子出轨、多地嫖娼，夫人双重国籍另一个……石榴石戴哪只手nbsp天然水晶的佩戴之道石榴石因为它讨喜的名字和明艳的色彩，除了在文玩市场上受到追捧之外，还一直受到广大女性朋友的偏爱。而作为新手朋友，如何佩戴这种能量水晶还有一定的门道。这两年天然水晶越来越走……图学会简笔画动物培养小孩子绘图能力简笔画，通过简单的一笔一画，将自己所看到的动物，绘画出来，就算没学过绘画的人都可以去尝试，简笔画还可以培养个人兴趣，激发自己的绘画天赋，帮助自己开展丰富想象。简笔画，顾名……帆布包奶茶袋上班路上的都市丽人逐渐务实遇到挫折买个包安慰一下，遇到开心的事买个包庆祝一下，曾经包是女生的时尚单品，是出门必不可少绝佳搭配。可当理性回归，年轻人开始重新审视消费主义，包的价值也重新被评估。……绿松石蓝色的好还是绿色nbspnbsp两者有什么区别现在人们都喜欢购买和收藏一些玉制品。而绿松石就是现在非常流行的一种天然宝玉。这种玉石颜色多呈绿色和蓝色，制作成饰品或者艺术品都非常的好看，受到了很多人的喜爱。说到绿松石很……图纸雕艺术刚柔并济富有情趣纸雕，又称纸浮雕。起源于中国汉代，古老的纸雕艺术主要孕育在民间艺术土壤中，发展缓慢却从未间断，形态虽无变化万千，却不失创新精神，开创了中国纸雕艺术的经典篇章。纸雕，顾名思……了解绿松石白点情况nbspnbsp帮你越盘越惊艳绿松石，作为大自然赐予我们的珍贵宝物，不仅手感舒适，而且配带身上更是光彩夺目，因而深受许多爱玩者的喜爱。只是玩着玩着，表面突然出现白点是怎么回事呢？绿松石，作为大自然鬼斧……科贝尔阿莱有把握空间进球的能力，那是我们对顶级前锋的期待直播吧1月14日讯北京时间今天凌晨，多特蒙德在热身赛中60大胜巴塞尔，阿莱在睾丸癌痊愈后的首战中替补登场打进三球，门将科贝尔称赞他踢了一场很出色的比赛。科贝尔：阿莱踢了一……珍珠项链的作用有哪些nbsp这样佩戴养颜又添气质珍珠项链，是一种能够增加个人气质的天然珠宝，并且对身体健康的调理作用也不言而喻。从目前市场上来看，属于性价比较高的装饰品，日常佩戴过程中应做好保养。珍珠是是由大海孕育而成……