马斯克、米哈游投资的脑机技术,却被女主播拿来打「老头环」 天天新动态
2023-06-05 14:16:23来源:ZAKER科技
2022 年,整个游戏圈只有两个游戏,《艾尔登法环》(Elden Ring)和其他。
(资料图片仅供参考)
整个一年,这款被戏称为「老头环」的动作类 RPG 游戏在全球卖出超过 2000 万份,同时斩获无数游戏大奖,并成为全世界游戏迷心中的神作。
各种花式通关早已不稀奇,但是,如果说有人不用双手,只靠「想」的,也把「老头环」玩的风生水起,你多少会感到好奇。
游戏女主播 Perri Karyal 就做出了这样的尝试。
今年年初,她第一次在 Twitch 上展示自己使用脑电波操纵《艾尔登法环》中的角色,击败游戏中最难的 Boss 之一「女武神」玛莲妮亚,当时她的一些走动还需要使用控制器的辅助。到了 5 月,她对设备进行了升级,首次成功展示了她可以完全通过脑电波外设,在 Xbox 上游玩《艾尔登法环》,无需任何控制器的辅助。
Perri Karyal 直播视频使用 EEG 设备操控角色|YouTube她是怎么做到的?普通人能够复刻她的操作吗?科幻中的脑控游戏离我们还有多远?这会是游戏创业公司的一个新机遇吗?
用「脑」打游戏
如何才能用脑电波操纵游戏?
和一般人的想象不同,Perri Karyal 并不是通过脑中实时想象 " 向前跑 "、" 躲避 "、" 攻击 " 等动作来实现用脑电波操纵打怪。她通过想象一些特定动作,这些动作能够更好地被她佩戴的脑电设备识别,然后将这些动作与游戏中特定的按键绑定起来,从而实现对游戏角色的操控。
「当我要攻击的时候,我想象的是将一个非常非常重的东西推离身体,而治疗的时候,我想象的是我通过拉的动作,让一个东西砸落到我的脸上。」Perri Karyal 形容道。
人脑在执行不同行为时,脑电波会呈现出不同的模式,而这些模式会被她所佩戴的脑电设备实时监测到。Perri Karyal 在 Youtube 视频中用图像直观地展示了大脑在不同活动时的差别。
Perri Karyal 在说话瞬间脑部反应|YouTubePerri Karyal 在想象「攻击」时脑部反应|YouTube第一张图截取了她说话的瞬间,可以观察到她大脑的多个脑区在说话时被激活。而当她全力思考将一个重物推离自己时,脑电波呈现了第二张图上清晰可见的独特模式。一旦她佩戴的设备成功识别了这个模式,脑电设备就会发出指令执行她预先设定的攻击操作。
Perri Karyal 本身拥有心理学硕士学位,在学术研究过程中就曾广泛应用脑电图(EEG)作为研究工具。作为一种简单、无痛的记录脑部的电活动的手段,脑电图可以观察脑部不同区域的工作情况。除了研究者会使用它来提供脑部活动的信息,医生也会利用脑电图做癫痫等疾病的检查。医用的 EEG 设备大家应该都在电影中见过,像演员的光头头套,上面遍布着许多电极。
「有一次偶然的机会,我接触到了蓝牙的 EEG 设备,我的设备预算刚好能覆盖它的成本,我就想,我一定得试试它。「Perri Karyal 提到。就这样,她开始接触非医疗级的脑电设备,并由此开始了使用这些设备操控游戏的旅程,一发不可收拾。
「我使用的是设备本来是用来做情景研究(contextual research)的,」Perri Karyal 表示,情景研究指的是通过在日常生活的场景里观察人们的活动来得到洞见的研究。「这样的脑电设备没有办法做诊断或者用在医疗场景中。」
根据 Vice 的报道,Perri Karyal 使用的应该是 EMOTIV 的设备 EPOC X。由于不是医疗级的脑电设备,它的输出也相对有限,只能够识别推、拉、拿起、放下四个动作。识别到这些操作后,设备本身提供了一些内置的操作,也提供了 API 让人们可以接入其他可以设备进行控制。
对于 Perri Karyal 而言,这四个动作已经足够她在《艾尔登法环》这样的游戏里战斗和治疗的操作,但其它操作却需要一些控制器的辅助。因此她最后选择在脑控设备上在加装陀螺仪,通过API和一些 python 编程让传感器们能够相互协作,帮助她实现在游戏中自由行走和完成其他操作。她也在尝试加入眼部追踪、表情识别等更丰富的功能,来完成更丰富的游戏场景交互。
「脑机」不容易
看到这里你可能会想,听起来 Perri Karyal 的操作也并不很难,这么酷炫的方式,为什么市面上的游戏没有增加「意念操纵」的方式游玩的选项?
事实上,虽然普通人确实可以用类似的方法实现脑控游戏,也确实有一些公司已经利用 EEG 设备做出了脑控游戏,但游戏公司如果想要推出脑控游戏,利用 EEG 作为主要、甚至唯一的交互方式达到一个良好的复杂游戏体验,并能够广泛商业化,还面临着不少障碍。
其中一个问题,就是 EEG 设备的佩戴舒适度问题。
EEG 设备通过贴着头皮的电极记录大脑的电信号。源自大脑的电信号需要穿过头骨和头皮才能被 EEG 设备接收,这就意味着在测量过程中会有很多噪音和误差的干扰。通常我们在医院中测脑电图,为了保证准确性,都会在与头皮接触的电极上涂上导电膏,使电流传递有效、快速、均匀。
但是导电膏本身会弄脏头发。每次佩戴 EEG 设备之后都要洗头,这是极其不方便的。况且,无论是导电膏的制备、皮肤清洁,还是测试过程中避免凝胶扩散导致相邻电极短路,都需要一定的专业技术。
作为非医疗器械,Perri Karyal 使用的 Emotiv EEG 设备采取的电极已经相对更舒适一些,只需要生理盐水来使电极更有传导性。但即使如此,她在直播中为了使设备能够一直保持有效,还是需要不断用生理盐水打湿电极。
Perri Karyal 需要不断用生理盐水打湿 EEG 的电极|YouTube作为一个极客玩家,以上的选项或许尚能接受,如果想成为一个大规模商用的消费级产品,EEG 设备的舒适度显然尚有欠缺。
另一个问题,则是存在于所有脑机接口解决方案上的普遍问题。每个人的大脑的电信号,虽然存在一定共性,但是终究是有所不同的。在任何脑机接口类的应用中,都存在个性化适配的过程。而这个适配的过程,时间常常因人而异。
事实上,虽然 Perri Karyal 使用的 Emotiv 设备只能识别四个动作,为了让四个动作的识别能够变得足够精准,Perri Karyal 花了极长的时间对其进行个性化适配和校准。「我花在训练 EEG 上的时间要比我花在游戏中的时间还要多。而我可是在游戏上花了超过 250 个小时。」Perri Karyal 曾谈到。这样多的训练时间可谓十分惊人了,一般用户恐怕难以承受。
此外,脑控设备性价比可能也是一个大规模商业化的问题。Perri Karyal 使用的设备精度虽然低于医疗级,但其价格并不低—— 849 美金。设备价格对应着输入的精度,芯片的计算能力,以及平台配套的操作的简便性等。即使这样,输出的操作也只有四档。她需要自己再加装陀螺仪等,才能在《艾尔登法环》这样对格斗时效性要求很高、但是格斗方式并不特别复杂的游戏中,完成这样令人惊叹的完全脑控操作。
虽然随着硬件的发展,脑控设备价格从人民币几百元到几千元,选择档位很多——但是较低的价位的脑控设备的输出也会相对受限。玩家可以游玩简单的脑控游戏,或者将脑控作为复杂游戏的辅助,但很难达到在复杂游戏中进行完全的脑控操作。
脑机的商业化方向
通过获取脑电信号,利用信号进行对机器的操纵的脑机接口技术,大概上可以分成两类:侵入式的和非侵入式的。前者指的是通过有创手术将电极植入人脑中,对脑电信号进行探测,进而使用信号做出更多操作。马斯克联合创办的,最近刚刚取得 FDA 批准进行人体实验的脑机接口公司 Neuralink 就属于此类。而 EEG 技术是非侵入式的代表。
侵入式的脑机接口技术,无需穿透头骨和头皮来获取脑电信号,自然比非侵入式方法获取的电信号更清晰。而非侵入式的脑机接口,最大的优势就是无需冒手术的风险。而游戏,作为一个具有容错率的娱乐应用场景,似乎天然与非侵入式的脑机接口技术关系更紧密。
因此,虽然 EEG 脑控游戏立刻大规模商业化尚有诸多障碍,并不妨碍使用 EEG 脑控游戏仍然是一个极其诱人的应用场景。许多创业者目前也在努力绕开前述障碍,努力地为它寻找合适的细分场景。
目前一个较为成熟的方向,是注意力监测方向的游戏。
由于人脑中负责注意力的神经元主要分布在前额区域,如果只需要监测注意力的情况,电极可以只贴附在较为光滑的前额上。相比于头发密布的区域,监测前额的难度相对较低。只需使用一个头箍式的设备即可进行监测,不会对头部施加过大的压力,也不需要频繁使用生理盐水来湿润头发,整体的体验感提升了很多。
虽然相比于 Perri Karyal 的操作,注意力游戏略显单调:游戏模式常常是集中注意力,你就可以前进或者打败敌人。但是作为一种纯粹的新奇的体验,它仍然是成立的。部分公司会选择在商场部署这样的游戏让大众付费体验,或者开发用「意念」控制的无人机这样的玩具进行销售。
除了纯粹的娱乐性外,这样的游戏体验实际上还有真实的医疗价值。
国内脑机接口初创公司强脑科技就有类似的产品:针对注意力缺陷儿童,首先通过测试来建立他们的基线水平,然后根据他们的注意力缺陷程度设定不同的游戏难度,让他们参与类似的专注力游戏。在游戏中,专注力的表现会得到游戏的正反馈,这将促使儿童不断提升自己的专注能力。这实际上是脑科学和行为科学中行之有效的一种神经反馈训练。
强脑科技的产品,脑电波的监测集中于前额,使用干电极|强脑科技另一个有趣的方向,是把 EEG 与VR进行结合。
与 VR 结合的潜在好处是,非医疗的 EEG 设备因其精度问题,能做出的相互区别的输出还是较少,这也是为什么 Perri Karyal 后期需要为她的 EEG 设备增加眼部追踪和陀螺仪等设备的原因。而 VR 设备本身就自带这些功能,多模态的输入可能使游戏体验更好。
VR 与稳态视觉诱发电位触发的 EEG 结合的前景尤其有趣。稳态视觉诱发电位触发的 EEG 的一个弱点在于,在强光环境下,视觉触发的成功率会降低。而通过与 VR 的结合,这一限制被大大被弱化。已经被 Snap 公司收购了的法国创业公司 NextMind,在 2020 年就曾提供一款这样的 VR+EEG 的设备。在其演示游戏《Mindvasion》中,玩家可以戴上 VR 设备,直接以视觉瞄准和杀死敌人。
Nextmind 产品图,后脑的小圆片就是它的 EEG 模块|NextMindAI,脑机的新方向?
华兴资本 2022 年提出的脑机接口行业研究分析报告中显示,侵入式脑机接口,主要用于临床级应用,具体的临床适应症更偏向于一些难治性脑部疾病比如癫痫、肢体运动障碍等。而非侵入式脑机接口,临床级应用包括意识监测、意识障碍改善、认知障碍改善、精神疾病失能改善、儿童多动症改善、听觉、视觉、触觉等感觉缺陷的替代。典型的消费级应用包括睡眠监测、抑郁情绪早期监测恢复、压力情绪监测等。
「市场刚需属性决定了脑机接口现阶段多应用于脑科学科研和脑疾病患者康复上。」沙利文头豹研究院医疗行业高级分析师孙榕表示。
显然,偏医用和健康领域的场景,与游戏这样的大众文娱场景不同,对于硬件的舒适度、个体化适应的时间和价格的要求都没有那么苛刻,也是目前创业者的最大机遇所在地。
不过,随着硬件的发展,文娱方向一定是脑机接口的重要场景。上海市人工智能行业协会 2021 年发布的报告显示,未来五年 ( 2021 年 -2025 年 ) 全球范围内广义的脑机接口市场规模有望达到 3300 多亿美元,最主要的领域即在医疗、游戏娱乐和教育科技方向。
强脑科技的相关负责人接受采访时表示:「虽然我们目前并没有向纯游戏领域发展的意图,但是我相信游戏文娱类作为医疗康复之外的第二大脑机接口的应用场景,前景非常广阔。」
人工智能也可能是产业的一个变机。
2022 年,Meta 曾经公布一项名为「大脑信号读心术(Brain Signal Reading)」的研究成果。研究人员利用语句和脑电波对应的数据集对 AI 进行训练,极大地提升了通过脑电图和脑磁图(另一种非侵入式脑机接口技术)推断实验对象语言信号的能力。
所以理论上,即使 EEG 设备在硬件上没有大幅度的突破,将人工智能和 EEG 技术结合,从「软件」上,EEG 设备的精度也可能大幅度提高。
虽然目前稍显遥远,从长远考虑,脑控游戏的突破也可能来自侵入式的脑机接口技术,或者其他非侵入式的脑机接口技术的进步,如脑磁图、功能性核磁共振、功能性近红外光脑成像、正电子发射型计算机断层显像等。
5 月 30 日下午落幕的 2023 年中关村论坛中,工业和信息化部总工程师赵志国透露,工业和信息化部把脑机接口作为培育未来产业发展的重要方向,要加强脑机接口应用场景的探索,加速推动脑机接口产业的蓬勃发展。
在政策面向好的情况下,有没有创业者能够找到更好的方向,聪明地绕开或者解决现有脑控游戏的商业化障碍还未可知,但值得期待。
责任编辑:hnmd003
相关阅读
-
世界新资讯:联想新款 ThinkCentre Q500 迷你 PC 开启预售:约 1L,配可自定义接口,2999 元起
近年来,一些有着较强性能且接口齐全的迷你PC引起了玩家的关注。整机大
2023-06-05
相关阅读
-
马斯克、米哈游投资的脑机技术,却被女主播拿来打「老头环」 天天新动态
2022年,整个游戏圈只有两个游戏,《艾尔登法环》(EldenRing)和其他
-
当前观察:空降畅销第四,五月爆款黑马背后,藏着一个意想不到的平台
免费榜登顶并且霸榜6天,畅销榜第4位,《凡人修仙传:人界篇》大概是五
-
外媒酸了:小米 13 Ultra 史上最大胆 可惜不在印度上市-每日消息
【手机中国新闻】手机中国获悉,近日小米13Ultra已经到达多家外媒手中
-
外表精致 + 内核超稳,“时尚精”全新 moto razr 小折叠斩获手机榜 TOP1-今日热门
618购物狂欢全面开启,各手机品牌的竞争也如烈火烹油,热闹非凡。颜值
-
世界新资讯:联想新款 ThinkCentre Q500 迷你 PC 开启预售:约 1L,配可自定义接口,2999 元起
近年来,一些有着较强性能且接口齐全的迷你PC引起了玩家的关注。整机大
-
大战持续升级,百亿 IL-17 靶点竞争加剧之后 天天速看料
图片来源@视觉中国文|氨基观察在技术大航海时代,冒险需要真正的硬实
-
一季度营收百亿,但仍不被资本关注,这个暴利医疗赛道为何被遗忘了? 全球热门
图片来源@视觉中国文|vb动脉网将时针拨回到2021年,那几乎是医美行业
-
从大模型到行业模型,传媒产业 AI 价值显现
5月底,从政策到企业齐发力,均在加码AI产业链。从北京到深圳,从百度
-
mac解压缩失败是怎么回事?mac解压缩后的文件在哪里?
mac解压缩失败是怎么回事?造成mac解压失败的原因有很多,比如:压缩文件自身损坏、浏览器未完全下载、清...
-
新农村建设问题有哪些?新农村建设要避免“四个误区”是什么?
一、新农村建设存在的问题有哪些第一,在统筹推进建设上有差距。新农村建设是一项综合性工程,需要统筹...
-
个人缴纳基本养老保险费的流程是什么?养老保险4050新政策内容是什么?
养老保险4050新政策:截止至2011年12月31号前,男性年满50周岁,女性年满40周岁的没有单位给交社会保险...
-
手机相册在哪个文件夹?手机相册删除的照片怎么找回来?
手机相册在哪个文件夹?1 Android手机:通常会在内部存储或SD卡中的DCIM文件夹下找到相册。例如,相片可...
-
电源高压高于电容耐压时会引起什么?电源高压和低压区别
电源高压高于电容耐压时会引起什么?电源电压高于电容耐压时会引起短路导致电容爆裂而伤害到人。电源电压...
-
职工养老保险缴费年限是多少年?社会保险法第十六条内容是什么?
养老保险缴费年限是:要累计缴费满十五年;因为根据《社会保险法》,参加基本养老保险的个人,达到法定退...
-
电刷镀最大能镀多厚?电刷镀与电镀的区别
电刷镀最大能镀多厚?电刷镀又称金属笔镀或快速电镀。借助电化学方法,以浸满镀液的镀笔为阳极,使金属离子...
-
车险理赔不合理怎么办?车险理赔难怎么办?
一、车险理赔不合理怎么办发生了理赔纠纷,我们可以通过协商、仲裁、诉讼三种方式来解决:1、协商:协商...
-
占空比什么意思?占空比和频率的关系
占空比什么意思?占空比是指在一个脉冲循环内,通电时间相对于总时间所占的比例。占空比(Duty Ratio)在...
-
环境污染按环境要素分为什么?环境污染包括哪些?
环境污染按环境要素分为:噪声污染、大气污染、水体污染、固体废物污染、土壤污染、农药污染、辐射污染...
-
交通信号通行常识都有什么?中华人民共和国道路交通安全法第四十四条是什么?
交通出行法律常识:机动车上道路行驶,不得超过限速标志标明的最高时速。在没有限速标志的路段,应当保...
-
小米路由器hd支持mesh吗?小米路由器hd和pro区别
小米路由器hd支持mesh吗?HD不能组mesh, HD可以设置成有线中继模式,可以正常硬盘共享和下载,可以用同...
-
辞职后的五险一金怎么缴纳?中华人民共和国社会保险法第三十二条内容是什么?
职工离职后五险一金可以暂停缴纳;也可以及时找到新单位,由单位为其办理续接手续,继续为职工缴纳五险一...
-
excel共享文档怎么弄?excel怎么弄成多人在线编辑?
excel共享文档怎么弄?打开电脑上EXCEL表格,进入编辑界面。点击顶部审阅选项栏,点击共享工作簿。勾选允...
-
故意伤害罪致人重伤的量刑标准是什么?轻伤判刑标准是什么?
轻伤一般会判三年以下有期徒刑、拘役或者管制。轻伤是指使人肢体或者容貌损害,听觉、视觉或者其他器官...
-
中信建投证券买入卓朗科技股份 股价上涨或暗示投资信心高|每日视点
结合最新信息,卓朗科技的股价上涨原因可能与其出现的两笔大宗交易有关
-
车险的种类都有哪些内容?机动车交通事故责任强制保险条例第三条内容
车险的种类有:基本险,包括车辆损失保险与第三者责任保险。第三者责任险,是承保被保险人或其允许的合...
-
蓝牙适配器怎么用?蓝牙适配器5.0和5.3区别
蓝牙适配器怎么用?3 1 插入蓝牙适配器插入蓝牙适配器前,确保您已安装适当的蓝牙驱动程序。然后将 US...
-
怎么看内存条频率?内存条频率越高越好吗?
怎么看内存条频率?一、运用系统命令行命令查看内存频率1、首先,当然是要靠windows系统自身的工具盒方法...
-
太平财富安赢年金保险如何?靠谱吗?
相比市面上其他的保险产品而言,比较一般,因为身故保障不够充分。如果
-
招商仁和招享未来年金保险是哪个保险公司的?保障什么? 世界热闻
招商仁和招享未来年金保险是由招商仁和保险有限公司推出的产品。招商仁
-
环球观速讯丨新华金钱柜年金保险条款内容是什么?怎么样?
新华金钱柜年金保险提供了灵活的交费方式,包括单次缴纳、分期缴纳和常
精彩推荐
阅读排行
精彩推送
- 什么是年金保险产品?哪个好?|...
- 国寿鑫如意年金保险白金版怎么样...
- dmg文件怎么打开?dmg文件可以删...
- 环球消息!中介刷屏保姆纵火案房...
- 当前速看:季末冲业绩!特斯拉Mo...
- 自动关机命令是一次性的吗?win7...
- 显卡驱动在哪里看?显卡驱动更新...
- 电脑定时提醒是怎么回事?电脑定...
- 机箱漏电是什么原因?机箱漏电对...
- 2023海浪电影周圆满落幕
- 华硕 a 豆 14 2023 全面评...
- DSCC:2023 年 Q1 可折叠智能...
- 天天最资讯丨谷歌 Tensor G3 ...
- coreldraw快捷键怎么设置?cdr删...
- 共享打印机怎么设置?共享打印机...
- 天天速讯:口碑最好的净水器十大...
- 快看点丨真假“英伟达概念股”:...
- 2023年哪款年金险最好排第一?怎...
- 养老年金保险是什么?有什么作用...
- 增额终身寿险与年金险的区别是什...
- 今亮点!比较好的年金保险有哪些...
- 世界最新:珠江聚多多年金保险是...
- 【报资讯】同心护未来 志愿在行动
- 8月27日开跑 2023拉萨半程马拉...
- 微速讯:《剧院魅影》上海场均票...
- 高考前焦虑失眠怎么办?这份考前...
- 赛道规模剑指千亿 智能清洁市场...
- 联想推出 moto razr 40 Ultr...
- 天天动态:攻击者正在利用 iMess...
- 大量安卓用户逃离换 iPhone,An...