你好呀，我是小智!

相信大家最近一定都被《黑神話：悟空》刷屏了吧。小智作為一個(gè)手殘黨，也被大頭虐的死去活來。游戲已經(jīng)被講得很多了，所以我們聊點(diǎn)別的。

此次我們聚焦在一個(gè)特別的故事上——全盲女玩家諾子喵嗚挑戰(zhàn)《黑神話：悟空》。她依靠實(shí)時(shí)彈幕指導(dǎo)和聽聲辨位的方式，成功擊敗了游戲中的第一個(gè)Boss。

這一事件不僅引發(fā)了社會(huì)廣泛關(guān)注,也提出了一個(gè)新的問題：

在AI技術(shù)日新月異的今天，我們能否利用AI為視障玩家提供更好的游戲體驗(yàn)？

AI伴玩的可能性

隨著AI技術(shù)的進(jìn)步，游戲伴玩的概念開始興起。大模型如GPT-4V和GLM-4V-Plus，具備了強(qiáng)大的視頻理解和生成能力，使得它們?cè)谟螒虬橥嬷酗@示出了巨大的潛力。例如，在國(guó)外的游戲社區(qū)中，一些玩家已經(jīng)開始利用GPT-4，在《我的世界》中實(shí)現(xiàn)了基本的伴玩功能。通過AI的協(xié)助，玩家可以獲得實(shí)時(shí)的游戲指引，甚至在需要時(shí)得到詳細(xì)的操作建議。

國(guó)內(nèi)目前無法正常使用GPT-4V，我首選了國(guó)產(chǎn)自研大模型GLM-4V-Plus。作為智譜最新推出的圖像/視頻理解模型，GLM-4V-Plus具備卓越的圖像理解能力，并具備基于時(shí)間感知的視頻理解能力，能做到哪個(gè)程度尚不清楚，考慮到《黑神話：悟空》的復(fù)雜性和高難度，我們可以先來上手測(cè)一測(cè)。

GLM-4V-Plus在《黑神話：悟空》中的應(yīng)用測(cè)試

為了驗(yàn)證GLM-4V-Plus在游戲伴玩中的潛力，我們進(jìn)行了針對(duì)《黑神話：悟空》的應(yīng)用測(cè)試。此次測(cè)試主要集中在幾個(gè)關(guān)鍵方面：游戲劇情的識(shí)別、寶箱和隱藏道具的發(fā)現(xiàn)以及路徑導(dǎo)航。

GLM-4V-Plus目前可以在智譜大模型開放平臺(tái)bigmodel.cn上通過 API 直接調(diào)用，這是國(guó)內(nèi)首個(gè)通用視頻理解模型API，大家都可以上手試一試。

劇情識(shí)別能力

在游戲過程中，玩家往往需要理解復(fù)雜的劇情和任務(wù)指引。對(duì)于視障玩家來說，缺少視覺反饋會(huì)使得劇情的理解變得異常困難。我們挑選最開頭的變身金蟬的片段，來看GLM-4V-Plus能否準(zhǔn)確識(shí)別運(yùn)動(dòng)主體以及周邊環(huán)境。

通過對(duì)游戲中的文本和語(yǔ)音進(jìn)行分析，GLM-4V-Plus能夠精準(zhǔn)地識(shí)別出主角變身的金蟬，以及所處的森林環(huán)境，并生成簡(jiǎn)明的文字提示，有了這一能力，能夠幫助視障玩家更好地理解游戲情節(jié)。

寶箱和隱藏道具的發(fā)現(xiàn)

《黑神話：悟空》中隱藏了大量的寶箱和道具，玩家需要通過細(xì)致的觀察才能發(fā)現(xiàn)這些隱藏物品。對(duì)于視障玩家來說，這幾乎是不可能完成的任務(wù)。如果能通過AI指引方位來獲取物品，將極大的提升游戲體驗(yàn)。

GLM-4V-Plus在此表現(xiàn)出了其強(qiáng)大的視覺處理能力。通過分析游戲畫面，AI識(shí)別出到了寶箱位于畫面右側(cè)，并且針對(duì)視頻一開始的視覺遮擋，玩家無法直接看到寶箱也進(jìn)行了提醒和指引。有了這個(gè)功能，不僅增強(qiáng)了游戲的趣味性，也使得視障玩家能夠參與到更多的游戲內(nèi)容中。

路徑導(dǎo)航能力

在游戲中，路徑的選擇和行走是一個(gè)重要的部分，尤其是在復(fù)雜的地圖或迷宮中，錯(cuò)誤的路徑選擇可能導(dǎo)致游戲失敗。接下來我們看下GLM-4V-Plus是否能夠準(zhǔn)確識(shí)別游戲中的岔路口。

GLM-4V-Plus通過分析游戲地圖和玩家的當(dāng)前位置，成功識(shí)別出了兩條可行進(jìn)的線路，并為玩家提供路徑建議。這種路徑導(dǎo)航能力不僅能夠幫助視障玩家避免迷路，還能夠提高他們的游戲效率。

測(cè)試結(jié)果與分析

在這次測(cè)試中，GLM-4V-Plus表現(xiàn)出色，證明了AI在游戲伴玩中的潛力。它能夠精準(zhǔn)地識(shí)別游戲中的關(guān)鍵元素，為玩家提供實(shí)時(shí)的幫助和反饋。然而，在實(shí)際應(yīng)用中，我們?nèi)匀幻媾R一些挑戰(zhàn)，如實(shí)時(shí)性和復(fù)雜場(chǎng)景的處理能力。這些問題需要在未來的技術(shù)迭代中進(jìn)一步優(yōu)化。

無障礙游戲設(shè)計(jì)的思路

在AI的助力下，未來的游戲設(shè)計(jì)可以更加注重?zé)o障礙功能，尤其是對(duì)視障玩家的需求。那么基于GLM-4V-Plus可以進(jìn)行哪些無障礙游戲設(shè)計(jì)呢？

• 屏幕捕捉與實(shí)時(shí)語(yǔ)言提示

通過屏幕捕捉技術(shù)，我們可以通過GLM-4V-Plus接口實(shí)時(shí)分析游戲畫面，并將視覺信息轉(zhuǎn)換為語(yǔ)言提示。這些提示可以通過耳機(jī)或揚(yáng)聲器實(shí)時(shí)播放，幫助視障玩家了解周圍環(huán)境。例如，當(dāng)玩家接近敵人時(shí)，AI可以提示玩家敵人的位置和動(dòng)作，甚至建議玩家采取的戰(zhàn)斗策略。這種方式可以大大提高視障玩家的游戲體驗(yàn)。

• 觸覺反饋與振動(dòng)提示

除了語(yǔ)言提示，觸覺反饋也是一種有效的無障礙設(shè)計(jì)方式。例如，上文提到的使用GLM-4V-Plus來尋找隱藏的寶箱或陷阱時(shí)，手柄可以通過振動(dòng)提醒玩家注意。這種多感官的反饋方式可以讓視障玩家更好地掌握游戲中的關(guān)鍵信息，增強(qiáng)他們的沉浸感。

結(jié)語(yǔ)

《黑神話：悟空》的挑戰(zhàn)故事讓我們看到了AI技術(shù)在幫助視障玩家方面的巨大潛力。通過GLM-4V-Plus等先進(jìn)AI模型的應(yīng)用，我們可以為視障玩家提供更加豐富和有趣的游戲體驗(yàn)。然而，技術(shù)的進(jìn)步只是第一步，如何將這些技術(shù)應(yīng)用于實(shí)際的游戲設(shè)計(jì)中，使其真正服務(wù)于殘障人士，是我們未來需要共同努力的方向。AI的未來充滿了可能性，它不僅可以改變游戲的面貌，還能夠改變無數(shù)玩家的生活。讓我們期待，AI能夠?yàn)楦嗟娜藥砉饷骱拖Ｍ?/p>

本文轉(zhuǎn)載自 AI小智，作者： AI小智