顯示廣告
隱藏 ✕
※ 本文轉寄自 ptt.cc 更新時間: 2022-02-13 16:36:07
看板 C_Chat
作者 cjol (勤樸)
標題 [情報] 跑車浪漫旅玩家小心了!Sony開發最強賽車
時間 Sun Feb 13 14:58:54 2022



ithome 李建興

跑車浪漫旅玩家小心了!Sony開發最強賽車AI或將進入遊戲慘電玩家


Sony AI在Nature期刊發表最新的賽車人工智慧研究,該組織所開發的GT Sophy人工智慧
代理,能夠在跑車浪漫旅賽車遊戲中擊敗冠軍玩家

Sony AI x Polyphony Digital Race Together - K.Yoshida Message
https://www.youtube.com/watch?v=QvTAAKI4x-4
The Making of Gran Turismo Sophy [English]
https://www.youtube.com/watch?v=l948hMaTPuo

Gran Turismo Sophy RACE TOGETHER 2021 #1 [English]
https://www.youtube.com/watch?v=4Gfm317R7l4
Gran Turismo Sophy RACE TOGETHER 2021 #2 [English]
https://www.youtube.com/watch?v=dxmIAy9ShZg


不只在西洋棋以及即時戰略遊戲Dota,人類玩家打不贏電腦,現在連賽車遊戲也失守,
人工智慧已經有能力在賽車遊戲中跑贏頂尖車手。

由Sony AI、Polyphony Digital和Sony Interactive Entertainment共同合作,
所開發的人工智慧代理Gran Turismo Sophy(GT Sophy),在知名賽車遊戲跑車浪漫旅
(ran Turismo)遊戲中,打敗全世界最厲害的玩家賽車手,而Sony正探索將這個
人工智慧代理整合到跑車浪漫旅系列作的方法,與玩家展開對決。

Sony AI研究人員在Nature期刊發表論文〈Outracing champion Gran Turismo
drivers with deep reinforcement learning〉,應用深度強化學習技術,開發出超越
跑車浪漫旅車冠軍手的人工智慧代理。這個研究以跑車浪漫旅系列作品,2017年
Polyphony Digital於家用遊樂器PlayStation 4上所發布的Gran Turismo Sport(GT
Sport)版本為基礎,該遊戲逼真重現真實世界的賽車環境,由於GT Sport採用了最新
的車輛動力系統模擬,遊戲中賽車的效能幾乎與真實世界的賽車相同,對空氣阻力、
輪胎摩擦,甚至懸吊系統移動所造成的方向改變都進行建模。


再加上擁有來自車廠的指導,GT Sport中賽車車身曲線、方向燈和大燈細節都
與實體車型相同,精確地重現車輛細節。遊戲也設計了明確的規則和判斷標準,
是一個與真實世界接近且公平的賽車遊戲。

Sony AI在這個接近現實賽車的遊戲中,開發賽車人工智慧代理,其所使用的增強學習
是一種機器學習技術,訓練人工智慧代理在環境中,透過獎勵和懲罰學習所要採取的
行動。Sony AI以增強學習為基礎,發展了一種更先進的訓練演算法,稱為QR-SAC

(Quantile-Regression Soft Actor-Critic)。

https://s4.itho.me/sites/default/files/images/rl-techniques.png
[圖]

深度增強學習技術早已被用來開發各種遊戲的人工智慧代理,研究人員提到,增強學習
技術代理會考慮行為帶來的長期影響,並且可以在學習期間自己收集資料,免去人工
編碼行為規則的繁瑣工作,因此很適合用來開發遊戲人工智慧代理,特別像是GT Sport
這類複雜的遊戲。

QR-SAC演算法訓練人工智慧代理GT Sophy,成為一個技術高超,有謀略又有禮貌的賽車
手,能夠掌握賽車控制、戰術還有禮儀技能。QR-SAC能夠推理出GT Sophy在高速行動下
的結果,考慮到駕駛行為和後果,並在與不同類型的對手比賽時,考量複雜的可能性,

GT Sophy能夠以高超的控制技巧,在一系列彎道組合,在未有接觸下貼著賽道牆面行駛。


GT Sophy雖然能夠自己收集資料,但訓練像是尾流超車(Slipstream Passing)
這種特殊技巧,需要對手處與特定的位置。因此Sony AI還以混合情境訓練GT Sophy,
除了手工製作每條賽道需要掌握的重點之外,也有協助代理人學習的專業陪練對手。


這些訓練使得GT Sophy獲得一些專業的賽車技術,包括處理賽車同時起步的擁擠情況,

或是利用前車尾流彈射超車,甚至是防守動作。Sony AI特別展示了GT Sophy能夠精巧
控制方向盤,在急轉彎中追趕前車。


不成文的賽車規則,並且將其編碼成複雜的獎勵函式,使得GT Sophy不過於激進或是
膽怯,能與人類展開具有競爭性的比賽。GT Sophy可以不阻擋其他車手,留給對手
足夠機動空間的情況下超車。

Sony AI在自家開發的DART(Distributed, Asynchronous Rollouts and Training)
訓練平臺訓練GT Sophy,DART平臺具有大量的CPU和GPU,能夠連接1,000多臺
PlayStation 4,以收集訓練GT Sophy的資料集,同時DART還可管理代理運算資源和
跨資料中心的GPU,研究團隊會在DART上同時進行數百個實驗,以探索提升GT Sophy
效能的技術。


https://www.ithome.com.tw/news/149302
跑車浪漫旅玩家小心了!Sony開發最強賽車AI或將進入遊戲慘電玩家 | iThome
[圖]
Sony AI在Nature期刊發表最新的賽車人工智慧研究,該組織所開發的GT Sophy人工智慧代理,能夠在跑車浪漫旅賽車遊戲中擊敗冠軍玩家 ...

 

--
英國老人在海關翻找護照,動作很慢找了很久,女海關尖酸的問:你來過法國?
英國老頭說:我只來過一次。女海關更尖酸的問:你來過怎麼不知道提前拿護照?
老頭:我上次來時沒檢查護照。
女海關高聲叫道:不可能!英國佬來法國我們永遠都要檢查護照!
老頭:44年登陸時候,海灘上可一個法國人沒見著...
旁邊德國老頭說:是的,這個我能證明,當時灘頭確實一個法國人都沒有...

--
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 219.70.228.141 (臺灣)
※ 文章代碼(AID): #1Y2Amnu8 (C_Chat)
※ 文章網址: https://www.ptt.cc/bbs/C_Chat/M.1644735537.A.E08.html
HidekiRyuga: F-zero GX表示1F 02/13 15:00
y1896547: 開到一半副駕回伸出高爾夫球桿把玩家頭打爆2F 02/13 15:00
milk830122: 教育玩家怎麼開車3F 02/13 15:00
anumber: 10/10賽車4F 02/13 15:00
undeadmask: 教你開車5F 02/13 15:01
jileen: 是巨大黑色母猩猩嗎,不是的話我可是不玩的喔6F 02/13 15:01
er2324: 這讓我想到2077的賽車,直接閃現到你後面就沒問題了。7F 02/13 15:02
ayuhb: 還真的教訓你開車8F 02/13 15:04
mn435: 大概又是電腦作弊9F 02/13 15:04
s32244153: 開車也要被教育 是駕訓班逆10F 02/13 15:05
qweertyui891: 遊戲體驗極佳11F 02/13 15:05
johnny3: 這等於跑幾百萬場然後直接抓冠軍資料 怎麼贏12F 02/13 15:06
horseorange: FH: 我才剛調弱電腦耶13F 02/13 15:06
johnny3: 人類根本達不到那種訓練量14F 02/13 15:06
SALEENS7LM: 學校巴士開車囉15F 02/13 15:06
Irenicus: 連開個車也要被教育16F 02/13 15:06
onnax: 這種不是為了提升遊戲性吧,看起來很像是讓玩家免費幫他完17F 02/13 15:10
onnax: 善AI開發
YoshiCasa: 這種東西有最佳解的吧?19F 02/13 15:12
david7112123: 教你怎麼玩賽車遊戲20F 02/13 15:13
dead11: 教育神作黑猩猩變性人教你賽車21F 02/13 15:13
WLR: 十年樹木,百年樹人22F 02/13 15:21
supersusu: 賽車遊戲的AI還需要人工智能?23F 02/13 15:27
oldk13: 可憐,開個車還要教你有禮貌,歐洲車手可是一個比一個狠24F 02/13 15:31
aegis43210: 用玩家資料來強化深度學習,之後再分成不同風格的AI25F 02/13 15:32
chaos0801: 阿爾札特突入賽道26F 02/13 15:37
james5271: 魂系賽車啦27F 02/13 15:39
aa08175: 就怕為噁心而噁心玩家28F 02/13 15:41
ken720331: ?29F 02/13 15:43
wingflys: 可能是拿來訓練自駕AI吧30F 02/13 15:43
seanmom: 麻煩AI配音用鳳呀的31F 02/13 15:47
EHacker: Miko: challenge accepted32F 02/13 15:48
lyliatw: 駕駛人選白人難度直上一百倍33F 02/13 15:55
Qoo777: 快讓AI玩馬力歐賽車阿 應該很精采 我看看怎麼1打1034F 02/13 16:00
ger1871: 駕駛教育課程35F 02/13 16:00
sam355322: tas表示36F 02/13 16:02
poz93: 賽道本來就有最佳路線 AI走在最佳路線上很正常37F 02/13 16:06
poz93: 這比圍棋之類的 還沒什麼
roytiu: 阿爾札特要來了嗎39F 02/13 16:16
gox1117: 喔是喔東西呢40F 02/13 16:17
TGD01: 同意poz93 賽車遊戲的AI比其他遊戲好做很多吧 隨機性低多了41F 02/13 16:24
t77133562003: 有意義嗎......阿不就跑最佳解42F 02/13 16:29

--
※ 看板: ACG 文章推薦值: 0 目前人氣: 0 累積人氣: 126 
分享網址: 複製 已複製
r)回覆 e)編輯 d)刪除 M)收藏 ^x)轉錄 同主題: =)首篇 [)上篇 ])下篇