TWI716706B - 人工智能之輔助操作系統 - Google Patents

人工智能之輔助操作系統 Download PDF

Info

Publication number
TWI716706B
TWI716706B TW107124310A TW107124310A TWI716706B TW I716706 B TWI716706 B TW I716706B TW 107124310 A TW107124310 A TW 107124310A TW 107124310 A TW107124310 A TW 107124310A TW I716706 B TWI716706 B TW I716706B
Authority
TW
Taiwan
Prior art keywords
operator
game
operating system
unit
artificial intelligence
Prior art date
Application number
TW107124310A
Other languages
English (en)
Other versions
TW201936243A (zh
Inventor
周修宏
林育瑲
謝承志
鄧欣如
劉亭佑
Original Assignee
致伸科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 致伸科技股份有限公司 filed Critical 致伸科技股份有限公司
Publication of TW201936243A publication Critical patent/TW201936243A/zh
Application granted granted Critical
Publication of TWI716706B publication Critical patent/TWI716706B/zh

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50Controlling the output signals based on the game progress
    • A63F13/53Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
    • A63F13/533Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game for prompting the player, e.g. by displaying a game menu
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/24Constructional details thereof, e.g. game controllers with detachable joystick handles
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25Output arrangements for video game devices
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25Output arrangements for video game devices
    • A63F13/28Output arrangements for video game devices responding to control signals received from the game device for affecting ambient conditions, e.g. for vibrating players' seats, activating scent dispensers or affecting temperature or light
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50Controlling the output signals based on the game progress
    • A63F13/53Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
    • A63F13/537Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game using indicators, e.g. showing the condition of a game character on screen
    • A63F13/5375Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game using indicators, e.g. showing the condition of a game character on screen for graphically or textually suggesting an action, e.g. by displaying an arrow indicating a turn in a driving game
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/67Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor adaptively or by learning from player actions, e.g. skill level adjustment or by storing successful combat sequences for re-use
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/80Special adaptations for executing a specific game genre or game mode
    • A63F13/837Shooting of targets
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/90Constructional details or arrangements of video game devices not provided for in groups A63F13/20 or A63F13/25, e.g. housing, wiring, connections or cabinets
    • A63F13/98Accessories, i.e. detachable arrangements optional for the use of the video game device, e.g. grip supports of game controllers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03543Mice or pucks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/039Accessories therefor, e.g. mouse pads
    • G06F3/0395Mouse pads
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/30Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device
    • A63F2300/302Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device specially adapted for receiving control signals not targeted to a display device or game input means, e.g. vibrating driver's seat, scent dispenser
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/30Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device
    • A63F2300/308Details of the user interface
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • A63F2300/6027Methods for processing data by generating or executing the game program using adaptive systems learning from user actions, e.g. for skill level adjustment
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/8076Shooting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00Machine learning

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本發明係關於一種人工智能之輔助操作系統,可應用於一電競遊戲。輔助操作系統包含一輸入單元、一處理單元以及一輸出單元。輸入單元設置在執行電競遊戲中所使用的設備或環境裡,以操作者的角度來感測當下的操作環境或電競遊戲的情境。處理單元,與辨識或驅動程式搭配,接收輸入單元所感測的操作環境或遊戲情境,並依照該電競遊戲的特性與需求來進行統合與分析後,產生一指令。輸出單元,設置在執行電競遊戲中所使用的設備或環境裡,用來接收處理單元所產生的該指令後,提示操作者或是提供操作者與遊戲操作相關的訊息。

Description

人工智能之輔助操作系統
本案係關於一種輔助操作系統,尤其是一種藉由人工智能來輔助使用者執行電腦程式的輔助操作系統。
人類具有各種的感官,可藉由感覺系統中視覺(Visual)、聽覺(Auditory)、嗅覺(Olfactory)、味覺(Taste)、觸覺(Tactile)、前庭平衡覺(Vestibular)及本體覺(Proprioceptive)等各神經系統來接收外界的刺激,並傳送到腦部做統合與分析,而在腦部進行組織整合後會再命令運動系統做出適當的反應行為,上述的過程也就是所謂的感覺統合(Sensory integration)。
不過,有時在面臨複雜的情境或解決複雜的問題時,例如使用機器手臂來進行精密的手術、執行複雜且大型的電腦程式例如電競程式、或是在飛行模擬器中模擬各種可遭預的情境時,僅依靠操作者個人的感覺統合能力會面臨一定的風險。因此,若是能夠藉由人工智能(AI)來予以輔助的話,將能夠更精準且更完美地完成許多複雜的任務。
以時下很流行的大型電競遊戲為例,電腦螢幕的畫面越來越大,場景與物件的變化越來越多,同時間所顯示的資訊量也更加複雜,因此,操作者必須將本身的聽覺、視覺以及觸覺等各種感官能力發揮到極限,才有可能在競爭激烈的對戰遊戲中脫穎而出。
為了讓遊戲本身有一定的挑戰性,遊戲軟體開發商當然不允 許操作者執行外掛程式,但又不希望讓操作者在始終無法突破關卡下而放棄或退出遊戲,因此,若是能夠有適當的輔助操作系統,勢必可以幫助操作者更順利地進行遊戲或是訓練,在遊戲軟體開發商與操作者之間達到雙贏的目的。
本發明之主要目的在提供一種具有人工智能的輔助操作系統,具有主動偵測、學習、辨識以及記憶等功能,可輔助使用者執行複雜的電腦程式,使其更精準且更完美地完成許多複雜的任務。
於一實施例中,本發明提供一種人工智能之輔助操作系統,可應用於一電競遊戲。輔助操作系統包含一輸入單元、一處理單元以及一輸出單元。輸入單元,設置在執行電競遊戲中所使用的設備或環境裡,以操作者的角度來感測當下的操作環境或電競遊戲的情境;處理單元,與辨識或驅動程式搭配,接收輸入單元所感測的操作環境或遊戲情境,並依照電競遊戲的特性與需求來進行統合與分析後,產生一指令;輸出單元,設置在執行電競遊戲中所使用的設備或環境裡,用來接收處理單元所產生的該指令後,提示操作者或是提供操作者與遊戲操作相關的訊息。
於一實施例中,輸入單元可選自至少下列之一:麥克風、光線感測器、距離感測器、重力感測器、加速度感測器、磁場感應器、陀螺儀、心跳感測器、霍爾感測器、振動感應器以及影像感應器。
於一實施例中,輸入單元可安裝在耳機、耳麥、喇叭、滑鼠、滑鼠墊、鍵盤、搖桿、控制器、電腦螢幕、遊戲配件、電腦主機、座椅、眼鏡、頭盔或手機上。
於一實施例中,輸入單元為一資訊擷取機制,可從電腦主機、記憶體或是網路來擷取所需的資料。
於一實施例中,處理單元可以單獨設置、設置在遠端的伺服器、或是整合在執行電競遊戲中所使用的設備或環境裡。
於一實施例中,當處理單元整合在執行電競遊戲中所使用的設備或環境裡時,可選擇安裝在耳機、耳麥、喇叭、滑鼠、滑鼠墊、鍵盤、搖桿、控制器、電腦螢幕、遊戲配件、電腦主機、座椅、眼鏡、頭盔或手機上。
於一實施例中,輸出單元可選自至少下列之一:震動器、蜂鳴器、喇叭、螢幕、指示燈以及氣味產生器。
於一實施例中,輸出單元可安裝在耳機、耳麥、喇叭、滑鼠、滑鼠墊、鍵盤、搖桿、控制器、電腦螢幕、外接螢幕、遊戲配件、電腦主機、座椅、眼鏡、頭盔或手機上。
於一實施例中,人工智能之輔助操作系統可用來辨識電腦螢幕所顯示電競遊戲中所出現人物中何者為較強的玩家,其中輸入單元選擇利用一鏡頭來拍攝電腦螢幕的畫面,並將畫面資訊傳送至處理單元執行相關的辨識程式,處理單元將辨識的結果與資料庫做一比對或是建立新的資料後,藉輸出單元提示操作者。
於一實施例中,輸出單元可選擇一設置在一滑鼠內的震動器來產生特定的振動、一設置在滑鼠墊上的一指示燈來發出特定的閃光、或是選擇於一提示螢幕上出現一代表較強玩家的圖式。
於一實施例中,人工智能之輔助操作系統可用來提示電競遊戲畫面中操作者是否已進入炸彈區,其中輸入單元選擇利用一鏡頭來拍攝電腦螢幕的畫面,並將畫面資訊傳送至處理單元執行相關的辨識程式,辨識電腦螢幕上的地圖是否出現紅圈區域後,藉由輸出單元提示操作者。
於一實施例中,輸出單元可選擇一設置在滑鼠墊上的指示燈 來發出特定閃光、一設置在一滑鼠內的震動器來產生震動、一喇叭產生投彈前的特殊音效、或是選擇於一提式螢幕上出現一個紅圈或是一個代表炸彈的圖式。
於一實施例中,人工智能之輔助操作系統可用來辨識電腦螢幕上所顯示的電競的遊戲的地圖中,玩家的相對位置、所需裝備的位置、其他玩家的位置或是敵人的位置,其中輸入單元選擇利用一鏡頭來拍攝電腦螢幕的畫面,並將畫面資訊傳送至該處理單元執行相關的辨識程式後,藉由該輸出單元提示操作者。
於一實施例中,輸出單元可選擇為一設置在滑鼠墊上的指示燈,以上、下、左、右、左上、左下、右上或是右下等燈號的組合來提示操作者該往哪個方向前進,或是選擇為一提示螢幕,出現閃爍的上、下、左、右、左上、左下、右上或是右下並且方向往外的箭頭圖式。
於一實施例中,人工智能之輔助操作系統可用來辨識並記錄電腦螢幕所顯示的電競遊戲中所出現的子彈的出現軌跡後,判斷敵人位在哪些方位,其中輸入單元選擇利用一鏡頭來拍攝電腦螢幕的畫面,並將畫面資訊傳送至處理單元執行相關的辨識程式後,藉由輸出單元提示操作者。
於一實施例中,輸出單元可選擇一設置在滑鼠內的震動器來產生特定部位的震動、一設置在滑鼠墊上的指示燈來產生特定閃光、或是選擇一提示螢幕並出現一個或多個的上、下、左、右、左上、左下、右上或右下並且方向往內的箭頭圖式。
於一實施例中,人工智能之輔助操作系統可用來辨識電競遊戲的音訊中,是否出現腳步聲、炸彈聲或是直升機的聲音等特殊的音效,其中輸入單元為一麥克風,並將音訊傳送至該處理單元執行相關的辨識程式後,藉由輸出單元提示操作者。
於一實施例中,其中該輸出單元可選擇一設置在滑鼠墊上的指示燈用來發出特定頻率的閃光、一滑鼠內的震動器用來產生震動、或是選擇一提示螢幕用來產生代表敵人靠近、直升機、或是物資的圖式。
於一實施例中,人工智能之輔助操作系統更包括一記憶單元,用以記錄玩家的遊戲過程或是其他玩家的遊戲片段,而處理單元可在接收來自記憶單元所記錄的資訊後,學習各種敵人的攻擊方式或是其他玩家的特性,並透過輸出單元來提出建議給操作者。
於一實施例中,輸出單元可選擇一提示螢幕來顯示敵人的方位、適合的攻擊武器、如何解救人質或是如何拆除炸彈、或是選擇一指示燈來輸出光效或指示操作者如何移動。
1‧‧‧人工智能之輔助操作系統
11‧‧‧輸入單元
12‧‧‧處理單元
13‧‧‧輸出單元
14‧‧‧記憶單元
131‧‧‧提示螢幕
132‧‧‧滑鼠
133‧‧‧指示燈
圖1係本發明人工智能之輔助操作系統於一較佳實施例中之系統架構圖。
圖2係本發明人工智能之輔助操作系統於一較佳實施例中的硬體架構示意 圖。
本發明提出一種具有人工智能之輔助操作系統,並以輔助操作者進行電競遊戲為範例,但不以此應用為限。請參考圖1,輔助操作系統1包含一輸入單元11、一處理單元12、一輸出單元13。各單元可以獨立設置,彼此間以有線或無線方式連接跟溝通,或者也可視應用與情況將複數個單元整合在一起,本發明並不予以限制,舉例來說,手機同時具有輸入單元11、處理單元12與輸出單元13,因此也很適合用來做本發明之人工智能輔助操作系統之一環,甚至於在安裝應用程式(APP)後,也可單獨成為 具有人工智能的輔助裝置(或系統)。
輸入單元11可選自至少下列之一感應器,包括:麥克風、光線感測器、距離感測器、重力感測器、加速度感測器、磁場感應器、陀螺儀、心跳感測器、霍爾感測器、振動感應器以及影像感應器(鏡頭)等;輸入單元可設置在執行電競遊戲中所使用的設備或環境裡,例如安裝在耳機、耳麥、喇叭、滑鼠、滑鼠墊、鍵盤、搖桿、控制器、電腦螢幕、遊戲配件(例如方向盤)、電腦主機、座椅、眼鏡、頭盔或手機上,以操作者的角度來感測當下的操作環境或電競遊戲的情境,讓操作者如同增加了第二套感官一般,使得在複雜的操作環境、注意力上不足或是分心的情況下,有人工智能在旁輔助,減少失誤或是增加執行電競遊戲的能力。此外,輸入單元11也可是一個資訊擷取機制,可從電腦主機、記憶體、網路或是藉由有線或無線連結其他裝置,來擷取所需的資料,例如,電腦螢幕的輸出畫面或是網路上的影片或圖片等。
處理單元12則包含有處理器,並且與各種辨識或驅動程式搭配,接收輸入單元所感測的操作環境或遊戲情境,會依照其遊戲的特性與需求來進行統合與分析,並產生一指令傳送至輸出單元。處理單元可以單獨設置、設置在遠端的伺服器、或是整合在執行電競遊戲中所使用的設備或環境裡,例如選擇安裝在耳機、耳麥、喇叭、滑鼠、滑鼠墊、鍵盤、搖桿、控制器、電腦螢幕、遊戲配件(例如方向盤)、電腦主機、座椅、眼鏡、頭盔或手機上,做為操作者的第二個頭腦。
輸出單元13,可選自震動器、蜂鳴器、喇叭、螢幕、指示燈或是氣味產生器等,可設置在執行電競遊戲中所使用的設備或環境裡,例如安裝在耳機、耳麥、喇叭、滑鼠、滑鼠墊、鍵盤、搖桿、控制器、電腦螢幕、外接螢幕(提示螢幕)、遊戲配件(例如方向盤)、電腦主機、座椅、 眼鏡、頭盔或手機上,用來接收處理單元所提供的指令後,提示操作者或是提供操作者與遊戲操作相關的訊息。
圖2係本發明所提供之人工智能輔助操作系統在本實施例中的硬體搭配示意圖,人工智能輔助操作系統選用了電競玩家(操作者)經常使用的滑鼠132,做為安裝輸入單元跟輸出單元的載體。本實施例同時也選用可在滑鼠墊上設置有輸出單元例如指示燈133,以及設置有一提示螢幕131,來做為視覺訊息輸出的載體。
以下則舉實際的電玩遊戲為例說明本案所提供的輔助操作系統之運作。
在PUBG(絕地求生)此款結合射擊、大型多人線上的大逃殺類型遊戲中,玩家(操作者)需要注意的細節很多,包含視覺上需注意身邊有哪些玩家具有較強的能力(從衣著來辨識)、是否快要進入炸彈區(辨識地圖上紅圈區域)或是從目前身處位置要往何處去(辨識地圖相對位置)、玩家從哪個方向開槍(辨識子彈的方向);聽覺上需注意周邊有沒有玩家正在接近(辨識腳步聲)、爆炸區塊正在接近或遠離(辨識炸彈聲)或是投遞的物資是否快要接近(辨識直升機聲音)等。針對PUBG此種電玩遊戲,就可利用本發明所提出的輔助操作系統1來幫助玩家(操作者)提升戰力或是進行遊戲,例如輸入單元11可選用設置在智能眼鏡上的鏡頭來拍攝電腦螢幕的畫面,並將畫面資訊傳送至設置在智能眼鏡上的處理單元,而玩家也在智能眼鏡的左右兩側都設置有麥克風,截取來自兩側的聲音訊號。輸出單元13則可選擇震動器,並將震動器設置在滑鼠內部的中央或是分別安裝滑鼠內部的兩側、選擇在滑鼠墊上各個方位設置有指示燈、選擇在智能眼鏡上設置有喇叭、或是選擇額外設置一提示螢幕。處理單元12則在接收輸入單元11所傳來的螢幕畫面以及聲音訊號後,執行相關的辨識程 式,並將辨識的結果與資料庫做一比對或是建立新的資料後。產生指令至輸出單元13。本實施例所提出的人工智能輔助操作系統1,其用來幫助玩家(操作者)提升戰力或是進行遊戲的方式可包括有:
(1)辨識電腦螢幕所顯示的電競遊戲中所出現人物的衣著而判斷何者為較強的玩家(對手),並將辨識結果轉換為震動指令而傳遞至滑鼠132內的震動器,使其產生特定的震動;或是將辨識結果轉換為燈號指令並傳遞至滑鼠墊上的指示燈133來發出特定閃光;或是將辨識結果轉換為影像指令並於提示螢幕131上出現一代表超強或較強玩家(對手)的圖式。
(2)提示電競遊戲畫面中操作者是否已進入炸彈區,最主要是辨識電腦螢幕所顯示的電競遊戲中的地圖是否出現紅圈區域,並將辨識結果轉換為燈號指令並傳遞至滑鼠墊上的指示燈133來發出特定閃光例如紅色閃光,提示玩家(操作者)其已進入或即將進入炸彈區;或是將辨識結果轉換為震動指令並傳遞至滑鼠132內的震動器,使其感應到強烈震動;或是將辨識結果轉換為音訊而輸出至智能眼鏡上的喇叭,產生投彈前的特殊音效;或是將辨識結果轉換為影像指令並於提示螢幕131上出現一個紅圈或是一個代表炸彈的圖式。
(3)辨識電腦螢幕所顯示的電競遊戲的地圖中玩家的相對位置、所需裝備的位置、其他玩家的位置或是敵人的位置,,並將辨識結果轉換為燈號指令並傳遞至滑鼠墊上所安裝的指示燈133,選擇以上、下、左、右,或是左上、左下、右上、右下等燈號的組合來提示操作者(玩家)該往哪個方向前進;或是將辨識結果轉換為影像指令並於提示螢幕131上出現一個閃爍的上、下、左、右、左上、左下、右上、右下並且方向往外的箭頭圖式。
(4)辨識並記錄電腦螢幕所顯示的電競遊戲中所出現的子 彈的出現軌跡,判斷敵人位在哪些方位,並將辨識結果轉換為震動指令而傳遞至滑鼠132內的震動器,使其對應的震動器產生特定部位的震動;或是將辨識結果轉換為燈號指令並傳遞至滑鼠墊上的指示燈133來發出特定閃光;或是將辨識結果轉換為影像指令並於提示螢幕131上出現一個或多個閃爍的上、下、左、右、左上、左下、右上、右下並且方向往內的箭頭圖式。
(5)辨識電腦喇叭所輸出關於電競遊戲的音訊中,是否出現腳步聲、炸彈聲或是直升機的聲音等各種特殊的音效,並將處理單元12的辨識結果轉換為燈號指令並傳遞至滑鼠墊上的指示燈133來發出特定頻率的閃光例如綠色閃光,提示玩家其已遠離炸彈區或是有直升機接近而投遞物資;或是將辨識結果轉換為震動指令並傳遞至滑鼠132內的震動器,使其感應到強烈震動而了解炸彈正在投彈中而須立即躲避;或是將辨識結果轉換為影像指令並於提示螢幕131上出現代表敵人靠近、直升機、或是物資的圖式。
上述實施例說明了人工智能輔助操作系統是如何幫助玩家提升戰力或是進行遊戲的方式,但玩家仍然可以自行設定各種輸出單元與辨識程式,來符合自身的需求或習慣,本發明並不予以限制。
本發明所提出的人工智能輔助操作系統,除了可如上述實施例一般,讓玩家有第二個感官第二個頭腦外而多了幫手之外,也可具有自我學習後發揮類似教練或顧問的角色。
舉例來說,在CS(絕對武力)此款遊戲中,遊戲的難度越高、敵人準心越來越準且更加神出鬼沒的情況下,若僅能被動地提供提示給玩家,可能已無法滿足玩家的需求。因此,本發明所提供的人工智能輔助操作系統,還具有主動學習以及主動提示的功能,例如設置一記憶單元14或 與一記憶單元14連結,記錄玩家先前的遊戲過程,或是從網路上參考或搜尋其他玩家遊戲的片段後予以記錄,而處理單元12可在接收記憶單元14所記錄的資訊後,主動學習各種敵人的攻擊方式或是其他玩家的特性,並針對其差異性而透過輸出單元來主動提出建議。例如透過人工智能來學習操作者的射擊與操作模式、辨識並預測遊戲中敵人的方位或子彈可能發射的位置後,就可透過輸出單元來預先做出提示,像是透過提示螢幕來告知敵人的方位、適合的攻擊武器、如何解救人質或是如何拆除炸彈等、或是利用指示燈來輸出光效或指示玩家(操作者)如何移動等。
此外,本發明所提供的人工智能輔助操作系統,除了可主動學習外,也可利用人工智能來作情境的判斷與資訊的整合,提供玩家更全面的建議,舉例來說,當玩家專心於遊戲中時,過多的提示也可能會對其專注力造成影響,或是無時不刻的提示也可能會讓玩家失去進步的動力與空間,因此,本發明所提供的人工智能輔助操作系統,可在整合各種資訊以及預測未來可能的發展後,排出優先的順序,選擇最重要或最關鍵的資訊才提供給玩家,或者選擇在最關鍵的時間點才做出提示,讓使用者的注意力只需放在最需要注意的內容上,享受遊戲的樂趣。
以上所述僅為本發明之較佳實施例,並非用以限定本發明之申請專利範圍,因此凡其它未脫離本發明所揭示之精神下所完成之等效改變或修飾,均應包含於本案之申請專利範圍內。
1‧‧‧人工智能之輔助操作系統
11‧‧‧輸入單元
12‧‧‧處理單元
13‧‧‧輸出單元
14‧‧‧記憶單元

Claims (12)

  1. 一種人工智能之輔助操作系統,包含:一輸入單元,設置在執行電競遊戲中所使用的設備或環境裡,以操作者的角度來感測當下的操作環境或電競遊戲的情境;一處理單元,與辨識或驅動程式搭配,接收該輸入單元所感測的操作環境或遊戲情境,並依照該電競遊戲的特性與需求來進行統合與分析後,產生一指令;以及一輸出單元,設置在執行電競遊戲中所使用的設備或環境裡,用來接收該處理單元所產生的該指令後,提示操作者或是提供操作者與遊戲操作相關的訊息;其中,該人工智能之輔助操作系統,可用來辨識電腦螢幕所顯示電競遊戲中所出現人物中何者為較強的玩家,其中該輸入單元選擇利用一鏡頭來拍攝電腦螢幕的畫面,並將畫面資訊傳送至該處理單元執行相關的辨識程式,該處理單元將辨識的結果與資料庫做一比對或是建立新的資料後,藉該輸出單元提示操作者。
  2. 如請求項1之人工智能之輔助操作系統,其中該輸出單元可選擇一設置在一滑鼠內的震動器來產生特定的振動、一設置在滑鼠墊上的一指示燈來發出特定的閃光、或是選擇於一提示螢幕上出現一代表較強玩家的圖式。
  3. 一種人工智能之輔助操作系統,包含:一輸入單元,設置在執行電競遊戲中所使用的設備或環境裡,以操作者的角度來感測當下的操作環境或電競遊戲的情境;一處理單元,與辨識或驅動程式搭配,接收該輸入單元所感測的操作環境或遊戲情境,並依照該電競遊戲的特性與需求來進行統合與分析後,產生一指令;以及 一輸出單元,設置在執行電競遊戲中所使用的設備或環境裡,用來接收該處理單元所產生的該指令後,提示操作者或是提供操作者與遊戲操作相關的訊息;其中,該人工智能之輔助操作系統,可用來提示電競遊戲畫面中操作者是否已進入炸彈區,其中該輸入單元選擇利用一鏡頭來拍攝電腦螢幕的畫面,並將畫面資訊傳送至該處理單元執行相關的辨識程式,辨識電腦螢幕上的地圖是否出現紅圈區域後,藉由該輸出單元提示操作者。
  4. 如請求項3之人工智能之輔助操作系統,其中該輸出單元可選擇一設置在滑鼠墊上的指示燈來發出特定閃光、一設置在一滑鼠內的震動器來產生震動、一喇叭產生投彈前的特殊音效、或是選擇於一提式螢幕上出現一個紅圈或是一個代表炸彈的圖式。
  5. 一種人工智能之輔助操作系統,包含:一輸入單元,設置在執行電競遊戲中所使用的設備或環境裡,以操作者的角度來感測當下的操作環境或電競遊戲的情境;一處理單元,與辨識或驅動程式搭配,接收該輸入單元所感測的操作環境或遊戲情境,並依照該電競遊戲的特性與需求來進行統合與分析後,產生一指令;以及一輸出單元,設置在執行電競遊戲中所使用的設備或環境裡,用來接收該處理單元所產生的該指令後,提示操作者或是提供操作者與遊戲操作相關的訊息;其中,該人工智能之輔助操作系統,可用來辨識電腦螢幕上所顯示的電競的遊戲的地圖中,玩家的相對位置、所需裝備的位置、其他玩家的位置或是敵人的位置,其中該輸入單元選擇利用一鏡頭來拍攝電腦螢幕的畫面,並將畫面資訊傳送至該處理單元執行相關的辨識程式後,藉由該輸出單元提示操作者。
  6. 如請求項5之人工智能之輔助操作系統,其中該輸出單元可選擇為一設置在滑鼠墊上的指示燈,以上、下、左、右、左上、左下、右上或是右下等燈號的組合來提示操作者該往哪個方向前進,或是選擇為一提示螢幕,出現閃爍的上、下、左、右、左上、左下、右上或是右下並且方向往外的箭頭圖式。
  7. 一種人工智能之輔助操作系統,包含:一輸入單元,設置在執行電競遊戲中所使用的設備或環境裡,以操作者的角度來感測當下的操作環境或電競遊戲的情境;一處理單元,與辨識或驅動程式搭配,接收該輸入單元所感測的操作環境或遊戲情境,並依照該電競遊戲的特性與需求來進行統合與分析後,產生一指令;以及一輸出單元,設置在執行電競遊戲中所使用的設備或環境裡,用來接收該處理單元所產生的該指令後,提示操作者或是提供操作者與遊戲操作相關的訊息;其中,該人工智能之輔助操作系統,可用來辨識並記錄電腦螢幕所顯示的電競遊戲中所出現的子彈的出現軌跡後,判斷敵人位在哪些方位,其中該輸入單元選擇利用一鏡頭來拍攝電腦螢幕的畫面,並將畫面資訊傳送至該處理單元執行相關的辨識程式後,藉由該輸出單元提示操作者。
  8. 如請求項7之人工智能之輔助操作系統,其中該輸出單元可選擇一設置在滑鼠內的震動器來產生特定部位的震動、一設置在滑鼠墊上的指示燈來產生特定閃光、或是選擇一提示螢幕並出現一個或多個的上、下、左、右、左上、左下、右上或右下並且方向往內的箭頭圖式。
  9. 一種人工智能之輔助操作系統,包含:一輸入單元,設置在執行電競遊戲中所使用的設備或環境裡,以操作者的角度來感測當下的操作環境或電競遊戲的情境; 一處理單元,與辨識或驅動程式搭配,接收該輸入單元所感測的操作環境或遊戲情境,並依照該電競遊戲的特性與需求來進行統合與分析後,產生一指令;以及一輸出單元,設置在執行電競遊戲中所使用的設備或環境裡,用來接收該處理單元所產生的該指令後,提示操作者或是提供操作者與遊戲操作相關的訊息;其中,該人工智能之輔助操作系統,可用來辨識電競遊戲的音訊中,是否出現腳步聲、炸彈聲或是直升機的聲音等特殊的音效,其中該輸入單元為一麥克風,並將音訊傳送至該處理單元執行相關的辨識程式後,藉由該輸出單元提示操作者。
  10. 如請求項9之人工智能之輔助操作系統,其中該輸出單元可選擇一設置在滑鼠墊上的指示燈用來發出特定頻率的閃光、一滑鼠內的震動器用來產生震動、或是選擇一提示螢幕用來產生代表敵人靠近、直升機、或是物資的圖式。
  11. 一種人工智能之輔助操作系統,包含:一輸入單元,設置在執行電競遊戲中所使用的設備或環境裡,以操作者的角度來感測當下的操作環境或電競遊戲的情境;一處理單元,與辨識或驅動程式搭配,接收該輸入單元所感測的操作環境或遊戲情境,並依照該電競遊戲的特性與需求來進行統合與分析後,產生一指令;一輸出單元,設置在執行電競遊戲中所使用的設備或環境裡,用來接收該處理單元所產生的該指令後,提示操作者或是提供操作者與遊戲操作相關的訊息;以及一記憶單元,用以記錄玩家的遊戲過程或是其他玩家的遊戲片段,而該處理單元可在接收來自該記憶單元所記錄的資訊後,學習各種敵人的攻擊方 式或是其他玩家的特性,並透過該輸出單元來提出建議給操作者。
  12. 如請求項11之人工智能之輔助操作系統,該輸出單元可選擇一提示螢幕來顯示敵人的方位、適合的攻擊武器、如何解救人質或是如何拆除炸彈、或是選擇一指示燈來輸出光效或指示操作者如何移動。
TW107124310A 2018-03-01 2018-07-13 人工智能之輔助操作系統 TWI716706B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201862637252P 2018-03-01 2018-03-01
US62/637,252 2018-03-01

Publications (2)

Publication Number Publication Date
TW201936243A TW201936243A (zh) 2019-09-16
TWI716706B true TWI716706B (zh) 2021-01-21

Family

ID=67767921

Family Applications (1)

Application Number Title Priority Date Filing Date
TW107124310A TWI716706B (zh) 2018-03-01 2018-07-13 人工智能之輔助操作系統

Country Status (3)

Country Link
US (1) US10632382B2 (zh)
CN (1) CN110215682B (zh)
TW (1) TWI716706B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10888788B2 (en) * 2016-06-30 2021-01-12 Sony Interactive Entertainment Inc. Automated artificial intelligence (AI) control mode for playing specific tasks during gaming applications
CN110721431B (zh) * 2019-09-30 2021-03-30 浙江凡聚科技有限公司 基于视听觉通路的感觉统合失调测训装置及系统
CN110917613A (zh) * 2019-11-30 2020-03-27 吉林大学 一种基于振动触觉的游戏智能桌垫
US11263755B2 (en) * 2020-07-17 2022-03-01 Nanya Technology Corporation Alert device and alert method thereof
CN112221162B (zh) * 2020-10-15 2021-05-14 武汉卧友网络科技有限公司 基于人工智能识别的网络游戏交互方法及智能游戏平台
US20230015199A1 (en) * 2021-07-19 2023-01-19 Dell Products L.P. System and Method for Enhancing Game Performance Based on Key Acoustic Event Profiles
WO2023106040A1 (ja) * 2021-12-09 2023-06-15 ソニーグループ株式会社 情報処理装置、情報処理方法およびプログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130316772A1 (en) * 2012-05-24 2013-11-28 Gonggames Corp. Method of progressing mobile baseball game capable of changing game mode
TW201438796A (zh) * 2012-12-21 2014-10-16 Sony Comp Entertainment Us 基於所記錄之遊戲玩法自動產生為雲遊戲建議的小遊戲
US20180001206A1 (en) * 2016-06-30 2018-01-04 Sony Interactive Entertainment Inc. Automated artificial intelligence (ai) personal assistant

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013020365A (ja) * 2011-07-08 2013-01-31 Namco Bandai Games Inc ゲームシステム、プログラム、及び情報記憶媒体
EP2734275A4 (en) * 2011-07-22 2015-02-25 Glitchsoft Corp PLAYER EXPANSION SYSTEM FOR A GAME ENVIRONMENT
JP5730430B1 (ja) * 2014-06-27 2015-06-10 ガンホー・オンライン・エンターテイメント株式会社 ゲーム端末装置
US10112113B2 (en) * 2016-03-30 2018-10-30 Sony Interactive Entertainment Inc. Personalized data driven game training system
CN107741898B (zh) * 2017-10-13 2021-01-19 杭州浮云网络科技有限公司 一种基于大数据的游戏玩家操作偏好分析方法和系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130316772A1 (en) * 2012-05-24 2013-11-28 Gonggames Corp. Method of progressing mobile baseball game capable of changing game mode
TW201438796A (zh) * 2012-12-21 2014-10-16 Sony Comp Entertainment Us 基於所記錄之遊戲玩法自動產生為雲遊戲建議的小遊戲
US20180001206A1 (en) * 2016-06-30 2018-01-04 Sony Interactive Entertainment Inc. Automated artificial intelligence (ai) personal assistant

Also Published As

Publication number Publication date
US20190270014A1 (en) 2019-09-05
CN110215682A (zh) 2019-09-10
TW201936243A (zh) 2019-09-16
US10632382B2 (en) 2020-04-28
CN110215682B (zh) 2022-12-02

Similar Documents

Publication Publication Date Title
TWI716706B (zh) 人工智能之輔助操作系統
CN111095150B (zh) 机器人作为私人教练
US10449445B2 (en) Feedback for enhanced situational awareness
US10166466B2 (en) Feedback for enhanced situational awareness
KR100586760B1 (ko) 화상처리장치,화상처리방법과매체,및게임기
US20160314620A1 (en) Virtual reality sports training systems and methods
CN104857704A (zh) 可穿戴虚拟现实运动头盔及可穿戴虚拟动作游戏系统
KR20150141151A (ko) 시각 및/또는 근접성에 기초하여 햅틱 강도를 변경하기 위한 프로그램가능한 햅틱 디바이스 및 방법
US10702768B1 (en) Advanced gameplay system
US9836984B2 (en) Storytelling environment: story and playgroup creation
US20200289938A1 (en) Systems and methods for training an artificial intelligence model for competition matches
US10928915B2 (en) Distributed storytelling environment
Schouten et al. Human behavior analysis in ambient gaming and playful interaction
JP2019008751A (ja) 情報処理方法、プログラム及び情報処理装置
JP2019118493A (ja) シミュレーションシステム及びプログラム
JP6425846B1 (ja) プログラム、情報処理装置、及び情報処理方法
JP6290490B1 (ja) 情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラム
KR20220024630A (ko) 게임 프로그램, 게임 방법, 및 단말 장치
JP2018097517A (ja) 情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラム
JP6458179B1 (ja) プログラム、情報処理装置、および方法
CN114007707A (zh) 游戏程序、游戏方法以及信息终端装置
JP2020166726A (ja) 視聴プログラム、視聴方法、および視聴端末
JP7087148B2 (ja) ゲームプログラム、ゲーム方法、および情報端末装置
US20240226751A1 (en) Data processing apparatus and method
US20230241453A1 (en) Exercise motion system and method