CN108076356A - 执行运输交通工具上的与对象相关联的功能的方法和系统 - Google Patents

执行运输交通工具上的与对象相关联的功能的方法和系统 Download PDF

Info

Publication number
CN108076356A
CN108076356A CN201711137457.7A CN201711137457A CN108076356A CN 108076356 A CN108076356 A CN 108076356A CN 201711137457 A CN201711137457 A CN 201711137457A CN 108076356 A CN108076356 A CN 108076356A
Authority
CN
China
Prior art keywords
ped
function
image
option
ife
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711137457.7A
Other languages
English (en)
Inventor
陈·珀恩格
吉坦贾利·巴拉苏布拉马尼安
古尔穆克·卡布拉尼
小雷蒙德·哈克利·文森特
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Avionics Corp
Original Assignee
Panasonic Avionics Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Avionics Corp filed Critical Panasonic Avionics Corp
Publication of CN108076356A publication Critical patent/CN108076356A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/26258—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41422—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance located in transportation means, e.g. personal vehicle
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8545—Content authoring for generating interactive applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W88/00—Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/08—Access point devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Traffic Control Systems (AREA)

Abstract

提供了用于执行运输交通工具上的与对象相关联的功能的方法和系统。一种方法包括：将PED与包括与对象相关联的功能的IFE系统对接；通过PED捕获对象的图像；使用所捕获的图像和PED的应用来识别与对象相关联的功能；通过应用呈现激活功能的选项；以及在用户选择选项时向IFE系统传送激活功能的请求。

Description

执行运输交通工具上的与对象相关联的功能的方法和系统
技术领域
本公开内容涉及识别和执行运输交通工具系统上的与被捕获了数字图像的对象相关联的功能或选项。
背景技术
运输交通工具(例如，飞行器、火车、公共汽车、休闲车、船以及其他类似交通工具)使用各种计算设备以提供包括娱乐、系统控制、内容存储以及其他功能的各种功能。这些计算设备包括硬件(例如，服务器、交换机、网络接口卡、存储适配器、存储设备等)和软件(例如，服务器应用、操作系统、固件、管理应用、应用编程接口(API)等)。
现今运输交通工具可以具有可以由乘客使用的专用于特定乘客座椅的个性化功能装备(例如，可调节座椅、可调节环境控件、可调节照明、电话系统、视频和/或音频娱乐系统、乘务员通信系统等)。现今许多商业飞机也可以具有个性化的视频和音频娱乐系统，通常称为“机上娱乐”系统或“IFE”系统。这样的系统也还可以称为“机上娱乐及通信”系统，并且通常缩写为“IFEC”系统。
作为乘客可以激活的功能的一个示例，载客交通工具(例如，商业航班)的娱乐系统通常具有安装在每个乘客座椅处的视频显示器。例如，视频显示器可以被设置在每个乘客座椅处(例如，安装在乘客座椅中的每个座椅处以及/或者安装在舱壁上以及/或者可从位于隔板处即舱段的第一排中的座椅的扶手展开)。这些系统中的许多系统允许每个乘客从多个视频频道和/或音频频道中进行选择，或者甚至从视频库中单独地选择和播放视频。这些视频显示器还可以提供对游戏、通信应用(例如，电话服务、消息传送等)、因特网浏览以及其他计算机应用的访问。有时，这样的显示器由于能够提供计算机应用并且在内部处理和存储数据而被称为智能监视器。
为了操作座椅功能(例如，个性化的音频/视频系统)，在乘客座椅上或乘客座椅附近设置使得乘客能够控制各种功能的控件。控件可以是物理按钮或者例如在娱乐系统的视频显示器上显示的屏幕界面。例如，一些商业飞机娱乐系统具有用于控制阅读灯、激活乘务人员呼叫信号以及控制音频/视频娱乐的屏幕界面。
携带具有无线通信能力的个人电子设备(PED)(例如，蜂窝电话、智能电话、平板计算机、膝上型计算机以及其他便携电子设备)对于旅行者来说已经变得相当普遍。这包括在包括公共运输公司的交通工具(例如，飞机、载客火车、公共汽车、游轮、观光交通工具(例如船舶、小船、公共汽车、汽车等))的所有类型的运输工具上旅行的乘客。这些个人电子设备中的许多个人电子设备都具有执行应用程序(“app”)以实现包括控制其他设备和系统的各种功能的能力。
在常规系统中，运输交通工具(例如，飞行器)的乘客通常不得不翻查印刷资料或电子显示器以确定可以用于观看、收听、购买或请求的内容。乘客可以针对服务或基础信息呼叫空乘人员，并等待所请求的服务。为了改善乘客旅行体验以及向运输公司提供满足乘客需求的工具，正在不断努力进行创新技术的开发。
发明内容
根据本公开内容的一方面，提供一种个人电子设备PED，其与飞行器的机上娱乐IFE系统对接，所述IFE系统包括与对象相关联的功能以及响应于请求而激活所述功能的IFE控制器，所述PED包括：PED光学传感器，用于捕获对象的图像；以及处理器可执行应用，其与所述PED光学传感器对接，以识别与所述功能相关联的所述对象、呈现激活所述功能的选项并且在用户选择所述选项时向所述IFE系统传送激活所述功能的请求。
根据本公开内容的另一方面，提供一种用于飞行器的系统，包括：机上娱乐IFE系统，其包括将至少一个功能与对象进行关联的信息处理系统以及与所述信息处理系统通信的无线接入点；至少一个个人电子设备PED，其具有PED光学传感器、与所述无线接入点通信的PED无线收发器、由所述PED执行的处理器可执行应用，其中，所述处理器可执行应用操作所述PED光学传感器，以识别与所述功能相关联的所述对象、呈现激活所述功能的选项并且在用户选择所述选项时经由所述无线接入点向IFE系统传送激活所述功能的请求；以及处理器可执行逻辑，其由所述信息处理系统执行以在接收到所述请求之后激活所述功能。
根据本公开内容的又一方面，提供一种方法，包括：将个人电子设备PED与飞行器的机上娱乐IFE系统对接，所述IFE系统包括与对象相关联的功能；通过所述PED捕获对象的图像，其中，所述对象与所述功能相关联；通过由所述PED执行的应用使用所捕获的图像来识别与所述对象相关联的所述功能；通过所述应用呈现激活所述功能的选项；以及在用户选择所述选项时，向IFE系统传送激活所述功能的请求。
附图说明
现在将参考本文中所公开的各个方面的附图来描述本公开内容的各个特征。在附图中，相同的部件可以具有相同的附图标记。示出的方面旨在说明而非限制本公开内容。附图包括下列图：
图1A示出了用于在飞行器上实现本公开内容的各个方面的操作环境的示例；
图1B示出了根据本公开内容的一个方面的、非飞行器运输交通工具类型上的操作环境的示例；
图2示出了根据本公开内容的一个方面使用的内容分配系统的示例；
图3A示出了根据本公开内容的一个方面的用于在运输交通工具上捕获和处理图像的系统的示例；
图3B示出了根据本公开内容的一个方面的用于对象识别的识别数据结构的示例；
图4A示出了根据本公开内容的一个方面的用于配置识别数据结构的处理流程；
图4B示出了根据本公开内容的一个方面的用于使用识别数据结构的处理流程；
图4C示出了根据本公开内容的一个方面的用于激活与由图像限定的对象相关联的功能的处理流程；
图5示出了根据本公开内容的一个方面使用的计算系统的框图。
具体实施方式
作为初步说明，本文中所使用的术语“部件”、“模块”、“系统”等旨在指计算机相关实体，即执行软件的通用处理器、硬件、固件或其组合。例如，部件可以是但不限于运行在硬件处理器上的进程、硬件处理器、对象、可执行程序、执行线程、程序和/或计算机。
通过说明，在服务器上运行的应用与服务器二者均可以是部件。一个或多个部件可以存在于进程和/或执行线程中，并且部件可以位于一个计算机上和/或分布在两个或更多个计算机之间。此外，这些部件可以由存储有各种数据结构的各种计算机可读介质执行。部件可以经由本地和/或远程进程例如根据具有一个或多个数据包的信号进行通信，这些数据包例如是来自经由信号与本地系统、分布式系统中的另一部件交互和/或在诸如因特网的网络上与其他系统交互的一个部件的数据。
根据所要求保护的主题，例如，计算机可执行部件可以存储在非暂态计算机/机器可读介质上，其中这些计算机/机器可读介质包括但不限于ASIC(专用集成电路)、CD(光盘)、DVD(数字视频光盘)、ROM(只读存储器)、硬盘、EEPROM(电可擦除可编程只读存储器)、固态存储设备或任何其他存储设备。
在一个方面中，已经开发了下述创新的计算技术：使得运输交通工具(例如，飞行器)上的乘客能够使用个人电子设备(PED)的光学传感器/摄像装置来捕获一个或多个对象的单个或一系列图像。由PED执行的应用能够呈现与图像相关联的服务/功能。例如，乘客可以(例如，从目录或座椅设备)捕获电影列表的图像，并且由应用向乘客呈现将电影添加到特定乘客的播放列表的选项。
在一个方面中，创新的计算技术使得乘客能够访问不方便或难以到达的位置。例如，当乘客正坐在其椅子上并且想要打开阅读灯时，乘客可以拍摄头顶上的灯(对象)的图像，并且能够使用应用来打开/关掉阅读灯，即激活和停用与该对象相关联的功能。乘客可以使用相同的技术以通过拍摄呼叫按钮的图像来访问“呼叫服务员”按钮。
在另一方面中，典型的特征丰富的应用具有许多屏幕和按钮，用户不得不使用这些屏幕和按钮来访问单独的特征/功能。本文中所提供的创新技术使得用户能够通过捕获感兴趣的对象的图像来访问各个特征/功能。例如，通过拍摄电影列表的图像，乘客能够从飞行器娱乐系统获得电影的占用时间或其他信息。
在又一方面中，本文中提供的创新技术使得乘务人员能够通过捕获感兴趣的对象的图像来管理针对乘客的服务和功能。例如，使用本文中所公开的技术，乘务人员能够通过拍摄窗户的图像来远程控制遮光帘。
在又一方面中，用户能够拍摄购物目录的图像并发起与商家网站的交易。值得注意的是，本公开内容中所提到的术语“用户”包括乘客、乘务人员等。
在一个方面中，具有摄像装置的PED经由Wi-Fi连接而连接至飞行器系统/服务器。PED摄像装置捕获感兴趣的对象的图像。飞行器系统保存具有关于可识别图像(例如，电影海报、飞行器内部、购物目录等)的信息的识别数据结构(例如，为关系数据库或其他形式)。飞行器系统还保存针对机载媒体、购物目录等的文本。这可以包括电影片名、演员姓名、购物条目名称以及其他元数据。
对于图像识别，由PED来执行处理器可执行应用(“app”)。app处理所捕获的图像，将所捕获的图像与存储在识别数据结构中的信息进行比较。如果存在匹配，则相关的媒体标识符被用作针对任何相关动作的上下文。对于文本识别，通过使用OCR(光学字符识别)来处理所捕获的文本。将所捕获的文本与存储在识别数据结构中的信息进行比较。当出现匹配时，相关联的动作或功能被识别并被执行。
交通工具信息系统：图1A示出了根据本公开内容的一个方面的、一般的交通工具信息系统100A(也称为系统100A)的示例，该系统100A可以被配置用于被安装在飞行器132上，以使用使得飞行器132上的PED能够捕获图像并且执行与所捕获的图像相关联的动作的创新技术。当被安装在飞行器上时，系统100A可以包括飞行器乘客IFE系统，例如，由加利福尼亚森林湖的Panasonic Avionics Corporation(不侵犯松下航空电子公司的任何商标权)即本申请的受让人开发和提供的系列2000、3000、eFX、eX2、eXW和/或任何其他机载娱乐系统。
系统100A包括至少一个内容源113以及与实时内容分配系统104通信的一个或多个用户(或乘客)接口系统(也可以称为座椅设备/座椅靠背设备)114。内容源113可以包括：安装在飞行器132上的一个或多个内部内容源(例如，媒体服务器系统112)；可以处于飞行器132外部的一个或多个远程(或地面)内容源116；或分布式内容系统。
媒体服务器系统112可以被设置为信息系统控制器，该信息系统控制器用于提供系统100A的总体系统控制功能和/或用于存储包括预编程的观看内容和/或根据需要下载至飞行器的内容120的观看内容124。观看内容124可以包括电视节目内容、音乐内容、播客内容、照片相册内容、有声读物内容和/或电影内容而不受到限制。本文中所示出和描述的观看内容124并不是穷举式的，并且仅出于说明的目的而不是出于限制的目的被提供在本文中。
服务器系统112可以包括用于存储预编程的内容和/或下载的观看内容120的、任何适合类型的一个或多个常规外设媒体存储系统(未示出)并且/或者与其通信，其中，所述一个或多个常规外设媒体存储系统包括光学媒体设备(例如，数字视频光盘(DVD)系统或光盘(CD)系统)和/或磁媒体系统(例如，盒式磁带录像机(VCR)系统、固态驱动器(SSD)系统或硬盘驱动器(HHD)系统)。
观看内容124可以包括任何常规类型的音频和/或视频观看内容，例如，存储的(或延时的)观看内容和/或直播(或实时)的观看内容。根据需要，观看内容124可以包括地理信息。可替选地和/或附加地，对于娱乐内容(例如，直播卫星电视节目和/或直播卫星广播节目)，观看内容同样可以包括双向通信(例如，对因特网118的实时访问和/或远程通信)。
在被配置成分配和/或呈现由一个或多个所选择的内容源113提供的观看内容124的情况下，系统100A可以与内容源113实时地且以包括经由有线和/或无线通信的任何常规方式进行通信。例如，系统100A和地面内容源116可以经由中间通信系统(例如，卫星通信系统122)直接和/或间接通信。从而，系统100A可以从所选择的地面内容源116接收内容120，并且/或者向地面内容源116发送(上传)包括导航和其他控制指令的内容128。根据需要，地面内容源116可以被配置成与其他地面内容源(未示出)通信。地面内容源116被示出为提供对因特网118的访问。尽管出于说明的目的而将其示出并描述为包括卫星通信系统122，但是通信系统可以包括任何常规类型的无线通信系统(例如，蜂窝通信系统(未示出)和/或飞行器地面信息系统(AGIS)通信系统(未示出))。
为便于与地面内容源116通信，系统100A还可以包括用于接收来自远程(或地面)内容源116的观看内容的天线系统110和收发器系统108。天线系统110被优选地布置在外侧(例如，飞行器132的机身136的外表面)。天线系统110可以接收来自地面内容源116的内容120，并将由收发器系统108处理的内容120提供给系统100A的计算机系统106。根据需要，计算机系统106可以将接收的内容120作为观看内容124提供给媒体(或内容)服务器系统112和/或直接提供给包括PED的用户接口系统114中的一个或多个用户接口。尽管出于说明的目的而将其示出并描述为分离的系统，但是计算机系统106和媒体服务器系统112可以至少部分地集成。
用户接口系统114可以是与接入点130通信的计算终端。用户接口系统114提供显示设备以观看内容。在一个方面中，用户接口系统114包括硬件接口，以连接至为用户接口系统提供有线和/或无线连接的接入点130。
在一个方面中，用户接口系统114包括处理器可执行应用，用户将该处理器可执行应用下载并安装在PED上以经由接入点130来接收和观看内容。虽然在交通工具(例如，飞行器132)上的有线系统中可能出现带宽限制问题，但是通常交通工具信息系统100A的有线部分被设计成具有足够的带宽以支持交通工具上的所有用户(即，乘客)。
用户接口系统114还可以包括用于允许用户(或乘客)(例如，通过控制信号138的交换)与系统100A通信的输入系统(未示出)。例如，输入系统可以允许用户输入用于控制系统100A的操作的一个或多个用户指令140。说明性的用户指令140可以包括：用于发起与内容源113通信的指令、用于选择要呈现的观看内容124的指令和/或用于控制所选择的观看内容124的呈现的指令。如果访问观看内容124、Wi-Fi连接或由于任何其他原因而需要费用，那么也可以通过输入系统来输入支付信息。可以以任何常规方式设置输入系统，并且输入系统通常包括触摸屏幕、一个或多个开关(或按钮)(例如，键盘或按键)和/或指示设备(例如，鼠标、轨迹球或触控笔)。
在一个方面中，用户接口系统114设置在飞行器132的各个乘客座椅处。用户接口系统114可以适于不同的飞行器和座椅布置，并且本文中描述的适应性方面不限于任何具体的座椅布置或用户接口类型。
图1B示出了在机动车134上实现交通工具信息系统100B(可以称为系统100B)的示例，机动车134可以包括公共汽车、休闲车、船和/或火车或者任何其他类型的载客交通工具而不受限制。系统100B的各个部件可以与上面参照图1A描述的系统100A的部件相似，并且为了简洁起见不再描述。
内容分配系统：图2示出了根据本公开内容的一个方面的交通工具信息系统200(类似于系统100A/100B)的内容分配系统104的示例。内容分配系统104耦接在服务器系统112与多个用户接口系统114之间，并且支持服务器系统112与多个用户接口系统114之间的通信。
例如，内容分配系统104可以被设置为常规的有线和/或无线通信网络，该常规的有线和/或无线通信网络包括：电话网络、局域网(LAN)、广域网(WAN)、校园区域网(CAN)、个人区域网(PAN)和/或任何类型的无线局域网(WLAN)。示例性的无线局域网包括：根据电气和电子工程师协会(IEEE)标准802.11的无线保真(Wi-Fi)网络；以及/或者根据IEEE标准802.16也被称为WiMax无线宽带的无线城域网(MAN)。在优选地被配置成支持高数据传输速率的情况下，内容分配系统104可以包括高速以太网网络，例如，具有至少约一百兆比特每秒(100Mbps)的典型数据传输速率或任何其他传输速率的、任何类型的快速以太网(例如，100Base-X和/或100Base-T)通信网络和/或千兆比特(例如，1000Base-X和/或1000Base-T)以太网通信网络。为了在无线通信环境中实现高数据传输速率，可以根据需要利用自由空间光学(或激光)技术、毫米波(或微波)技术和/或超宽带(UWB)技术来支持各个系统资源之间的通信。
如图2所示，分配系统104可以被设置为多个区域分配盒(area distributionbox，ADB)206、多个地板断开盒(floor disconnect box，FDB)208以及多个座椅电子盒(seat electronics box，SEB)(和/或视频座椅电子盒(video seat electronics box，VSEB)和/或高级座椅电子盒(premium seat electronics box，PSEB))210，这些部件被配置成通过多个有线和/或无线通信连接212来实时通信。分配系统104也可以包括用于提供分配系统104与服务器系统112之间的接口的交换系统202。交换系统202可以包括常规交换系统(例如，以太网交换系统)，并且被配置成将服务器系统112与区域分配盒206耦接。每个区域分配盒206与交换系统202耦接并与之通信。此外，分配系统104包括与交换系统202通信地连接的一个或多个无线接入点(WAP)(130A至130N)以将内容无线分配至包括PED的用户接口系统114。
每个区域分配盒206进而与至少一个地板断开盒208耦接并与之通信。尽管区域分配盒206与相关联的地板断开盒208可以以任何常规配置耦接，但是如图2所示，相关联的地板断开盒208优选地布置成围绕中央的区域分配盒206的星型网络拓结构。每个地板断开盒208与座椅电子盒210的多个菊花链耦接，并服务于座椅电子盒210的这些菊花链。座椅电子盒210进而被配置成与用户接口系统114通信。每个座椅电子盒210均可以支持一个或多个用户接口系统114。
交通工具信息系统的交换系统202、区域分配盒206、地板断开盒208、座椅电子盒(和/或视频座椅电子盒(VSEB)和/或头等座椅电子盒(PSEB))210、天线系统110、收发器系统108、内容源113、服务器系统112以及其他系统资源被优选地设置为线路可更换单元(LRU)。使用LRU有利于交通工具信息系统200的维护，这是因为可以简单地从交通工具信息系统200移除有缺陷的LRU，并且使用新的(或不同的)LRU对其进行替换。有缺陷的LRU随后可以被修复以用于后续的安装。有利地，对LRU的使用可以通过允许迅速地修改内容分配系统104的系统资源的数量、布置和/或配置来提高在配置内容分配系统104方面的灵活性。同样可以通过用新的LRU替换任何陈旧的LRU来容易地对内容分配系统104进行升级。
分配系统104可以包括至少一个FDB内部端口旁路连接214和/或至少一个SEB回送连接216。每个FDB内部端口旁路连接214是允许与不同的区域分配盒206相关联的地板断开盒208直接通信的通信连接212。如图2所示，每个SEB回送连接216是直接耦接所选择的地板断开盒208的座椅电子盒210的每个菊花链中的最后一个座椅电子盒210的通信连接212。因此，每个SEB回送连接216形成了与相关的地板断开盒208耦接的那些菊花链座椅电子盒210之间的回送路径。
值得注意的是，可以在不使用FDB 208的情况下实现本公开内容的各个方面。当不使用FDB 208时，ADB 206与SEB 210直接通信和/或服务器系统112可与SEB 210或座椅直接通信。本公开内容的各个方面不限于任何具体的网络配置。
对象识别系统：图3A示出了根据本公开内容的一个方面的、使用创新的计算技术在运输交通工具上捕获对象图像并随后识别和执行与所捕获的图像相关联的动作或功能的系统300的示例。在本公开内容的一个方面中，系统300包括可以与交通工具装载管理系统344一起使用以激活功能或请求服务的PED 302。可选地，PED 302可以与座椅设备(也可以称为座椅靠背设备)326配对或者相关联。交通工具装载管理系统344可以与参照图1A/图1B在上面描述的计算机系统106和/或服务器112相似。座椅设备326可以是用户接口系统114的一部分或者与参照图1A/图1B在上面描述的用户接口系统114对接。值得注意的是，座椅设备326不需要安装在座椅的靠背上，而是可以由其他结构(例如，隔板、壁、座椅扶手等)支撑。本公开内容的适应性方面不限于座椅设备326的任何具体类型、位置或方位。
在一个方面中，PED 302可以是移动电话、笔记本电脑、平板、膝上型电脑或任何其他类似的设备。PED 302可以包括经由互连/总线305访问存储器310以执行存储的指令的处理器306。处理器306可以是或者可以包括一个或多个可编程通用或专用微处理器、数字信号处理器(DSP)、可编程控制器、专用集成电路(ASIC)、可编程逻辑器件(PLD)等或这样的设备的组合。总线系统305是表示通过适合的网桥、适配器和/或控制器而连接的任何一个或多个单独的物理总线和/或点对点连接的抽象概念。因此，例如，总线系统305可以包括系统总线、外设部件互连(PCI)总线、PCI-Express总线、超传输(HyperTransport)或工业标准体系结构(ISA)总线、小型计算机系统接口(SCSI)总线、通用串行总线(USB)或电气和电子工程师协会(IEEE)标准1394总线(有时称为“火线”(“Firewire”))或任何其他互连类型。
PED 302包括可以是或可以包括用于以非易失性方式存储数据的任何存储介质的存储设备316，例如，一个或多个基于磁或光的盘、闪速存储器或固态驱动器。存储设备316可以被用于存储识别数据结构360，识别数据结构360被用于识别与对象的捕获图像相关联的动作。下面提供使用识别数据结构360的细节。
存储设备316还可以存储在PED 302的显示器304上显示的内容以及其他信息。在一个方面中，显示器304还可以包括用于接收输入命令的触摸屏幕。
存储设备316还可以存储包括用于将PED 302与座椅设备326或任何其他飞行器系统安全地配对的配对信息的配对数据。术语“配对(pair)”以及其他语法形式(例如，“进行配对(pairing)”)意味着PED 302与特定乘客座椅相关联，使得由座椅设备326从PED 302接收的通信被识别为与该乘客座椅相关以及/或者与关联于特定乘客座椅且由功能控制器318控制的这样的通信控制功能相关。作为与配对相关联的术语“自动”意味着在最低限度乘客参与的情况下对PED进行配对。在一个方面中，配对数据包括PED 302标识信息和/或包括座椅标识符的用于对PED 302进行配对的配置信息。
存储设备316还可以存储应用(可以称为配套应用)312，并且在存储器310之外执行。在一个方面中，应用312使得PED 302能够在最低限度乘客参与的情况下一般地与运输交通工具系统自动配对，并且特别地，与座椅设备326自动配对。
应用312包括图像识别模块314或者与图像识别模块314对接，其中，图像识别模块314使用识别数据结构360来使得PED 302能够识别与由PED摄像装置362(也可以称为光学传感器)捕获的图像相关联的动作。PED摄像装置362拍摄数字图像，这些数字图像被提供给图像处理模块314。作为示例，图像识别模块314的处理器可执行代码可以从tensorflow.org、vuforia.com或其他源获得。下面提供关于图像识别模块314的细节。
在一个方面中，包括图像识别模块314的应用312可以被存储在应用商店(“AppStore”)(未示出)的存储设备上，其中，在不侵犯任何第三方商标权的情况下，所述应用商店例如由Apple公司以商标ITUNES运营的应用商店、由Google公司以商标GOOGLE PLAY运营的应用商店或者由Microsoft公司以商标WINDOWS STORE运营的应用商店。可替选地，应用商店可以是由交通工具装载管理系统344的供应商运营的网站的网站服务器，所述供应商例如制造商或运营交通工具的运输公司(例如，商业航空公司、火车运营商、巡航线路、公共汽车线路等)。
值得注意的是，应用312/图像识别模块314可以在分布式环境中执行，例如，部分地由座椅设备326和/或交通工具装载管理系统344执行。本文中描述的适应性方面不限于执行应用312和/或图像识别模块314的任何具体位置。
在一个方面中，功能控制器318提供对用于访问音频/视频内容的娱乐系统进行控制的控制器320以及用于控制座椅靠背监视器(其是座椅设备326的一部分或与座椅设备326对接)的控制器322。一些娱乐系统不包括座椅靠背监视器，并且如果乘客在这些系统上对其提出请求，则音频/视频内容通过交通工具装载管理系统344流式传输至PED 302。
其他系统控制器324可以包括对用于控制乘客座椅的灯(例如，阅读灯)的照明系统进行控制的控制器、用于呼叫服务员的服务员呼叫系统的控制器、用于电话系统的控制器、用于订购餐食的餐食服务的控制器、用于进行座椅调节的控制器等。本文中所公开的各个方面不限于任何特定类型的功能。如下面详细描述的，功能控制器318可以基于由摄像装置362捕获的图像被触发。
在一个方面中，功能控制器318与PED通信模块308通信，其中，通信模块308包括与不同的设备通信的一个或多个接口，所述接口包括Wi-Fi接口、Bluetooth接口、NFC(近场通信)接口等。本文中所描述的适应性方面不限于任何具体的接口。值得注意的是，尽管为了方便而针对PED通信模块308示出了单个框，但是通信模块308可以具有符合不同通信协议/标准的不同的接口、卡、逻辑和电路。
在一个方面中，座椅设备326包括显示设备或简单地“显示器”330、处理器332、存储器340、通信接口328以及用于存储内容的本地存储设备342。座椅设备326经由输入模块(未示出)接收用户输入/请求。输入模块可以被配置成使用与显示器330接近或集成的本地触摸屏幕、本地虚拟键盘、外部鼠标、外部键盘或任何其他输入设备。本文中所描述的各个适应性方面不限于任何具体的输入设备。此外，如前所述，一些娱乐系统不提供座椅靠背显示器，在这种情况下座椅设备326不包括显示器300，并且内容被流式传输至PED 302以供乘客消费。
处理器332可以是或者可以包括一个或多个可编程通用或专用微处理器、数字信号处理器(DSP)、可编程控制器、专用集成电路(ASIC)、可编程逻辑器件(PLD)等或者这样的设备的组合。
在一个方面中，处理器332执行IFE层(也可以称为IFE控制器)334，其中IFE层334为用户提供机上娱乐和其他选项。IFE层334使用通信接口328与PED 302和/或交通工具装载管理系统344对接。IFE层334提供音频/视频内容以及用于对内容进行访问的控件。在一个方面中，如下面详细描述的，座椅设备326也可以执行图像识别模块314并使用识别数据结构360。
在一个方面中，交通工具装载管理系统344包括服务器345(类似于媒体服务器112和/或计算机系统106)。服务器345包括处理器346，处理器346可以经由类似于上面详细描述的总线305的总线系统访问存储器350。
处理器346可以是或者可以包括一个或多个可编程通用或专用微处理器、数字信号处理器(DSP)、可编程控制器、专用集成电路(ASIC)、可编程逻辑器件(PLD)等或者这样的设备的组合。
处理器346可以访问存储设备348，存储设备348可以用于存储包括识别数据结构360、应用312、系统软件356、图像识别模块314和/或IFE层334的数据、应用、结构化或非结构化的数据以及程序文件。
在一个方面中，交通工具装载管理系统334保存有用于标识航班的每个乘客、分配给乘客的座椅以及可以唯一标识乘客的任何其他信息的乘客数据352。乘客数据352可以根据乘客使用的电子登机牌和/或根据运营飞行器的运输公司进行填充。来自乘客数据352的信息可以被提供至座椅设备326用于验证乘客信息以对PED 302进行配对。
通过处理器346执行交通工具装载管理系统344的系统软件356，以控制服务器345的总体操作。
在一个方面中，服务器345经由通信接口358与PED 302和/或座椅设备326通信。通信接口358还可以用于从地面接收信息。如参考图1A/图1B和图2在上面所描述的，通信接口358包括用于有线和/或无线连接的一个或多个接口。
在一个方面中，服务器345存储图像识别模块314和识别数据结构360。图像识别模块314可以被提供给PED 302。如下面将更详细地描述的，识别数据结构360或识别数据结构360的一部分也可以被提供给PED 302，以识别与通过PED 302捕获的图像和文本相关联的动作、功能和/或服务。
图3B示出了本公开内容的一个方面中的识别数据结构360的示例。摄像装置362从一个或多个源(未示出)捕获对象(未示出)的图像。该图像被提供给图像识别模块314，图像识别模块314访问识别数据结构360以识别与对象图像相关联的动作。
识别数据结构360存储具有相关联的动作368A至368N的图像特征366A至366N。术语图像特征旨在还包括文本数据。在一个方面中，对于图像，特征包括边缘、对比度和元数据信息。元数据信息用于限定图像属性。作为示例，视频文件的元数据可以包括媒体标识符(MID)、语言标识符(LID)、标题、短标题、导演姓名、演员姓名、发行年份、类型、描述、简短版本的描述、预告片MID、评论、原产国、消费者评分、评论家评分。对于音频文件，元数据可以包括媒体标识符(MID)、语言标识符(LID)、标题、短标题、艺术家姓名、类型、描述、简短版本的描述、评论家评分、发行年份和版权信息。对于计算机实现的游戏，元数据可以包括媒体标识符(MID)、语言标识符(LID)、标题、短标题、类型、描述、简短版本的描述、游戏者数目以及评论家得分。
值得注意的是，上面提到的各种元数据字段仅是示例，并且不旨在缩小本公开内容的各个方面。
处理流程：图4A示出了根据本公开内容的一个方面的用于配置识别数据结构360的处理400。尽管下面的描述是基于飞行器的，但是本文中所公开的创新技术可以用在其他交通工具(例如，火车、公共汽车、船、休闲车等)上。
当计算系统被初始化并且可操作以执行图4的处理框时，该处理开始于框B402。在框B404中，通过摄像装置捕获各种数字图像。图像可以是各种对象的图像，这些对象包括印刷在纸上(硬拷贝)呈现的或在航班上电子地呈现的媒体海报、购物目录以及头顶面板的图片等。图像包括与对象相关联的文本或者可以仅包括文本。还生成所捕获图像的元数据。如上面所提到的，通过可以基于内容类型而改变的元数据来描述图像。
在框B406中，生成识别数据结构360。针对每个图像基于边缘、对比度和元数据信息来导出图像特征。
在框B408中，将一个或多个动作、功能和/或服务与每个图像特征进行关联(例如，图3B中的368A至368N)。动作给乘客提供执行相关联的功能和/或观看相关信息的选项。
在框B410中，将识别数据结构360存储在存储设备中。在一个方面中，识别数据结构360存储在存储设备348上，并且对授权的PED 302和/或座椅设备326可用。
值得注意的是，识别数据结构360本质上是动态的并且在飞行器的媒体内容被更新时发生改变。识别数据结构360可以在飞行器在升空之前进行更新或者在飞行期间经由卫星连接来更新。本文中所描述的适应性方面不限于任何具体的更新技术。
图4B示出了根据本公开内容的一个方面的使用识别数据结构360的处理420。当识别数据结构360已经被填充并且在飞行器和/或PED 302上被初始化时，处理开始于框B422。
在框B424中，PED 302经由Wi-Fi连接而连接至机载系统(例如，服务器345(或座椅设备326))。可以通过WAP 130来启用Wi-Fi连接。
在框B426中，PED 302的摄像装置362捕获对象的图像。该图像可以包括文本或可以仅是文本。在另一方面中，可以从任何其他源将图像提供给PED 302。
在框B428中，所捕获的图像被提供至用于针对该图像提取元数据的图像处理模块314。如果图像仅有文本，则执行OCR以识别文本。一旦获得了图像元数据，则生成图像特征。
在框B430中，图像识别模块314使用识别数据结构360来识别可能与所捕获的图像相关联的动作。如果存在匹配，则呈现相关联的动作以供选择或执行。动作类型将取决于图像类型。例如，如果乘客捕获到电影列表的图像，则将电影添加到乘客的播放列表的选项可以被呈现给乘客，而且如果乘客选择用于添加电影的选项，即选择“是”，则电影随后被添加。如果图像是针对与座椅位置相对应的功能，例如，激活或停用座椅处的阅读灯，则功能控制器318向乘客呈现激活或停用阅读灯的选项。值得注意的是，图4B的处理框可以由乘务人员或任何其他用户执行。随后处理结束。
图4C示出了根据又一方面的使用本公开内容的创新技术的另一处理432。当识别数据结构360已经被配置并被存储时，该处理开始于框B434。通过服务器345或任何其他授权的源，识别数据结构360可由PED 302访问。
在框B436中，PED 302与IFE层(或系统)334对接。PED 302可以与包括与每个座椅相关联的功能的IFE系统334配对。
在框B438中，PED摄像装置362捕获与该功能相关联的对象的图像。使用光学传感器捕获该图像。
在框B440中，图像识别模块314使用识别数据结构360和所捕获的图像来识别与该对象相关联的选项。
在框B442中，向用户呈现激活功能的选项。该选项可以通过应用312被呈现在显示器304上。当用户选择该选项时，向IFE系统发送激活功能的请求。这个实例中的用户可以是乘客、乘务人员或任何其他人员。随后，该处理结束。
在一个方面中，提供了用于与飞行器的IFE系统一起使用的PED 302。IFE系统包括与对象相关联的功能和IFE控制器，IFE控制器响应于请求而激活功能。PED包括：PED光学传感器，以捕获对象的图像；以及处理器可执行应用(314)，其与PED光学传感器对接，以识别与功能相关联的对象、呈现激活座椅功能的选项并且在用户选择该选项时向IFE系统传送激活座椅功能的请求。
作为示例，对象可以包括用于显示飞行器上可供用户消费的媒体的图像的、纸质(硬拷贝)的或电子形式的印刷材料，并且应用根据这些图像来识别媒体，并向乘客呈现将媒体添加至播放列表的选项。在另一示例中，对象可以包括阅读灯，并且应用根据当PED光学传感器被导向阅读灯时由PED光学传感器捕获的图像数据来识别阅读灯，并向用户呈现激活阅读灯的选项。
在另一示例中，对象可以是交通工具上设置的安全装备，例如，救生衣，在这种情况下应用识别救生衣，并且随后呈现用于观看针对使用救生衣的教学图像的选项。另一示例是用作出口标志的对象。应用将该对象识别为出口标志，并且在PED显示器上呈现用于观看与被该标志所标记的出口有关的信息的选项。又一示例针对在线购物。对象可以是用于显示目录中的待售产品的图像的、硬拷贝的或电子形式的印刷材料，并且在产品被识别时提供产品的可旋转视图供PED的用户观看。再一示例是请求来自乘务员的服务。例如，乘客可以捕获饮料或食物物品的图像，于是应用将图像中的对象识别为服务物品，并且呈现用于选择由乘务人员将该物品递送至乘客的选项。这可以包括针对例如毯子或阅读罩的物品的请求，并且在乘客和乘务员不会说共同的语言时有利地使得请求物品变得方便。
在又一方面中，提供了用于飞行器的系统。该系统包括IFE系统，IFE系统包括将至少一个功能与对象进行关联的信息处理系统、以及与信息处理系统通信的无线接入点。该系统还包括至少一个PED，所述PED具有PED光学传感器、与无线接入点通信的PED无线收发器，由PED执行的处理器可执行应用操作上述PED光学传感器以识别与功能相关联的对象，呈现激活功能的选项，并且在用户选择了选项时经由无线接入点向IFE系统传送激活功能的请求。该系统还包括由IFE信息处理系统执行以在接收到请求之后激活功能的处理器可执行逻辑。
在又一方面中，提供了一种方法。该方法包括：将PED与包括与对象相关联的功能的IFE系统对接；通过PED来捕获对象的图像，识别与对象相关联的功能；通过应用呈现激活功能的选项；以及在用户选择了选项时向IFE系统传送激活功能的请求。
一些功能的激活依赖于与座椅的关联。例如，在呈现用于请求饮料、食物物品或毯子的选项时，应用可以要求乘客输入座椅号码。可替选地，乘客可能已将PED 302与座椅配对或进行关联，使得座椅位置信息已对PED可用。其他功能不需要座椅位置，例如，请求将内容流式传输至PED、将媒体选择添加至PED播放列表或将物品递送至乘客的住所的在线购物。
虽然上述描述是针对使用PED 302及其摄像装置362进行的对象识别，但是描述适用于座椅设备326的包括摄像装置363的手持装置361。特别地，乘客可以使用手持装置361及其摄像装置363来捕获目录或杂志中的媒体的描述或者图像，并且将媒体添加至连接至手持装置361的座椅设备326的播放列表。一些飞行器包括具有摄像装置的智能监视器。应用可以设置在用于如前文所述的对象识别的智能监视器及其摄像装置上。例如，乘客可以将媒体的目录页面放在摄像装置前面，于是应用会识别媒体列表或图像，并在座椅设备326的显示器300上向乘客呈现将媒体添加至乘客的播放列表的选项。如前文所述，对象可以是下述饮料或食物物品：应用基于来自其摄像装置的、饮料或食物物品的图像而识别该饮料或食物物品，并且随后向乘客呈现请求递送该物品的选项。
处理系统：图5是示出可以根据一个方面使用的处理系统500的架构的示例的高级框图。处理系统500可以代表媒体服务器112、计算系统106、WAP 130、交通工具装载管理系统344、座椅设备326或试图与交通工具计算设备对接的任何用户设备(PED 302)。应注意的是，不是与本方面密切相关的某些标准的和公知的部件在图5中未示出。
处理系统500包括耦接至总线系统505的一个或多个处理器502和存储器504。图5中示出的总线系统505是表示通过适当的网桥、适配器和/或控制器连接的任何一个或多个单独的物理总线和/或点对点连接的抽象概念。因此，例如，总线系统505可以包括：系统总线、外设部件互连(PCI)总线、超传输或工业标准架构(ISA)总线、小型计算机系统接口(SCSI)总线、通用串行总线(USB)或电气和电子工程师协会(IEEE)标准1394总线(有时称为“火线”(“Firewire”))或任何其他互连类型。
处理器502是处理系统500的中央处理单元(CPU)，并且因此控制其总体操作。在某些方面，处理器502通过执行存储在存储器504中的软件来实现这些。处理器502可以是或可以包括：一个或多个可编程通用或专用微处理器、数字信号处理器(DSP)、可编程控制器、专用集成电路(ASIC)、可编程逻辑器件(PLD)等或者这样的设备的组合。
存储器504代表任何形式的随机存取存储器(RAM)、只读存储器(ROM)、闪速存储器等或者这样的设备的组合。存储器504包括处理系统500的主存储器。指令506可以用于实现上述图4A至图4C的处理步骤以及存储识别数据结构360和图像识别模块314。
一个或多个内部大容量存储设备510和网络适配器512也通过总线系统505连接至处理器502。内部大容量存储设备510可以是或可以包括以非易失性方式存储大量数据的任何常规介质(例如，一个或多个基于磁或光的盘、闪速存储器或固态驱动器)。
网络适配器512向处理系统500提供了与远程设备(例如，通过网络)通信的能力，并且例如，网络适配器512可以是以太网适配器等。
处理系统500还包括耦接至总线系统505的一个或多个输入/输出(I/O)设备508。例如，I/O设备508可以包括显示设备、键盘、鼠标等。I/O设备可以是具有一个或多个上述部件的手持装置的形式(例如，具有真实或虚拟键盘、按钮和/或其他触敏表面的显示器)。
因此，描述了用于在运输交通工具上处理图像以及执行与图像有关的功能的方法和系统。应注意的是，在整个本说明书中，对“一个方面”(或“实施方式”)或“一方面”的提及意味着结合该方面所描述的特定特征、结构或特点被包括在本公开内容的至少一个方面中。因此，重点强调并且应理解的是，在本说明书中的各个部分中对“一方面”或“一个方面”或“可替选的方面”的两个或更多个引用不一定全部指同一方面。此外，如本领域的技术人员将认识到的，在本公开内容的一个或更多个方面中可以适当地组合所提及的特定的特征、结构或特点。
虽然在上面已经参照当前认为是本公开内容的优选方面的内容描述了本公开内容，但是应理解的是，本公开内容不限于上面所描述的内容。相反，本公开内容旨在涵盖在所附权利要求的主旨和范围内的各种修改和等同布置。

Claims (20)

1.一种个人电子设备PED，其与飞行器的机上娱乐IFE系统对接，所述IFE系统包括与对象相关联的功能以及响应于请求而激活所述功能的IFE控制器，所述PED包括：
PED光学传感器，用于捕获对象的图像；以及
处理器可执行应用，其与所述PED光学传感器对接，以识别与所述功能相关联的所述对象、呈现激活用于所述功能的选项并且在用户选择所述选项时向所述IFE系统传送用于激活所述功能的请求。
2.根据权利要求1所述的个人电子设备，其中，所述对象包括用于显示所述飞行器上可供用户消费的媒体的图像的印刷材料和电子材料中的至少一个，并且所述应用根据所述图像来识别媒体，并向所述用户呈现用于将所述媒体添加至播放列表的选项。
3.根据权利要求1所述的个人电子设备，其中，所述对象包括阅读灯，并且所述应用根据通过所述PED光学传感器捕获的图像数据来识别所述阅读灯，并向所述用户呈现用于激活所述阅读灯的选项。
4.根据权利要求1所述的个人电子设备，其中，无线接入点将所述IFE系统与PED无线收发器对接。
5.根据权利要求4所述的个人电子设备，其中，所述应用经由所述无线接入点向所述IFE系统传送所述请求。
6.根据权利要求1所述的个人电子设备，其中，所述应用使用识别数据结构以用于识别与所述对象相关联的功能和选项中的至少一个。
7.根据权利要求6所述的个人电子设备，其中，所述识别数据结构由所述IFE系统存储，并且对所述PED可用。
8.一种用于飞行器的系统，包括：
机上娱乐IFE系统，其包括将至少一个功能与对象进行关联的信息处理系统以及与所述信息处理系统通信的无线接入点；
至少一个个人电子设备PED，其具有PED光学传感器、与所述无线接入点通信的PED无线收发器、由所述PED执行的处理器可执行应用，其中，所述处理器可执行应用操作所述PED光学传感器，以识别与所述功能相关联的所述对象、呈现用于激活所述功能的选项并且在用户选择所述选项时经由所述无线接入点向IFE系统传送用于激活所述功能的请求；以及
处理器可执行逻辑，其由所述信息处理系统执行以在接收到所述请求之后激活所述功能。
9.根据权利要求8所述的系统，其中，所述对象包括用于显示所述飞行器上可供用户消费的媒体的图像的印刷资料和电子资料中的至少一个，并且所述应用根据所述图像来识别媒体，并向所述用户呈现用于将所述媒体添加至播放列表的选项。
10.根据权利要求8所述的系统，其中，所述对象包括阅读灯，并且所述应用根据通过所述PED光学传感器捕获的图像数据来识别所述阅读灯，并向所述用户呈现用于激活所述阅读灯的选项。
11.根据权利要求8所述的系统，其中，所述应用使用识别数据结构以用于识别与所捕获的图像相关联的所述功能。
12.根据权利要求11所述的系统，其中，所述识别数据结构由所述IFE系统存储，并且对所述PED可用。
13.一种方法，包括：
将个人电子设备PED与飞行器的机上娱乐IFE系统对接，所述IFE系统包括与对象相关联的功能；
通过所述PED捕获对象的图像，其中，所述对象与所述功能相关联；
通过由所述PED执行的应用使用所捕获的图像来识别与所述对象相关联的所述功能；
通过所述应用呈现用于激活所述功能的选项；以及
在用户选择所述选项时，向IFE系统传送用于激活所述功能的请求。
14.根据权利要求13所述的方法，其中，所述对象包括用于显示所述飞行器上可供用户消费的媒体的图像的印刷材料，并且所述应用根据所述图像来识别媒体，并向所述用户呈现用于将所述媒体添加至播放列表的选项。
15.根据权利要求13所述的方法，其中，所述对象包括阅读灯，并且所述应用根据通过所述PED捕获的图像来识别所述阅读灯，并向所述用户呈现用于激活所述阅读灯的选项。
16.根据权利要求13所述的方法，其中，无线接入点将所述IFE系统与PED无线收发器对接。
17.根据权利要求16所述的方法，其中，所述应用经由所述无线接入点向所述IFE系统传送所述请求。
18.根据权利要求13所述的方法，其中，所述应用使用识别数据结构以用于识别与所述对象相关联的所述选项。
19.根据权利要求18所述的方法，其中，所述识别数据结构由所述IFE系统存储，并且对所述PED可用。
20.根据权利要求13所述的方法，其中，所述图像由PED摄像装置捕获。
CN201711137457.7A 2016-11-18 2017-11-16 执行运输交通工具上的与对象相关联的功能的方法和系统 Pending CN108076356A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/356,351 2016-11-18
US15/356,351 US9900645B1 (en) 2016-11-18 2016-11-18 Methods and systems for executing functions associated with objects on a transportation vehicle

Publications (1)

Publication Number Publication Date
CN108076356A true CN108076356A (zh) 2018-05-25

Family

ID=61189146

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711137457.7A Pending CN108076356A (zh) 2016-11-18 2017-11-16 执行运输交通工具上的与对象相关联的功能的方法和系统

Country Status (3)

Country Link
US (2) US9900645B1 (zh)
CN (1) CN108076356A (zh)
DE (1) DE102017125976A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020507517A (ja) * 2017-02-14 2020-03-12 システムズ アンド ソフトウェア エンタープライゼス， エルエルシーＳｙｓｔｅｍｓ Ａｎｄ Ｓｏｆｔｗａｒｅ Ｅｎｔｅｒｐｒｉｓｅｓ， Ｌｌｃ 救命胴衣の識別、検査、およびメンテナンスのための装置、システム、および方法
US10561954B1 (en) * 2017-12-27 2020-02-18 Disney Enterprises, Inc. Methods for dynamic show-length variation
KR102622349B1 (ko) * 2018-04-02 2024-01-08 삼성전자주식회사 전자 장치 및 그 제어 방법
DE102022209468A1 (de) 2022-09-12 2024-03-14 Robert Bosch Gesellschaft mit beschränkter Haftung Ultraschallsystem für ein Fahrzeug und Fahrzeug

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090285443A1 (en) * 2008-05-15 2009-11-19 Sony Ericsson Mobile Communications Ab Remote Control Based on Image Recognition
CN102124479A (zh) * 2008-06-20 2011-07-13 谷歌公司 用于购买的图像捕捉
US20110314507A1 (en) * 2010-06-22 2011-12-22 Livetv Llc Registration of a personal electronic device (ped) with an aircraft ife system using aircraft generated registration token images and associated methods
CN104579866A (zh) * 2013-10-28 2015-04-29 空中客车作业有限公司 在飞机中与个人电子设备通信的方法及飞机服务器系统

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8817045B2 (en) * 2000-11-06 2014-08-26 Nant Holdings Ip, Llc Interactivity via mobile image recognition
US7565139B2 (en) * 2004-02-20 2009-07-21 Google Inc. Image-based search engine for mobile phones with camera
US7945934B2 (en) * 2004-06-15 2011-05-17 Panasonic Avionics Corporation Portable media device and method for presenting viewing content during travel
US7450960B2 (en) * 2004-10-07 2008-11-11 Chen Alexander C System, method and mobile unit to sense objects or text and retrieve related information
US7280825B2 (en) * 2004-12-28 2007-10-09 Live Tv, Llc Aircraft in-flight entertainment system including low power transceivers and associated methods
US7787697B2 (en) * 2006-06-09 2010-08-31 Sony Ericsson Mobile Communications Ab Identification of an object in media and of related media objects
US20080004978A1 (en) * 2006-06-30 2008-01-03 Rothschild Trust Holdings, Llc System and method for identifying digital media content and downloading the content or a portion thereof to a mobile device
CN103838509A (zh) * 2007-09-14 2014-06-04 松下航空电子公司 用于交通工具信息系统的便携式用户控制设备和方法
US20090138920A1 (en) * 2007-09-20 2009-05-28 Atul Mansukhlal Anandpura Video display device and method for communication of multiple audio and video selection of an aircraft
US20090240598A1 (en) * 2008-03-24 2009-09-24 Kargman James B Method and apparatus for automated ordering and payment
US8734256B2 (en) * 2008-09-15 2014-05-27 Panasonic Avionics Corporation System and method for hosting multiplayer games
US20110134333A1 (en) * 2009-12-03 2011-06-09 Petrisor Gregory C Inflight entertainment system video display unit with swappable entertainment processor board
US20110162016A1 (en) * 2009-12-31 2011-06-30 Petrisor Gregory C Inflight entertainment system video display synchronization
EP2603863A1 (en) * 2010-08-09 2013-06-19 Valeo Schalter und Sensoren GmbH Method for supporting a user of a motor vehicle in operating the vehicle and portable communication device
TW201301190A (zh) * 2011-06-28 2013-01-01 Hon Hai Prec Ind Co Ltd 服裝試穿系統及服裝試穿方法
US8605189B2 (en) * 2012-05-01 2013-12-10 Xerox Corporation Product identification using mobile device
US9336238B2 (en) * 2012-06-16 2016-05-10 Evrio, Inc. Mobile wireless object recognition and control
US9892447B2 (en) * 2013-05-08 2018-02-13 Ebay Inc. Performing image searches in a network-based publication system
KR20160144665A (ko) * 2015-06-09 2016-12-19 에스케이플래닛 주식회사 객체 인식 및 데이터베이스 매칭 결과를 표시하는 사용자 장치, 그의 제어 방법 및 컴퓨터 프로그램이 기록된 기록매체

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090285443A1 (en) * 2008-05-15 2009-11-19 Sony Ericsson Mobile Communications Ab Remote Control Based on Image Recognition
CN102124479A (zh) * 2008-06-20 2011-07-13 谷歌公司 用于购买的图像捕捉
US20110314507A1 (en) * 2010-06-22 2011-12-22 Livetv Llc Registration of a personal electronic device (ped) with an aircraft ife system using aircraft generated registration token images and associated methods
CN104579866A (zh) * 2013-10-28 2015-04-29 空中客车作业有限公司 在飞机中与个人电子设备通信的方法及飞机服务器系统

Also Published As

Publication number Publication date
US10129581B2 (en) 2018-11-13
US20180146232A1 (en) 2018-05-24
DE102017125976A1 (de) 2018-05-24
US9900645B1 (en) 2018-02-20

Similar Documents

Publication Publication Date Title
CN108076356A (zh) 执行运输交通工具上的与对象相关联的功能的方法和系统
US8996651B2 (en) System and method for delivering media assets in a cloud environment
US8613385B1 (en) Audio-visual entertainment system and docking systems associated therewith
US20180150888A1 (en) Destination Shopping System
US11365007B2 (en) Systems and methods for providing a wake-up user interface for a night mode on transportation vehicles
CN108089835A (zh) 用于在运输交通工具上分发信息的方法和系统
US9621941B2 (en) Systems and methods for providing an interactive experience for people in a vehicle environment
US10362609B2 (en) Methods and systems for automatically pairing a personal electronic device on a transportation vehicle
CN106067838A (zh) 乘客座椅配对系统
US11518517B2 (en) Predictive preference selection for in-vehicle entertainment systems
US20220005103A1 (en) Pre-transit and post-transit facilitation of in-vehicle services
US10234937B2 (en) Handset with virtual reality goggles
CN107766029A (zh) 用于交通工具的数字助理及相关方法
CN109862407A (zh) 娱乐系统和方法
CN108377235A (zh) 用于向运输交通工具上的乘客传达消息的方法和系统
CN105453516A (zh) 将乘客登记与交通工具上的基于云的媒体的本地高速缓存进行同步
EP3182686B1 (en) Camera capture posting
CN110937116A (zh) 用于交通工具的方法、系统和座椅装置
CN107434042A (zh) 用于运输交通工具上的公告的方法和系统
EP2999135B1 (en) Multi-mode mobile device communicating with on-board and off-board systems of an aircraft.
US11572174B2 (en) Systems and methods for modifying control of a device within a vehicle
US10212164B2 (en) Media list for travel
US9950795B2 (en) Methods and systems for pairing a personal electronic device on a transportation vehicle
US11144129B2 (en) Depth sensing infrared input device and associated methods thereof
US10657517B2 (en) Methods and systems for using a transaction card on a transportation vehicle

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20180525

WD01 Invention patent application deemed withdrawn after publication