CN115474030A - 一种车辆投影方法及设备 - Google Patents

一种车辆投影方法及设备 Download PDF

Info

Publication number
CN115474030A
CN115474030A CN202211030353.7A CN202211030353A CN115474030A CN 115474030 A CN115474030 A CN 115474030A CN 202211030353 A CN202211030353 A CN 202211030353A CN 115474030 A CN115474030 A CN 115474030A
Authority
CN
China
Prior art keywords
vehicle
dlp
video stream
computer
pattern
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202211030353.7A
Other languages
English (en)
Other versions
CN115474030B (zh
Inventor
崔巍
崔晓琦
李微萌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhiji Automobile Technology Co Ltd
Original Assignee
Zhiji Automobile Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhiji Automobile Technology Co Ltd filed Critical Zhiji Automobile Technology Co Ltd
Priority to CN202211030353.7A priority Critical patent/CN115474030B/zh
Publication of CN115474030A publication Critical patent/CN115474030A/zh
Application granted granted Critical
Publication of CN115474030B publication Critical patent/CN115474030B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179Video signal processing therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41422Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance located in transportation means, e.g. personal vehicle
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H04N21/4355Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream involving reformatting operations of additional data, e.g. HTML pages on a television screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440236Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by media transcoding, e.g. video is transformed into a slideshow of still pictures, audio is converted into text
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • H04N21/4858End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643Communication protocols
    • H04N21/6437Real-time Transport Protocol [RTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179Video signal processing therefor
    • H04N9/3185Geometric adjustment, e.g. keystone or convergence

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Geometry (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Projection Apparatus (AREA)

Abstract

本发明的目的是提供一种车辆投影方法及设备,本发明通过将用户在车辆的屏幕上绘画的图案的编码后的第一视频流发送给DLP控制器,再由DLP控制器对视频流进行解码,以将解码后的视频图案发送给DLP投影镜头模块向车辆外的对应区域投影,供车外的行人观看投影内容,可以实现使用DLP投影镜头模块实时在车辆外的环境书写、作画,实现车内人员便捷、高效、生动的跟车外人员如行人进行实时沟通和交互。

Description

一种车辆投影方法及设备
技术领域
本发明涉及一种车辆投影方法及设备。
背景技术
现有的车辆端无法实现驾驶员与车外行人的实时进行交互,无法满足用户如车辆的驾驶员及时与车外人员进行实时沟通和互动的需求。
发明内容
本发明的目的是提供一种车辆投影方法及设备。
车机电脑获取用户在车辆的屏幕上绘画的图案;
车机电脑将所述图案编码成第一视频流,并将所述第一视频流发送给车辆的DLP控制器;
所述DLP控制器将接收到的第一视频流进行解码,得到解码后的视频图案,将解码后的视频图案发送给DLP投影镜头模块;
所述DLP投影镜头模块将接收到的解码后的视频图案投影到车辆外的对应位置。
进一步的,上述方法中,车机电脑将所述图案编码成第一视频流,并将所述第一视频流发送给车辆的DLP控制器,包括:
车机电脑将所述图案编码成H264的码流,并通过以太网用RTP协议将所述码流发送给车辆的DLP控制器。
进一步的,上述方法中,所述DLP控制器将解码后的视频图案发送给DLP投影镜头模块,包括:
所述DLP控制器将解码后的视频图案通过LVDS线发送给所述DLP投影镜头模块。
进一步的,上述方法中,车机电脑获取用户在车辆的屏幕上绘画的图案,包括:
车机电脑将车辆的屏幕中的画板区域进行单独分层;
车机电脑将用户在单独分层后的画板区域上绘画的图案进行录屏,得到录屏内容;
车机电脑将所述图案编码成第一视频流,并将所述第一视频流发送给车辆的DLP控制器,包括:
车机电脑将所述录屏内容编码成第一视频流,并将所述第一视频流发送给车辆的DLP控制器。
进一步的,上述方法中,车机电脑将用户在单独分层后的画板区域上绘画的图案进行录屏,得到录屏内容,包括:
车机电脑在单独分层后的画板区域上设置画笔和橡皮擦;
车机电脑将用户在单独分层后的画板区域上,通过所述画笔和橡皮擦,形成绘画的图案进行录屏,得到录屏内容。
进一步的,上述方法中,车机电脑将所述第一视频流发送给车辆的DLP控制器,包括:
车机电脑将畸变参数和所述第一视频流发送给车辆的DLP控制器;
所述DLP控制器将解码后的视频图案发送给DLP投影镜头模块,包括:
所述DLP控制器将所述畸变参数和解码后的视频图案发送给DLP投影镜头模块;
所述DLP投影镜头模块将接收到的解码后的视频图案投影到车辆外的对应位置,包括:
所述DLP投影镜头模块基于所述畸变参数,确定投影区域的大小和形状;
所述DLP投影镜头模块采用填充拉伸的方式,将所述解码后的视频图案填满确定好大小和形状的投影区域。
进一步的,上述方法中,所述DLP投影镜头模块将接收到的解码后的视频图案投影到车辆外的对应位置之后,还包括:
车机电脑获取用户在车辆的屏幕上划过的轨迹;
车机电脑将所述划过的轨迹编码成第二视频流,并将所述第二视频流发送给车辆的DLP控制器;
所述DLP控制器将接收到的第二视频流进行解码,得到解码后的轨迹,将解码后的轨迹发送给DLP投影镜头模块;
所述DLP投影镜头模块按照解码后的轨迹,在车辆外投影对应移动光束。
进一步的,上述方法中,所述DLP投影镜头模块将接收到的解码后的视频图案投影到车辆外的对应位置之后,还包括:
车机电脑获取用户在车辆的屏幕上输入的语音信息,将所述语音信息发送至云端,获取云端解析所述语音信息后得到的文字;
车机电脑将所述文字编码成第三视频流,并将所述第三视频流发送给车辆的DLP控制器;
所述DLP控制器将接收到的第三视频流进行解码,得到解码后的位置,将解码后的位置发送给DLP投影镜头模块;
所述DLP投影镜头模块将接收到的解码后的文字投影到车辆外的对应位置。
进一步的,上述方法中,车机电脑将所述文字编码成第三视频流,并将所述第三视频流发送给车辆的DLP控制器,包括:
车机电脑获取文字的修改操作,基于所述修改操作对应修改文字的内容,得到修改后的文字;
根据修改后的文字的字数,调整修改后的文字的排版,得到排版后的文字;
获取选择的字体模式,将排版后的文字调整为选择的字体模式,得到最终文字;
将最终文字编码成第三视频流,并将所述第三视频流发送给车辆的DLP控制器。
根据本发明的另一方面,还提供一种车辆投影设备,所述设备包括:
车机电脑,用于获取用户在车辆的屏幕上绘画的图案;将所述图案编码成第一视频流,并将所述第一视频流发送给车辆的DLP控制器;
DLP控制器,用于将接收到的第一视频流进行解码,得到解码后的视频图案,将解码后的视频图案发送给DLP投影镜头模块;
DLP投影镜头模块,用于将接收到的解码后的视频图案投影到车辆外的对应位置。
根据本发明的另一方面,还提供一种计算机可读介质,其上存储有计算机可读指令,所述计算机可读指令可被处理器执行以实现上述任一项所述的方法。
根据本发明的另一方面,还提供一种用于在网络设备端信息处理的设备,该设备包括用于存储计算机程序指令的存储器和用于执行程序指令的处理器,其中,当该计算机程序指令被该处理器执行时,触发该设备执行上述任一项所述的方法。
与现有技术相比,本发明通过将用户在车辆的屏幕上绘画的图案的编码后的第一视频流发送给DLP控制器,再由DLP控制器对视频流进行解码,以将解码后的视频图案发送给DLP投影镜头模块向车辆外的对应区域投影,供车外的行人观看投影内容,可以实现使用DLP投影镜头模块实时在车辆外的环境书写、作画,实现车内人员便捷、高效、生动的跟车外人员如行人进行实时沟通和交互。
为了避免将屏幕上部需要分享的内容如私密内容,当用户投屏时,只希望投屏车辆的屏幕中的画板区域的内容,不投屏车辆的屏幕中其他的内容投屏到车辆外,车机电脑可以先将画板区域与屏幕的其他区域分层,将画板区域设置为一个单独层级,后续车机电脑只对画板区域内容进行录屏,实现单独层级的画板区域的准确录屏。
车机电脑可以根据投影的实际环境,发送畸变参数给DLP控制器,DLP控制器根据畸变参数,可以调整真实投影区域的大小和形状。DLP投影镜头模块可以采用填充拉伸的方式,将视频图案填满投影区域。从而,车机电脑可以通过畸变参数,调节投射出来图像的形状与大小。
通过车机电脑获取用户在车辆的屏幕上划过的轨迹;车机电脑将所述划过的轨迹编码成第二视频流,并将所述第二视频流发送给车辆的DLP控制器;所述DLP控制器将接收到的第二视频流进行解码,得到解码后的轨迹,将解码后的轨迹发送给DLP投影镜头模块;进而所述DLP投影镜头模块按照解码后的轨迹,在车辆外投影对应移动光束。
通过车机电脑获取用户在车辆的屏幕上输入的语音信息,将所述语音信息发送至云端,获取云端解析所述语音信息后得到的文字;车机电脑将所述文字编码成第三视频流,并将所述第三视频流发送给车辆的DLP控制器;所述DLP控制器将接收到的第三视频流进行解码,得到解码后的位置,将解码后的位置发送给DLP投影镜头模块;所述DLP投影镜头模块将接收到的解码后的文字投影到车辆外的对应位置,可以实现用户在车内语音说话,DLP投影镜头模块会实时将语言文字内容投影到地面上。
附图说明
图1是本发明一实施例的车辆投影方法的示意图。
具体实施方式
下面结合附图对本发明作进一步详细描述。
在本申请一个典型的配置中,终端、服务网络的设备和可信方均包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flashRAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括非暂存电脑可读媒体(transitorymedia),如调制的数据信号和载波。
如图1所示,本发明提供一种车辆投影方法,所述方法包括:
步骤S1,车机电脑获取用户在车辆的屏幕上绘画的图案;
在此,车机电脑指的是安装在汽车里面的车载信息娱乐产品的简称,车机在功能上能够实现人与车,车与外界(车与车)的信息通讯。
步骤S2,车机电脑将所述图案编码成第一视频流,并将所述第一视频流发送给车辆的DLP(DigitalLightProcessing,数字光处理)控制器;
步骤S3,所述DLP控制器将接收到的第一视频流进行解码,得到解码后的视频图案,将解码后的视频图案发送给DLP投影镜头模块;
步骤S4,所述DLP投影镜头模块将接收到的解码后的视频图案投影到车辆外的对应位置。
在此,一般电脑和屏幕的链接都通过HDMI线束,以保证足够的带宽和实时性,而且电脑对屏幕是直接控制的。而车辆上没有HDMI线,车机电脑也不能直接控制DLP投影镜头。
可以在车机电脑的屏幕上增加画板功能,屏幕获取手指的触点轨迹生成线条。
本发明通过将用户在车辆的屏幕上绘画的图案的编码后的第一视频流发送给DLP控制器,再由DLP控制器对视频流进行解码,以将解码后的视频图案发送给DLP投影镜头模块向车辆外的对应区域投影,供车外的行人观看投影内容,可以实现使用DLP投影镜头模块实时在车辆外的环境书写、作画,实现车内人员便捷、高效、生动的跟车外人员如行人进行实时沟通和交互。
本发明的车辆投影方法一实施例中,步骤S2,车机电脑将所述图案编码成第一视频流,并将所述第一视频流发送给车辆的DLP(DigitalLightProcessing,数字光处理)控制器,包括:
车机电脑将所述图案编码成H264的码流,并通过以太网用RTP协议将所述码流发送给车辆的DLP(DigitalLightProcessing,数字光处理)控制器。
在此,车机电脑与DLP控制器的链接,可以通过以太网的方式链接,对视频流进行编码,实现低带宽的画面实时投影。
车机电脑可以将录屏的内容,实时编码成H264的码流,并通过以太网用RTP(实时传输协议,Real-timeTransportProtocol或简写RTP)推流的协议,推给DLP控制器,后续DLP控制器可以接收H264的码流,并将H264的码流解码后通过DLP投影镜头投放至车外的环境,实现高效、可靠的码流传输。
本发明的车辆投影方法一实施例中,步骤S3,所述DLP控制器将解码后的视频图案发送给DLP投影镜头模块,包括:
所述DLP控制器将解码后的视频图案通过LVDS(Low-VoltageDifferentialSignaling,低电压差分信号)线发送给所述DLP投影镜头模块。
在此,DLP控制器在接收到车机RTP推流后,会实时对视频进行解码,并将显示内容通过LVDS(Low-VoltageDifferentialSignaling,低电压差分信号)线发送到DLP投影镜头模块,以保证视频流高效、可靠的传输到DLP投影镜头模块,实现低带宽的画面实时投影。
本发明的车辆投影方法一实施例中,步骤S1,车机电脑获取用户在车辆的屏幕上绘画的图案,包括:
步骤S11,车机电脑将车辆的屏幕中的画板区域进行单独分层;
步骤S12,车机电脑将用户在单独分层后的画板区域上绘画的图案进行录屏,得到录屏内容;
步骤S2,车机电脑将所述图案编码成第一视频流,并将所述第一视频流发送给车辆的DLP控制器,包括:
步骤S21,车机电脑将所述录屏内容编码成第一视频流,并将所述第一视频流发送给车辆的DLP控制器。
在此,为了避免将屏幕上部需要分享的内容如私密内容,当用户投屏时,只希望投屏车辆的屏幕中的画板区域的内容,不投屏车辆的屏幕中其他的内容投屏到车辆外,车机电脑可以先将画板区域与屏幕的其他区域分层,将画板区域设置为一个单独层级,后续车机电脑只对画板区域内容进行录屏,实现单独层级的画板区域的准确录屏。
本发明的车辆投影方法一实施例中,步骤S12,车机电脑将用户在单独分层后的画板区域上绘画的图案进行录屏,得到录屏内容,包括:
车机电脑在单独分层后的画板区域上设置画笔和橡皮擦;
车机电脑将用户在单独分层后的画板区域上,通过所述画笔和橡皮擦,形成绘画的图案进行录屏,得到录屏内容。
在此,用户可以在车机电脑的大屏幕上,打开随手画画板界面,以显示单独分层后的画板区域,然后用户可以通过选择画笔并调节画笔的粗细后,通过手指在单独分层后的画板区域上作画,手指在画板区域经过的位置,会对应为识别到的像素区域大小的着色区域;
另外,用户还可以选择橡皮擦,通过手指在单独分层后的画板区域上擦去所画的内容(对应画板上),还可以转化成橡皮擦,手指在画板区域经过的位置,会对应为识别到的像素区域大小的擦除区域。
本发明的车辆投影方法一实施例中,步骤S2,车机电脑将所述第一视频流发送给车辆的DLP控制器,包括:
步骤S22,车机电脑将畸变参数和所述第一视频流发送给车辆的DLP控制器;
步骤S3,所述DLP控制器将解码后的视频图案发送给DLP投影镜头模块,包括:
步骤S31,所述DLP控制器将所述畸变参数和解码后的视频图案发送给DLP投影镜头模块;
步骤S4,所述DLP投影镜头模块将接收到的解码后的视频图案投影到车辆外的对应位置,包括:
步骤S41,所述DLP投影镜头模块基于所述畸变参数,确定投影区域的大小和形状;
步骤S42,所述DLP投影镜头模块采用填充拉伸的方式,将所述解码后的视频图案填满确定好大小和形状的投影区域。
在此,车机电脑可以根据投影的实际环境,发送畸变参数给DLP控制器,DLP控制器根据畸变参数,可以调整真实投影区域的大小和形状。DLP投影镜头模块可以采用填充拉伸的方式,将视频图案填满投影区域。从而,车机电脑可以通过畸变参数,调节投射出来图像的形状与大小。
另外,用户也可以根据投影效果的需求,手动在车辆的屏幕中调节投射区域大小有点类似投影仪上的畸变调节按钮,以调节所述畸变参数,车机电脑可以获取用户输入的畸变参数,实现对投影图像的便捷畸变调节。
例如,用户可以选择向车辆外的墙板或地面投影:
当投影墙壁时,车机电脑会把投墙的畸变参数发给DLP控制器,此时墙上的投影区域与车机屏中的画板区域的形状一致,可以等比例放大,此时用户画出来的图案可以所见即所得;
当投影地面时,车机电脑会把投地的畸变参数发给DLP控制器,此时地上的投影区域,可以与车机屏中的画板区域的形状大致相同,可以增加透视效果。
本发明的车辆投影方法一实施例中,步骤S4,所述DLP投影镜头模块将接收到的解码后的视频图案投影到车辆外的对应位置之后,还包括:
步骤S5,车机电脑获取用户在车辆的屏幕上划过的轨迹;
步骤S6,车机电脑将所述划过的轨迹编码成第二视频流,并将所述第二视频流发送给车辆的DLP控制器;
步骤S7,所述DLP控制器将接收到的第二视频流进行解码,得到解码后的轨迹,将解码后的轨迹发送给DLP投影镜头模块;
步骤S8,所述DLP投影镜头模块按照解码后的轨迹,在车辆外投影对应移动光束。
在此,用户在车机电脑的大屏幕上,打开光随手动界面,手指在车机屏内滑过一定的轨迹,DLP投影镜头模块会在车外投影相应轨迹的移动光束;另外,可以给移动光束添加彗星拖尾的效果。
例如,用户手指长按屏幕拖动,车外会有移动光斑实时跟随移动。
当用户的手指在屏幕上滑动时,车机电脑可以感应到的相应像素区域的移动轨迹,DLP控制器可以根据手指在屏上的移动轨迹,重新计算绘画生成一个拖尾的效果,拖尾的长短可以跟手指在屏幕上保留的时长有关。
本发明的车辆投影方法一实施例中,步骤S4,所述DLP投影镜头模块将接收到的解码后的视频图案投影到车辆外的对应位置之后,还包括:
步骤S9,车机电脑获取用户在车辆的屏幕上输入的语音信息,将所述语音信息发送至云端,获取云端解析所述语音信息后得到的文字;
在此,云端具有的语音语义识别功能,云端还具有与车辆的通讯的能力;
步骤S10,车机电脑将所述文字编码成第三视频流,并将所述第三视频流发送给车辆的DLP控制器;
步骤S11,所述DLP控制器将接收到的第三视频流进行解码,得到解码后的位置,将解码后的位置发送给DLP投影镜头模块;
步骤S12,所述DLP投影镜头模块将接收到的解码后的文字投影到车辆外的对应位置。
在此,用户可以打开车机电脑的屏幕中随口说的页面,长按话筒按键,开始说话,车上的麦克风会采集用户的语音信息,车机电脑将语音信息通过T-box传给云端。云端对语音内容进行分析,识别,生成文字再传回车辆的车机电脑。后续,DLP投影镜头模块可以将解析到的文字便捷的投影到车辆外的环境。
本实施例可以实现用户在车内语音说话,DLP投影镜头模块会实时将语言文字内容投影到地面上。
本发明的车辆投影方法一实施例中,步骤S10,车机电脑将所述文字编码成第三视频流,并将所述第三视频流发送给车辆的DLP控制器,包括:
步骤S101,车机电脑获取文字的修改操作,基于所述修改操作对应修改文字的内容,得到修改后的文字;
步骤S102,根据修改后的文字的字数,调整修改后的文字的排版,得到排版后的文字;
步骤S103,获取选择的字体模式,将排版后的文字调整为选择的字体模式,得到最终文字;
步骤S104,将最终文字编码成第三视频流,并将所述第三视频流发送给车辆的DLP控制器。
在此,车机电脑可以把传回的文字,显示在车机屏中,文字的排版会根据字数自动调整,用户还可以切换不同的字体。如果个别文字识别错误,用户还可以调出键盘进行修改。
本实施例可以实现语音输入的能力,能够切换不同的投影字体,投影文字的排版可提前根据不同字数,设置好投影文字大小。
根据本发明的另一方面,还提供一种车辆投影设备,所述设备包括:
车机电脑,用于获取用户在车辆的屏幕上绘画的图案;将所述图案编码成第一视频流,并将所述第一视频流发送给车辆的DLP控制器;
DLP控制器,用于将接收到的第一视频流进行解码,得到解码后的视频图案,将解码后的视频图案发送给DLP投影镜头模块;
DLP投影镜头模块,用于将接收到的解码后的视频图案投影到车辆外的对应位置。
根据本发明的另一方面,还提供一种计算机可读介质,其上存储有计算机可读指令,所述计算机可读指令可被处理器执行以实现上述任一项所述的方法。
根据本发明的另一方面,还提供一种用于在网络设备端信息处理的设备,该设备包括用于存储计算机程序指令的存储器和用于执行程序指令的处理器,其中,当该计算机程序指令被该处理器执行时,触发该设备执行上述任一项所述的方法。
综上所述,本发明通过将用户在车辆的屏幕上绘画的图案的编码后的第一视频流发送给DLP控制器,再由DLP控制器对视频流进行解码,以将解码后的视频图案发送给DLP投影镜头模块向车辆外的对应区域投影,供车外的行人观看投影内容,可以实现使用DLP投影镜头模块实时在车辆外的环境书写、作画,实现车内人员便捷、高效、生动的跟车外人员如行人进行实时沟通和交互。
为了避免将屏幕上部需要分享的内容如私密内容,当用户投屏时,只希望投屏车辆的屏幕中的画板区域的内容,不投屏车辆的屏幕中其他的内容投屏到车辆外,车机电脑可以先将画板区域与屏幕的其他区域分层,将画板区域设置为一个单独层级,后续车机电脑只对画板区域内容进行录屏,实现单独层级的画板区域的准确录屏。
车机电脑可以根据投影的实际环境,发送畸变参数给DLP控制器,DLP控制器根据畸变参数,可以调整真实投影区域的大小和形状。DLP投影镜头模块可以采用填充拉伸的方式,将视频图案填满投影区域。从而,车机电脑可以通过畸变参数,调节投射出来图像的形状与大小。
通过车机电脑获取用户在车辆的屏幕上划过的轨迹;车机电脑将所述划过的轨迹编码成第二视频流,并将所述第二视频流发送给车辆的DLP控制器;所述DLP控制器将接收到的第二视频流进行解码,得到解码后的轨迹,将解码后的轨迹发送给DLP投影镜头模块;进而所述DLP投影镜头模块按照解码后的轨迹,在车辆外投影对应移动光束。
通过车机电脑获取用户在车辆的屏幕上输入的语音信息,将所述语音信息发送至云端,获取云端解析所述语音信息后得到的文字;车机电脑将所述文字编码成第三视频流,并将所述第三视频流发送给车辆的DLP控制器;所述DLP控制器将接收到的第三视频流进行解码,得到解码后的位置,将解码后的位置发送给DLP投影镜头模块;所述DLP投影镜头模块将接收到的解码后的文字投影到车辆外的对应位置,可以实现用户在车内语音说话,DLP投影镜头模块会实时将语言文字内容投影到地面上。
本发明各设备实施例的详细内容具体可参见各方法实施例的对应部分,在此,不再赘述。
显然,本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样,倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。
需要注意的是,本发明可在软件和/或软件与硬件的组合体中被实施,例如,可采用专用集成电路(ASIC)、通用目的计算机或任何其他类似硬件设备来实现。在一个实施例中,本发明的软件程序可以通过处理器执行以实现上文所述步骤或功能。同样地,本发明的软件程序(包括相关的数据结构)可以被存储到计算机可读记录介质中,例如,RAM存储器,磁或光驱动器或软磁盘及类似设备。另外,本发明的一些步骤或功能可采用硬件来实现,例如,作为与处理器配合从而执行各个步骤或功能的电路。
另外,本发明的一部分可被应用为计算机程序产品,例如计算机程序指令,当其被计算机执行时,通过该计算机的操作,可以调用或提供根据本发明的方法和/或技术方案。而调用本发明的方法的程序指令,可能被存储在固定的或可移动的记录介质中,和/或通过广播或其他信号承载媒体中的数据流而被传输,和/或被存储在根据所述程序指令运行的计算机设备的工作存储器中。在此,根据本发明的一个实施例包括一个装置,该装置包括用于存储计算机程序指令的存储器和用于执行程序指令的处理器,其中,当该计算机程序指令被该处理器执行时,触发该装置运行基于前述根据本发明的多个实施例的方法和/或技术方案。
对于本领域技术人员而言,显然本发明不限于上述示范性实施例的细节,而且在不背离本发明的精神或基本特征的情况下,能够以其他的具体形式实现本发明。因此,无论从哪一点来看,均应将实施例看作是示范性的,而且是非限制性的,本发明的范围由所附权利要求而不是上述说明限定,因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本发明内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。此外,显然“包括”一词不排除其他单元或步骤,单数不排除复数。装置权利要求中陈述的多个单元或装置也可以由一个单元或装置通过软件或者硬件来实现。第一,第二等词语用来表示名称,而并不表示任何特定的顺序。

Claims (11)

1.一种车辆投影方法,其特征在于,所述方法包括:
车机电脑获取用户在车辆的屏幕上绘画的图案;
车机电脑将所述图案编码成第一视频流,并将所述第一视频流发送给车辆的DLP控制器;
所述DLP控制器将接收到的第一视频流进行解码,得到解码后的视频图案,将解码后的视频图案发送给DLP投影镜头模块;
所述DLP投影镜头模块将接收到的解码后的视频图案投影到车辆外的对应位置;
车机电脑获取用户在车辆的屏幕上绘画的图案,包括:
车机电脑将车辆的屏幕中的画板区域进行单独分层;
车机电脑将用户在单独分层后的画板区域上绘画的图案进行录屏,得到录屏内容;
车机电脑将所述图案编码成第一视频流,并将所述第一视频流发送给车辆的DLP控制器,包括:
车机电脑将所述录屏内容编码成第一视频流,并将所述第一视频流发送给车辆的DLP控制器。
2.根据权利要求1所述的方法,其中,车机电脑将所述图案编码成第一视频流,并将所述第一视频流发送给车辆的DLP控制器,包括:
车机电脑将所述图案编码成H264的码流,并通过以太网用RTP协议将所述码流发送给车辆的DLP控制器。
3.根据权利要求1或2所述的方法,其中,所述DLP控制器将解码后的视频图案发送给DLP投影镜头模块,包括:
所述DLP控制器将解码后的视频图案通过LVDS线发送给所述DLP投影镜头模块。
4.根据权利要求1所述的方法,其中,车机电脑将用户在单独分层后的画板区域上绘画的图案进行录屏,得到录屏内容,包括:
车机电脑在单独分层后的画板区域上设置画笔和橡皮擦;
车机电脑将用户在单独分层后的画板区域上,通过所述画笔和橡皮擦,形成绘画的图案进行录屏,得到录屏内容。
5.根据权利要求1所述的方法,其中,车机电脑将所述第一视频流发送给车辆的DLP控制器,包括:
车机电脑将畸变参数和所述第一视频流发送给车辆的DLP控制器;
所述DLP控制器将解码后的视频图案发送给DLP投影镜头模块,包括:
所述DLP控制器将所述畸变参数和解码后的视频图案发送给DLP投影镜头模块;
所述DLP投影镜头模块将接收到的解码后的视频图案投影到车辆外的对应位置,包括:
所述DLP投影镜头模块基于所述畸变参数,确定投影区域的大小和形状;
所述DLP投影镜头模块采用填充拉伸的方式,将所述解码后的视频图案填满确定好大小和形状的投影区域。
6.根据权利要求1所述的方法,其中,所述DLP投影镜头模块将接收到的解码后的视频图案投影到车辆外的对应位置之后,还包括:
车机电脑获取用户在车辆的屏幕上划过的轨迹;
车机电脑将所述划过的轨迹编码成第二视频流,并将所述第二视频流发送给车辆的DLP控制器;
所述DLP控制器将接收到的第二视频流进行解码,得到解码后的轨迹,将解码后的轨迹发送给DLP投影镜头模块;
所述DLP投影镜头模块按照解码后的轨迹,在车辆外投影对应移动光束。
7.根据权利要求1所述的方法,其中,所述DLP投影镜头模块将接收到的解码后的视频图案投影到车辆外的对应位置之后,还包括:
车机电脑获取用户在车辆的屏幕上输入的语音信息,将所述语音信息发送至云端,获取云端解析所述语音信息后得到的文字;
车机电脑将所述文字编码成第三视频流,并将所述第三视频流发送给车辆的DLP控制器;
所述DLP控制器将接收到的第三视频流进行解码,得到解码后的位置,将解码后的位置发送给DLP投影镜头模块;
所述DLP投影镜头模块将接收到的解码后的文字投影到车辆外的对应位置。
8.根据权利要求7所述的方法,其中,车机电脑将所述文字编码成第三视频流,并将所述第三视频流发送给车辆的DLP控制器,包括:
车机电脑获取文字的修改操作,基于所述修改操作对应修改文字的内容,得到修改后的文字;
根据修改后的文字的字数,调整修改后的文字的排版,得到排版后的文字;
获取选择的字体模式,将排版后的文字调整为选择的字体模式,得到最终文字;
将最终文字编码成第三视频流,并将所述第三视频流发送给车辆的DLP控制器。
9.一种车辆投影设备,其特征在于,所述设备包括:
车机电脑,用于获取用户在车辆的屏幕上绘画的图案;将所述图案编码成第一视频流,并将所述第一视频流发送给车辆的DLP控制器;还用于将车辆的屏幕中的画板区域进行单独分层;将用户在单独分层后的画板区域上绘画的图案进行录屏,得到录屏内容;将所述录屏内容编码成第一视频流,并将所述第一视频流发送给车辆的DLP控制;
DLP控制器,用于将接收到的第一视频流进行解码,得到解码后的视频图案,将解码后的视频图案发送给DLP投影镜头模块;
DLP投影镜头模块,用于将接收到的解码后的视频图案投影到车辆外的对应位置。
10.一种计算机可读介质,其上存储有计算机可读指令,所述计算机可读指令可被处理器执行以实现权利要求1至8中任一项所述的方法。
11.一种用于在网络设备端信息处理的设备,该设备包括用于存储计算机程序指令的存储器和用于执行程序指令的处理器,其中,当该计算机程序指令被该处理器执行时,触发该设备执行权利要求1至8中任一项所述的方法。
CN202211030353.7A 2022-08-26 2022-08-26 一种车辆投影方法及设备 Active CN115474030B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211030353.7A CN115474030B (zh) 2022-08-26 2022-08-26 一种车辆投影方法及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211030353.7A CN115474030B (zh) 2022-08-26 2022-08-26 一种车辆投影方法及设备

Publications (2)

Publication Number Publication Date
CN115474030A true CN115474030A (zh) 2022-12-13
CN115474030B CN115474030B (zh) 2023-08-11

Family

ID=84369631

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211030353.7A Active CN115474030B (zh) 2022-08-26 2022-08-26 一种车辆投影方法及设备

Country Status (1)

Country Link
CN (1) CN115474030B (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006023603A (ja) * 2004-07-09 2006-01-26 Kazunari Ohashi 映写設備付き自動車
JP2015047885A (ja) * 2013-08-29 2015-03-16 トヨタ車体株式会社 車両搭載インタラクティブシステム
CN106043150A (zh) * 2016-08-04 2016-10-26 歌尔科技有限公司 一种带语音识别功能的车载投影系统
CN107765428A (zh) * 2017-03-21 2018-03-06 上海碧虎网络科技有限公司 一种车用投影膜的使用方法
CN108131641A (zh) * 2017-12-12 2018-06-08 李范伟 一种行车示意投影装置和方法
CN110933388A (zh) * 2019-10-25 2020-03-27 广汽蔚来新能源汽车科技有限公司 投影成像系统、方法、装置和车辆
CN112118558A (zh) * 2020-06-30 2020-12-22 上汽通用五菱汽车股份有限公司 车机屏幕显示方法、车辆及计算机可读存储介质
CN112511812A (zh) * 2020-10-21 2021-03-16 浙江吉利控股集团有限公司 一种车载影音控制系统及方法
WO2022007984A1 (zh) * 2020-07-10 2022-01-13 华人运通(上海)云计算科技有限公司 用于车辆的智能交互控制系统与方法、车辆及存储介质

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006023603A (ja) * 2004-07-09 2006-01-26 Kazunari Ohashi 映写設備付き自動車
JP2015047885A (ja) * 2013-08-29 2015-03-16 トヨタ車体株式会社 車両搭載インタラクティブシステム
CN106043150A (zh) * 2016-08-04 2016-10-26 歌尔科技有限公司 一种带语音识别功能的车载投影系统
CN107765428A (zh) * 2017-03-21 2018-03-06 上海碧虎网络科技有限公司 一种车用投影膜的使用方法
CN108131641A (zh) * 2017-12-12 2018-06-08 李范伟 一种行车示意投影装置和方法
CN110933388A (zh) * 2019-10-25 2020-03-27 广汽蔚来新能源汽车科技有限公司 投影成像系统、方法、装置和车辆
CN112118558A (zh) * 2020-06-30 2020-12-22 上汽通用五菱汽车股份有限公司 车机屏幕显示方法、车辆及计算机可读存储介质
WO2022007984A1 (zh) * 2020-07-10 2022-01-13 华人运通(上海)云计算科技有限公司 用于车辆的智能交互控制系统与方法、车辆及存储介质
CN112511812A (zh) * 2020-10-21 2021-03-16 浙江吉利控股集团有限公司 一种车载影音控制系统及方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
ALIN-MIHAI: "Digital Signal Processing Sensor for Automotive Visible Light Communications Applications", 《2017 NEW GENERATION OF CAS》 *
姜栋: "基于DLP投影技术车载集成显示系统的研究与实现", 《中国优秀硕士学位论文全文数据库(电子期刊)》 *
张旭 等: "一种车载投影装置及其控制方法的设计研究", 《汽车电器》, no. 6 *

Also Published As

Publication number Publication date
CN115474030B (zh) 2023-08-11

Similar Documents

Publication Publication Date Title
CA2973415C (en) Method and system for recording and broadcasting of network teaching
JP6430653B2 (ja) 画像同期表示方法及び装置
US9298704B2 (en) Language translation of visual and audio input
US8274666B2 (en) Projector/printer for displaying or printing of documents
CN109065053B (zh) 用于处理信息的方法和装置
CN107979763B (zh) 一种虚拟现实设备生成视频、播放方法、装置及系统
WO2023123590A1 (zh) 基于手写轨迹识别的答题处理方法、手写笔、系统及终端
CN111400518A (zh) 作品生成和编辑方法、装置、终端、服务器和系统
WO2013135167A1 (zh) 一种移动终端处理文本的方法、相关设备及系统
JP2019533181A (ja) 通訳装置及び方法(device and method of translating a language)
CN106896933A (zh) 将语音输入转换成文本输入的方法、装置和语音输入设备
CN105022595B (zh) 一种语音打印方法
CN115474030A (zh) 一种车辆投影方法及设备
US20240046931A1 (en) Voice interaction method and apparatus
CN109618198A (zh) 直播内容举报方法及装置、存储介质、电子设备
KR101849036B1 (ko) 영상 자막의 스캔을 통한 하이브리드 언어 표현방식 변환장치
CN114153542A (zh) 投屏方法、装置、电子设备及计算机可读存储介质
JP6944920B2 (ja) スマートインタラクティブの処理方法、装置、設備及びコンピュータ記憶媒体
US11363084B1 (en) Methods and systems for facilitating conversion of content in public centers
CN113157241A (zh) 交互设备、交互装置及交互系统
CN114360545A (zh) 语音识别与音视频处理方法、设备、系统及存储介质
KR102679446B1 (ko) 발화 비디오 제공 장치 및 방법
US11532312B2 (en) User-perceived latency while maintaining accuracy
CN113010133A (zh) 一种数据显示方法
CN104715132A (zh) 地址转换器及具该转换器的地址解析系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant