CN100546324C - 数据处理器、数据处理方法和电子设备 - Google Patents

数据处理器、数据处理方法和电子设备 Download PDF

Info

Publication number
CN100546324C
CN100546324C CNB2004100889587A CN200410088958A CN100546324C CN 100546324 C CN100546324 C CN 100546324C CN B2004100889587 A CNB2004100889587 A CN B2004100889587A CN 200410088958 A CN200410088958 A CN 200410088958A CN 100546324 C CN100546324 C CN 100546324C
Authority
CN
China
Prior art keywords
data
character
string
image
viewing area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB2004100889587A
Other languages
English (en)
Other versions
CN1617561A (zh
Inventor
杉原光明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Publication of CN1617561A publication Critical patent/CN1617561A/zh
Application granted granted Critical
Publication of CN100546324C publication Critical patent/CN100546324C/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00Payment architectures, schemes or protocols
    • G06Q20/08Payment architectures
    • G06Q20/10Payment architectures specially adapted for electronic funds transfer [EFT] systems; specially adapted for home banking systems
    • G06Q20/102Bill distribution or payments
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text

Landscapes

  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Engineering & Computer Science (AREA)
  • Finance (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Multimedia (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)
  • Telephone Function (AREA)

Abstract

本发明公开了一种数据处理器、数据处理方法和电子设备。含有所谓视频电话功能的蜂窝电话,将通过用摄像头形成图像所获得的图像数据连同通过使用麦克风输入语音所获得的语音数据一起连续传输。在通信单元通过通信路径的连接期间,字符合成电路将字符数据与图像数据相组合,以获得合成数据。在通信路径连接期间,通信单元传输该合成数据。在通信路径连接期间,字符数据与图像数据组合,以获得合成数据。因而,不再需要通过另外的信道传输字符数据。此外,在通信路径连接期间,与通话内容有关的合成数据中的字符数据例如可以被显示在显示屏上。因而,通话内容(信息)可以被迅速和准确地传输。

Description

数据处理器、数据处理方法和电子设备
技术领域
本发明涉及用于将通过用摄像头形成图像所获得的图像数据与使用数字小键盘等生成的字符数据相组合的数据处理器、数据处理方法和电子设备。
具体地说,本发明涉及数据处理方法和数据处理器,用于例如在同时发送/接收图像和语音数据的视频电话通话(数据传输)期间,将涉及通话内容的字符数据与上述图像数据相组合,并用于传输组合后的数据。另外,本发明也涉及包括这种数据处理器的诸如蜂窝电话之类的电子设备。
背景技术
为了将某人的产品区别于其他产品或者为了满足用户的需求,在诸如蜂窝电话、PHS(个人手持电话系统)等的电子设备中加入了诸如视频电话之类的各种功能。例如,拥有上述视频电话功能的蜂窝电话配备了使用CCD(电荷耦合器件)等的摄像头,并配备了诸如LCD(液晶显示屏)之类的用于显示通过用上述摄像头形成图像所获得的图像数据的屏幕。这样,具有上述视频电话功能的蜂窝电话能够发送和接收带有使用麦克风输入的语音数据的上述图像数据。
注意,在蜂窝电话中,已经公开了一种接收图像数据(通过形成图像获得的上述图像数据)的技术,该技术包括:由某一蜂窝电话的摄像头拍摄图像,并通过传输电路被传输,由另一蜂窝电话的接收电路接收,并在该蜂窝电话的显示屏上显示所接收的图像数据和其他图像数据(见专利文献1:日本专利公开No.2001-309073)。
此外,迄今为止已经公开了这样的通信设备和通信系统,它们包括用于生成辅助信息的辅助信息生成装置,辅助信息不同于在通信中发送和接收的主信息(见专利文献2:日本专利公开No.2002-374366)。专利文献2的通信设备和通信系统在发送和接收主信息期间,传输由辅助信息产生装置生成的指示情绪等的辅助信息。
顺便提及,关于带有上述视频电话功能的蜂窝电话,上述使用语音数据的蜂窝电话通信在如下情形中是困难的或不可能的:在周围有许多噪音的地方通信,在不能发出高音量语音的地方通信,与听力受损人员通信等。在这种情形中,蜂窝电话依赖于只使用图像数据(视觉信息)的通信。具体地说,带有上述视频电话功能的蜂窝电话在只使用图像数据迅速并准确传输信息内容时是有困难的。
注意,专利文献1的电子设备和专利文献2的通信设备不是带有同时发送/接收图像和语音数据的视频电话功能的电子设备。具体地说,专利文献1的电子设备和专利文献2的通信设备在通话期间不能向对方端的蜂窝电话与其他图像数据一起传输在通过视频电话通话期间生成的图像数据。
发明内容
相应地,本发明的目的是提供一种数据处理器、数据处理方法和电子设备,例如,它们能够在同时发送/接收图像和语音数据的视频电话通话期间,迅速和准确地传输通话内容。
为了达到上述目的,根据本发明的数据处理器、数据处理方法和电子设备采取如下的特征配置。
根据本发明的数据处理器包括:成像装置,用于形成物体图像以及生成该图像的图像数据;存储装置,用于预先存储包括多段字符数据的字符串数据,以及用于预先存储一张表,所述表将所述字符串数据与指定键相关联,以通过建立关联指定所述字符串数据,并且所述表还将所述字符串数据与在显示屏上显示所述字符串数据时的显示处理数据相关联;第一处理装置,用于当所述指定键被操作时,通过参考所述表,从所述存储装置集体地读取与所述指定键相关联的所述字符串数据,并用于输出所述字符串数据;字符生成装置,用于当所述指定键未被操作时生成字符数据;转换装置,用于将由所述第一处理装置输出的所述字符串数据或者由所述字符生成装置生成的字符数据转换为图像数据结构的字符图像数据;传输装置,用于通过通信路径连接到对方通信设备以及用于向对方通信设备传输数据;和数据合成装置,用于在传输装置通过通信路径的连接期间,通过将由成像装置生成的图像数据与字符图像数据组合来生成合成数据。
根据本发明的数据处理方法包括:通过用成像装置形成物体图像来生成图像数据;预先存储包括多段字符数据的字符串数据,以及预先存储一张表,所述表将所述字符串数据与指定键相关联,以通过建立关联指定所述字符串数据,并且所述表还将所述字符串数据与在显示屏上显示所述字符串数据时的显示处理数据相关联;当所述指定键被操作时,通过参考所述表来集体地读取与所述指定键相关联的所述字符串数据并输出所述字符串数据,而当所述指定键未被操作时,由字符生成装置生成字符数据;由转换装置将所述字符串数据或所述字符数据转换为图像数据结构的字符图像数据;以及在传输装置通过通信路径的连接期间,生成合成数据,该合成数据是通过将图像数据与字符图像数据组合获得的。
根据本发明的电子设备包括:成像装置,用于形成物体图像以及生成该图像的图像数据;语音输入装置,用于输入语音以及生成该输入语音的语音数据;存储装置,用于预先存储包括多段字符数据的字符串数据,以及用于预先存储一张表,所述表将所述字符串数据与指定键相关联,以通过建立关联指定所述字符串数据,并且所述表还将所述字符串数据与在显示屏上显示所述字符串数据时的显示处理数据相关联;第一处理装置,用于当所述指定键被操作时,通过参考所述表,从所述存储装置集体地读取与所述指定键相关联的所述字符串数据,并用于输出所述字符串数据;字符生成装置,用于当所述指定键未被操作时生成字符数据;转换装置,用于将由所述第一处理装置输出的所述字符串数据或者由所述字符生成装置生成的所述字符数据转换为图像数据结构的字符图像数据;传输装置,用于通过通信路径连接到对方通信设备以及向对方通信设备连续传输由成像装置生成的图像数据以及由语音输入装置生成的语音数据;和数据合成装置,用于在传输装置通过通信路径的连接期间,通过将由成像装置生成的图像数据与字符图像数据相组合来生成合成数据。在该电子设备中,在通信路径连接期间,传输装置向对方通信设备传输由数据合成装置生成的合成数据。
注意,图像数据概念上包括静止图像数据或运动图像数据。
本发明优选地被应用于含有同时且连续传输语音和图像数据的所谓视频电话功能的数据处理器、数据处理方法或电子设备。在通信路径连接期间,上诉数据处理器、数据处理方法或电子设备将字符图像数据与图像数据相组合以获得合成数据。在通信路径连接期间,传输该合成数据。
具体地说,在通信路径连接期间,涉及上述通话内容的字符数据例如被转换为字符图像数据,字符图像数据与上述图像数据相组合(图像组合),以获得合成数据。相应地,可以传输合成数据。这样,与被包含在合成数据中的字符数据相对应的图像数据可以被显示在显示屏上。所以,通话内容(信息)可以被迅速和准确地传输。
因此,与被包含在合成数据中的字符数据相对应的图像数据是可视的,而不用使用语音。这样,即使在如下的情况下信息也可以被很好的传输:在周围有许多噪音的地方通信,在不能发出高音量语音的地方通信,与听力受损人员通信等。
注意,在本发明中,在通信路径连接期间,涉及上述通话内容的字符数据例如与上述图像数据组合为图像,以获得合成数据(合成图像数据)。这样,不再需要通过与图像数据信道不同的信道传输字符数据。
具体地说,在本发明中,文本字符数据(例如,诸如JIS日本汉字码或ASCII码之类的字符码)例如与上述图像数据组合为图像,以获得合成数据。这样,不需要采用例如同时通过不同信道传输字符和图像数据的多路接入功能,只要电子设备包括视频电话功能,本发明实际上就可应用。
所以,即使诸如通信参与者的(接收)蜂窝电话之类的电子设备不具备多路接入功能,本发明实际上也是可应用的。例如,要被合并到上述图像数据中的字符数据被组合为图像数据。这样,在上述接收蜂窝电话的显示屏上无错乱地显示与被包含在合成数据中的字符数据相对应的图像数据。
根据本发明的数据处理器还可以包括用于同时处理通过用成像装置形成图像所获得的图像数据和由语音输入装置输入的语音数据的数据(视频电话)处理装置。
附图说明
图1是根据本发明第一实施例的蜂窝电话的框图。
图2是示出了根据第一实施例的视频电话的通信模式程序的处理流程的流程图。
图3是示出了图2所示的字符数据输入模式的处理流程的子例程。
图4是示出了图2所示的数据合成模式的处理流程的子例程。
图5是示出了在图1所示的显示屏上显示视频图像数据和文本字符数据的示例的示图。
图6是示出了在接收蜂窝电话的显示屏上显示图5所示的视频图像数据和文本字符数据的示例的示图。
图7是根据本发明第二实施例的蜂窝电话的框图。
图8是示出了在图7所示的第二字符串存储器中存储的字符串表的示图。
图9是示出了根据第二实施例的字符数据输入模式的处理流程的子例程。
图10是示出了在图7所示的显示屏上显示视频图像数据和文本字符数据的示例的示图。
图11是示出了在接收蜂窝电话的显示屏上显示图10所示的视频图像数据和文本字符数据的示例的示图。
具体实施方式
(第一实施例)
参考图1至图6,下面将给出数据处理器、数据处理方法和例如蜂窝电话的电子设备的描述,所有这些都是本发明的第一实施例。注意,根据本实施例的数据处理器或蜂窝电话包括所谓的视频电话的功能,其同时且连续地传输语音和图像数据。
如图1所示,蜂窝电话100包括输入单元101、输出单元102、控制器103、处理单元104、存储单元105和通信单元106。通信单元106通过通信信道被连接到通信参与者的蜂窝电话(对方通信设备),并且包括用于通过无线电发送和接收数据的发送和接收电路106a。
输入单元101包括:用于输入字符键数据的键盘101a;用于形成诸如人或风景之类的物体图像的摄像头101b;和用于输入语音的麦克风101c。
此外,输出单元102包括:诸如LCD之类的显示用于视频电话等的字符数据或图像数据的显示屏102a;和用于输出语音的扬声器102b。
控制器103包括:用于控制键盘101a的输入处理的键输入电路103a;用于控制摄像头101b的摄像头电路103b;用于控制通信单元106的通信电路103c;用于控制显示屏102a上的图像数据显示的显示电路103d;用于控制时间的定时器103e;用于控制语音(信号)输入和输出的语音电路103f;和CPU(中央处理单元)103g。
CPU 103g控制蜂窝电话100的总体操作。例如,当键盘101a的键(在附图中未示出)被按动(被操作)时,CPU 103g基于键操作执行处理。含有CPU 103g的控制器103是用于同时处理图像数据(物体图像)和语音数据的数据(视频电话)处理装置,其中图像数据通过用摄像头101b形成图像而获得,语音数据由麦克风101c输入。摄像头101b和摄像头电路103b组成成像装置的一部分。
处理单元104包括图像电路104a、作为数据合成装置的字符合成(图像组合)电路104b和语音转换电路104c。语音转换电路104c是包括模数转换器和数模转换器的电路,将来自语音电路103f的语音(信号)转换为数字信号或模拟信号。
图像电路104a是将通过用摄像头101b形成图像所获得的图像数据(来自摄像头电路103b的静止图像数据或运动图像数据)转换为将要在显示屏102a上显示的(视频电话的)图像数据的电路。字符合成电路104b包括转换电路,该转换电路控制图像电路104a,以将从键输入电路103a提供的文本字符数据(例如,诸如JIS日本汉字码或ASCII码之类的字符码)转换为字符图像数据,并将字符图像数据与图像数据组合。
存储单元105包括字符串存储器105a、图像转换存储器105b、字符合成存储器105c、转换字典存储器105d和程序存储器105e。程序存储器105e存储用于执行例如数据传输的处理的程序。
字符串存储器105a包括用于存储要被转换字典存储器105d转换的文本字符数据的存储区。图像转换存储器105b存储当通过用摄像头101b形成图像而获得的图像数据被转换为将要在显示屏102a上显示的视频电话图像数据时所使用的转换数据。
字符合成存储器105c存储当文本字符数据与视频电话图像数据组合(图像组合)时所使用的合成数据。转换字典存储器105d存储“字符转换表”,该字符转换表建立从键盘101a输入的字符键数据与对应于字符键数据的文本字符数据之间的关联。键盘101a、键输入电路103a和转换字典存储器105d组成字符生成装置的一部分。
参考图2至图4,将给出涉及蜂窝电话100的视频电话模式的处理的描述,该处理用于由视频电话执行发送和接收。图2所示的视频电话通信模式是包括视频电话发送和接收模式、字符数据输入模式和数据合成模式的模式。
图2是示出了由蜂窝电话100的控制器103执行的处理例程的流程图。关于该处理例程的程序被预先存储在程序存储器105e的程序区中。
此外,图2所示的流程图是在蜂窝电话100的电源开关(未示出)被用户打开,其后通过操作键盘101a的键输入电话号码数据时被执行的处理。具体地说,在另一(接收)蜂窝电话的电话号码数据首先被输入到控制器103的键输入电路103a的前提下,用户通过使用蜂窝电话100,在视频电话通信期间生成字符数据(建立字符数据输入模式)。
如图2所示,在步骤S200中,控制器103的通信电路103c执行通过通信单元106的发送和接收电路106a,将视频电话连接到具有所输入的电话号码数据的蜂窝电话的处理(例如,通过用于视频电话的3G(第三代移动电话)-324M(在3G中使用的视听通信标准)标准的协议进行的处理等)。
在步骤S202中,通信电路103c执行通过发送和接收电路106a的视频电话通信处理。该处理基于这样的前提:用户使用摄像头101b(见图1)形成物体图像,并使用麦克风101c(见图1)输入语音。具体地说,如图1所示,在图像电路104a中,生成通过摄像头101b和摄像头电路103b获得的物体的图像数据。在语音转换电路104c中,通过未图示的模数转换器生成数字信号。
此后,在步骤S202中,通信电路103c执行如上所述的通过发送和接收电路106a传输所生成的图像和语音数据(视频电话的通信)的处理。步骤S200和S202是关于普通视频电话通信的视频电话通信模式中的处理。
在步骤S204中,CPU 103g判断在视频电话通信(图像和语音数据的传输)期间是否选择了字符数据输入模式。具体地说,在步骤S204中,键输入电路103a判断键盘101a的预置模式选择键(未示出)是否被按动。
如果在步骤S204中是“否”,也就是说,如果模式选择键没有被按动,则键输入电路103a在步骤S206中判断被安排在键盘101a(见图1)中的结束键(未示出的挂机键)是否被按动。如果在步骤S206中是“否”,也就是说,如果结束键没有被按动,则处理返回到步骤S202,通信电路103c继续视频电话的通信处理。
如果在步骤S206中是“是”,也就是说,如果结束键被按动,则在步骤S208中通信电路103c执行切断视频电话通信的处理,视频电话的通信被终止。具体地说,如果结束键被按动,则CPU 103g终止该流程的通信模式。
如果在步骤S204中是“是”,也就是说,如果模式选择键被按动,则CPU 103g、键输入电路103a和显示电路103d在步骤S210中通过转换字典存储器105d、字符串存储器105a和字符合成存储器105c执行字符数据输入模式的处理。在步骤210中执行字符数据输入模式的处理后,CPU103g和摄像头电路103b在步骤S212中通过字符合成存储器105c和字符合成电路104b执行数据合成模式的处理。具体地说,在步骤S210和S212中,CPU 103g、键输入电路103a、摄像头电路103b和显示电路103d通过转换字典存储器105d、字符串存储器105a、字符合成电路104b和字符合成存储器105c连续地执行字符数据输入模式和数据合成模式的处理。
随后,参考图3,将给出图2所示的字符数据输入模式(步骤S210)的处理的描述。如图3所示,在步骤S300中,键输入电路103a判断在视频电话通信(图像和语音数据的传输)期间是否通过按动键盘101a的字符键(在附图中未示出)输入了字符键数据。在步骤S300中,键输入电路103a等待字符键数据被输入。
如果在步骤S300中是“是”,也就是说,如果在从视频电话的传输期间输入了字符键数据,则键输入电路103a在步骤S301中使用存储在图1所示的转换字典存储器105d中的“字符转换表”,通过转换字典存储器105d、字符串存储器105a和字符合成存储器105c将被输入的字符键数据转换为文本字符数据。
具体地说,在步骤S301中,键输入电路103a对照存储在转换字典存储器105d(见图1)中的“字符转换表”检查被输入的字符键数据,并从“字符转换表”读取相应的文本字符数据。
在步骤S302中,CPU 103g在字符串存储器105a中存储在步骤S301中从“字符转换表”读取的文本字符数据。在步骤S304中,CPU 103g和显示电路103d通过字符串存储器105a在显示屏102a的屏幕上将在步骤S302中存储的文本字符数据显示预定的一段时间(由图1所示的定时器计时)。具体地说,在步骤S304中,CPU 103g和显示电路103d从字符串存储器105a读取上述的文本字符数据,并将数据输出到显示屏102a上。
这里,字符串存储器105a有预置的存储区(存储容量),可以存储字符数据直至该存储容量被耗尽。具体地说,CPU 103g在字符串存储器105a中存储文本字符数据直至字符串存储器105a的存储容量被耗尽。
在步骤S306中,键输入电路103a判断被安排在图1所示的键盘101a中的发送键(在附图中未示出)是否被按动。如果在步骤S306中是“否”,也就是说,如果发送键没有被按动,则处理返回步骤S300,键输入电路103a等待字符键数据被输入。
如果在步骤S306中是“是”,也就是说,如果发送键被按动,则在步骤S308中,CPU 103g将存储在图1所示的字符串存储器105a中的文本字符数据存储在图1所示的字符合成存储器105c中。注意,在步骤S308的处理后,字符数据输入模式的处理终止。
接着,参考图4,将给出图2所示的数据合成模式(步骤S212)的处理的描述。如图4所示,在步骤S400中,CPU 103g从摄像头电路103b向图1所示的图像电路104a输出通过用图1所示的摄像头101b形成图像所获得的图像数据(静止图像数据或运动图像数据)。这样,图像电路104a将图像数据转换为视频电话的图像数据(视频图像数据),以在显示屏102a上显示。
在步骤S402中,图1所示的CPU 103g从图1所示的字符合成存储器105c读取已经经历了图3所示处理(见步骤S308)的文本字符数据。在步骤S404中,通过使用从字符合成存储器105c读取的文本字符数据,图1所示的字符合成电路104b控制图1所示的图像电路104a中的文本字符数据的图像转换(转换为YUV(Y信号、蓝色色差信号(Cb)和红色色差信号(Cr))静止图像数据等)。此外,字符合成电路104b将通过图像转换获得的静止图像数据(字符图像数据)合并到上述视频图像数据,组合这两种数据。
具体地说,在步骤S404中,图1所示的CPU 103g将静止图像数据和视频图像数据输出到图1所示的字符合成电路104b,其中静止图像数据通过使上述文本字符数据经历图像转换获得。此外,字符合成电路104b将通过使上述文本字符数据经历图像转换所获得的静止图像数据与视频图像数据组合以生成合成数据(合成图像数据)。
例如,在图1所示的显示屏102a上,在第一显示区域301中显示了视频图像数据,如图5所示。在第一显示区域301下面的第二显示区域302中,显示了文本字符数据(例如,“I’m thinking of coming over”)。如果输入的文本字符数据超出了第二显示区域302,则在滚动显示区域的同时显示数据。在第二显示区域302下面的第三显示区域303中,显示了显示数据“发送”,其在图1所示的键盘101a的发送键被按动时显示。
在图4所示的数据合成模式终止后,处理返回到图2所示的步骤S202,随后执行视频电话的通信处理。具体地说,上述的合成数据和通过图1所示的麦克风101c获得的语音数据等通过图1所示的发送和接收电路106a被传送(发送)到另一个(接收)蜂窝电话。
在接收蜂窝电话的显示屏幕上显示被传送到接收蜂窝电话的合成数据,如图6所示。具体地说,在第一显示区域401中,显示如图6所示的视频图像数据(与在图5的第一显示区域301中示出的内容相对应的视频图像数据)。在第一显示区域401下面的第二显示区域402中,显示对应于在图5的第二显示区域302中示出的文本字符数据(例如,“I’mthinking of coming over”)。注意,关于在通过视频电话的通话中的语音输出,接收蜂窝电话可以是这样的模式:该模式包括只在例如图1所示的键盘101a的输入键(未示出)被按动时才输出语音的功能。
在该实施例中,在蜂窝电话通过发送和接收电路106a与通信参与者的通信路径连接期间,字符合成电路104b将字符图像数据与图像数据组合以获得合成数据(合成图像数据),其中字符图像数据对应于存储在字符合成存储器105c中的字符数据,图像数据是从摄像头电路103b输入的。这样,可以通过发送和接收电路106a传输与被包含在合成数据中的字符数据相对应的字符图像数据。
具体地说,在该实施例中,涉及通话内容的字符数据例如与上述图像数据组合为图像,以获得合成数据。从而,可以传输该合成数据。这样,与被包含在合成数据中的字符数据相对应的图像数据可以被显示在显示屏上。所以,可以迅速且准确地传输通话内容(信息)。
所以,在该实施例中,与被包含在合成数据中的字符数据相对应的图像数据是可见的,即使在如下的情况下这样的信息也可以被很好的传输:在周围有许多噪音的地方通信,在不能发出高音量语音的地方通信,与听力受损人员通信等。在这种情况下,不需要使用语音。
注意,在该实施例中,在通信路径连接期间,涉及上述通话内容的字符数据例如与上述图像数据(字符图像数据)组合为图像以获得合成数据(合成图像数据)。这样,不再需要通过与图像数据信道不同的信道传输字符数据。具体地说,在该实施例中,文本字符数据例如与上述图像数据组合为图像,以获得合成数据。这样,例如,不需要采用通过不同信道同时传输字符和图像数据的多路接入功能,只要蜂窝电话包括视频电话功能,该实施例实际上就可应用于该蜂窝电话。
所以,在该实施例中,即使通信参与者的(接收)蜂窝电话是不具备多路接入功能的电子设备,该实施例实际上也是可应用的。例如,要被合并到图像数据中的字符数据被组合为图像数据。这样,在上述接收蜂窝电话的显示屏上无错乱地显示了与别包含在合成数据中的字符数据相对应的图像数据。
(第二实施例)
图7至图11示出了根据本发明的第二实施例。图7是该实施例的蜂窝电话100的框图。图8是被设置在图7所示的存储单元105中的第二字符串存储器中的字符串表。注意,关于该实施例蜂窝电话的结构,在图7中,与图1的部件相对应的部件用相同的参考标号表示,这里省略对它们的描述。
该实施例是一个示例,其中除了用于互相分别地处理被分别输入的字符键数据(与第一实施例相同的处理)的“直接字符输入模式”外,该示例通过按动特别指定的键,集体地读取预先存储在第二字符串存储器的表中的多段文本字符(字符串)数据。
如图7所示,第二实施例的存储单元105包括第一和第二字符串存储器105a和105f。第一字符串存储器105a包括用于存储通过使用转换字典存储器105d对使用键盘101a输入的字符键数据转换所获得的文本字符数据的存储区。第二字符串存储器105f预先存储了多段文本字符(字符串)数据,例如“Hello”。
在该实施例中,预先存储在第二字符串存储器105f中的字符串数据被设置为通过按动图7所示的键盘101a中的特定键(未示出)而被读取。
具体地说,如图8所示,存储在第二字符串存储器105f中的字符串表600将每段字符串数据指定给(特定的)指定的键,并将这些被指定的数据与关于显示效果的命令数据(显示处理数据)相关联。
字符串数据603是包括例如“Hello”、“I’m coming home now”、“Please come and pick me up”等的数据。此外,关于显示效果604的处理是在文本字符数据与视频图像数据组合时加入的诸如停止、滚动和闪烁之类的各种显示效果的处理。
注意,图8所示的字符串表600将指定键与存储器号(地址)601相关联。具体地说,当特定的指定键被按动时,检索字符串表600中相应的存储器号(例如,#1等),找到字符串数据。除了上面的内容,第二实施例的蜂窝电话100的结构与图1所示的第一实施例的配置相同。因而,这里省略对它们的详细描述。
接着,参考图9,将给出关于第二实施的例蜂窝电话100的处理的描述。图9是示出了由图7所示蜂窝电话100的控制器103所执行的处理例程的流程图。关于该处理例程的程序被预先存储在程序存储器105e的程序区中。
注意,在该实施例中,因为除了字符数据输入模式之外的处理都与第一实施例的相同,所以这里省略对它们的描述。具体地说,图9所示的流程图是第二实施例中的字符数据输入模式的处理。
如图9所示,在步骤S500中,键输入电路103a判断在视频电话通信(图像和语音数据的传输)期间,图7所示的键盘101a中特定的指定键(未示出)是否被按动。
如果在步骤S500中是“是”,也就是说,如果在从视频电话的传输中特定键被按动,则在步骤S502中,CPU 103g和键输入电路103a参考图8所示的字符串表600,从图7所示的第二字符串存储器105f读取对应于特定键的字符串数据。在步骤S504中,CPU 103g和显示电路103d在图7所示的显示屏102a的第二显示区域702中(见图10),将从第二字符串存储器105f读取的字符串数据显示预定的一段时间。
如果在步骤S500中是“否”,也就是说,如果在从视频电话传输中没有特定键被按动,则在步骤S506中,键输入电路103a使用存储在图7所示的转换字典存储器105d中的“字符转换表”,将被输入的字符键数据转换为文本字符数据。
在步骤S508中,CPU 103g将在步骤S506中从“字符转换表”读取的文本字符数据存储在图7所示的第一字符串存储器105a中。在步骤S510,CPU 103g和显示电路103d在图7所示的显示屏102a上将在步骤S508中存储的文本字符数据显示预定的一段时间。
在步骤S512中,键输入电路103a判断被安排在图7所示的键盘101a中的发送键是否被按动。如果在步骤S512中是“否”,也就是说,如果发送键没有被按动,则处理返回步骤S500,键输入电路103a等待未示出的特定键被按动。
如果在步骤S512中是“是”,也就是说,如果发送键被按动,则在步骤S514中,CPU 103g将存储在图7所示的第一字符串存储器105a或图7所示的第二字符串存储器105f中的文本字符数据存储在图7所示的字符合成存储器105c中。注意,在步骤S514的处理后,字符数据输入模式的处理终止。
注意,在数据合成模式(见图4)中,CPU 103g从字符合成存储器105c(见图7)读取文本字符数据,字符合成电路104b控制在图7所示的图像电路104a中的文本字符数据的图像转换(转换为YUV(Y信号、蓝色色差信号(Cb)和红色色差信号(Cr))静止图像数据等)。此外,字符合成电路104b将通过图像转换获得的静止图像数据(字符图像数据)合并到上述的视频图像数据中,组合这两种数据。
这样,视频图像数据通过图7所示的字符合成电路104b在图像电路104a中被转换。例如,在图7所示的显示屏102a上,在第一显示区域701中显示视频图像数据,如图10所示。此外,例如,如果图8所示的“2”键被按动,则被指定给“2”键的字符串数据(“I’m coming homenow”)被显示在第一显示区域701下面的第二显示区域702中。注意,如图10所示,在第二显示区域702下面的第三显示区域703中,显示了显示数据“发送”,其在图7所示的键盘101a的发送键(未示出)被按动时被显示。
在上述数据合成模式终止后,上述合成数据和通过使用图7所示的麦克风101c得到的语音数据等,通过图7所示的发送和接收电路106a被传送(发送)到另一个蜂窝电话。
被传送到其他(接收)蜂窝电话的合成数据被显示在接收蜂窝电话的显示屏上,如图11所示。具体地说,在第一显示区域801,显示如图11所示的视频图像数据(与图10的第一显示区域701中示出的内容相对应的视频图像数据)。在第一显示区域801下面的第二显示区域802中,显示与图10的第二显示区域702中示出的内容相对应的字符串数据(例如,“I’m coming home now”),同时横向滚动显示区域。
在该实施例中,对应于特定键的字符串数据被存储在第二字符串存储器105f中。这样,通过按动上述特定键,该字符串数据被集体地输出。
具体地说,在该实施例中,仅通过按动上述特定键,预先存储在第二字符串存储器105f中的字符串数据被集体地输出。这样,输入文本字符(字符串)数据的操作变得迅速和容易。因为其他操作的效果与第一实施例中的操作相同,所以这里省略了对它们的详细描述。
注意,在前面的各个实施例中描述的各个程序(见图2至图4和图9)的处理流程是示例性的,并且可以相应地被改变,而不脱离本发明的范围。
例如,图2所示的步骤S204可以被如下步骤替代:判断与字符输入相关联的键是否被按动(图3中的步骤S300或图9中的步骤S500)。具体地说,在上述更改后的示例情况中,因为选择字符数据输入模式的操作可以被省略,所以可用性被进一步提升。例如,本发明中的组合模式可以是这样的模式:将前面各个实施例和更改后的示例中的两个或多个示例相组合。
此外,虽然根据本发明实施例的发送和接收电路106a是通过无线电发送和接收数据的例子,但是本发明的传输装置可以通过有线通信形成与通信参与者的通信路径。本发明不关心无线通信的模式,本发明包括这样的传输装置:其形成通信路径,从而通过包括例如基站和Internet网络的移动通信网络发送和接收数据。
另外,如图1或图7所示,根据本发明实施例的数据处理器包括:作为成像装置的摄像头101b等、作为语音输入装置的麦克风101c等、作为字符生成装置的键盘101a等、作为传输装置的通信单元106、作为数据合成装置的字符合成电路104b、作为存储装置的字符串存储器105a或105f、作为第一或第二处理装置的控制器103、拥有第一和第二显示区域301和302(见图5)或者第一和第二显示区域701和702(见图10)的显示屏102a(见图1)。
在本发明的实施例中,采用包括蜂窝电话100中上述数据处理器的配置。在本发明中,例如可以这样配置:在诸如个人计算机和PDA(个人数字助理)之类的电子设备中包括数据处理器,该数据处理器至少包括摄像头101b、键盘101a、通信单元106和字符合成电路104b。具体地说,根据本发明的电子设备概念上包括例如蜂窝电话、个人计算机、PDA等。

Claims (14)

1.一种数据处理器,包括:
成像装置,用于形成物体图像以及生成所述图像的图像数据;
存储装置,用于预先存储包括多段字符数据的字符串数据,以及用于预先存储一张表,所述表将所述字符串数据与指定键相关联,以通过建立关联指定所述字符串数据,并且所述表还将所述字符串数据与在显示屏上显示所述字符串数据时的显示处理数据相关联;
第一处理装置,用于当所述指定键被操作时,通过参考所述表,从所述存储装置集体地读取与所述指定键相关联的所述字符串数据,并用于输出所述字符串数据;
字符生成装置,用于当所述指定键未被操作时生成字符数据;
转换装置,用于将由所述第一处理装置输出的所述字符串数据或者由所述字符生成装置生成的所述字符数据转换为图像数据结构的字符图像数据;
传输装置,用于通过通信路径连接到对方通信设备,以及用于向所述对方通信设备传输数据;和
数据合成装置,用于在所述传输装置通过所述通信路径的连接期间,通过将由所述成像装置生成的所述图像数据与所述字符图像数据相组合,生成合成数据。
2.根据权利要求1所述的数据处理器,
其中,在所述通信路径的连接期间,所述传输装置将由所述数据合成装置生成的所述合成数据传输到所述对方通信设备。
3.根据权利要求1所述的数据处理器,还包括:
用于显示所述图像和字符数据的显示屏,所述图像和字符数据被所述数据合成装置组合,
其中,所述显示屏被分为用于显示所述图像数据的第一显示区域和用于显示所述字符数据的第二显示区域。
4.根据权利要求3所述的数据处理器,还包括:
第二处理装置,用于当所述字符数据被显示在所述第二显示区域中时,加入关于显示效果的显示处理。
5.根据权利要求4所述的数据处理器,
其中,当生成的所述字符数据超出所述第二显示区域时,所述第二处理装置在所述第二显示区域内滚动所述字符串数据。
6.一种数据处理方法,包括:
通过用成像装置形成物体的图像来生成图像数据;
预先存储包括多段字符数据的字符串数据,以及预先存储一张表,所述表将所述字符串数据与指定键相关联,以通过建立关联指定所述字符串数据,并且所述表还将所述字符串数据与在显示屏上显示所述字符串数据时的显示处理数据相关联;
当所述指定键被操作时,通过参考所述表来集体地读取与所述指定键相关联的所述字符串数据并输出所述字符串数据,而当所述指定键未被操作时,由字符生成装置生成字符数据;
由转换装置将所述字符串数据或所述字符数据转换为图像数据结构的字符图像数据;以及
在传输装置通过通信路径的连接期间,生成合成数据,所述合成数据是通过将所述图像数据与所述字符图像数据相组合获得的。
7.根据权利要求6所述的数据处理方法,
其中,在所述通信路径的连接期间,所述传输装置将所述合成数据传输到对方通信设备。
8.根据权利要求6所述的数据处理方法,
其中,用于显示通过将所述图像数据与所述字符数据相组合所获得的所述合成数据的显示屏被分为用于显示所述图像数据的第一显示区域和用于显示所述字符数据的第二显示区域,并显示所述合成数据。
9.根据权利要求8所述的数据处理方法,还包括:
当所述字符数据被显示在所述第二显示区域中时,加入对所述字符数据的关于显示效果的显示处理。
10.根据权利要求9所述的数据处理方法,还包括:
当生成的所述字符数据超出所述第二显示区域时,在所述第二显示区域内滚动所述字符串数据。
11.一种电子设备,包括:
成像装置,用于形成物体图像以及生成所述图像的图像数据;
语音输入装置,用于输入语音以及生成所述输入语音的语音数据;
存储装置,用于预先存储包括多段字符数据的字符串数据,以及用于预先存储一张表,所述表将所述字符串数据与指定键相关联,以通过建立关联指定所述字符串数据,并且所述表还将所述字符串数据与在显示屏上显示所述字符串数据时的显示处理数据相关联;
第一处理装置,用于当所述指定键被操作时,通过参考所述表,从所述存储装置集体地读取与所述指定键相关联的所述字符串数据,并用于输出所述字符串数据;
字符生成装置,用于当所述指定键未被操作时生成字符数据;
转换装置,用于将由所述第一处理装置输出的所述字符串数据或者由所述字符生成装置生成的所述字符数据转换为图像数据结构的字符图像数据;
传输装置,用于通过通信路径连接到对方通信设备,以及用于向所述对方通信设备连续传输由所述成像装置生成的所述图像数据以及由所述语音输入装置生成的所述语音数据;和
数据合成装置,用于在所述传输装置通过所述通信路径的连接期间,通过将由所述成像装置生成的所述图像数据与所述字符图像数据相组合,生成合成数据,
其中,在所述通信路径连接期间,所述传输装置向所述对方通信设备传输由所述数据合成装置生成的所述合成数据。
12.根据权利要求11所述的电子设备,还包括:
用于显示所述图像和字符数据的显示屏,所述图像和字符数据被所述数据合成装置组合,
其中,所述显示屏被分为
用于显示所述图像数据的第一显示区域,和
用于显示所述字符数据的第二显示区域。
13.根据权利要求12所述的电子设备,还包括:
第二处理装置,用于当所述字符数据被显示在所述第二显示区域中时,加入对所述字符数据的关于显示效果的显示处理。
14.根据权利要求13所述的电子设备,
其中,当生成的所述字符数据超出所述第二显示区域时,所述第二处理装置在所述第二显示区域内滚动所述字符串数据。
CNB2004100889587A 2003-11-14 2004-11-09 数据处理器、数据处理方法和电子设备 Expired - Fee Related CN100546324C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP384559/2003 2003-11-14
JP2003384559A JP2005151073A (ja) 2003-11-14 2003-11-14 Tv電話機能付き携帯端末装置

Publications (2)

Publication Number Publication Date
CN1617561A CN1617561A (zh) 2005-05-18
CN100546324C true CN100546324C (zh) 2009-09-30

Family

ID=34510424

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2004100889587A Expired - Fee Related CN100546324C (zh) 2003-11-14 2004-11-09 数据处理器、数据处理方法和电子设备

Country Status (5)

Country Link
US (1) US7532229B2 (zh)
EP (1) EP1542468B1 (zh)
JP (1) JP2005151073A (zh)
CN (1) CN100546324C (zh)
DE (1) DE602004016273D1 (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100686019B1 (ko) 2005-08-26 2007-02-26 엘지전자 주식회사 이동통신단말기 및 이를 이용한 이미지 전송방법
KR100827802B1 (ko) * 2006-10-24 2008-05-07 삼성전자주식회사 휴대 단말기의 화상 통화 장치 및 화상 통화 송수신방법
KR101079591B1 (ko) * 2006-11-21 2011-11-07 삼성전자주식회사 화상통화기능을 가진 디스플레이장치, 그 제어방법 및화상통화시스템
US8878773B1 (en) 2010-05-24 2014-11-04 Amazon Technologies, Inc. Determining relative motion as input
KR102051093B1 (ko) 2013-02-01 2019-12-02 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
US9094576B1 (en) * 2013-03-12 2015-07-28 Amazon Technologies, Inc. Rendered audiovisual communication
US9269012B2 (en) 2013-08-22 2016-02-23 Amazon Technologies, Inc. Multi-tracker object tracking
US11496662B2 (en) * 2017-06-13 2022-11-08 Sony Corporation Image processing apparatus, image processing method, and image pickup system for displaying information associated with an image

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2519579B2 (ja) 1990-06-08 1996-07-31 シャープ株式会社 Fm多重放送受信機におけるディインタ―リ―ブ回路
US5633999A (en) * 1990-11-07 1997-05-27 Nonstop Networks Limited Workstation-implemented data storage re-routing for server fault-tolerance on computer networks
US5341466A (en) * 1991-05-09 1994-08-23 New York University Fractal computer user centerface with zooming capability
JPH05260193A (ja) * 1992-02-28 1993-10-08 Nec Corp テレビ電話交換システム
US5815196A (en) * 1995-12-29 1998-09-29 Lucent Technologies Inc. Videophone with continuous speech-to-subtitles translation
KR100251959B1 (ko) * 1997-12-26 2000-04-15 윤종용 웹 비디오 폰에서 문자 송,수신 방법
US6574618B2 (en) * 1998-07-22 2003-06-03 Appstream, Inc. Method and system for executing network streamed application
US6490343B2 (en) * 1999-09-16 2002-12-03 International Business Machines Corp. System and method of non-spoken telephone communication
US7036083B1 (en) * 1999-12-14 2006-04-25 Microsoft Corporation Multimode interactive television chat
JP2001309073A (ja) 2000-04-21 2001-11-02 Yoshihiro Sadakata 電子機器
US20020116205A1 (en) * 2000-05-19 2002-08-22 Ankireddipally Lakshmi Narasimha Distributed transaction processing system
JP3659161B2 (ja) * 2000-10-30 2005-06-15 日本電気株式会社 動画像符号化装置及びそれを用いたテレビ電話端末
US7512673B2 (en) * 2001-01-11 2009-03-31 Attune Systems, Inc. Rule based aggregation of files and transactions in a switched file system
JP2002374366A (ja) 2001-06-14 2002-12-26 Sharp Corp 通信装置および通信システム
CN1218574C (zh) 2001-10-15 2005-09-07 华为技术有限公司 交互式视频设备及其字幕叠加方法
US7305375B2 (en) * 2003-04-23 2007-12-04 Hewlett-Packard Development Company, L.P. Method and system for distributed remote resources

Also Published As

Publication number Publication date
EP1542468A1 (en) 2005-06-15
CN1617561A (zh) 2005-05-18
US7532229B2 (en) 2009-05-12
JP2005151073A (ja) 2005-06-09
DE602004016273D1 (de) 2008-10-16
EP1542468B1 (en) 2008-09-03
US20050108162A1 (en) 2005-05-19

Similar Documents

Publication Publication Date Title
US9661265B2 (en) Method of conveying emotion in video telephone mode and wireless terminal implementing the same
CN1503457B (zh) 使用移动电话远程控制字符化身图像的系统和方法
CN100362853C (zh) 图像组合便携式终端及其所用的图像组合方法
US7289768B2 (en) Portable terminal capable of guiding user to invoke a function and method thereof
US7245943B2 (en) Apparatus and method for inputting characters in a mobile communication terminal
EP1467564A1 (en) Videophone with screen display setting method
CN100546324C (zh) 数据处理器、数据处理方法和电子设备
US8805451B2 (en) Portable terminal with QWERTY keypad and method for processing phone numbers in the portable terminal
JP3033734B2 (ja) 信号変換装置
WO2003001773A1 (fr) Appareil telephonique a fonctionnalite de visiophone
JPH08242307A (ja) 電話帳データベースへの登録方法及びテレビ電話装置
CN100592750C (zh) 折叠式通信终端装置
JP2007158945A (ja) 通信端末装置及び通信システム
KR100735415B1 (ko) 휴대단말기의 다자간 화상통화수행방법
JP2002044285A (ja) 移動体通信端末装置および携帯表示端末装置
KR100341566B1 (ko) 상품 주문 시스템
KR100584352B1 (ko) 동영상 전화장치의 영상 송,수신 제어방법
KR100713388B1 (ko) 휴대단말기의 화상통화모드에서 의사표시 장치 및 방법
KR100570079B1 (ko) 아바타를 이용한 화상통화 방법 및 시스템
KR100442950B1 (ko) 터치 스크린 방식의 블루투스 단말기에서 입력 펜을이용한 데이터 통신방법
KR20040110875A (ko) 영상 전화 통신의 사용자 감정 표현 방법
US20030072314A1 (en) Communication apparatus
KR100598064B1 (ko) 무선통신 단말기에서 단축키를 이용한 단문메시지 서비스방법
KR200325756Y1 (ko) 축소 키패드를 구비한 휴대 단말기
KR100666046B1 (ko) 이동통신 단말기에서 이미지에 대한 답신 메시지를처리하기 위한 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20090930

Termination date: 20131109