CN117061884A - 摄像设备、控制方法和存储介质 - Google Patents
摄像设备、控制方法和存储介质 Download PDFInfo
- Publication number
- CN117061884A CN117061884A CN202310528213.0A CN202310528213A CN117061884A CN 117061884 A CN117061884 A CN 117061884A CN 202310528213 A CN202310528213 A CN 202310528213A CN 117061884 A CN117061884 A CN 117061884A
- Authority
- CN
- China
- Prior art keywords
- image
- time measurement
- external device
- unit
- image pickup
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 81
- 238000005259 measurement Methods 0.000 claims abstract description 71
- 230000008569 process Effects 0.000 claims abstract description 62
- 238000012545 processing Methods 0.000 claims abstract description 51
- 230000004044 response Effects 0.000 claims abstract description 39
- 230000005540 biological transmission Effects 0.000 claims abstract description 31
- 230000010365 information processing Effects 0.000 description 123
- 230000006854 communication Effects 0.000 description 30
- 238000004891 communication Methods 0.000 description 30
- 238000010586 diagram Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 12
- 230000005236 sound signal Effects 0.000 description 3
- 230000007175 bidirectional communication Effects 0.000 description 2
- 101150012579 ADSL gene Proteins 0.000 description 1
- 102100020775 Adenylosuccinate lyase Human genes 0.000 description 1
- 108700040193 Adenylosuccinate lyases Proteins 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 239000004984 smart glass Substances 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
- H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
- H04N7/142—Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明提供摄像设备、控制方法和存储介质。摄像设备包括:连接单元,用于连接到外部设备;摄像单元,用于拍摄图像;以及控制单元,用于响应于从经由所述连接单元所连接的所述外部设备接收到图像发送请求,来执行用以将所述摄像单元所拍摄的图像发送到所述外部设备的处理。所述控制单元响应于所述外部设备完成图像接收而开始第一时间测量,并且响应于所述控制单元向所述外部设备发送图像而开始第二时间测量,以及在自从所述第一时间测量开始起经过了第一时间量的情况下,或者在自从所述第二时间测量开始起经过了第二时间量的情况下,取消执行所述处理的状态。
Description
技术领域
本发明涉及摄像设备、控制方法和存储介质,尤其涉及外部设备和摄像设备以通信的方式连接的系统。
背景技术
使得用户能够使用运动图像和音频进行在线面对面的通信(视频通话、视频会议和WEB会议等)的在线通信应用已变得更加普遍。在与在线通信应用相关的日本特开2012-199851和日本特开2017-138972中,描述了用于判断视频通话结束的方法。日本特开2012-199851中所描述的方法在自从有人最后一次通话起经过了一定量的无通话时间的情况下判断为通话结束。日本特开2017-138972中所描述的方法根据他们是否正在通话来切换与通话对方的图标有关的显示。
用于拍摄用户图像的摄像设备连接至运行在线通信应用的用户装置。然而,摄像设备可能难以判断结束视频通话的适当定时。此外,在日本特开2012-199851和日本特开2017-138972中,尚未考虑适合运行在线通信应用的用户装置的特性的处理。
发明内容
考虑到上述问题而做出了本发明,并且本发明实现了能够在适当的定时判断在线通信的结束的技术。
为了解决上述问题,本发明提供了一种摄像设备,包括:连接单元,用于连接到外部设备;摄像单元,用于拍摄图像;以及控制单元,用于响应于从经由所述连接单元所连接的所述外部设备接收到图像发送请求,来执行用以将所述摄像单元所拍摄的图像发送到所述外部设备的处理,其中,所述控制单元:响应于所述外部设备完成图像接收而开始第一时间测量,并且响应于所述控制单元向所述外部设备发送图像而开始第二时间测量,以及在自从所述第一时间测量开始起经过了第一时间量的情况下,或者在自从所述第二时间测量开始起经过了第二时间量的情况下,取消执行所述处理的状态。
为了解决上述问题,本发明提供了一种摄像设备的控制方法,所述摄像设备具有用于连接到外部设备的连接单元和用于拍摄图像的摄像单元,所述控制方法包括:响应于从经由所述连接单元所连接的所述外部设备接收到图像发送请求,来执行用以将所述摄像单元所拍摄的图像发送到所述外部设备的处理,其中,所述处理包括:响应于所述外部设备完成图像发送的接收而开始第一时间测量,并且响应于所述摄像设备向所述外部设备发送图像而开始第二时间测量,以及在自从所述第一时间测量开始起经过了第一时间量的情况下,或者在自从所述第二时间测量开始起经过了第二时间量的情况下,取消执行所述处理的状态。
为了解决上述问题,本发明提供了一种存储有程序的计算机可读存储介质,所述程序用于使计算机用作上述摄像设备。
根据本发明,可以在适当的定时判断在线通信的结束。
本发明的其他特征将从以下示例性实施例的描述中变得明显(参考附图)。
附图说明
图1A是示出根据本实施例的摄像设备的配置的框图。
图1B至图1C是根据本实施例的摄像设备的外观。
图2是示出根据本实施例的信息处理设备的配置的框图。
图3A是示出根据本实施例的当视频通话应用处于待机时的摄像设备和信息处理设备的状态的图。
图3B是示出根据本实施例的当视频通话应用正在开始视频通话时的摄像设备和信息处理设备的状态的图。
图3C是示出根据本实施例的视频通话应用的视频通话期间的摄像设备和信息处理设备的状态的图。
图3D是示出根据本实施例的当视频通话应用正在结束视频通话时的摄像设备和信息处理设备的状态的图。
图4是示出根据本实施例的视频通话期间的第一视频通话结束判断处理的序列图。
图5是示出根据本实施例的视频通话期间的第二视频通话结束判断处理的序列图。
图6是示出根据本实施例的视频通话期间的第三视频通话结束判断处理的序列图。
具体实施方式
在下文中,将参照附图来详细描述实施例。注意,以下实施例不旨在限制所要求保护的发明的范围。在实施例中描述了多个特征,但是不限制为需要所有这样的特征的发明,并且可以适当地组合多个这样的特征。此外,在附图中,相同的附图标记被给予相同或类似的配置,并且省略其冗余描述。
下文将参照附图详细描述如下实施例,其中,在该实施例中,本发明的摄像设备应用于诸如数字照相机等的可以拍摄图像(诸如静止图像和运动图像等)的图像生成设备,并且本发明的信息处理设备应用于诸如个人计算机(PC)等的信息处理设备。
首先,将参照图1A至图1C和图2描述根据本实施例的系统和设备的配置。
系统配置
根据本实施例的系统包括摄像设备100和信息处理设备200。摄像设备100和信息处理设备200以通信的方式连接。摄像设备100作为客户端装置而操作,并且信息处理设备200作为主机装置而操作。在本实施例中,响应于从作为主机装置进行操作的信息处理设备200接收到对图像数据的发送请求,摄像设备100将摄像单元102所拍摄的图像数据经由连接单元109发送到信息处理设备200。信息处理设备200可以设置有或者可以不设置有响应于从作为客户端装置进行操作的摄像设备100接收到图像数据而向摄像设备100发送图像数据接收完成通知的特性。
此外,摄像设备100重复以下操作:响应于信息处理设备200接收到图像数据,开始利用计时器的第一时间测量;响应于从信息处理设备200接收到图像数据接收完成通知,开始利用计时器的第二时间测量;以及响应于从信息处理设备200接收到图像数据发送请求,重置第一时间测量和第二时间测量。在该情况下,摄像设备100显示第一信息(用于表示正在直播的图标),其中,该第一信息用于表示用于执行将图像数据发送到信息处理设备200的处理的模式状态正在继续。
此外,在未从信息处理设备200接收到图像数据发送请求的情况下,当自从第一时间测量开始起经过了第一时间量时或自从第二时间测量开始起经过了第二时间量时,摄像设备100判断为视频通话结束,并取消用于执行用于发送图像数据的处理的模式状态。在该情况下,显示用于表示如下的模式状态被取消的第二信息(用于表示待机的图标),其中,该模式状态用于执行将图像数据发送到信息处理设备200的处理。
注意,图像数据包括包含音频数据的格式和不包含音频数据的格式。
摄像设备100的配置
接下来,将参考图1A描述根据本实施例的摄像设备100的配置和功能。
注意,在本文所描述的本实施例中,摄像设备是数字照相机等。然而,不旨在进行这样的限制,并且摄像设备可以是包括智能装置(其是一种移动电话和具有照相机功能的平板装置等)、媒体播放器、监视照相机或医用照相机等的信息通信终端。
控制单元101是用于控制摄像设备100的运算处理设备(CPU),并通过执行稍后描述的非易失性存储器103中所存储的程序来实现稍后描述的通信处理和控制处理。注意,代替控制单元101控制整个设备,多个硬件可以分担处理以控制整个设备。此外,控制单元101包括用于对根据本实施例的稍后描述的通信处理和控制处理所用的时间量进行测量的第一计时器101a和第二计时器101b。
摄像单元102包括透镜组和快门,其中,透镜组包括变焦透镜和调焦透镜,快门具有光圈功能。此外,摄像单元102包括图像传感器和A/D转换器,其中,图像传感器由用于将被摄体图像转换成电信号的CCD或CMOS元件等构成,A/D转换器用于将从图像传感器输出的模拟图像信号转换成数字信号。摄像单元102经由控制单元101的控制将摄像单元102中所包括的透镜所形成的被摄体图像光经由图像传感器转换成电信号,进行降噪处理等,并输出基于数字信号的图像数据。
控制单元101对摄像单元102所拍摄的图像数据执行像素插值、用于缩小大小的调整大小处理、以及颜色转换处理。此外,控制单元101使用JPEG格式等对图像处理后的静止图像数据进行压缩和编码,或者经由诸如MP4格式等的运动图像压缩方法对运动图像数据进行编码,并且生成图像文件,该图像文件然后被存储在存储介质108中。在根据本实施例的摄像设备100中,根据照相机文件系统的设计规则(DCF)标准而将图像数据存储在存储介质108中。此外,控制单元101使用所拍摄的图像数据进行预定的运算处理,并且通过控制单元101基于所获得的计算结果来控制摄像单元102的调焦透镜、光圈和快门来执行自动调焦(AF)处理和自动曝光(AE)处理。
非易失性存储器103例如是诸如EEPROM等的可电擦除和可记录的存储器。用于控制单元101的操作的常数和程序等被存储在非易失性存储器103中。这里,程序指的是用于执行本实施例中稍后描述的各种通信处理和控制处理的程序。
用于控制单元101操作的常数和变量以及从非易失性存储器103中读出的程序被展开在用作工作区的工作存储器104上。此外,工作存储器104用作用于临时存储摄像单元102所拍摄的图像数据的缓冲存储器,并且用作显示单元106的图像显示存储器等。
操作单元105包括用于接受来自用户的各种操作的各种开关、按钮、触摸面板和其他操作构件。如图1B和图1C所示,例如,操作单元105包括用于拍摄图像的快门按钮105a、用于回放拍摄图像的再现按钮105b、以及包括用于对照相机的各种类型设置进行设置的上下左右按钮的四向键105c等。操作单元105还包括与稍后描述的显示单元106一体形成的触摸面板105d。操作单元105还包括诸如专用连接按钮等的用于经由稍后描述的连接单元109开始与外部设备的通信的操作构件。
显示单元106显示在拍摄图像时的取景器图像,显示拍摄图像,以及显示用于交互式操作的字母数字等。显示单元106例如是液晶显示器、有机EL显示器或类似的显示装置。显示单元106可以与摄像设备100一体形成,或者可以是连接到摄像设备100的外部装置。仅需要摄像设备100可以连接到显示单元106并且具有用于控制显示单元106的显示的功能。
音频输入单元107是内置于摄像设备100中或经由音频端子连接的一个或多于一个麦克风。音频输入单元107将通过从摄像设备100的周围收集音频而生成的模拟音频信号转换成数字信号,并将该数字信号输出到控制单元101。控制单元101对由音频输入单元107生成的数字信号执行各种类型的音频处理,并生成音频数据。
存储介质108存储从摄像单元102输出的图像数据和从音频输入单元107输出的音频数据。此外,控制单元101在再现模式下读出存储介质108中所存储的图像文件和音频文件。存储介质108可以是安装在摄像设备100中的存储卡或硬盘驱动器,或者可以是内置在摄像设备100中的闪速存储器或硬盘驱动器。摄像设备100仅需要包括访问存储介质108的方式。
连接单元109是用于以通信的方式连接至诸如信息处理设备200等的外部设备的接口。根据本实施例的摄像设备100可以经由连接单元109与外部设备发送和接收数据。例如,摄像单元102所生成的图像数据和音频输入单元107所生成的音频数据可以经由连接单元109发送到外部设备。注意,在本实施例中,连接单元109是诸如通用串行总线(USB)或HDMI(注册商标)等的有线通信接口。控制单元101通过对连接单元109进行控制来与外部设备进行通信。注意,通信方法不限于有线通信方法,并且可以设置诸如符合IEEE 802.11标准的无线LAN、红外通信接口和无线USB等的无线通信接口。
信息处理设备200的配置
接下来,将参考图2描述根据本实施例的信息处理设备200的配置和功能。
注意,在本文所述的本实施例中,描述了诸如PC等的信息处理设备。然而,不旨在进行这样的限制,并且信息处理设备可以是包括智能装置(其是一种移动电话和具有通信功能的平板装置等)、腕表型智能手表、以及诸如眼镜型智能眼镜等的可佩戴式计算机等的信息通信终端。
根据本实施例的信息处理设备200包括控制单元201、摄像单元202、非易失性存储器203、工作存储器204、操作单元205、显示单元206、音频输入单元207和记录介质208。这些要素的基本功能与摄像设备100中的相同,因此将省略其详细描述。
作为由控制单元201执行的基础软件的操作系统(OS)以及与OS协作以实现实际功能的应用被存储在非易失性存储器203中。此外,用于与摄像设备100进行通信的应用被存储在非易失性存储器203中。此外,允许用户在处于在线面对面的情况下进行视频通话的在线通信应用(以下称为视频通话应用)被存储在非易失性存储器203中。
通过读取视频通话应用所提供的软件,来实现根据本实施例的信息处理设备200的处理。注意,视频通话应用包括用于使用信息处理设备200中所安装的OS的基本功能的软件。此外,信息处理设备200的OS可以包括用于实现根据本实施例的处理的软件。
连接单元209包括用于与诸如摄像设备100等的外部设备进行有线或无线通信的通信接口。控制单元201通过对连接单元209进行控制来实现与外部设备的通信。注意,连接单元209可以直接连接到摄像设备100,或者可以经由接入点等连接到摄像设备100。对于用于数据通信的协议,例如,可以使用诸如USB视频类(UVC)或USB音频类(UAC)等的一种USB标准。注意,与摄像设备100的通信不限于USB。例如,可以使用红外通信接口或蓝牙(注册商标)或无线USB无线通信接口。此外,可以使用诸如HDMI(注册商标)或IEEE 1394等的有线连接方法。
音频输出单元211是用于将音频输入单元207所生成的模拟音频信号转换为声音并向外输出声音的扬声器。
公共网络连接单元212是经由诸如4G/LTE或5G等的广域网(WAN)进行无线通信时使用的接口。信息处理设备200可以经由公共网络连接单元212与其他设备进行通话并通信数据。当通话时,控制单元201经由音频输入单元207和音频输出单元211进行音频信号的输入和输出。在本实施例中,公共网络连接单元212不限于4G/LTE和5G,并且可以使用诸如本地5G、WiMAX、ADSL或FTTH等的其他通信方法。
摄像设备和信息处理设备的视频通话操作
接下来,将参照图3A至图3D描述根据本实施例的当进行视频通话时的摄像设备100和信息处理设备200的操作。
根据本实施例的摄像设备100和信息处理设备200经由USB或类似的连接线缆306进行连接,通过运行在信息处理设备200上的视频通话应用来执行与摄像设备100的通信处理和控制处理。此外,信息处理设备200可以经由视频通话应用执行与其他用户装置的图像数据和音频数据的双向通信,并且两个用户在线面对面地进行视频通话。
摄像设备100固定在三脚架等上,信息处理设备200的用户308预先调整可拍摄的位置和视野。
图3A示出根据本实施例的当视频通话应用处于待机时的摄像设备和信息处理设备的状态的示例。
由摄像设备100拍摄的用户308的图像显示在摄像设备100的显示单元106上。
视频通话应用在信息处理设备200的显示单元206上显示GUI 301,其中,GUI 301包括用于显示通话对方309的用户图像的画面305、用于将摄像设备100所拍摄的图像发送至通话对方309的用户装置的图像按钮302、用于发送用户308的音频的音频按钮303、以及用于开始和结束视频通话的通话按钮304。
图3B示出根据本实施例的当视频通话应用正在开始视频通话时的摄像设备和信息处理设备的状态的示例。
用户308的信息处理设备200和通话对方309的用户装置经由视频通话应用来连接,并进行与通话对方309的用户装置的图像数据和音频数据的双向通信,从而实现视频通话。
当用户308从通话对方309的用户装置接收到视频通话开始请求时,用户308可以操作通话按钮304以对视频通话开始请求进行响应。
当用户308响应来自通话对方309的视频通话开始请求时,通话对方309的图像被显示在GUI 301的画面305上。
图3B中的状态为用户308的图像仅显示在摄像设备100的显示单元106上的状态,这是因为摄像设备100未将用户308的图像数据和/或音频数据发送至信息处理设备200。
图3C示出根据本实施例的视频通话应用的视频通话期间的摄像设备和信息处理设备的状态的示例。
该状态是如下的状态:用户308响应于来自通话对方309的视频通话开始请求,利用摄像设备100开始向信息处理设备200发送用户308的图像数据和音频数据而正在直播。
信息处理设备200将从摄像设备100连续接收到的用户308的图像数据和音频数据经由视频通话应用而发送至通话对方309的用户装置,并从通话对方309的用户装置接收通话对方309的图像数据和音频数据。在图3C的示例中,信息处理设备200的显示单元206在GUI 301的画面305的中心以大的大小显示通话对方309的图像,并且在画面305的右下方以较小的大小显示用户308的图像310。
当用户308操作图像按钮302时,摄像设备100的摄像单元102拍摄的图像数据存储在工作存储器104中,使用控制单元101将该图像数据转换为适合于视频通话应用进行的显示的图像数据,并将该图像数据从连接单元109经由连接线缆306发送至信息处理设备200。
用于表示将图像数据和音频数据发送至信息处理设备200的处理正在进行中的第一信息311显示在摄像设备100的显示单元106上。例如,第一信息311是用于表示正在直播的图标。
此外,当用户308操作音频按钮303时,将摄像设备100的音频输入单元107收集的音频数据从连接单元109经由连接线缆306发送至信息处理设备200。当用户308再次操作音频按钮303时,停止将由摄像设备100的音频输入单元107收集的音频数据发送到信息处理设备200。以该方式,通过用户308操作音频按钮303,用户可以激活音频被发送到信息处理设备200的状态或者静音状态。
信息处理设备200将经由连接单元209和连接线缆306从摄像设备100接收到的用户308的图像数据保持在工作存储器204中,并且控制单元201执行处理以将图像数据经由视频通话应用发送至通话对方309的用户装置,并执行处理以将该图像数据显示在GUI 301的画面305上。
图3D示出根据本实施例的当视频通话应用正在结束视频通话时的摄像设备和信息处理设备的状态的示例。
当用户308在与通话对方309进行视频通话的情况下操作通话按钮304时,视频通话结束。
当在视频通话的情况下操作通话按钮304时,信息处理设备200的视频通话应用将用于显示通话对方309的用户的图像的GUI 301的画面305改变为非显示状态。
用于表示将图像数据和音频数据发送至信息处理设备200的处理未在进行中的第二信息312被显示在摄像设备100的显示单元106上。例如,第二信息312是用于表示待机的图标。
此处,信息处理设备200的OS的特性或负载状况可能使得视频通话结束判断需要一些时间,这意味着第二信息(待机图标)312不能在适当的定时显示在摄像设备100的显示单元106上。因此,在本实施例中,使用稍后使用图4、图5和图6描述的处理,不管信息处理设备200的OS的特性和负载状况如何,都可以迅速且准确地执行视频通话结束判断,并且可以在适当的定时显示第二信息312。
第一视频通话结束判断处理
图4是示出视频通话期间的第一视频通话结束判断处理的序列图。
在第一视频通话结束判断处理中,在摄像设备100将图像数据发送至信息处理设备200之后,摄像设备100响应于从信息处理设备200接收到图像数据接收完成通知,开始第一计时器101a的第一时间测量。当在未接收到图像数据接收完成通知的情况下经过了第一时间量时,摄像设备100判断为视频通话结束。然后,摄像设备100执行控制以在显示单元106上显示第二信息(待机图标)312。
在下文中,假设状态为正在信息处理设备200上运行视频通话应用并且如图3B所示通话对方309的用户的图像被显示在GUI 301的画面305上的状态。
在步骤S401中,在图3A的状态下,响应于用户308操作GUI 301的画面305上的通话按钮304,状态被设置为图3B所示的视频通话启用状态。
在步骤S402中,响应于在图3B的状态下用户308操作GUI 301的画面305上的图像按钮302,信息处理设备200的控制单元201经由连接单元209向摄像设备100发送第一帧的图像数据的发送请求。
在步骤S403中,当摄像设备100从信息处理设备200接收到图像数据发送请求时,控制单元101从非易失性存储器103中读出第一信息(正在直播图标)311,利用工作存储器104来渲染显示数据,并将显示数据显示在显示单元106上。
在步骤S404中,摄像设备100将摄像单元102所拍摄的用户308的图像数据存储在工作存储器104中,并且控制单元101将该图像数据转换成适合于视频通话应用进行的显示的图像数据,并将图像数据从连接单元109发送至信息处理设备200。
在步骤S405中,当信息处理设备200从摄像设备100接收到图像数据时,控制单元201向摄像设备100经由连接单元209发送图像数据接收完成通知。
在步骤S406中,当摄像设备100从信息处理设备200接收到图像数据接收完成通知时,控制单元101开始第一计时器101a的第一时间测量,并将第一时间测量时间t1保持在工作存储器104中。当自从第一时间测量开始起经过了第一时间量(例如,大约等于100ms的短时间量)时,或者当在经过第一时间量之前从信息处理设备200接收到对第二帧的图像数据的发送请求时,第一计时器101a重置第一时间测量。
在步骤S407中,信息处理设备200的控制单元201在显示单元206上所显示的GUI301的画面305上显示如图3C所示的从摄像设备100接收到的用户308的图像310。注意,在步骤S404中,摄像设备100可以在不将图像数据转换成适合于经由视频通话应用进行的显示的图像数据的情况下,将图像数据发送到信息处理设备200,并且在信息处理设备200处,从摄像设备100接收到的图像数据可以被转换成适合于经由视频通话应用进行的显示的图像数据并被显示在显示单元206上。
在步骤S408中,信息处理设备200对第二帧的图像数据执行与步骤S402的处理类似的处理。
在步骤S409中,摄像设备100的控制单元101重置第一计时器101a在步骤S406中已经开始的第一时间测量。
在步骤S410中,摄像设备100对第二帧的图像数据执行与步骤S404的处理类似的处理。
在步骤S411中,信息处理设备200对第二帧的图像数据执行与步骤S405的处理类似的处理。
在步骤S412中,摄像设备100对第二帧的图像数据执行与步骤S406的处理类似的处理。
在步骤S413中,信息处理设备200对第二帧的图像数据执行与步骤S407的处理类似的处理。
以该方式,对于直至第三帧以后的第N(N是3或大于3的自然数)帧的图像数据,重复与步骤S402至S407的处理类似的处理。因此,每当信息处理设备200从摄像设备100接收到用户308的图像310时,显示单元206上所显示的GUI 301的画面305的图像可以被更新。
步骤S414至S420的处理表示当用户308操作GUI 301的通话按钮304时摄像设备100判断视频通话的结束的处理。在稍后描述的示例中,紧接在摄像设备100从信息处理设备200接收到图像数据发送请求并且通话按钮304被操作之后,执行视频通话结束判断。
在步骤S414中,信息处理设备200对第N帧的图像数据执行与步骤S402的处理类似的处理。
在步骤S415中,摄像设备100的控制单元101重置响应于接收到第N-1帧的图像数据接收完成通知而开始的第一计时器101a的第一时间测量。
在步骤S416中,当用户308操作GUI 301的通话按钮304时,信息处理设备200执行视频通话结束处理。
在步骤S417中,摄像设备100的控制单元101响应于在步骤S414中接收到的图像数据发送请求,经由连接单元209向信息处理设备200发送第N帧的图像数据。
在步骤S418中,信息处理设备200对第N帧的图像数据执行与步骤S405的处理类似的处理。
在步骤S419中,与步骤S406一样,对于第N帧的图像数据,摄像设备100的控制单元101开始第一计时器101a的第一时间测量。这里,由于在步骤S416中视频通话已经结束,所以信息处理设备200不发送对第N+1帧的图像数据的发送请求。因此,在摄像设备100中,自从第一计时器101a开始第一时间测量起经过了第一时间量,并且第一时间测量被重置。
在步骤S420中,响应于自从在步骤S419中第一计时器101a开始第一时间测量起经过了第一时间量,摄像设备100的控制单元101判断为视频通话结束。然后,如图3D所示,摄像设备100在显示单元106上显示第二信息(待机图标)312。
在上述第一视频通话结束判断处理中,当信息处理设备200设置有发送图像数据接收完成通知的特性时,摄像设备100可以在视频通话结束之后的短时间内判断视频通话的结束。然而,当信息处理设备200未设置有发送图像数据接收完成通知的特性时,摄像设备100不能判断视频通话的结束。接下来,将描述即使当信息处理设备200未设置有发送图像数据接收完成通知的特性时也使得摄像设备100能够判断视频通话的结束的配置。
第二视频通话结束判断处理
图5是示出视频通话期间的第二视频通话结束判断处理的序列图。
在第二视频通话结束判断处理中,摄像设备100从信息处理设备200接收图像数据发送请求,并且在未接收到下一个图像数据发送请求的情况下,当自从第二计时器101b响应于将图像数据发送到信息处理设备200而开始第二时间测量起经过了第二时间量时,判断为视频通话结束。然后,摄像设备100执行控制以在显示单元106上显示第二信息(待机图标)312。
在下文中,假设状态为正在信息处理设备200上运行视频通话应用并且如图3B所示通话对方309的用户的图像被显示在GUI 301的画面305上的状态。
在步骤S501中,状态与图4中的步骤S401中的状态类似。
在步骤S502中,信息处理设备200执行与图4中的步骤S402的处理类似的处理。
在步骤S503中,摄像设备100执行与图4中的步骤S403的处理类似的处理。
在步骤S504中,摄像设备100执行与图4中的步骤S404的处理类似的处理。
在步骤S505中,紧接在摄像设备100在步骤S504中将图像数据发送至信息处理设备200之后,控制单元101通过与第一计时器101a不同的第二计时器101b开始第二时间测量,并将第二时间测量时间t2保持在工作存储器104中。当自从第二时间测量开始起经过了第二时间量(例如,大约等于1至2秒的时间量)时,或者当在经过第二时间量之前从信息处理设备200接收到对第二帧的图像数据的发送请求时,第二计时器101b重置第二时间测量。
在步骤S506中,与图4中的步骤S405一样,信息处理设备200的控制单元201向摄像设备100发送第一帧的图像数据接收完成通知。在该情况下,该处理与图4中的第一视频通话结束判断处理不同,并且在信息处理设备200向摄像设备100发送图像数据接收完成通知的时间点,第二计时器101b的第二时间测量仍在继续。
在步骤S507中,信息处理设备200执行与图4中的步骤S407的处理类似的处理。
在步骤S508中,信息处理设备200对第二帧的图像数据执行与步骤S502的处理类似的处理。
在步骤S509中,摄像设备100的控制单元101重置在步骤S505中开始的第二计时器101b的第二时间测量。
在步骤S510中,摄像设备100对第二帧的图像数据执行与步骤S504的处理类似的处理。
在步骤S511中,摄像设备100对第二帧的图像数据执行与步骤S505的处理类似的处理。
在步骤S512中,信息处理设备200对第二帧的图像数据执行与步骤S506的处理类似的处理。
在步骤S513中,信息处理设备200对第二帧的图像数据执行与步骤S507的处理类似的处理。
以该方式,对于直至第三帧以后的第N(N是3或大于3的自然数)帧的图像数据,重复与步骤S502至S507的处理类似的处理。因此,每当信息处理设备200从摄像设备100接收到用户308的图像310时,显示单元206上所显示的GUI 301的画面305的图像可以被更新。
步骤S514至S519的处理表示当用户308操作GUI 301的通话按钮304时摄像设备100判断视频通话的结束的处理。在稍后描述的示例中,紧接在摄像设备100从信息处理设备200接收到图像数据发送请求并且通话按钮304被操作之后,执行视频通话结束判断。
在步骤S514中,信息处理设备200对第N帧的图像数据执行与步骤S502的处理类似的处理。
在步骤S515中,摄像设备100的控制单元101重置响应于发送第N-1帧的图像数据而开始的第二计时器101b的第二时间测量。
在步骤S516中,当用户308操作GUI 301的通话按钮304时,信息处理设备200执行视频通话结束处理。
在步骤S517中,摄像设备100的控制单元101响应于在步骤S514中接收到的图像数据发送请求,经由连接单元109向信息处理设备200发送第N帧的图像数据。
在步骤S518中,与步骤S505一样,对于第N帧的图像数据,摄像设备100的控制单元101开始第二计时器101b的第二时间测量。这里,由于在步骤S516中视频通话已经结束,所以信息处理设备200不发送对第N+1帧的图像数据的发送请求。因此,在摄像设备100中,自从第二计时器101b开始第二时间测量起经过了第二时间量,并且第二时间测量被重置。
在步骤S519中,响应于自从在步骤S518中第二计时器101b开始第二时间测量起经过了第二时间量,摄像设备100的控制单元101判断为视频通话结束。然后,如图3D所示,摄像设备100在显示单元106上显示第二信息(待机图标)312。
在上述第二视频通话结束判断处理中,预期信息处理设备200未设置有发送图像数据接收完成通知的特性。在该情况下,由于摄像设备100不能判断视频通话结束,所以使用自从图像数据发送起经过了针对第二时间测量时间t2的第二时间量的条件来判断视频通话的结束。以该方式,即使当信息处理设备200未设置有发送图像数据接收完成通知的特性时,摄像设备100也可以在视频通话结束的几秒内判断视频通话的结束。然而,当信息处理设备200设置有发送图像数据接收完成通知的特性时,摄像设备100判断视频通话结束所花费的时间量太长。
关于此,稍后描述的配置通过将使用第一计时器101a的第一视频通话结束判断处理和使用第二计时器101b的第二视频通话结束判断处理进行组合并使得摄像设备100能够判断视频通话的结束,来解决第一视频通话结束判断处理的问题(信息处理设备200未设置有发送图像数据接收完成通知的特性)和第二视频通话结束判断处理的问题(信息处理设备200设置有发送图像数据接收完成通知的特性)这两者。
第三视频通话结束判断处理
图6是示出视频通话期间的第三视频通话结束判断处理的序列图。
在第三视频通话结束判断处理中,在摄像设备100将图像数据发送至信息处理设备200之后,摄像设备100响应于从信息处理设备200接收到图像数据接收完成通知,开始第一计时器101a的第一时间测量。当在未接收到图像数据接收完成通知的情况下经过了第一时间量时,摄像设备100判断为视频通话结束。然后,摄像设备100执行控制以在显示单元106上显示第二信息(待机图标)312。
此外,摄像设备100从信息处理设备200接收图像数据发送请求,并且响应于摄像设备100将图像数据发送至信息处理设备200,开始第二计时器101b的第二时间测量。当在尚未接收到对下一个图像数据的发送请求的状态下经过了第二时间量时,摄像设备100判断为视频通话结束。然后,摄像设备100执行控制以在显示单元106上显示第二信息(待机图标)312。
在下文中,假设状态为正在信息处理设备200上运行视频通话应用并且如图3B所示通话对方309的用户的图像被显示在GUI 301的画面305上的状态。
在步骤S601中,该状态与图4中的步骤S401中的状态类似。
在步骤S602中,信息处理设备200执行与图4中的步骤S402的处理类似的处理。
在步骤S603中,摄像设备100执行与图4中的步骤S403的处理类似的处理。
在步骤S604中,摄像设备100执行与图4中的步骤S404的处理类似的处理。
在步骤S605中,摄像设备100执行与图5中的步骤S505的处理类似的处理。
在步骤S606中,与图4中的步骤S405一样,信息处理设备200的控制单元201将第一帧的图像数据接收完成通知发送至摄像设备100。在该情况下,该处理与图4中的第一视频通话结束判断处理不同,并且在信息处理设备200向摄像设备100发送图像数据接收完成通知的时间点,第二计时器101b的第二时间测量仍在继续。
在步骤S607中,摄像设备100执行与图4中的步骤S406的处理类似的处理。
在步骤S608中,信息处理设备200执行与图4中的步骤S407的处理类似的处理。
在步骤S609中,信息处理设备200对第二帧的图像数据执行与步骤S602的处理类似的处理。
在步骤S610中,摄像设备100的控制单元101重置在步骤S605中开始的第二计时器101b的第二时间测量。此外,摄像设备100的控制单元101重置在步骤S607中开始的第一计时器101a的第一时间测量。
在步骤S611中,摄像设备100对第二帧的图像数据执行与步骤S604的处理类似的处理。
在步骤S612中,摄像设备100对第二帧的图像数据执行与步骤S605的处理类似的处理。
在步骤S613中,信息处理设备200对第二帧的图像数据执行与步骤S606的处理类似的处理。
在步骤S614中,摄像设备100对第二帧的图像数据执行与步骤S607的处理类似的处理。
在步骤S615中,信息处理设备200对第二帧的图像数据执行与步骤S608的处理类似的处理。
以该方式,对于直至第三帧以后的第N(N是3或大于3的自然数)帧的图像数据,重复与步骤S602至S608的处理类似的处理。因此,每当信息处理设备200从摄像设备100接收到用户308的图像310时,显示单元206上所显示的GUI 301的画面305的图像可以被更新。
步骤S616至S624的处理表示当用户308操作GUI 301的通话按钮304时摄像设备100判断视频通话的结束的处理。在稍后描述的示例中,紧接在摄像设备100从信息处理设备200接收到图像数据发送请求并且通话按钮304被操作之后,执行视频通话结束判断。
在步骤S616中,信息处理设备200对第N帧的图像数据执行与步骤S602的处理类似的处理。
在步骤S617中,摄像设备100的控制单元101重置响应于发送第N-1帧的图像数据而开始的第二计时器101b的第二时间测量。此外,摄像设备100的控制单元101重置响应于接收到第N-1帧的图像数据接收完成通知而开始的第一计时器101a的第一时间测量。
在步骤S619中,摄像设备100对第N帧的图像数据执行与步骤S604的处理类似的处理。
在步骤S620中,摄像设备100对第N帧的图像数据执行与步骤S605的处理类似的处理。
在此,当信息处理设备200设置有发送图像数据接收完成通知的特性时,在步骤S621中,与步骤S606一样,信息处理设备200向摄像设备100发送针对第N帧的图像数据的图像数据接收完成通知。
在步骤S622中,摄像设备100对第N帧的图像数据执行与步骤S607的处理类似的处理。
在步骤S623中,响应于自从在步骤S622中第一计时器101a开始第一时间测量起经过了第一时间量,摄像设备100的控制单元101判断为视频通话结束。然后,如图3D所示,摄像设备100在显示单元106上显示第二信息(待机图标)312。
此外,当信息处理设备200未设置有发送图像数据接收完成通知的特性时,在步骤S624中,响应于自从在步骤S620中第二计时器101b开始第二时间测量起经过了第二时间量,摄像设备100的控制单元101判断为视频通话结束。然后,如图3D所示,摄像设备100在显示单元106上显示第二信息(待机图标)312。
在上述第三视频通话结束判断处理中,当信息处理设备200设置有发送图像数据接收完成通知的特性时,摄像设备100可以在视频通话结束之后的短时间内判断视频通话的结束。此外,当信息处理设备200未设置有发送图像数据接收完成通知的特性时,摄像设备100可以在视频通话结束的几秒内判断视频通话的结束。
其他实施例
本发明的实施例还可以通过如下的方法来实现,即,通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置,该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
虽然已经参照示例性实施例描述了本发明,但是应当理解,本发明不限于所公开的示例性实施例。所附权利要求的范围符合最广泛的解释,以便涵盖所有这样的修改和等同的结构和功能。
Claims (14)
1.一种摄像设备,包括:
连接单元,用于连接到外部设备;
摄像单元,用于拍摄图像;以及
控制单元,用于响应于从经由所述连接单元所连接的所述外部设备接收到图像发送请求,来执行用以将所述摄像单元所拍摄的图像发送到所述外部设备的处理,
其中,所述控制单元:
响应于所述外部设备完成图像接收而开始第一时间测量,并且响应于所述控制单元向所述外部设备发送图像而开始第二时间测量,以及
在自从所述第一时间测量开始起经过了第一时间量的情况下,或者在自从所述第二时间测量开始起经过了第二时间量的情况下,取消执行所述处理的状态。
2.根据权利要求1所述的摄像设备,其中,
所述控制单元响应于在自从所述第一时间测量开始起经过所述第一时间量之前或者自从所述第二时间测量开始起经过所述第二时间量之前、从所述外部设备接收到图像发送请求,来重置所述第一时间测量和所述第二时间测量。
3.根据权利要求1所述的摄像设备,其中,
所述第一时间量比所述第二时间量短。
4.根据权利要求1至3中任一项所述的摄像设备,其中,
所述控制单元包括用于执行所述第一时间测量的第一时间测量单元和用于执行所述第二时间测量的第二时间测量单元。
5.根据权利要求1至3中任一项所述的摄像设备,其中,
所述控制单元响应于从所述外部设备接收到图像发送请求而重置所述第一时间测量和所述第二时间测量,并且在显示单元上显示用于表示执行所述处理的状态正在继续的第一信息。
6.根据权利要求5所述的摄像设备,其中,
所述第一信息是用于表示正在直播的图标。
7.根据权利要求1至3中任一项所述的摄像设备,其中,
所述控制单元在自从所述第一时间测量开始起经过了所述第一时间量的情况下,或者在自从所述第二时间测量开始起经过了所述第二时间量的情况下,显示用于表示执行所述处理的状态被取消的第二信息。
8.根据权利要求7所述的摄像设备,其中,
所述第二信息是用于表示待机的图标。
9.根据权利要求1至3中任一项所述的摄像设备,其中,
所述图像是所述摄像单元所拍摄的、操作所述外部设备的用户的图像。
10.根据权利要求1至3中任一项所述的摄像设备,其中,
所述控制单元将所述摄像单元所拍摄的图像转换成适合于所述外部设备进行的显示的图像,并且将适合于显示的图像发送到所述外部设备。
11.根据权利要求1至3、6和8中任一项所述的摄像设备,其中,
所述外部设备包括显示单元,所述显示单元用于显示在所述外部设备上运行的应用所提供的GUI,所述应用能够执行用于示出从与所述外部设备连接的其他用户装置接收到的其他用户的图像的视频通话,
所述GUI包括用于开始或结束与其他用户的视频通话的操作单元,以及
在经由所述操作单元进行操作以结束与其他用户的视频通话的情况下,所述外部设备停止向所述摄像设备发送对图像的请求。
12.根据权利要求11所述的摄像设备,其中,
所述GUI还包括用于显示其他用户的图像的画面、用于将操作所述外部设备的用户的图像发送到其他用户装置的操作单元、以及用于将操作所述外部设备的用户的音频发送到其他用户装置的操作单元。
13.一种摄像设备的控制方法,所述摄像设备具有用于连接到外部设备的连接单元和用于拍摄图像的摄像单元,所述控制方法包括:
响应于从经由所述连接单元所连接的所述外部设备接收到图像发送请求,来执行用以将所述摄像单元所拍摄的图像发送到所述外部设备的处理,
其中,所述处理包括:
响应于所述外部设备完成图像发送的接收而开始第一时间测量,并且响应于所述摄像设备向所述外部设备发送图像而开始第二时间测量,以及
在自从所述第一时间测量开始起经过了第一时间量的情况下,或者在自从所述第二时间测量开始起经过了第二时间量的情况下,取消执行所述处理的状态。
14.一种存储有程序的计算机可读存储介质,所述程序用于使计算机用作根据权利要求1至12中任一项所述的摄像设备。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022078953A JP2023167632A (ja) | 2022-05-12 | 2022-05-12 | 撮像装置、制御方法およびプログラム |
JP2022-078953 | 2022-05-12 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117061884A true CN117061884A (zh) | 2023-11-14 |
Family
ID=88666865
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310528213.0A Pending CN117061884A (zh) | 2022-05-12 | 2023-05-11 | 摄像设备、控制方法和存储介质 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20230370566A1 (zh) |
JP (1) | JP2023167632A (zh) |
CN (1) | CN117061884A (zh) |
-
2022
- 2022-05-12 JP JP2022078953A patent/JP2023167632A/ja active Pending
-
2023
- 2023-04-13 US US18/299,777 patent/US20230370566A1/en active Pending
- 2023-05-11 CN CN202310528213.0A patent/CN117061884A/zh active Pending
Also Published As
Publication number | Publication date |
---|---|
US20230370566A1 (en) | 2023-11-16 |
JP2023167632A (ja) | 2023-11-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108718378A (zh) | 影像记录装置和方法 | |
JP6139829B2 (ja) | 情報処理装置およびその制御方法、プログラム | |
US11082600B2 (en) | Electronic apparatus that performs wireless communication with an image capturing device at two different communication speeds, and method for controlling same | |
US20160065887A1 (en) | Communication apparatus communicable with external apparatus, control method of communication apparatus, and storage medium | |
JP6433265B2 (ja) | 情報処理装置、電子機器およびそれらの制御方法、プログラム並びに記憶媒体 | |
CN110278589B (zh) | 通信装置、数据传输装置及其控制方法和存储介质 | |
US10827109B2 (en) | Imaging apparatus | |
US11399132B2 (en) | Electronic apparatus, image capture apparatus, method for controlling the same, and storage medium | |
JP7064373B2 (ja) | 通信装置およびその制御方法、並びにプログラム | |
US11509810B2 (en) | Image capture apparatus, operation apparatus and control methods | |
JP6559018B2 (ja) | 撮像装置及びその制御方法、プログラム | |
CN117061884A (zh) | 摄像设备、控制方法和存储介质 | |
JP4574077B2 (ja) | 通信システム、無線通信装置、及び撮像装置 | |
JP7307560B2 (ja) | 画像表示装置、画像供給装置、制御方法およびプログラム | |
CN108810363B (zh) | 摄像设备及其控制方法和存储介质 | |
JP2019004422A (ja) | 通信装置、制御方法およびプログラム | |
CN108989543B (zh) | 通信设备及其控制方法和存储介质 | |
JP6700821B2 (ja) | 通信装置、撮像装置及びそれらの制御方法、プログラム | |
JP6478615B2 (ja) | 通信装置、その制御方法およびプログラム | |
JP2024072123A (ja) | 撮像装置、制御方法およびプログラム | |
US11503656B2 (en) | Communication apparatus, method for controlling communication apparatus, and storage medium | |
JP2024015828A (ja) | 撮像装置及びその制御方法、プログラム、記憶媒体 | |
JP7346122B2 (ja) | 情報処理装置、情報処理装置の制御方法、及びプログラム | |
US11178343B2 (en) | Combining images from different devices according to a determined wipe shape | |
JP2018037808A (ja) | 撮像装置、電子機器およびその制御方法、通信システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |