CN111354434A - 电子装置及其提供信息的方法 - Google Patents

电子装置及其提供信息的方法 Download PDF

Info

Publication number
CN111354434A
CN111354434A CN201911322172.XA CN201911322172A CN111354434A CN 111354434 A CN111354434 A CN 111354434A CN 201911322172 A CN201911322172 A CN 201911322172A CN 111354434 A CN111354434 A CN 111354434A
Authority
CN
China
Prior art keywords
electronic device
user
image
processor
motion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201911322172.XA
Other languages
English (en)
Other versions
CN111354434B (zh
Inventor
卞竣钰
沈原根
金炅泰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN111354434A publication Critical patent/CN111354434A/zh
Application granted granted Critical
Publication of CN111354434B publication Critical patent/CN111354434B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622—Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/30—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to physical therapies or activities, e.g. physiotherapy, acupressure or exercising
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1116—Determining posture transitions
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1126—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique
    • A61B5/1128—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique using image analysis
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0003—Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
    • A63B24/0006—Computerised comparison for qualitative assessment of motion sequences or the course of a movement
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0062—Monitoring athletic performances, e.g. for determining the work of a user on an exercise apparatus, the completed jogging or cycling distance
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0087—Electric or electronic controls for exercising apparatus of groups A63B21/00 - A63B23/00, e.g. controlling load
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/23—Recognition of whole body movements, e.g. for sport training
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/63—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0062—Monitoring athletic performances, e.g. for determining the work of a user on an exercise apparatus, the completed jogging or cycling distance
    • A63B2024/0068—Comparison to target or threshold, previous performance or not real time comparison to other individuals
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • A63B2071/0675—Input for modifying training controls during workout
    • A63B2071/0683—Input by handheld remote control
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00—Measuring of physical parameters relating to sporting activity
    • A63B2220/10—Positions
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00—Measuring of physical parameters relating to sporting activity
    • A63B2220/80—Special sensors, transducers or devices therefor
    • A63B2220/806—Video cameras
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00—Measuring of physical parameters relating to sporting activity
    • A63B2220/80—Special sensors, transducers or devices therefor
    • A63B2220/807—Photo cameras
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2225/00—Miscellaneous features of sport apparatus, devices or equipment
    • A63B2225/50—Wireless data transmission, e.g. by radio transmitters or telemetry
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2230/00—Measuring physiological parameters of the user
    • A63B2230/62—Measuring physiological parameters of the user posture

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Public Health (AREA)
  • Medical Informatics (AREA)
  • General Physics & Mathematics (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Psychiatry (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Social Psychology (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Signal Processing (AREA)
  • Physiology (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Dentistry (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • User Interface Of Digital Computer (AREA)
  • Navigation (AREA)
  • Telephone Function (AREA)

Abstract

公开了一种电子装置及其提供信息的方法。在实施例中，该电子装置被配置为：通过用户接口或无线通信电路接收用于选择运动的用户输入；选择与所选择的运动相对应的指导图像；分析所选择的指导图像；通过至少一个相机在第一位置获取用户的第一图像；至少部分基于所分析的指导图像和所获取的用户的第一图像来确定电子装置的第二位置；至少部分基于所确定的第二位置来控制至少一个驱动器移动电子装置；在移动电子装置之后，通过至少一个相机获取用户的第二图像；以及通过组合所选择的指导图像和所获取的用户的第二图像来生成组合图像。

Description

电子装置及其提供信息的方法
技术领域
本公开涉及一种电子装置以及由该电子装置提供信息的方法。
背景技术
电子装置(例如，移动终端、智能手机或可穿戴装置)可以提供各种功能。例如，智能电话不仅可以提供基本的语音通话功能，还可以提供短距离无线通信(例如，蓝牙、无线保真(Wi-Fi)或近场通信(NFC))功能、移动通信(第三代(3G)、第四代(4G)或第五代(5G))功能、音乐或视频再现功能、摄影功能或导航功能。
同时，随着对健康的兴趣增加，最近的电子装置提供了健康服务。例如，用户可以通过电子装置观看关于各种运动方法的图像。
以上信息仅作为背景信息呈现，以帮助理解本公开。关于以上内容中的任何内容是否可以用作关于本公开的现有技术，没有确定，也没有断言。
发明内容
如果没有专家的帮助，用户可能在进行运动时遇到困难。例如，当用户以不正确的姿势进行运动时，他/她的身体可能会出问题，并且运动效果可能变差。然而，当用户独自进行运动时，用户可能难以检查他/她的姿势是否正确。因此，用户可以通过相机拍摄他/她的特征以检查其姿势是否正确。
然而，由于电子装置是在固定位置拍摄用户的，因此用户可能难以在用户想要的位置正确地拍摄用户想要的身体部位或他/她的姿势。此外，即使用户观看所拍摄的图像，用户也可能无法识别他/她的姿势是否正确以及哪个部位不正确。
根据本公开的各个实施例的电子装置可以移动到用户指定(或设置)的位置或确定为适合于运动的位置并进行拍摄。
本公开的各个方面至少解决了上述问题和/或缺点并且至少提供下面描述的优点。因此，本公开的一方面提供了指导图像和通过拍摄用户获得的图像二者。
其他方面将在下面的描述中部分地阐述，并且部分地从该描述中将是显而易见的，或者可以通过实践所呈现的实施例而获悉。
根据本公开的一方面，提供了一种电子装置。所述电子装置包括：壳体；用户接口；至少一个相机，所述至少一个相机被布置在所述壳体上；至少一个驱动器，所述至少一个驱动器连接到或被布置在所述壳体上以移动所述壳体；无线通信电路，所述无线通信电路位于所述壳体内；存储器；以及处理器，所述处理器可操作地连接到所述用户接口、所述至少一个相机、所述至少一个驱动器、所述无线通信电路和所述存储器，其中所述存储器存储指令，当所述指令被所述处理器执行时，配置所述处理器：通过所述用户接口或所述无线通信电路接收用于选择运动的用户输入；选择与所选择的运动对应的指导图像；分析所选择的指导图像；通过所述至少一个相机在第一位置获取所述用户的第一图像；至少部分基于所分析的指导图像和所获取的所述用户的第一图像，确定所述电子装置的第二位置；至少部分基于所确定的第二位置，控制所述至少一个驱动器移动所述电子装置；在移动所述电子装置之后，通过所述至少一个相机获取所述用户的第二图像；以及通过组合所选择的指导图像和所获取的所述用户的第二图像来生成组合图像。
根据本公开的另一方面，提供了一种电子装置。所述电子装置包括：壳体；用户接口；至少一个相机，所述至少一个相机被布置在所述壳体上；至少一个驱动器，所述至少一个驱动器连接到或被布置在所述壳体上以移动所述壳体；无线通信电路，所述无线通信电路位于所述壳体内；存储器；以及处理器，所述处理器可操作地连接到所述用户接口、所述至少一个相机、所述至少一个驱动器、所述无线通信电路和所述存储器，其中所述存储器存储指令，当所述指令由所述处理器执行时，配置所述处理器：通过所述至少一个相机在第一位置获取用户的第一图像；通过分析所获取的第一图像，识别运动；选择与所识别的运动对应的指导图像；至少部分基于所选择的指导图像和所获取的第一图像，确定所述电子装置的第二位置；至少部分基于所确定的第二位置，控制所述至少一个驱动器移动所述电子装置；在移动所述电子装置之后，通过所述至少一个相机获取所述用户的第二图像；以及通过组合所选择的指导图像和所获取的所述用户的第二图像来生成组合图像。
根据本公开的另一方面，提供了一种电子装置。所述电子装置包括：壳体；处理器；以及存储器，所述存储器可操作地连接到所述处理器，其中所述存储器存储指令，当所述指令被所述处理器执行时，配置所述处理器：至少部分基于所存储的空间图，确定运动空间的大小；至少部分基于所确定的运动空间的大小，确定用于设置相机的位置或方向的设置画面的类型；以及提供所确定的设置画面的类型。
根据以下结合附图公开了本公开的各种实施例具体实施方式，本公开的其他方面、优点和显着特征对于本领域技术人员将变得显而易见。
附图说明
根据以下结合附图的具体实施方式，本公开的某些实施例的上述和其他方面、特征和优点将变得更加明显，其中：
图1是示出了根据本公开的实施例的网络环境中的电子装置的框图；
图2示出了根据本公开的实施例的系统的配置；
图3是示出了根据本公开的实施例的运动指导应用的框图；
图4是示出了根据本公开的实施例的电子装置提供运动指导信息的方法的流程图；
图5示出了根据本公开的实施例的电子装置提供运动指导信息的示例；
图6示出了根据本公开的实施例的电子装置提供运动指导信息的示例；
图7示出了根据本公开的实施例的电子装置提供运动指导信息的示例；
图8示出了根据本公开的实施例的电子装置提供运动指导信息的示例；
图9是示出了根据本公开的实施例的电子装置提供运动指导信息的方法的流程图；
图10是示出了根据本公开的实施例的电子装置提供运动指导信息的方法的流程图；
图11示出了根据本公开实施例的确定电子装置的目标位置的方法；
图12示出了根据本公开的实施例的为每项运动设置相机的拍摄位置的画面的示例；
图13示出了根据本公开的实施例的为每项运动设置相机的拍摄位置的画面的示例；
图14示出了根据本公开的实施例的为每项运动设置相机的拍摄位置的画面的示例；
图15示出了根据本公开的实施例的为每项运动设置相机的拍摄位置的画面的示例；
图16是示出了根据本公开的实施例的电子装置提供运动指导信息的方法的流程图；以及
图17是示出了根据本公开的实施例的电子装置提供运动指导信息的方法的流程图。
应注意，在所有附图中，相同的附图标记用于描述相同或相似的元件、特征和结构。
具体实施方式
下面参考附图的描述被提供以帮助全面理解由权利要求及其等同物限定的本公开的各种实施例。它包括各种具体细节以帮助理解，但是这些细节仅被视为各种实施例的示例。因此，本领域普通技术人员将认识到，在不脱离本公开的范围和精神的情况下，可以对本文所述的各种实施方式进行各种改变和修改。另外，为了清楚和简洁，可以省略对公知功能和构造的描述。
在下面的描述和权利要求中使用的术语和词语不限于书面含义，而是仅被发明人用来使本公开内容能够清楚和一致地理解。因此，对于本领域技术人员而言显而易见的是，提供本公开的各种实施例的以下描述仅是出于说明的目的，而不是出于限制由所附权利要求及其等同物所限定的本公开的目的。
应当理解，单数形式的“一”、“一个”和“该”包括复数对象，除非上下文另外明确指出。因此，例如，提及“组件表面”包括提及一个或多个此种表面。
图1是示出根据本公开实施例的网络环境100中的电子装置101的框图。参考图1，网络环境100中的电子装置101可经由第一网络198(例如，短距离无线通信网络)与电子装置102进行通信，或者经由第二网络199(例如，长距离无线通信网络)与电子装置104或服务器108进行通信。根据实施例，电子装置101可经由服务器108与电子装置104进行通信。根据实施例，电子装置101可包括处理器120、存储器130、输入装置150、声音输出装置155、显示装置160、行为模块163、音频模块170、传感器模块176、接口177、触觉模块179、相机模块180、电力管理模块188、电池189、通信模块190、用户识别模块(SIM)196或天线模块197。在一些实施例中，可从电子装置101中省略所述部件中的至少一个(例如，显示装置160或相机模块180)，或者可将一个或更多个其它部件添加到电子装置101中。在一些实施例中，可将所述部件中的一些部件实现为单个集成电路。例如，可将传感器模块176(例如，指纹传感器、虹膜传感器、或照度传感器)实现为嵌入在显示装置160(例如，显示器)中。
处理器120可运行例如软件(例如，程序140)来控制电子装置101的与处理器120连接的至少一个其它部件(例如，硬件部件或软件部件)，并可执行各种数据处理或计算。根据一个实施例，作为所述数据处理或计算的至少部分，处理器120可将从另一部件(例如，传感器模块176或通信模块190)接收到的命令或数据加载到易失性存储器132中，对存储在易失性存储器132中的命令或数据进行处理，并将结果数据存储在非易失性存储器134中。根据实施例，处理器120可包括主处理器121(例如，中央处理器(CPU)或应用处理器(AP))以及与主处理器121在操作上独立的或者相结合的辅助处理器123(例如，图形处理单元(GPU)、图像信号处理器(ISP)、传感器中枢处理器或通信处理器(CP))。另外地或者可选择地，辅助处理器123可被适配为比主处理器121耗电更少，或者被适配为具体用于指定的功能。可将辅助处理器123实现为与主处理器121分离，或者实现为主处理器121的部分。
在主处理器121处于未激活(例如，睡眠)状态时，辅助处理器123可控制与电子装置101(而非主处理器121)的部件之中的至少一个部件(例如，显示装置160、传感器模块176或通信模块190)相关的功能或状态中的至少一些，或者在主处理器121处于激活状态(例如，运行应用)时，辅助处理器123可与主处理器121一起来控制与电子装置101的部件之中的至少一个部件(例如，显示装置160、传感器模块176或通信模块190)相关的功能或状态中的至少一些。根据实施例，可将辅助处理器123(例如，图像信号处理器或通信处理器)实现为在功能上与辅助处理器123相关的另一部件(例如，相机模块180或通信模块190)的部分。
存储器130可存储由电子装置101的至少一个部件(例如，处理器120或传感器模块176)使用的各种数据。所述各种数据可包括例如软件(例如，程序140)以及针对与其相关的命令的输入数据或输出数据。存储器130可包括易失性存储器132或非易失性存储器134。
可将程序140作为软件存储在存储器130中，并且程序140可包括例如操作系统(OS)142、中间件144或应用146。
输入装置150可从电子装置101的外部(例如，用户)接收将由电子装置101的其它部件(例如，处理器120)使用的命令或数据。输入装置150可包括例如麦克风、鼠标、键盘或数字笔(例如，手写笔)。
声音输出装置155可将声音信号输出到电子装置101的外部。声音输出装置155可包括例如扬声器或接收器。扬声器可用于诸如播放多媒体或播放唱片的通用目的，接收器可用于呼入呼叫。根据实施例，可将接收器实现为与扬声器分离，或实现为扬声器的部分。
显示装置160可向电子装置101的外部(例如，用户)视觉地提供信息。显示装置160可包括例如显示器、全息装置或投影仪以及用于控制显示器、全息装置和投影仪中的相应一个的控制电路。根据实施例，显示装置160可包括被适配为检测触摸的触摸电路或被适配为测量由触摸引起的力的强度的传感器电路(例如，压力传感器)。
行为模块163可以表达面部表情改变或姿势，或者执行驱动。根据实施例，行为模块163可以包括面部表情电机，姿势表情电机或驱动器。面部表情电机可以通过例如显示装置160在视觉上提供电子装置101的状态。驱动器可以用于例如移动电子装置101并机械地改变其他元件。驱动器可以相对于至少一个轴在例如上/下方向，左/右方向或顺时针/逆时针方向上旋转。驱动器可以通过组合例如驱动电机(例如，车轮，球形齿轮，连续轨道或螺旋桨)来实现，或者可以通过独立地控制它们来实现。
音频模块170可将声音转换为电信号，反之亦可。根据实施例，音频模块170可经由输入装置150获得声音，或者经由声音输出装置155或与电子装置101直接(例如，有线地)连接或无线连接的外部电子装置(例如，电子装置102)的耳机输出声音。
传感器模块176可检测电子装置101的操作状态(例如，功率或温度)或电子装置101外部的环境状态(例如，用户的状态)，然后产生与检测到的状态相应的电信号或数据值。根据实施例，传感器模块176可包括例如手势传感器、陀螺仪传感器、大气压力传感器、磁性传感器、加速度传感器、握持传感器、接近传感器、颜色传感器、红外(IR)传感器、生物特征传感器、温度传感器、湿度传感器或照度传感器。
接口177可支持将用来使电子装置101与外部电子装置(例如，电子装置102)直接(例如，有线地)或无线连接的一个或更多个特定协议。根据实施例，接口177可包括例如高清晰度多媒体接口(HDMI)、通用串行总线(USB)接口、安全数字(SD)卡接口或音频接口。
连接端178可包括连接器，其中，电子装置101可经由所述连接器与外部电子装置(例如，电子装置102)物理连接。根据实施例，连接端178可包括例如HDMI连接器、USB连接器、SD卡连接器或音频连接器(例如，耳机连接器)。
触觉模块179可将电信号转换为可被用户经由他的触觉或动觉识别的机械刺激(例如，振动或运动)或电刺激。根据实施例，触觉模块179可包括例如电机、压电元件或电刺激器。
相机模块180可捕获静止图像或运动图像。根据实施例，相机模块180可包括一个或更多个透镜、图像传感器、图像信号处理器或闪光灯。
电力管理模块188可管理对电子装置101的供电。根据实施例，可将电力管理模块188实现为例如电力管理集成电路(PMIC)的至少部分。
电池189可对电子装置101的至少一个部件供电。根据实施例，电池189可包括例如不可再充电的原电池、可再充电的蓄电池、或燃料电池。
通信模块190可支持在电子装置101与外部电子装置(例如，电子装置102、电子装置104或服务器108)之间建立直接(例如，有线)通信信道或无线通信信道，并经由建立的通信信道执行通信。通信模块190可包括能够与处理器120(例如，应用处理器(AP))独立操作的一个或更多个通信处理器，并支持直接(例如，有线)通信或无线通信。根据实施例，通信模块190可包括无线通信模块192(例如，蜂窝通信模块、短距离无线通信模块或全球导航卫星系统(GNSS)通信模块)或有线通信模块194(例如，局域网(LAN)通信模块或电力线通信(PLC)模块)。这些通信模块中的相应一个可经由第一网络198(例如，短距离通信网络，诸如蓝牙、无线保真(Wi-Fi)直连或红外数据协会(IrDA))或第二网络199(例如，长距离通信网络，诸如蜂窝网络、互联网、或计算机网络(例如，LAN或广域网(WAN)))与外部电子装置进行通信。可将这些各种类型的通信模块实现为单个部件(例如，单个芯片)，或可将这些各种类型的通信模块实现为彼此分离的多个部件(例如，多个芯片)。无线通信模块192可使用存储在用户识别模块196中的用户信息(例如，国际移动用户识别码(IMSI))识别并验证通信网络(诸如第一网络198或第二网络199)中的电子装置101。
天线模块197可将信号或电力发送到电子装置101的外部(例如，外部电子装置)或者从电子装置101的外部(例如，外部电子装置)接收信号或电力。根据实施例，天线模块197可包括天线，所述天线包括辐射元件，所述辐射元件由形成在基底(例如，印刷电路板(PCB))中或形成在基底上的导电材料或导电图案构成。根据实施例，天线模块197可包括多个天线。在这种情况下，可由例如通信模块190(例如，无线通信模块192)从所述多个天线中选择适合于在通信网络(诸如第一网络198或第二网络199)中使用的通信方案的至少一个天线。随后可经由所选择的至少一个天线在通信模块190和外部电子装置之间发送或接收信号或电力。根据实施例，除了辐射元件之外的另外的组件(例如，射频集成电路(RFIC))可附加地形成为天线模块197的一部分。
上述部件中的至少一些可经由外设间通信方案(例如，总线、通用输入输出(GPIO)、串行外设接口(SPI)或移动工业处理器接口(MIPI))相互连接并在它们之间通信地传送信号(例如，命令或数据)。
根据实施例，可经由与第二网络199连接的服务器108在电子装置101和外部电子装置104之间发送或接收命令或数据。电子装置102和电子装置104中的每一个可以是与电子装置101相同类型的装置，或者是与电子装置101不同类型的装置。根据实施例，将在电子装置101运行的全部操作或一些操作可在外部电子装置102、外部电子装置104或服务器108中的一个或更多个运行。例如，如果电子装置101应该自动执行功能或服务或者应该响应于来自用户或另一装置的请求执行功能或服务，则电子装置101可请求所述一个或更多个外部电子装置执行所述功能或服务中的至少部分，而不是运行所述功能或服务，或者电子装置101除了运行所述功能或服务以外，还可请求所述一个或更多个外部电子装置执行所述功能或服务中的至少部分。接收到所述请求的所述一个或更多个外部电子装置可执行所述功能或服务中的所请求的所述至少部分，或者执行与所述请求相关的另外功能或另外服务，并将执行的结果传送到电子装置101。电子装置101可在对所述结果进行进一步处理的情况下或者在不对所述结果进行进一步处理的情况下将所述结果提供作为对所述请求的至少部分答复。为此，可使用例如云计算技术、分布式计算技术或客户机-服务器计算技术。
图2示出了根据本公开的实施例的系统200的配置。
参考图2，根据本公开的各个实施例的系统200可以包括机器人装置201(例如，电子装置101)、移动终端202(例如，电子装置102)、外部装置203、机器人服务器204和内容服务器205。
机器人装置201可以连接到包括短距离内存在的移动终端202的各种外部装置203(例如，电视、扬声器、家用电器和物联网(IoT)装置)，并且可以使用外部装置203来执行应用260的某些操作。
为了支持各种应用，机器人装置201可以通过机器人服务器204执行(或支持)机器人框架250的某些操作或应用260的某些操作。机器人装置201可以执行通过内容服务器205提供给机器人装置201的各种应用的某些操作。
根据实施例的机器人装置201可以包括输入传感器210、驱动器230、输出模块220、硬件(HW)接口240、机器人框架250和应用260。
输入传感器210可以包括各种输入装置，诸如麦克风、图像传感器(例如，相机模块180)、陀螺仪传感器、重力传感器、生物信息传感器、温度传感器、GPS、触摸传感器、键盘、鼠标和笔。机器人装置201可以通过输入传感器210接收用于选择至少一种运动的用户输入。例如，机器人装置201可以在通过扬声器询问用户之后(例如，在输出诸如“您想执行什么运动程序”之类的音频信号之后)通过麦克风接收用户语音(例如，特定运动名称)。或者，机器人装置201可以将运动列表输出到输出模块220(例如，触摸屏显示器)，并且接收用于选择一项运动的用户触摸输入。或者，机器人装置201可以将用户接口输出到通过通信连接的移动终端202或外部装置203，并且从移动终端202或外部装置203接收用户输入。
输入传感器210可以通过图像传感器获取用户图像。
驱动器230可以连接至或被布置在机器人装置201的壳体上，并且移动机器人装置201。例如，驱动器230可以将机器人装置201移动至根据运动指定或确定的拍摄位置。
输出模块220可以包括用于向用户提供各种接口的输出装置，诸如显示器、扬声器、触觉模块和发光装置(LED)，除驱动器230之外。例如，输出模块220可以通过显示器输出用于控制运动程序的各种画面(图像)，并通过扬声器、触觉模块或发光器件(LED)输出音频信号、触觉(例如，振动)信号或视觉(例如，闪烁)信号。
硬件(HW)接口240可以控制输入传感器210、输出模块220和驱动器230。
机器人框架250可以提供用于机器人装置201的基本操作和服务的平台。机器人框架250可以包括识别模块251、任务管理模块252、输出生成模块253、模型学习模块254、通信模块255和地图生成/位置检测模块256。
识别模块251可以执行图像识别(例如，手势识别、面部识别或对象跟踪)和音频识别(例如，语音识别、说话者识别、唤醒识别或声学事件识别)中的至少一种。根据一些实施例，识别模块251可以执行自然语言识别，以对通过语音识别获得的或通过键盘输入的自然语言进行分析。
识别模块251可以使用包括通过输入传感器210获取的不同模式的输入(例如，多个输入装置)的多模式信息来执行多模式识别，以生成机器人装置201所需的信息。根据一个实施例，识别模块251可以基于通过图像的嘴唇运动信息和通过麦克风输入的音频信号信息来识别用户说出的句子。根据实施例，识别模块251可以通过统计方法(例如，神经网络、卷积神经网络(CNN)、支持向量机(SVM)或贝叶斯分类器)基于通过分析图像获得的信息、通过分析音频信号获得的信息以及包括图像中存在的用户的位置信息的上下文信息，识别用户的情绪。
任务管理模块252可以基于通过识别模块251识别的信息、机器人装置201内产生的各种事件以及过去的任务历史来计划要由机器人装置201执行的任务，并执行所计划的任务。
输出生成模块253可以生成各种输出信号(例如，音频信号、触觉信号和视觉信号)，以通过外部装置203或包括在机器人装置201中或连接到机器人装置201的移动装置202被输出。
模型学习模块254可以包括特定运动的学习模型，用于对运动的类型进行分类(确认或识别)。特定运动的学习模型可以是使用人工智能(AI)算法(诸如，机器学习、神经网络、卷积神经网络(CNN)、基因、深度学习和分类算法(例如，支持向量机(SVM)或贝叶斯分类器))习得的数据。模型学习模块254可以通过连续的再训练或适应性学习来更新运动专用学习模块。
通信模块255可以位于机器人装置201的壳体内，并且可以与移动终端202、外部装置203、机器人服务器204和内容服务器205建立通信链接。例如，通信模块255可以从移动终端202或外部装置203接收用于选择至少一种运动的用户输入。通信模块255可以将通过图像传感器获取的用户图像和/或指导图像发送到外部装置203。
地图生成/位置检测模块256可以执行如下操作：用于允许机器人装置201通过诸如同步定位和映射(SLAM)之类的算法识别空间并且识别机器人装置201在识别出的空间中的位置。地图生成/位置检测模块256可以使用通过输入传感器210或识别模块251的某些操作获取的信息。当指定或确定了目标位置(例如，拍摄位置)时，地图生成/位置检测模块256可以执行如下操作：用于计算从当前位置到目标位置的路径并且基于计算出的路径控制驱动器230移动到目标位置。
应用260包括在端点处由机器人装置201提供给用户的应用。例如，应用260可以包括用于指导运动的应用(运动指导应用)。参考图3描述运动指导应用。
图3是示出了根据本公开的实施例的运动指导应用的框图。
参考图3，根据本公开的实施例的运动指导应用可以包括姿势检测模块310、运动确定模块320、特定运动相机位置设置模块330、目标位置确定模块340、图像生成模块350、用户接口360和特定运动相机位置信息数据库(DB)370。
姿势检测模块310可以分析通过相机存储或获取的图像，以识别图像内的人(例如，用户)，并确定所识别的用户的姿势。例如，姿势检测模块310可以检测用户面对哪个方向以及用户是否采取特定姿势(例如，站立/躺着/坐着/躺着的平躺姿势)。可以基于骨架信息来确定用户姿势，该骨架信息包括基于图像分析结果的左手、右手、左肩、右肩、左脚、右脚、骨盆、头部和颈部坐标中的至少一些。例如，垂直于由用户的左肩、右肩和骨盆点形成的平面的向量可以是用户面对的方向。可以三维地检测用户姿势。可以使用在本公开的技术领域中广泛已知的各种算法来检测用户姿势。
运动确定模块320可以使用分类模块(例如，神经网络、SVM或贝叶斯分类器)分析通过相机获取的用户图像(第一图像)，并确定(确认或识别)用户正在做的运动。运动确定模块320可以参考特定运动的学习模型来确定运动的类型。
特定运动相机位置设置模块330可以控制操作，在该操作中用户设置用于每次运动的机器人装置(例如，机器人装置201)的拍摄位置(例如，用户的身体部位或视角)。将参考图12至图15对其进行详细描述。
特定运动相机位置信息DB 370可以存储由特定运动相机位置设置模块330设置的位置信息。
目标位置确定模块340可以确定在执行运动指导应用300时机器人装置移动到的目标位置(例如，拍摄位置)。目标位置确定模块340可以确定进行运动的空间，并计算正在进行运动的用户被拍照的位置。例如，目标位置确定模块340可以基于由姿势检测模块310计算出的信息、由运动确定模块320计算出的信息和/或特定运动相机位置设置模块330设置的位置信息来计算正在运动的用户被拍照的位置。
图像生成模块350可以在执行运动指导应用300的同时生成要提供给用户的图像。例如，图像生成模块350可以将通过相机在目标位置处获取的用户图像(第二图像)与当前进行的运动的指导图像进行组合。图像生成模块350可以通过包括在机器人装置中的输出装置或连接到机器人装置的外部装置来输出合成图像。
用户接口360可以输出用于运动指导的各种画面并接收用户输入。例如，用户接口360可以输出可由机器人装置提供的运动列表，并从用户接收用于选择要进行的运动的输入。
图4是示出根据本公开的实施例的电子装置提供运动指导信息的方法的流程图400。图5示出了根据本公开的实施例的电子装置提供运动指导信息的示例。图6示出了根据本公开的实施例的电子装置提供运动指导信息的示例。图7示出了根据本公开的实施例的电子装置提供运动指导信息的示例。图8示出了根据本公开的实施例的电子装置提供运动指导信息的示例。
参考图4至图8，在操作401，根据本公开的各个实施例的电子装置(例如，电子装置101或机器人装置201)的处理器(例如，处理器120)可以执行运动指导应用(例如，运动指导应用300)。例如，处理器可以响应于各种类型的用户输入(例如，触摸、按钮和语音命令)执行运动指导应用。或者，运动指导应用可以由连接至机器人装置201的移动终端(例如，移动终端202)执行。
在操作403，根据本公开的实施例的处理器可以连接到外部装置(例如，电视(TV)、投影仪或全息图装置)。电子装置可以通过无线通信模块(电路)(例如，蓝牙、Wi-Fi或Wi-FiDirect)连接到外部装置。外部装置是用于提供运动指导信息的装置，并且可以位于用户在运动过程中容易观看的地方(例如，在用户面前)。根据一些实施例，处理器可以确认电子装置的当前位置，并且当电子装置被放置在与外部装置不同的地方时，控制驱动器(例如，驱动器230)移动到外部装置基于先前存储的空间图数据所在的位置。空间图数据可以是通过将外部装置的位置映射到地图而获得的存储数据。
参考图5，在操作405，根据本公开的实施例的处理器可以检测运动的选择。例如，如图5的附图标记500所指示的，当机器人装置501连接至外部装置503时，机器人装置501可以将关于能够被执行的运动的信息发送到外部装置503，并且从外部装置503接收用于选择仰卧起坐运动的用户输入505。
根据一些实施例，处理器可以通过电子装置的用户接口(例如，触摸屏、按钮或麦克风)接收用于选择至少一种运动的用户输入。例如，处理器可以通过扬声器输出用于询问选择了哪个运动的音频信号、通过麦克风接收用户语音，并且通过对接收到的语音数据的语音识别来识别用户选择的运动。
在操作407，根据本公开的实施例的处理器可以选择与所选择的运动对应的指导图像。该指导图像可以是专家以正确的姿势进行运动的图像。指导图像可以针对每个运动而预先下载并存储在电子装置中，并在选择运动时由电子装置从外部服务器(例如，内容服务器205)接收。
在操作409，根据本公开的实施例的处理器可以提取电子装置的相对位置信息。电子装置的相对位置信息可以由用户针对每项运动预先设置，并且存储在特定运动相机位置信息DB 370。
参考图6，在操作411，根据本公开的实施例的处理器可以通过相机获取用户图像(以下称为第一图像)，并且在操作413确定用户姿势。例如，处理器(或姿势检测模块310)可以确定第一图像中的用户并确定姿势信息。姿势信息可以包括用户面对的方向和诸如站/坐/躺/躺平的姿势。可以基于图像分析结果的骨架信息来确定用户姿势。例如，如图6的附图标记610所指示的，垂直于由用户左肩601、右肩603和骨盆点605形成的平面的矢量的方向可以是用户面对的方向。
在操作415，根据本公开的实施例的处理器可以基于相对位置信息和用户姿势信息中的至少一些来确定目标位置。相对位置信息607可以由具有离原点的距离(r)、高度角(θ)和方位角(φ)的球坐标系表示，如图6中的附图标记620所示。
当相对位置信息607包括300度的方位角(φ)和45度的高度角(θ)并且在操作413中确定的用户面对的方向是200度时，处理器(或目标位置确定模块340)可以确定320度(＝300+200–180)为目标位置(以下称为第一目标位置)。
根据一些实施例，处理器(或目标位置确定模块340)可以计算第一图像中预定范围的用户的占有率(例如，70％)的距离，并确定计算出的距离是目标位置(以下称为第二目标位置)。
参考图7，在操作417，根据本公开的实施例的处理器可以将电子装置移动到目标位置(例如，称为第二目标位置)。例如，处理器可以通过控制驱动器将机器人装置501从用户的前面移动到第二目标位置(例如，用户的左侧)。
根据一些实施例，当相对位置信息包括高度角(θ)时，处理器可以根据高度信息来控制相机的高度。为此，电子装置可以被配置为具有包括相机的壳体，壳体的至少一部分的高度是可调节的。
在操作419，根据本公开的实施例的处理器可以基于在目标位置处获取的指导图像和用户图像(以下称为第二图像)来生成比较图像，并在操作421中将所生成的比较图像发送至外部装置。例如，处理器可以通过组合指导图像和第二图像来生成比较图像。接收比较图像的外部装置503可以输出指导图像801和第二图像803，如图8所示。
参考图8，其示出了指导图像801和第二图像803是以分屏方式显示的，但是图像可以以各种方式显示。例如，指导图像801和第二图像803可以以重叠的方式显示。
图9是示出了根据本公开的实施例的电子装置提供运动指导信息的方法的流程图900。
参考图9，在操作901中，根据本公开的实施例的电子装置(例如，电子装置101或机器人装置201)的处理器(例如，处理器120)可以执行运动指导应用(例如，运动指导应用300)，并且可以在操作903中连接到外部装置(例如，电视、投影仪或全息图装置)。
在操作905中，根据本公开的实施例的处理器可以获取用户图像。例如，处理器可以通过相机获取用户图像(以下称为第一图像)。
在操作907中，根据本公开的实施例的处理器可以基于所获取的图像(第一图像)来确定(确认或识别)运动的类型。例如，处理器(或运动确定模块320)可以使用分类模块(例如，神经网络、隐马尔可夫模型(HMM)、SVM、矢量量化或贝叶斯分类器)分析通过相机来获取的第一图像，并确定(确认或识别)哪个运动正由用户进行。处理器(或运动确定模块320)可以参考特定运动的学习模型来确定运动的类型。
在操作909，根据本公开的实施例的处理器可以提取与所确定的运动相对应的电子装置的相对位置信息。电子装置的相对位置信息可以由用户针对每项运动预先设置并且存储在特定运动相机位置信息DB 370中。
当提取电子装置的相对位置信息时，处理器可以执行操作911、915、917、919和921。图9的操作911、915、917、919和921类似于图4的操作413、415、417、419和421。其详细描述被省略。
图10是示出了根据本公开的实施例的电子装置提供运动指导信息的方法的流程图1000。图11示出了根据本公开的实施例的确定电子装置的目标位置的方法。
参考图10和图11，根据本公开的实施例的电子装置(例如，电子装置101或机器人装置201)可以使用(通过分析)指导图像来确定目标位置(拍摄位置)。图10的操作1001、1003和1005类似于图4的操作401、403和405，因此省略其详细说明。
在操作1007，根据本公开的实施例的处理器可以选择与所选择的运动相对应的指导图像。在操作1009，根据本公开的实施例的处理器可以通过分析所选择的指导图像来确定目标姿势信息。目标姿势信息可以用于预测拍摄指导图像的装置的相对位置。根据一些实施例，目标姿势信息可以与指导图像一起被接收。例如，目标姿势信息可以被嵌入到指导图像的文件中。
在操作1011，根据本公开的实施例的处理器可以获取用户图像(以下称为第一图像)，并且在操作1013中确定用户姿势信息。例如，处理器(或姿势检测模块310)可以在通过相机获取的第一图像中确定用户，并确定用户姿势信息。
操作1011和1013可以与操作1007和1009几乎同时执行或顺序地执行。
在操作1015中，根据本公开的实施例的处理器可以基于目标姿势信息和用户姿势信息中的至少一些来确定目标位置。例如，当用户面对的方位角(φ)如图11的附图标记1110所示为180度、指导图像内的人所面对的方位角(φ)如附图标记1120所示为90度时，处理器(或目标位置确定模块340)可以确定移动90度(＝180–90)的位置作为目标位置(以下称为第一目标位置)。
根据一些实施例，处理器(或目标位置确定模块340)可以计算电子装置与用户之间的距离，使得用户在用户图像中的占有率变得类似于该人在指导图像中的占有率，并将移动计算出的距离的位置确定为目标位置(以下称为第二目标位置)。
当确定目标位置时，处理器可以执行操作1017、1019和1021。图10的操作1017/1019和1021类似于图4的操作417、419和421。其详细描述被省略。
图12示出了根据本公开的实施例的为每项运动设置相机的拍摄位置的画面的示例。
参考图12，根据本公开的实施例的电子装置(例如，电子装置101或机器人装置201)可以针对每项运动提供用于设置相机的拍摄位置的用户接口(以下称为设置界面)。例如，可以通过包括在电子装置、连接到电子装置的移动终端(例如，移动终端202)或外部装置(例如，外部装置203)中的显示装置(例如，显示装置160或输出模块220)来提供设置界面。在下文中，为了方便起见，描述了通过移动终端(例如，智能电话)提供设置界面的示例。
当激活(选择)设置菜单时，移动终端可以在显示器(例如，触摸屏显示器)上输出包括可用运动的列表的第一画面，如附图标记1210所示。例如，运动列表可以包括仰卧起坐、俯卧撑和弓步练习。第一画面还可以在其一侧上包括附加菜单1211。
当从运动列表中选择特定运动(例如，弓步运动1212)时，移动终端可以在显示器上输出用于设置包括在电子装置中的相机的视角(或相机的拍摄方向或拍摄位置)。第二画面可以包括用于将视角向右移动的第一指示器1221、用于将视角向左移动的第二指示器1222以及采取弓步运动姿势的人的图像1223，如附图标记1220所示。
用户可以通过第一指示器1221或第二指示器1222设置电子装置中包括的相机的视角。例如，在接收到针对第一指示器1221或第二指示器1222的用户输入时，移动终端可以将图像1223向左侧或右侧旋转。每当在第一指示器1221上检测到用户输入时，移动终端可以将在第二画面内显示的图像1223沿逆时针方向旋转预定大小(例如5度)。图12的附图标记1230表示图像1223旋转180度的示例。
根据一些实施例，移动终端可以三维地(例如，沿偏航、俯仰或翻滚方向上)旋转图像1223。
根据一些实施例，第二画面可以以球坐标系的形式表示，如图6的附图标记620所示。
图13示出了根据本公开的实施例的为每种运行设置相机的拍摄位置的画面的示例。
参考图13，根据本公开的实施例的电子装置(例如，电子装置101或机器人装置201)可以被配置为拍摄用户的身体部位。当电子装置与用户之间的距离不能充分确保时，可以使用此方法。例如，设置界面可以包括用于仅显示用户图像1312的一部分的图像显示区域1311和用于向上、向下、向左和向右滚动图像1312的第三指示器1313，如附图标记1310所示。
当通过第三指示器1313输入向下滚动指令时，移动终端可以如附图标记1320所示向上滚动图像1312。如上所述，通过第三指示器1313，用户可以选择要拍摄的身体部位。同时，尽管未在图13中示出，但是在选择了身体部位之后，类似于图12，用户可以三维地旋转所选择的身体部位。
图14示出了根据本公开的实施例的为每项运动设置相机的拍摄位置的画面的示例。
参考图14，根据本公开的实施例的电子装置(例如，电子装置101或机器人装置201)可以被配置为拍摄用户的身体部位。当电子装置与用户之间的距离不能充分确保时，可以使用此方法。例如，设置界面可以包括指示用户的整体特征的用户图像1412和指示要拍照的部分的虚线框1411，如附图标记1410所示。用户可以通过移动虚线框1411来改变要拍摄的部分(例如，在虚线框1411的边缘上执行触摸和拖动)，如附图标记1420所示。此外，用户可以以图12相似或不同的方式(例如，触摸用户图像，然后在触摸用户图像的同时移动用户图像)来旋转用户图像1412。
根据一些实施例，虚线框1411的尺寸可以在用户与电子装置之间的最大距离内改变。
图15示出了根据本公开的实施例的为每项运动设置相机的拍摄位置的画面的示例。
参考图15，根据本公开的实施例的电子装置(例如，电子装置101或机器人装置201)可以根据用户与电子装置之间的距离以不同形式提供设置界面。例如，设置界面可以包括可以将距离输入的输入字段1511，如图15所示。距离可以由用户输入到输入字段1511中。根据一些实施例，距离可以由电子装置输入。例如，电子装置可以基于先前存储的空间图信息来预测当前空间(例如，客厅)中用户与电子装置之间的距离，并将预测的距离输入到输入字段1511中。
根据一些实施例，由电子装置预测的距离可以作为默认值输入到输入字段中，并且可以由用户来改变。
当输入到输入字段1511中的值大于或等于预定值(例如，可以拍摄用户的整个身体的最小距离)时，电子装置可以提供用于通过指示器1512设置视角的用户接口，如附图标记1510所示。另一方面，当输入到输入字段1511中的值小于预定值时，电子装置可以提供包括用于设置拍摄身体部位的视角的虚线框1513的用户接口，如附图标记1520所示。
图16是示出了根据本公开的实施例的电子装置提供运动指导信息的方法的流程图1600。
在详细描述之前，假定电子装置(例如，电子装置101或机器人装置201)执行运动指导应用并连接到外部装置。
参考图16，在操作1601，根据本公开的实施例的电子装置的处理器(例如，处理器120)可以接收用于选择运动的用户输入。例如，处理器可以通过用户接口或无线通信电路，接收用于从运动列表选择将要运动的用户输入。
在操作1603，根据本公开的实施例的处理器可以选择与所选择的运动相对应的指导图像。
在操作1605，根据本公开的实施例的处理器可以分析指导图像。
在操作1607，根据本公开的实施例的处理器可以获取用户的第一图像。例如，处理器可以通过相机(例如，相机(相机模块180或输入传感器210的图像传感器)拍摄用户。
在操作1609，根据本公开的实施例的处理器可以确定电子装置移动到的位置(拍摄位置)。例如，处理器可以基于所分析的指导图像或所获取的用户的第一图像的至少一部分确定电子装置移动到的位置(拍摄位置)。例如，处理器可以通过分析用户图像来确定用户姿势信息，根据用户姿势信息确定当前拍摄方向和位置，并且在当前拍摄方向和位置与预定拍摄位置不同时，将电子装置移动到所确定的拍摄位置。或者，处理器可以通过分析指导图像来确定目标姿势信息，通过分析用户图像来确定用户姿势信息，并且基于目标姿势信息和用户姿势信息中的至少一些来确定拍摄位置。或者，处理器可以基于与指导图像一起提供(例如，嵌入到其中)的目标姿势信息和通过对用户图像的分析而获取的用户姿势信息中的至少一些来确定拍摄位置。
在操作1611，根据本公开的实施例的处理器可以将电子装置移动到所确定的拍摄位置。例如，处理器可以通过控制驱动器(例如，驱动器230)将电子装置移动到所确定的位置。
在操作1613，根据本公开的实施例的处理器可以获取用户的第二图像。例如，处理器可以控制相机在移动之后获取用户的第二图像。
在操作1615，根据本公开的实施例的处理器可以通过组合指导图像和用户图像来生成比较图像，并且在操作1617中提供比较图像。例如，处理器可以通过包括在电子装置或连接到电子装置的外部装置中的用户接口(显示装置)来输出比较图像。
图17是示出了根据本公开的实施例的电子装置提供运动指导信息的方法的流程图1700。
在详细描述之前，假定电子装置(例如，电子装置101或机器人装置201)执行运动指导应用并连接到外部装置。
参考图17，在操作1701，根据本公开的实施例的电子装置的处理器(例如，处理器120)可以获取用户的第一图像。例如，处理器可以通过相机(例如，相机的图像传感器(相机模块180或输入传感器的图像传感器210))拍摄用户。
在操作1703，根据本公开的实施例的处理器可以通过分析第一图像来识别运动。例如，处理器可以经过通过分类算法(例如，神经网络、CNN、SVM或贝叶斯分类器)对第一图像进行分析来确认用户正在进行的运动的类型。
在操作1705，根据本公开的实施例的处理器可以选择与所确认的运动相对应的指导图像。
根据本公开的实施例的处理器可以执行操作1707、1709、1711、1713和1715。操作1707、1709、1711、1713和1715类似于图16的操作1609、1611、1613、1615和1617，因此省略其详细说明。
根据本公开的各种示例实施例，电子装置(例如，电子装置101或机器人装置201)可以包括：壳体；用户接口(例如，显示装置160、输出模块220或用户接口360)；至少一个相机(例如，相机模块180或输入传感器210的图像传感器)，所述至少一个相机被布置在所述壳体上；至少一个驱动器(例如，驱动器230)，所述至少一个驱动器连接到或被布置在所述壳体上以移动所述壳体；无线通信电路(例如，通信模块190或通信模块255)，所述无线通信电路位于所述壳体内；存储器(例如，存储器130)；以及处理器(例如，处理器120)，所述处理器可操作地连接到所述用户接口、所述至少一个相机、所述至少一个驱动器、所述无线通信电路和存储器，其中所述存储器存储指令，当所述指令被处理器执行时，配置所述处理器：通过所述用户接口或所述无线通信电路接收用于选择运动的用户输入，选择与所选择的运动对应的指导图像，分析所选择的指导图像，通过所述至少一个相机在第一位置获取用户的第一图像，至少部分基于所分析的指导图像和所获取的所述用户的第一图像，确定所述电子装置的第二位置，至少部分基于所确定的位置，控制所述至少一个驱动器移动所述电子装置，在移动所述电子装置之后，通过所述至少一个相机获取所述用户的第二图像，以及通过组合所选择的指导图像和所获取的所述用户的第二图像生成组合图像。
根据各种示例实施例，存储器可以被配置为预存储包括至少一项运动和与该至少一项运动的每一项相对应的指导图像的运动列表，或者所述指令进一步配置所述处理器经由无线通信电路从外部电子装置(例如，服务器108或内容服务器205)下载运动列表和至少一个指导图像的中的至少一者。
根据各种示例实施例，所述指令可以进一步配置所述处理器在用户接口上显示组合图像，或者将组合图像发送到外部电子装置(例如，电子装置102、移动终端202或外部装置203)。
根据各种示例实施例，所述指令可以进一步配置所述处理器：通过分析所述第一图像，获取所述用户的姿势信息；至少部分基于由所述用户设置的相对位置信息和根据所获取的所述用户的姿势信息的位置信息，确定所述电子装置的第二位置。
根据各种示例实施例，所述指令可以进一步配置所述处理器：提取嵌入在所选择的指导图像中的目标姿势信息，通过分析所述第一图像，获取所述用户的姿势信息，至少部分基于所提取的目标姿势信息和所获取的所述用户的姿势信息，确定所述电子装置的第二位置。
根据各种示例实施例，所述指令可以进一步配置所述处理器：通过分析所选择的指导图像，确定目标姿势信息，通过分析所述第一图像，获取所述用户的姿势信息，进一步至少部分基于所确定的目标姿势信息和所获取的所述用户的姿势信息，确定所述电子装置的第二位置。
根据各种示例实施例，所述指令可以进一步配置所述处理器：至少部分基于所述第二图像中所述用户的占有率的至少一部分，确定所述用户与所述电子装置之间的距离，以及至少部分基于所确定的距离，确定所述电子装置的第二位置。
根据各种示例实施例，所述电子装置的第二位置可以由方位角、高度角或距所述用户的位置的距离中的至少一个来表示。
根据本公开的各种示例实施例，电子装置(例如，电子装置101或机器人装置201)可以包括：壳体；用户接口(例如，显示装置160、输出模块220或用户接口360)；至少一个相机(例如，相机模块180或输入传感器210的图像传感器)，所述至少一个相机被布置在所述壳体上；至少一个驱动器(例如，驱动器230)，所述至少一个驱动器连接到或被布置在所述壳体上以移动所述壳体；无线通信电路(例如，通信模块190或通信模块255)，所述无线通信电路位于所述壳体内；存储器(例如，存储器130)；以及处理器(例如，处理器120)，所述处理器可操作地连接到所述用户接口、所述至少一个相机、所述至少一个驱动器、所述无线通信电路，其中所述存储器存储指令，当所述指令被所述处理器执行时，配置所述处理器：通过所述至少一个相机在第一位置获取用户的第一图像，通过分析所获取的第一图像，识别运动，选择与所识别的运动对应的指导图像，至少部分基于所选择的指导图像和所获取的第一图像，确定所述电子装置的第二位置，至少部分基于所确定的第二位置，控制所述至少一个驱动器移动所述电子装置，在移动所述电子装置之后，通过所述至少一个相机获取所述用户的第二图像，并且通过组合所选择的指导图像和所获取的所述用户的第二图像来生成组合图像。
根据各种示例实施例，存储器可以被配置为预先存储包括至少一项运动的运动列表和与所述至少一项运动中的每一项相对应的指导图像，或者其中所述指令进一步配置所述处理器经由无线通信单元从外部电子装置(例如，服务器108或内容服务器205)下载所述运动列表和所述至少一个指导图像中的至少一者。
根据各种示例实施例，所述指令可以进一步配置所述处理器在所述用户接口上显示所组合的图像，或者将所组合的图像发送到外部电子装置(例如，电子装置102、移动终端202或外部装置203)。
根据各种示例实施例，所述指令可以进一步配置所述处理器：通过分析所述第一图像，获取所述用户的姿势信息，并进一步至少部分基于由所述用户设置的相对位置信息和根据所获取的所述用户的姿势信息的位置信息，确定所述电子装置的第二位置。
根据各种示例实施例，所述指令可以进一步配置所述处理器：通过分析所选择的指导图像，确定目标姿势信息，通过分析所述第一图像，获取所述用户的姿势信息，进一步至少部分基于所确定的目标姿势信息和所获取的所述用户的姿势信息，确定所述电子装置的第二位置。
根据各种示例实施例，所述指令可以进一步配置所述处理器：提取嵌入在所选择的指导图像中的目标姿势信息，通过分析所述第一图像，获取所述用户的姿势信息，进一步至少部分基于所提取的目标姿势信息和所获取的所述用户的姿势信息中的至少一些，确定所述电子装置的第二位置。
根据各种示例实施例，所述指令可以进一步配置所述处理器：至少部分基于所述第二图像中所述用户的占有率，确定所述用户与所述电子装置之间的距离，以及至少部分基于所确定的距离，确定所述电子装置的第二位置。
根据各种示例实施例，所述电子装置的第二位置可以通过方位角、高度角或距所述用户位置的距离中的至少一个来表示。
根据本公开的各种示例实施例，电子装置(例如，电子装置101或机器人装置201)可以包括：壳体；处理器(例如，处理器120)；以及存储器(例如，存储器130)，所述存储器可操作地连接到所述处理器，其中，所述存储器存储指令，当所述指令被所述处理器执行时，配置所述处理器：至少部分基于所存储的空间图，确定运动空间的大小，至少部分基于所确定的运动空间的大小，确定用于设置相机的位置或方向的设置画面的类型，以及提供所确定类型的设置画面。
根据各种示例实施例，所述指令可以进一步配置所述处理器根据用户输入来修改所确定的运动空间的大小。
根据各种示例实施例，所述设置画面的类型可以包括第一类型或第二类型中的一者，在所述第一类型中视角被设置为沿第一设置方向拍摄用户的身体部位；在所述第二类型中视角被设置为沿第二设置方向拍摄用户的整个身体。
根据各种示例实施例，所述指令可以进一步配置所述处理器在所述电子装置中包括的显示器(例如，显示装置160、输出模块220)或与所述电子装置连接的外部装置(例如，电子装置102、移动终端202或外部装置203)中的至少一者上显示所确定的设置画面的类型。
根据本公开的各种示例实施例，一种用于提供电子装置(例如，电子装置101或机器人装置201)的信息的方法可以包括以下步骤：通过用户接口(例如，显示装置160、输出模块220或用户接口360)或无线通信电路(例如，通信模块190或通信模块255)接收用于选择运动的用户输入的操作；选择与所选择的运动对应的指导图像的操作；分析所选择的指导图像的操作；通过至少一个相机(例如，相机模块180或输入传感器210的图像传感器)在第一位置获取用户的第一图像的操作；至少部分基于所分析的指导图像和所获取的所述用户的第一图像，确定所述电子装置的第二位置的操作；至少部分基于所确定的第二位置，控制所述至少一个驱动器移动所述电子装置的操作；在移动所述电子装置之后，通过所述至少一个相机获取所述用户的第二图像的操作；以及通过组合所选择的指导图像和所获取的所述用户的第二图像来生成组合图像的操作。
根据各个实施例，该方法还可以包括以下步骤中的至少一项：将包括至少一项运动的运动列表和与该至少一项运动的每一项相对应的至少一个指导图像预先存储在存储器(例如，存储器130)中的操作；以及从外部电子装置(例如，服务器108或内容服务器205)下载运动列表或至少一个指导图像中的至少一者的操作。
根据各个实施例，该方法还可以包括以下操作：在用户接口上显示组合图像，或者将该组合图像发送到外部电子装置。
根据各个实施例，确定所述电子装置的第二位置的操作可以包括：通过分析所述第一图像，获取所述用户的姿势信息的操作；和进一步至少基于由所述用户设置的相对位置信息和根据所获取的所述用户的姿势信息的位置信息，确定所述电子装置的第二位置的操作。
根据各个实施例，确定所述电子装置的第二位置的操作可以包括：提取嵌入在所选择的指导图像中的目标姿势信息的操作；通过分析所述第一图像来获取所述用户的姿势信息的操作；以及进一步至少部分基于所提取的目标姿势信息和所获取的用户姿势信息来确定所述电子装置的位置的第二位置的操作。
根据各个实施例，确定所述电子装置的第二位置的操作可以包括：通过分析所选择的指导图像，确定目标姿势信息的操作；通过分析所述第一图像，获取所述用户的姿势信息的操作；进一步至少部分基于所确定的目标姿势信息和所获取的所述用户的姿势信息，确定所述电子装置的第二位置的操作。
根据各个实施例，确定所述电子装置的第二位置的操作可以包括：至少部分基于所述第二图像中所述用户的占有率，确定所述用户与所述电子装置之间的距离的操作；以及进一步至少部分基于所确定的距离，确定所述电子装置的第二位置的操作。
根据各个实施例，所述电子装置的第二位置可以由方位角、高度角或距所述用户的位置的距离中的至少一个来表示。
根据本公开的各种示例实施例，一种用于提供电子装置(例如，电子装置101或机器人装置201)的信息的方法可以包括：通过至少一个相机(例如，相机模块180或输入传感器210的图像传感器)，在第一位置获取用户的第一图像的操作；通过分析所获取的第一图像来识别运动的操作；选择与所识别的运动对应的指导图像的操作；至少部分基于所选择的指导图像和所获取的第一图像，确定所述电子装置的第二位置的操作；至少部分基于所确定的第二位置，控制至少一个驱动器(例如，驱动器230)移动所述电子装置的操作；在移动所述电子装置之后，通过所述至少一个相机获取所述用户的第二图像的操作；通过组合所选择的指导图像和所获取的所述用户的第二图像来生成组合图像的操作。
根据各个实施例，该方法还可以包括以下步骤中的至少一项：将包括至少一项运动的运动列表和与该至少一项运动中的每一项相对应的至少一个指导图像预先存储在存储器(例如，存储器130)中的操作；从外部电子装置(例如，服务器108或内容服务器205)下载运动列表和至少一个指导图像中的至少一者的操作。
根据各个实施例，该方法还可以包括：在用户接口(例如，显示装置160、输出模块220或用户接口360)上显示组合图像的操作；或将组合的图像发送到外部电子装置(例如，电子装置102、移动终端202或外部装置203)。
根据各个实施例，确定所述电子装置的第二位置的操作可以包括：通过分析所述第一图像来获取用户的姿势信息的操作；和至少部分基于由所述用户设置的相对位置信息和根据所获取的所述用户的姿势信息的位置信息，确定所述电子装置的第二位置的操作。
根据各个实施例，确定所述电子装置的第二位置的操作可以包括：通过分析所选择的指导图像来确定目标姿势信息的操作；通过分析第一图像来获取用户的姿势信息的操作；以及进一步至少部分基于所确定的目标姿势信息和所获取的所述用户的姿势信息，确定所述电子装置的第二位置的操作。
根据各个实施例，确定所述电子装置的第二位置的操作可以包括：提取嵌入在所选择的指导图像中的目标姿势信息的操作；通过分析所述第一图像，获取所述用户的姿势信息的操作；进一步至少部分基于所提取的目标姿势信息和所获取的所述用户的姿势信息中的至少一些，确定所述电子装置的第二位置的操作。
根据各个实施例，确定所述电子装置的第二位置的操作可以包括：至少部分基于所述第二图像中所述用户的占有率，确定所述用户与所述电子装置之间的距离的操作；以及进一步至少部分基于所确定的距离，确定所述电子装置的第二位置的操作。
根据各个实施例，可以通过方位角、高度角或距用户位置的距离中的至少一个来表示关于电子装置的第二位置的信息。
根据本公开的各种示例实施例，一种用于提供电子装置(例如，电子装置101或机器人装置201)的信息的方法可以包括：至少部分基于所存储的空间图，确定运动空间的大小的操作；至少部分基于所确定的运动空间的大小，确定用于设置相机的位置或方向的设置画面的类型的操作；以及在显示器(例如，显示装置160，输出模块220或用户接口360)上显示所确定类型的设置画面。
根据各个实施例，该方法还可以包括根据用户输入来修改所确定的运动空间的大小的操作。
根据各个实施例，设置画面的类型可以包括第一类型或第二类型中的一者，其中在第一类型中，视角被设置为沿第一设置方向拍摄用户的身体部位；在第二类型中，视角被设置为沿第二设置方向拍摄用户的整个身体。
根据各个实施例，显示所确定的设置画面的类型的操作可以包括以下步骤中的至少一项：在至少一个显示器上显示所确定的设置画面的类型的操作；或者将所确定的设置画面的类型发送给连接到电子装置的外部电子装置(例如，电子装置102、移动终端202或外部装置203)并对其进行显示。
电子装置可以移动到为每个运动指定的位置或基于所选运动的指导图像选择的位置，拍摄用户特征，并将拍摄到的图像输出到外部装置(例如，电视或光束投影仪)。用户可以容易地识别在期望位置拍摄的运动姿势。此外，电子装置可以一起输出拍摄的图像和指导图像。因此，用户可以容易地识别他/她的姿势是否正确。
根据本公开的各个实施例，可以在指定的(或设置的)位置或根据运动确定的位置(基于用户的相对位置)拍摄用户，并且容易地识别所拍摄的用户特征。根据本公开的各个实施例，即使用户移动，电子装置也可以移动到指定位置或确定的位置，并因此拍摄用户，从而提高了用户便利性。本公开的各个实施例可以一起提供用户图像和指导图像。因此，用户可以容易地确认出运动姿势是否正确。
根据各种实施例的电子装置可以是各种类型的电子装置之一。电子装置可包括例如便携式通信装置(例如，智能电话)、计算机装置、便携式多媒体装置、便携式医疗装置、相机、可穿戴装置或家用电器。根据本公开的实施例，电子装置不限于以上所述的那些电子装置。
应该理解的是，本公开的各种实施例以及其中使用的术语并不意图将在此阐述的技术特征限制于具体实施例，而是包括针对相应实施例的各种改变、等同形式或替换形式。对于附图的描述，相似的参考标号可用来指代相似或相关的元件。将理解的是，与术语相应的单数形式的名词可包括一个或更多个事物，除非相关上下文另有明确指示。如这里所使用的，诸如“A或B”、“A和B中的至少一个”、“A或B中的至少一个”、“A、B或C”、“A、B和C中的至少一个”以及“A、B或C中的至少一个”的短语中的每一个短语可包括在与所述多个短语中的相应一个短语中一起列举出的项的任意一项或所有可能组合。如这里所使用的，诸如“第1”和“第2”或者“第一”和“第二”的术语可用于将相应部件与另一部件进行简单区分，并且不在其它方面(例如，重要性或顺序)限制所述部件。将理解的是，在使用了术语“可操作地”或“通信地”的情况下或者在不使用术语“可操作地”或“通信地”的情况下，如果一元件(例如，第一元件)被称为“与另一元件(例如，第二元件)结合”、“结合到另一元件(例如，第二元件)”、“与另一元件(例如，第二元件)连接”或“连接到另一元件(例如，第二元件)”，则意味着所述一元件可与所述另一元件直接(例如，有线地)连接、与所述另一元件无线连接、或经由第三元件与所述另一元件连接。
如这里所使用的，术语“模块”可包括以硬件、软件或固件实现的单元，并可与其他术语(例如，“逻辑”、“逻辑块”、“部分”或“电路”)可互换地使用。模块可以是被适配为执行一个或更多个功能的单个集成部件或者是该单个集成部件的最小单元或部分。例如，根据实施例，可以以专用集成电路(ASIC)的形式来实现模块。
可将在此阐述的各种实施例实现为包括存储在存储介质(例如，内部存储器136或外部存储器138)中的可由机器(例如，电子装置101)读取的一个或更多个指令的软件(例如，程序140)。例如，在处理器的控制下，所述机器(例如，电子装置101)的处理器(例如，处理器120)可在使用或无需使用一个或更多个其它部件的情况下调用存储在存储介质中的所述一个或更多个指令中的至少一个指令并运行所述至少一个指令。这使得所述机器能够操作用于根据所调用的至少一个指令执行至少一个功能。所述一个或更多个指令可包括由编译器产生的代码或能够由解释器运行的代码。可以以非暂时性存储介质的形式来提供机器可读存储介质。其中，术语“非暂时性”仅意味着所述存储介质是有形装置，并且不包括信号(例如，电磁波)，但是该术语并不在数据被半永久性地存储在存储介质中与数据被临时存储在存储介质中之间进行区分。
根据实施例，可在计算机程序产品中包括和提供根据本公开的各种实施例的方法。计算机程序产品可作为产品在销售者和购买者之间进行交易。可以以机器可读存储介质(例如，紧凑盘只读存储器(CD-ROM))的形式来发布计算机程序产品，或者可经由应用商店(例如，Play StoreTM)在线发布(例如，下载或上传)计算机程序产品，或者可直接在两个用户装置(例如，智能电话)之间分发(例如，下载或上传)计算机程序产品。如果是在线发布的，则计算机程序产品中的至少部分可以是临时产生的，或者可将计算机程序产品中的至少部分至少临时存储在机器可读存储介质(诸如制造商的服务器、应用商店的服务器或转发服务器的存储器)中。
根据各种实施例，上述部件中的每个部件(例如，模块或程序)可包括单个实体或多个实体。根据各种实施例，可省略上述部件中的一个或更多个部件，或者可添加一个或更多个其它部件。可选择地或者另外地，可将多个部件(例如，模块或程序)集成为单个部件。在这种情况下，根据各种实施例，该集成部件可仍旧按照与所述多个部件中的相应一个部件在集成之前执行一个或更多个功能相同或相似的方式，执行所述多个部件中的每一个部件的所述一个或更多个功能。根据各种实施例，由模块、程序或另一部件所执行的操作可顺序地、并行地、重复地或以启发式方式来执行，或者所述操作中的一个或更多个操作可按照不同的顺序来运行或被省略，或者可添加一个或更多个其它操作。
虽然已经参考本公开的各种实施例示出和描述了本公开，但是本领域技术人员将理解，可以在不脱离由所附权利要求书及其等同物所定义的本公开的精神和范围的情况下在其中进行形式和细节上的各种改变。

Claims (20)

1.一种电子装置，所述电子装置包括：
壳体；
用户接口；
至少一个相机，所述至少一个相机被布置在所述壳体上；
至少一个驱动器，所述至少一个驱动器连接到或被布置在所述壳体上以移动所述壳体；
无线通信电路，所述无线通信电路位于所述壳体内；
存储器；以及
处理器，所述处理器可操作地连接到所述用户接口、所述至少一个相机、所述至少一个驱动器、所述无线通信电路和所述存储器；
其中，所述存储器存储指令，所述指令在由所述处理器执行时，配置所述处理器：
通过所述用户接口或所述无线通信电路接收用于选择运动的用户输入，
选择与所选择的运动对应的指导图像，
分析所选择的指导图像，
通过所述至少一个相机在第一位置获取用户的第一图像，
至少部分基于所分析的指导图像和所获取的所述用户的第一图像，确定所述电子装置的第二位置，
至少部分基于所确定的第二位置，控制所述至少一个驱动器移动所述电子装置，
在移动所述电子装置之后，通过所述至少一个相机获取所述用户的第二图像，以及
通过组合所选择的指导图像和所获取的所述用户的第二图像来生成组合图像。
2.根据权利要求1所述的电子装置，其中，所述存储器被配置为预先存储包括至少一项运动的运动列表和与所述至少一项运动的每一项相对应的至少一个指导图像，或
其中，所述指令进一步配置所述处理器经由所述无线通信电路从外部电子装置下载所述运动列表和所述至少一个指导图像中的至少一者。
3.根据权利要求1所述的电子装置，其中，所述指令进一步配置所述处理器在所述用户接口上显示所述组合图像，或者将所述组合图像发送到外部电子装置。
4.根据权利要求1所述的电子装置，其中，所述指令进一步配置所述处理器：
通过分析所述第一图像，获取所述用户的姿势信息，并且
进一步至少部分基于由所述用户设置的相对位置信息和所获取的所述用户的姿势信息，确定所述电子装置的第二位置。
5.根据权利要求1所述的电子装置，其中，所述指令进一步配置所述处理器：
提取嵌入在所选择的指导图像中的目标姿势信息，
通过分析所述第一图像，获取所述用户的姿势信息，并且
进一步至少部分基于所提取的目标姿势信息和所获取的所述用户的姿势信息，确定所述电子装置的第二位置。
6.根据权利要求1所述的电子装置，其中，所述指令进一步配置所述处理器：
通过分析所选择的指导图像，确定目标姿势信息，
通过分析所述第一图像，获取所述用户的姿势信息，并且
进一步至少部分基于所确定的目标姿势信息和所获取的所述用户的姿势信息，确定所述电子装置的第二位置。
7.根据权利要求1所述的电子装置，其中，所述指令进一步配置所述处理器：
至少部分基于所述第二图像中所述用户的占有率，确定所述用户与所述电子装置之间的距离，并且
至少部分基于所确定的距离，确定所述电子装置的第二位置。
8.根据权利要求1所述的电子装置，其中，所述电子装置的第二位置由方位角、高度角或距所述用户的位置的距离中的至少一个来表示。
9.一种电子装置，所述电子装置包括：
壳体；
用户接口；
至少一个相机，所述至少一个相机被布置在所述壳体上；
至少一个驱动器，所述至少一个驱动器连接到或被布置在所述壳体上以移动所述壳体；
无线通信电路，所述无线通信电路位于所述壳体内；
存储器；以及
处理器，所述处理器可操作地连接到所述用户接口、所述至少一个相机、所述至少一个驱动器、所述无线通信电路和所述存储器，
其中，所述存储器存储指令，所述指令在由所述处理器执行时，配置所述处理器：
通过所述至少一个相机，在第一位置获取用户的第一图像，
通过分析所获取的第一图像，识别运动，
选择与所识别的运动相对应的指导图像，
至少部分基于所选择的指导图像和所获取的第一图像，确定所述电子装置的第二位置，
至少部分基于所确定的第二位置，控制所述至少一个驱动器移动所述电子装置，
在移动所述电子装置之后，通过所述至少一个相机获取所述用户的第二图像，并且
通过组合所选择的指导图像和所获取的所述用户的第二图像来生成组合图像。
10.根据权利要求9所述的电子装置，其中，所述存储器被配置为预先存储包括至少一项运动的运动列表和与所述至少一项运动的每一项相对应的至少一个指导图像，或
其中，所述指令进一步配置所述处理器经由所述无线通信电路从外部电子装置下载所述运动列表和所述至少一个指导图像中的至少一者。
11.根据权利要求9所述的电子装置，其中，所述指令进一步配置所述处理器在所述用户接口上显示所述组合图像，或者将所述组合图像发送到外部电子装置。
12.根据权利要求9所述的电子装置，其中，所述指令进一步配置所述处理器：
通过分析所述第一图像，获取所述用户的姿势信息，并且
至少部分基于由所述用户设置的相对位置信息和所获取的所述用户的姿势信息，确定所述电子装置的第二位置。
13.根据权利要求9所述的电子装置，其中，所述指令进一步配置所述处理器：
通过分析所选择的指导图像，确定目标姿势信息，
通过分析所述第一图像，获取所述用户的姿势信息，并且
进一步至少部分基于所确定的目标姿势信息和所获取的所述用户的姿势信息，确定所述电子装置的第二位置。
14.根据权利要求9所述的电子装置，其中，所述指令进一步配置所述处理器：
提取嵌入在所选择的指导图像中的目标姿势信息，
通过分析所述第一图像，获取所述用户的姿势信息，并且
进一步至少部分基于所提取的目标姿势信息和所获取的所述用户的姿势信息，确定所述电子装置的第二位置。
15.根据权利要求9所述的电子装置，其中，所述指令进一步配置所述处理器：
至少部分基于所述第二图像中所述用户的占有率，确定所述用户与所述电子装置之间的距离，以及
至少部分基于所确定的距离，确定所述电子装置的第二位置。
16.根据权利要求9所述的电子装置，其中，所述电子装置的第二位置由方位角、高度角或距所述用户位置的距离中的至少一个来表示。
17.一种电子装置，所述电子装置包括：
壳体；
处理器；以及
存储器，所述存储器可操作地连接到所述处理器，
其中，所述存储器存储指令，所述指令在由所述处理器执行时，配置所述处理器：
至少部分基于所存储的空间图，确定运动空间的大小，
至少部分基于所确定的运动空间的大小，确定用于设置相机的位置或方向的设置画面的类型，以及
提供所确定类型的设置画面。
18.根据权利要求17所述的电子装置，其中，所述指令进一步配置所述处理器根据用户输入来修改所确定的运动空间的大小。
19.根据权利要求17所述的电子装置，其中，所述设置画面的类型包括如下中的一者：
第一类型，在所述第一类型中视角被设置为沿第一设置方向拍摄用户的身体部位，或者
第二类型，在所述第二类型中视角被设置为沿第二设置方向拍摄所述用户的整个身体。
20.根据权利要求17所述的电子装置，其中，所述指令进一步配置所述处理器在所述电子装置中包括的显示器或与所述电子装置连接的外部装置中的至少一者上显示所确定类型的设置画面。
CN201911322172.XA 2018-12-21 2019-12-20 电子装置及其提供信息的方法 Active CN111354434B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020180167001A KR20200077775A (ko) 2018-12-21 2018-12-21 전자 장치 및 그의 정보 제공 방법
KR10-2018-0167001 2018-12-21

Publications (2)

Publication Number Publication Date
CN111354434A true CN111354434A (zh) 2020-06-30
CN111354434B CN111354434B (zh) 2024-01-19

Family

ID=69411135

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911322172.XA Active CN111354434B (zh) 2018-12-21 2019-12-20 电子装置及其提供信息的方法

Country Status (5)

Country Link
US (1) US10931880B2 (zh)
EP (1) EP3671549B1 (zh)
KR (1) KR20200077775A (zh)
CN (1) CN111354434B (zh)
WO (1) WO2020130691A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113269318A (zh) * 2021-06-04 2021-08-17 安谋科技（中国）有限公司 电子设备及其神经网络模型运行方法、存储介质

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11351419B2 (en) * 2019-12-19 2022-06-07 Intel Corporation Smart gym
CN111643874A (zh) * 2020-05-28 2020-09-11 张兴 一种多功能健身器材
CN114259720B (zh) * 2020-09-15 2022-10-18 荣耀终端有限公司 动作识别方法及装置、终端设备、运动监测系统
KR20220046818A (ko) * 2020-10-08 2022-04-15 주식회사 누비랩 사용자의 움직임을 트래킹한 정보에 기초하여 맞춤형 운동 정보를 제공하는 장치 및 방법
WO2023106695A1 (ko) * 2021-12-09 2023-06-15 주식회사 에이치엔에이치 운동 상태 감지 장치 및 방법
KR20230110032A (ko) * 2022-01-14 2023-07-21 삼성전자주식회사 디스플레이 장치 및 그 동작 방법

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040028260A1 (en) * 2002-08-09 2004-02-12 Honda Gilken Kogyo Kabushiki Kaisha Posture recognition apparatus and autonomous robot
WO2012102458A1 (en) * 2011-01-28 2012-08-02 Korea Institute Of Science And Technology System and method for posture correcting
US20130120445A1 (en) * 2011-11-15 2013-05-16 Sony Corporation Image processing device, image processing method, and program
US20140371887A1 (en) * 2010-08-09 2014-12-18 Nike, Inc. Monitoring fitness using a mobile device
CN105148490A (zh) * 2015-08-06 2015-12-16 深圳市晶源动力电子科技有限公司 云跑步姿势记录与矫正方法及装置
CN105847987A (zh) * 2016-03-24 2016-08-10 乐视控股（北京）有限公司 通过电视和体感配件矫正人体动作及系统
KR101657277B1 (ko) * 2015-04-29 2016-09-13 차유리 동작관찰을 통한 보행운동 대상자 맞춤형 실시간 되먹임 보행운동 장치
CN106512303A (zh) * 2016-11-29 2017-03-22 广州体育学院 用于单车机上的腿部姿势纠正方法、装置和单车机
US20180064992A1 (en) * 2016-09-01 2018-03-08 Catalyft Labs, Inc. Multi-Functional Weight Rack and Exercise Monitoring System for Tracking Exercise Movements
CN108525261A (zh) * 2018-05-22 2018-09-14 深圳市赛亿科技开发有限公司 一种智能镜子健身指导方法及系统
CN110546630A (zh) * 2017-03-31 2019-12-06 三星电子株式会社 用于提供信息的方法和支持该方法的电子装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7328119B1 (en) 2000-03-07 2008-02-05 Pryor Timothy R Diet and exercise planning and motivation including apparel purchases based on future appearance
KR100982171B1 (ko) 2008-11-24 2010-09-15 한국 한의학 연구원 안면 영상 촬영장치
KR101094648B1 (ko) 2009-08-10 2011-12-16 성균관대학교산학협력단 구도결정을 하는 사진사 로봇 및 그 제어방법
KR101340555B1 (ko) 2011-09-23 2013-12-11 광주과학기술원 기준 시점 영상 생성 장치 및 방법
KR101416282B1 (ko) 2012-02-29 2014-08-12 디게이트 주식회사 네추럴 인터렉션 기반 건강 및 재활운동 기능성 측정 평가 시스템
US10134296B2 (en) * 2013-10-03 2018-11-20 Autodesk, Inc. Enhancing movement training with an augmented reality mirror
KR101599149B1 (ko) 2014-10-07 2016-03-02 이태호 피사체를 자동으로 추적하는 촬영장치
KR101687252B1 (ko) * 2014-11-06 2016-12-16 장재윤 맞춤형 개인 트레이닝 관리 시스템 및 방법
KR20180000110A (ko) 2016-06-22 2018-01-02 엘지전자 주식회사 드론 및 그 제어방법
US11161236B2 (en) * 2017-09-14 2021-11-02 Sony Interactive Entertainment Inc. Robot as personal trainer

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040028260A1 (en) * 2002-08-09 2004-02-12 Honda Gilken Kogyo Kabushiki Kaisha Posture recognition apparatus and autonomous robot
US20140371887A1 (en) * 2010-08-09 2014-12-18 Nike, Inc. Monitoring fitness using a mobile device
WO2012102458A1 (en) * 2011-01-28 2012-08-02 Korea Institute Of Science And Technology System and method for posture correcting
US20130120445A1 (en) * 2011-11-15 2013-05-16 Sony Corporation Image processing device, image processing method, and program
KR101657277B1 (ko) * 2015-04-29 2016-09-13 차유리 동작관찰을 통한 보행운동 대상자 맞춤형 실시간 되먹임 보행운동 장치
CN105148490A (zh) * 2015-08-06 2015-12-16 深圳市晶源动力电子科技有限公司 云跑步姿势记录与矫正方法及装置
CN105847987A (zh) * 2016-03-24 2016-08-10 乐视控股（北京）有限公司 通过电视和体感配件矫正人体动作及系统
US20180064992A1 (en) * 2016-09-01 2018-03-08 Catalyft Labs, Inc. Multi-Functional Weight Rack and Exercise Monitoring System for Tracking Exercise Movements
CN106512303A (zh) * 2016-11-29 2017-03-22 广州体育学院 用于单车机上的腿部姿势纠正方法、装置和单车机
CN110546630A (zh) * 2017-03-31 2019-12-06 三星电子株式会社 用于提供信息的方法和支持该方法的电子装置
CN108525261A (zh) * 2018-05-22 2018-09-14 深圳市赛亿科技开发有限公司 一种智能镜子健身指导方法及系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113269318A (zh) * 2021-06-04 2021-08-17 安谋科技（中国）有限公司 电子设备及其神经网络模型运行方法、存储介质
CN113269318B (zh) * 2021-06-04 2023-06-30 安谋科技（中国）有限公司 电子设备及其神经网络模型运行方法、存储介质

Also Published As

Publication number Publication date
US10931880B2 (en) 2021-02-23
US20200204736A1 (en) 2020-06-25
EP3671549B1 (en) 2023-06-07
EP3671549A3 (en) 2020-08-12
CN111354434B (zh) 2024-01-19
WO2020130691A1 (en) 2020-06-25
KR20200077775A (ko) 2020-07-01
EP3671549A2 (en) 2020-06-24

Similar Documents

Publication Publication Date Title
CN111354434B (zh) 电子装置及其提供信息的方法
US10318011B2 (en) Gesture-controlled augmented reality experience using a mobile communications device
US11416080B2 (en) User intention-based gesture recognition method and apparatus
US20200389578A1 (en) Foldable electronic device and method for displaying information in foldable electronic device
US20210407211A1 (en) Electronic device and method for displaying sharing information on basis of augmented reality
CN112907725B (zh) 图像生成、图像处理模型的训练、图像处理方法和装置
EP3570144A1 (en) Electronic device for providing vr/ar content
KR20200094396A (ko) 전자 장치 및 복수의 액션들을 포함하는 태스크를 결정하는 방법
EP3760394A1 (en) Electronic device and method for controlling external electronic device
US11954324B2 (en) Method for performing virtual user interaction, and device therefor
US20230074380A1 (en) Electronic device for providing augmented reality service and operating method thereof
US11455833B2 (en) Electronic device for tracking user activity and method of operating the same
CN112581571A (zh) 虚拟形象模型的控制方法、装置、电子设备及存储介质
KR102511720B1 (ko) 360 비디오에서 화자의 음성을 시각적으로 표시하기 위한 장치 및 방법
EP3705982B1 (en) Apparatus and method for adaptively configuring user interface
US11363189B2 (en) Apparatus and method for recognizing voice and face on basis of change in camera driving method
CN116079703A (zh) 机器人示教方法、装置、设备及计算机可读存储介质
US11403848B2 (en) Electronic device and method for generating augmented reality object
US11189067B2 (en) Electronic device and content generation method
CN111310701B (zh) 手势识别方法、装置、设备及存储介质
US20220191403A1 (en) Electronic device having plurality of lenses, and method for controlling same
US20220383598A1 (en) Method and apparatus for displaying augmented reality object
CN113763531B (zh) 三维人脸重建方法、装置、电子设备及存储介质
US11989337B2 (en) Electronic device controlling attribute of object on basis of user's motion, and control method therefor
US20230360245A1 (en) Measurement method using ar, and electronic device

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant