RU2777617C1 - Song recording method, sound correction method and electronic device - Google Patents
Song recording method, sound correction method and electronic device Download PDFInfo
- Publication number
- RU2777617C1 RU2777617C1 RU2021121865A RU2021121865A RU2777617C1 RU 2777617 C1 RU2777617 C1 RU 2777617C1 RU 2021121865 A RU2021121865 A RU 2021121865A RU 2021121865 A RU2021121865 A RU 2021121865A RU 2777617 C1 RU2777617 C1 RU 2777617C1
- Authority
- RU
- Russia
- Prior art keywords
- cappella
- user
- electronic device
- vibrato
- original singer
- Prior art date
Links
- 230000000875 corresponding Effects 0.000 claims abstract description 35
- 238000000034 method Methods 0.000 claims abstract description 19
- 230000004044 response Effects 0.000 claims abstract description 15
- 230000029058 respiratory gaseous exchange Effects 0.000 claims description 58
- 238000011156 evaluation Methods 0.000 claims description 27
- FQKUGOMFVDPBIZ-UHFFFAOYSA-N Flusilazole Chemical compound C=1C=C(F)C=CC=1[Si](C=1C=CC(F)=CC=1)(C)CN1C=NC=N1 FQKUGOMFVDPBIZ-UHFFFAOYSA-N 0.000 claims description 8
- 230000000694 effects Effects 0.000 abstract description 29
- 239000000126 substance Substances 0.000 abstract 1
- 238000004891 communication Methods 0.000 description 22
- 238000010586 diagram Methods 0.000 description 18
- 230000005236 sound signal Effects 0.000 description 13
- 230000000051 modifying Effects 0.000 description 8
- 238000010295 mobile communication Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 6
- 230000003287 optical Effects 0.000 description 6
- 239000000203 mixture Substances 0.000 description 5
- 230000033764 rhythmic process Effects 0.000 description 4
- 230000001755 vocal Effects 0.000 description 4
- 229920001621 AMOLED Polymers 0.000 description 3
- 238000004590 computer program Methods 0.000 description 3
- 235000019800 disodium phosphate Nutrition 0.000 description 3
- 210000000988 Bone and Bones Anatomy 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000002708 enhancing Effects 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 210000004556 Brain Anatomy 0.000 description 1
- 230000003416 augmentation Effects 0.000 description 1
- 230000001413 cellular Effects 0.000 description 1
- 230000000295 complement Effects 0.000 description 1
- 230000003862 health status Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000001537 neural Effects 0.000 description 1
- 210000002569 neurons Anatomy 0.000 description 1
- 230000000737 periodic Effects 0.000 description 1
- 230000002093 peripheral Effects 0.000 description 1
- 235000021251 pulses Nutrition 0.000 description 1
- 239000002096 quantum dot Substances 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 230000001360 synchronised Effects 0.000 description 1
- 230000001702 transmitter Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Abstract
Description
[0001] Настоящая заявка испрашивает приоритет патентной заявки Китая №. 201910152655.3, поданной в Национальное управление интеллектуальной собственности Китая 28 февраля 2019 г. и озаглавленной «СПОСОБ ЗАПИСИ ПЕСНИ, СПОСОБ КОРРЕКЦИИ ЗВУКА И ЭЛЕКТРОННОЕ УСТРОЙСТВО», которая полностью включена в настоящий документ посредством ссылки.[0001] The present application claims the priority of China Patent Application No. 201910152655.3, filed with the National Intellectual Property Administration of China on February 28, 2019, entitled "SONG RECORDING METHOD, AUDIO CORRECTION METHOD, AND ELECTRONIC DEVICE", which is hereby incorporated by reference in its entirety.
ОБЛАСТЬ ТЕХНИКИ, К КОТОРОЙ ОТНОСИТСЯ ИЗОБРЕТЕНИЕFIELD OF TECHNOLOGY TO WHICH THE INVENTION RELATES
[0002] Настоящее изобретение относится к области аудиотехнологий и, в частности, к способу записи песни, способу коррекции звука и электронному устройству.[0002] The present invention relates to the field of audio technology, and in particular, to a song recording method, a sound correction method, and an electronic device.
УРОВЕНЬ ТЕХНИКИBACKGROUND OF THE INVENTION
[0003] Для пользователя, который любит петь, приложение для караоке стало популярным приложением, устанавливаемым на электронное устройство, такое как мобильный телефон или планшетный компьютер. Например, открыв приложение караоке, пользователь может выбрать песню, которую нужно записать. Кроме того, приложение караоке может загружать аккомпанемент песни и вызывать компонент звукоснимателя, такой как микрофон на мобильном телефоне, для записи звука, полученного после того, как пользователь поет песню, тем самым интегрируя собственный певческий голос пользователя в аккомпанемент, обеспечиваемый караоке-приложением.[0003] For a user who loves to sing, the karaoke application has become a popular application to be installed on an electronic device such as a mobile phone or a tablet computer. For example, by opening a karaoke application, the user can select a song to be recorded. In addition, the karaoke application can download the song's accompaniment and invoke a pickup component such as a microphone on a mobile phone to record the sound received after the user sings the song, thereby integrating the user's own singing voice into the accompaniment provided by the karaoke application.
[0004] В настоящее время, чтобы улучшить пение пользователя при использовании караоке приложения, некоторые караоке приложения обеспечивают характеристику коррекции звука для песни, записанной пользователем. Например, караоке приложение может сравнивать песню A, записанную пользователем, с оригинальным звуком песни A, и изменять интонацию и ритм певческого голоса, записанного пользователем, на интонацию и ритм в оригинальном звуке, тем самым корректируя проблемы, связанные с интонацией и ритмом, возникающие при записи песни пользователем.[0004] At present, in order to improve a user's singing when using a karaoke application, some karaoke applications provide an audio correction feature for a song recorded by the user. For example, a karaoke application can compare the user-recorded song A with the original audio of song A, and change the intonation and rhythm of the user-recorded singing voice to the intonation and rhythm of the original audio, thereby correcting intonation and rhythm problems that occur when song recording by the user.
[0005] Однако, помимо проблем с интонацией и ритмом, обычный пользователь, как правило, не имеет профессионального музыкального образования в области вокала. Следовательно, пользователь с недостаточными певческими навыками все равно не может добиться хорошего эффекта записи при записи песни.[0005] However, in addition to problems with intonation and rhythm, the average user, as a rule, does not have a professional musical education in the field of vocals. Therefore, a user with insufficient singing skills still cannot achieve a good recording effect when recording a song.
СУЩНОСТЬ ИЗОБРЕТЕНИЯSUMMARY OF THE INVENTION
[0006] Настоящее изобретение обеспечивает способ записи песни, способ коррекции звука и электронное устройство, чтобы инструктировать пользователю использовать соответствующий навык пения, когда пользователь записывает песню, тем самым улучшая эффект записи и удобство использования, когда пользователь использует караоке приложение.[0006] The present invention provides a song recording method, a sound correction method, and an electronic device to instruct a user to use an appropriate singing skill when the user records a song, thereby improving the recording effect and usability when the user uses a karaoke application.
[0007] Для достижения вышеуказанной цели в настоящей заявке используются следующие технические решения.[0007] To achieve the above goal, the following technical solutions are used in this application.
[0008] Согласно первому аспекту настоящее изобретение обеспечивает способ записи песни, содержащий: отображение электронным устройством первого интерфейса, причем первый интерфейс содержит кнопку записи, используемую для записи первой песни; если обнаружено, что пользователь нажимает кнопку записи, получение электронным устройством аккомпанемента первой песни и информацию характеристики а капелла оригинального певца, при этом информация характеристики а капелла оригинального певца может быть использована для отражения характеристики пения оригинального певца, когда оригинальный певец поет первую песню; далее, запуск электронным устройством воспроизведения аккомпанемента первой песни и запуск записи а капелла пользователя, которую поет пользователь; и в процессе записи а капелла пользователя, отображение электронным устройством информации руководства на втором интерфейсе на основе информации характеристики а капелла оригинального певца, при этом информация руководства используется для инструктирования выполнения одного или более из дыхания и вибрато во время пения пользователя. Другими словами, когда пользователь записывает песню, электронное устройство может отображать информацию руководства на основе характеристики пения оригинального певца, чтобы инструктировать выполнение одного или более навыков пения, таких как дыхание или вибрато, во время пения пользователя, тем самым улучшая эффект записи и опыт использования, когда пользователь записывает песню.[0008] According to a first aspect, the present invention provides a method for recording a song, comprising: displaying a first interface by an electronic device, the first interface comprising a record button used to record the first song; if it is detected that the user presses the record button, obtaining the accompaniment electronic device of the first song and a cappella characteristic information of the original singer, wherein the a cappella characteristic information of the original singer can be used to reflect the singing characteristic of the original singer when the original singer sings the first song; further, starting the accompaniment electronic device of the first song, and starting the user's a cappella recording that the user sings; and in the user's a cappella recording process, displaying the electronic device guide information on the second interface based on the original singer's a cappella characteristic information, the guide information being used to instruct the execution of one or more of the breath and vibrato while the user sings. In other words, when the user records a song, the electronic device can display guidance information based on the original singer's singing characteristic to instruct one or more singing skills such as breathing or vibrato while the user sings, thereby improving the recording effect and use experience. when the user records the song.
[0009] В возможной реализации информация характеристики а капелла оригинального певца содержит место дыхания в а капелла оригинального певца, и в этом случае информация руководства может включать в себя подсказку дыхания. Отображение электронным устройством информации руководства на втором интерфейсе на основе информации характеристики а капелла оригинального певца включает в себя: отображение электронным устройством на втором интерфейсе на основе места дыхания в а капелла оригинального певца подсказки дыхания, соответствующей месту дыхания в а капелла оригинального певца, чтобы помочь пользователю контролировать вариации дыхания во время пения, тем самым уменьшая относительно очевидный и беспорядочный звук дыхания в записанной песне, чтобы улучшить качество прослушивания записанной песни.[0009] In an exemplary implementation, the original singer's a cappella characteristic information contains a breath location in the original singer's a cappella, in which case the guide information may include a breath prompt. The electronic device displaying the guidance information on the second interface based on the original singer's a cappella characteristic information includes: displaying the second interface electronic device on the basis of the original singer's a cappella breath position of the breath prompt corresponding to the original singer's a cappella breath position to assist the user to control breathing variations while singing, thereby reducing the relatively obvious and erratic sound of breathing in the recorded song, so as to improve the listening experience of the recorded song.
[0010] Например, второй интерфейс может включать в себя текст первой песни. В этом случае отображение электронным устройством на втором интерфейсе на основе места дыхания в а капелла оригинального певца подсказки дыхания, соответствующей месту дыхания в а капелла оригинального певца, включает в себя: отображение электронным устройством подсказки дыхания в первом месте текста песни, при этом первое упомянутое место совпадает с местом дыхания в а капелла оригинального певца.[0010] For example, the second interface may include the lyrics of the first song. In this case, displaying by the electronic device on the second interface, based on the original singer's a cappella breath location, the breath prompt corresponding to the original singer's a cappella breath location includes: displaying the breath prompt by the electronic device at the first location of the song lyrics, wherein the first mentioned location coincides with the breath in the original singer's a cappella.
[0011] В качестве альтернативы второй интерфейс может включать в себя инструмент для пения, при этом инструмент для пения выполнен с возможностью отображения заметки к каждому слову записываемого текста песни. В этом случае отображение электронным устройством на втором интерфейсе на основе места дыхания в а капелла оригинального певца подсказки дыхания, соответствующей месту дыхания в а капелла оригинального певца, включает в себя: отображение электронным устройством подсказки дыхания во втором месте инструмента для пения, при этом второе место совпадает с местом дыхания в а капелла оригинального певца.[0011] Alternatively, the second interface may include a singing tool, wherein the singing tool is configured to display a note for each word of the recorded lyrics. In this case, displaying by the electronic device on the second interface, based on the original singer's a cappella breath position, the breath prompt corresponding to the original singer's a cappella breath position includes: displaying the breath prompt by the electronic device at the second position of the singing instrument, wherein the second position coincides with the breath in the original singer's a cappella.
[0012] В возможной реализации информация характеристики а капелла оригинального певца включает в себя характеристику вибрато а капелла оригинального певца, и в этом случае соответствующая информация руководства включает в себя подсказку вибрато. Отображение электронным устройством информации руководства на втором интерфейсе на основе информации характеристики а капелла оригинального певца включает в себя: отображение электронным устройством на втором интерфейсе на основе характеристики вибрато а капелла оригинального певца подсказки вибрато, соответствующей характеристики вибрато а капелла оригинального певца. Таким образом, при записи песни пользователь может петь с вибрато на основе места вибрато, подсказанного в тексте песни, чтобы улучшить ощущение иерархии песни и навыки пения, когда пользователь поет, тем самым улучшая качество прослушивания записанной песни.[0012] In an exemplary implementation, the original singer's a cappella characteristic information includes the original singer's a cappella vibrato characteristic, in which case the corresponding guide information includes a vibrato prompt. The electronic device displaying the guidance information on the second interface based on the a cappella characteristic information of the original singer includes: displaying on the second interface by the electronic device, based on the a cappella vibrato characteristic of the original singer, a vibrato prompt corresponding to the a cappella vibrato characteristic of the original singer. Thus, when recording a song, the user can sing with vibrato based on the location of the vibrato prompted in the lyrics to improve the sense of the song's hierarchy and singing skills when the user sings, thereby improving the listening experience of the recorded song.
[0013] Например, характеристика вибрато содержит место вибрато, а второй интерфейс содержит текст первой песни. В этом случае отображение электронным устройством на втором интерфейсе на основе характеристики вибрато а капелла оригинального певца подсказки вибрато, соответствующей характеристики вибрато а капелла оригинального певца, включает в себя: отображение посредством электронного устройства подсказки вибрато в третьем месте текста песни, при этом третье место совпадает с местом вибрато в а капелла оригинального певца.[0013] For example, the vibrato characteristic contains the vibrato location, and the second interface contains the lyrics of the first song. In this case, displaying by the electronic device on the second interface, based on the vibrato a cappella characteristic of the original singer, a vibrato prompt corresponding to the a cappella vibrato characteristic of the original singer, includes: displaying by the electronic device the vibrato hint at the third position of the song text, the third position being the same as vibrato spot in the original singer's a cappella.
[0014] В качестве альтернативы, характеристика вибрато включает в себя место вибрато, второй интерфейс включает в себя инструмент для пения, при этом инструмент для пения выполнен с возможностью отображения заметки к каждому слову в записываемом тексте песни. В этом случае отображение электронным устройством на втором интерфейсе на основе характеристики вибрато а капелла оригинального певца подсказки вибрато, соответствующей характеристики вибрато а капелла оригинального певца, включает в себя: отображение электронным устройством подсказки вибрато в четвертом месте инструмента для пения, при этом четвертое место совпадает с местом вибрато в а капелла оригинального певца.[0014] Alternatively, the vibrato characteristic includes a vibrato location, the second interface includes a singing tool, wherein the singing tool is configured to display a note for each word in the recorded lyrics. In this case, displaying by the electronic device on the second interface, based on the a cappella vibrato characteristic of the original singer, a vibrato prompt corresponding to the a cappella vibrato characteristic of the original singer includes: displaying the vibrato prompt by the electronic device at the fourth position of the singing instrument, the fourth position being the same as vibrato spot in the original singer's a cappella.
[0015] Например, информация характеристики а капелла оригинального певца может дополнительно включать в себя информацию об основной частоте а капелла оригинального певца, а электронное устройство может формировать подсказку интонации на основе информации об основной частоте а капелла оригинального певца и отображать подсказку интонации на втором интерфейсе, чтобы управлять интонацией пользователя во время пения.[0015] For example, the original singer's a cappella characteristic information may further include information on the original singer's a cappella fundamental frequency, and the electronic device may generate an intonation hint based on the original singer's a cappella fundamental frequency information, and display the intonation hint on the second interface, to control the user's intonation while singing.
[0016] В возможной реализации, в процессе записи а капелла пользователя, способ дополнительно включает в себя: извлечение посредством электронного устройства информации характеристики а капелла пользователя из а капелла пользователя, при этом информация характеристики а капелла пользователя используется для отражения характеристики пения пользователя, когда пользователь поет первую песню; и отображение электронным устройством результата оценки на втором интерфейсе путем сравнения информации характеристики а капелла пользователя с информацией характеристики а капелла оригинального певца.[0016] In an exemplary implementation, in the user's a cappella recording process, the method further includes: extracting, by the electronic device, the user's a cappella characteristic information from the user's a cappella, wherein the user's a cappella characteristic information is used to reflect the user's singing characteristic when the user sings the first song; and displaying the evaluation result by the electronic device on the second interface by comparing the a cappella characteristic information of the user with the a cappella characteristic information of the original singer.
[0017] Можно узнать, что в процессе записи песни пользователя электронное устройство может оценивать один или более певческих навыков, таких как интонация, вибрато и дыхание пения пользователя, в режиме реального времени на основе информации характеристики а капелла оригинальный певец. По сравнению с оценкой уровня пения пользователя только на основе интонации, в этом варианте осуществления изобретения согласно настоящей заявке такие факторы, как дыхание и вибрато пользователя, также учитываются во время оценки пения пользователя, и, следовательно, полученный результат оценки является более точным, объемный и объективный. Кроме того, электронное устройство может возвращать результат оценки пения пользователя пользователю в режиме реального времени на втором интерфейсе, так что пользователь вовремя узнает текущий эффект пения пользователя, и пользователь может регулировать манеру пения вовремя в последующем процессе записи.[0017] It can be learned that in the process of recording a user's song, the electronic device can evaluate one or more singing skills such as intonation, vibrato, and breath of the user's singing in real time based on the a cappella characteristic information of the original singer. Compared to judging the level of a user's singing based on intonation alone, in this embodiment of the present application, factors such as the user's breathing and vibrato are also taken into account during the judging of the user's singing, and therefore the resulting judging result is more accurate, voluminous, and objective. In addition, the electronic device can return the user's singing evaluation result to the user in real time on the second interface, so that the user knows the current effect of the user's singing in time, and the user can adjust the singing manner in time in the subsequent recording process.
[0018] В возможной реализации информация характеристики а капелла пользователя включает в себя место дыхания в а капелла пользователя, а информация характеристики а капелла оригинального певца включает в себя место дыхания в а капелла оригинального певца. Отображение посредством электронного устройства результата оценки на втором интерфейсе путем сравнения информации характеристики а капелла пользователя с информацией характеристики а капелла оригинального певца включает в себя: отображение посредством электронного устройства результата оценки навыка дыхания на втором интерфейсе путем сравнения места дыхания в а капелла пользователя с местом дыхания в а капелла оригинального певца.[0018] In an exemplary implementation, the user's a cappella characteristic information includes the user's a cappella breath position, and the original singer's a cappella characteristic information includes the original singer's a cappella breath position. Electronically displaying the evaluation result on the second interface by comparing the user's a cappella characteristic information with the original singer's a cappella characteristic information includes: electronically displaying the breath skill evaluation result on the second interface by comparing the user's a cappella breathing place with the breathing place in a cappella of the original singer.
[0019] Например, отображение электронным устройством результата оценки навыка дыхания на втором интерфейсе путем сравнения места дыхания в а капелла пользователя с местом дыхания в а капелла оригинального певца включает в себя: если место дыхания в а капелла пользователя совпадает с местом дыхания в а капелла оригинального певца, электронное устройство на втором интерфейсе отображает подсказку, указывающую на точное дыхание; или если место дыхания в а капелла пользователя отличается от места дыхания в а капелла оригинального певца, электронное устройство на втором интерфейсе отображает подсказку, указывающую на ошибку дыхания.[0019] For example, displaying the result of the assessment of the breathing skill by the electronic device on the second interface by comparing the user's a cappella breath location with the original singer's a cappella breath location includes: if the user's a cappella breath location matches the original singer's a cappella breath location singer, the electronic device on the second interface displays a prompt indicating accurate breathing; or if the user's a cappella breathing position is different from the original singer's a cappella breathing position, the electronic device on the second interface displays a prompt indicating a breathing error.
[0020] В возможной реализации информация характеристики а капелла пользователя включает в себя характеристику вибрато а капелла пользователя, а информация характеристики а капелла оригинального певца включает в себя характеристику вибрато а капелла оригинального певца. Отображение посредством электронного устройства результата оценки на втором интерфейсе путем сравнения информации характеристики а капелла пользователя с информацией характеристики а капелла оригинального певца включает в себя: отображение посредством электронного устройства результата оценки навыка вибрато на втором интерфейсе путем сравнения характеристики вибрато а капелла пользователя с характеристикой вибрато а капелла оригинального певца.[0020] In an exemplary implementation, the user's a cappella characteristic information includes the user's a cappella vibrato characteristic, and the original singer's a cappella characteristic information includes the original singer's a cappella vibrato characteristic. The electronic device displaying the evaluation result on the second interface by comparing the user's a cappella characteristic information with the original singer's a cappella characteristic information includes: electronically displaying the vibrato skill evaluation result on the second interface by comparing the user's a cappella vibrato characteristic with the a cappella vibrato characteristic original singer.
[0021] Например, отображение электронным устройством результата оценки навыка вибрато на втором интерфейсе путем сравнения характеристики вибрато а капелла пользователя с характеристикой вибрато а капелла оригинального певца включает в себя: если характеристика вибрато а капелла пользователя совпадает с характеристикой вибрато а капелла оригинального певца, отображение электронным устройством на втором интерфейсе подсказки, указывающей точное вибрато; или если характеристика вибрато а капелла пользователя отличается от характеристики вибрато а капелла оригинального певца, отображение электронным устройством на втором интерфейсе подсказки, указывающей на ошибку вибрато.[0021] For example, displaying a vibrato skill evaluation result on the second interface by the electronic device by comparing the a cappella vibrato characteristic of the user with the a cappella vibrato characteristic of the original singer includes: if the user's a cappella vibrato characteristic matches the a cappella vibrato characteristic of the original singer, displaying the electronic a device on the second prompt interface indicating the exact vibrato; or if the user's a cappella vibrato characteristic differs from the original singer's a cappella vibrato characteristic, displaying a hint indicating a vibrato error by the electronic device on the second interface.
[0022] В возможной реализации отображение электронным устройством результата оценки на втором интерфейсе включает в себя: отображение электронным устройством результата оценки в тексте песни на втором интерфейсе; или отображение электронным устройством результата оценки в инструменте для пения на втором интерфейсе.[0022] In an exemplary implementation, displaying the evaluation result on the second interface by the electronic device includes: displaying the evaluation result in lyrics on the second interface by the electronic device; or displaying the evaluation result in the singing instrument on the second interface by the electronic device.
[0023] В возможной реализации, после отображения электронным устройством информации руководства на втором интерфейсе на основе информации характеристики а капелла оригинального певца, способ дополнительно включает в себя: после окончания записи первой песни корректирование посредством электронного устройства на основе информации характеристики а капелла оригинального певца, проблемы с пением, которая появляется в а капелла пользователя, при этом проблема с пением включает в себя одну или более из проблемы с дыханием и проблемы с вибрато. Таким образом, обычный пользователь, который не имеет профессионального музыкального образования в области вокала, также может записывать певческий голос с относительно хорошим качеством прослушивания, тем самым улучшая эффект записи и опыт использования, когда пользователь записывает песню.[0023] In an exemplary implementation, after the electronic device displays guide information on the second interface based on the a cappella characteristic information of the original singer, the method further includes: after the recording of the first song is finished, correcting by the electronic device based on the original singer's a cappella characteristic information, problems with singing that appears in the user's a cappella, where the singing problem includes one or more of breathing problems and vibrato problems. Thus, a general user who does not have a professional music education in the field of vocals can also record a singing voice with a relatively good listening quality, thereby improving the recording effect and use experience when the user records a song.
[0024] Согласно второму аспекту настоящее изобретение обеспечивает способ коррекции звука, включающий в себя: отображение электронным устройством первого интерфейса, причем первый интерфейс включает в себя кнопку записи, используемую для записи первой песни; если обнаружено, что пользователь выбирает кнопку записи, получение электронным устройством аккомпанемент первой песни и информации характеристики а капелла оригинального певца, при этом информация характеристики а капелла оригинального певца используется для отражения характеристики пения оригинального певца, когда оригинальный певец поет первую песню; далее, запуск электронным устройством воспроизведения аккомпанемента первой песни и запуск записи а капелла пользователя, которую поет пользователь; и, после окончания записи первой песни, корректирование посредством электронного устройства на основе информации характеристики а капелла оригинального певца проблемы с пением, которая появляется в записанной а капелла пользователя, при этом проблема с пением включает в себя одну или более из проблемы с дыханием и проблемы с вибрато. Другими словами, электронное устройство может корректировать проблему с певческими навыками, такую как дыхание или вибрато, в песне, записанной пользователем. Таким образом, обычный пользователь, который не имеет профессионального музыкального образования в области вокала, также может записывать певческий голос с относительно хорошим качеством прослушивания, тем самым улучшая эффект записи и опыт использования, когда пользователь записывает песню.[0024] According to a second aspect, the present invention provides a sound correction method, including: displaying a first interface by an electronic device, the first interface including a record button used to record a first song; if it is detected that the user selects the record button, obtaining by the electronic device the accompaniment of the first song and the original singer's a cappella characteristic information, the original singer's a cappella characteristic information being used to reflect the original singer's singing characteristic when the original singer sings the first song; further, starting the accompaniment electronic device of the first song, and starting the user's a cappella recording that the user sings; and, after finishing the recording of the first song, correcting by the electronic device, based on the original singer's a cappella characteristic information, a singing problem that appears in the user's recorded a cappella, wherein the singing problem includes one or more of breathing problems and vibrato. In other words, the electronic device can correct a singing skill problem such as breathing or vibrato in a song recorded by a user. Thus, a general user who does not have a professional music education in the field of vocals can also record a singing voice with a relatively good listening quality, thereby improving the recording effect and use experience when the user records a song.
[0025] В возможной реализации проблема с пением - это проблема с дыханием. Корректирование посредством электронного устройства на основе информации характеристики а капелла оригинального певца проблемы с пением, которая появляется в а капелла пользователя, включает в себя: извлечение электронным устройством звука дыхания в а капелла пользователя из а капелла пользователя; и уменьшение посредством электронного устройства энергии и частотной характеристики звука дыхания в а капелла пользователя, чтобы ослабить проблему с дыханием, которая появляется в а капелла пользователя, тем самым улучшая качество прослушивания записанной песни.[0025] In a possible implementation, the problem with singing is a problem with breathing. Correcting by the electronic device, based on the original singer's a cappella characteristic information, a singing problem that occurs in the user's a cappella includes: extracting the user's a cappella breathing sound from the user's a cappella by the electronic device; and reducing, by means of the electronic device, the energy and frequency response of the breath sound of the user's a cappella to alleviate a breathing problem that occurs in the user's a cappella, thereby improving the listening quality of the recorded song.
[0026] В возможной реализации проблема с пением - проблема с вибрато. Корректирование посредством электронного устройства на основе информации характеристики а капелла оригинального певца проблемы с пением, которая появляется в а капелла пользователя, включает в себя: извлечение электронным устройством характеристики вибрато а капелла песни пользователя из а капелла пользователя; и если характеристика вибрато а капелла пользователя не совпадает с характеристикой вибрато в информации характеристики а капелла оригинального певца, например, одно из мест вибрато, амплитуды вибрато, частоты вибрато и фрагмент стабильного тренда в а капелла пользователя не соответствует а капелла оригинального певца, корректирование посредством электронного устройства характеристику вибрато а капелла пользователя посредством характеристики вибрато а капелла оригинального певца, чтобы корректировать проблему с вибрато, которая появляется в а капелла пользователя. Например, электронное устройство может синтезировать новое вибрато в а капелла пользователя, используя амплитуду вибрато, частоту вибрато или фрагмент стабильного тренда соответствующего вибрато в а капелла оригинального певца, чтобы улучшить звуковой эффект вибрато, который появляется в а капелла пользователя.[0026] In a possible implementation, the problem with singing is a problem with vibrato. Correcting by the electronic device, based on the a cappella characteristic information of the original singer, a singing problem that appears in the user's a cappella includes: extracting by the electronic device the a cappella vibrato characteristic of the user's song from the user's a cappella; and if the user's a cappella vibrato characteristic does not match the vibrato characteristic in the original singer's a cappella characteristic information, for example, one of the vibrato locations, vibrato amplitudes, vibrato frequencies, and a portion of the stable trend in the user's a cappella does not match the original singer's a cappella, correction by electronic devices the user's a cappella vibrato response by means of the original singer's a cappella vibrato response to correct for a vibrato problem that appears in the user's a cappella. For example, an electronic device can synthesize a new user a cappella vibrato using the vibrato amplitude, vibrato frequency, or a portion of the stable trend of the original singer's corresponding a cappella vibrato to enhance the vibrato sound effect that appears in the user's a cappella.
[0027] Конечно, проблема с пением может быть альтернативной проблемой интонации. Электронное устройство может выполнять обработку с понижением тона в месте, в котором тон слишком высокий в а капелла пользователя, и выполнять обработку с повышением тона в месте, в котором тон слишком низкий в а капелла пользователя, чтобы тон а капелла пользователя был таким же или близким к тону а капелла оригинального певца.[0027] Of course, the problem with singing can be an alternative problem with intonation. The electronic device may perform pitch down processing at a location where the tone is too high in the user's a cappella, and perform pitch up processing at the location where the pitch is too low in the user's a cappella so that the tone of the user's a cappella is the same or close to the original singer's a cappella tone.
[0028] В возможной реализации после окончания записи первой песни способ дополнительно включает в себя: отображение посредством электронного устройства второго интерфейса, причем второй интерфейс включает в себя переключатель коррекции звука. Корректирование посредством электронного устройства на основе информации характеристики а капелла оригинального певца проблемы с пением, которая появляется в а капелла пользователя, включает в себя: если обнаружено, что пользователь включает переключатель коррекции звука, корректирование посредством электронного устройства на основе информации характеристики а капелла оригинального певца, проблемы с пением, которая появляется в а капелла пользователя.[0028] In an exemplary implementation, after recording of the first song is finished, the method further includes: displaying, by the electronic device, a second interface, the second interface including an audio equalization switch. Correction by the electronic device based on the original singer's a cappella characteristic information of the singing problem that occurs in the user's a cappella includes: if it is detected that the user turns on the sound correction switch, correction by the electronic device based on the original singer's a cappella characteristic information, problems with singing that appears in the user's a cappella.
[0029] В возможной реализации после окончания записи первой песни способ дополнительно содержит в себя: отображение посредством электронного устройства второго интерфейса, при этом второй интерфейс включает в себя опцию коррекции звука, а опция коррекции звука включает в себя опцию коррекции интонации, опцию коррекции звука дыхания и опцию коррекции вибрато. Корректирование посредством электронного устройства на основе информации характеристики а капелла оригинального певца проблемы с пением, которая появляется в а капелла пользователя, включает в себя: в ответ на опцию коррекции звука, выбранную пользователем, корректирование посредством электронного устройства на основе информации характеристики а капелла оригинального певца, проблемы с пением, которая соответствует опции коррекции звука и появляется в а капелла пользователя.[0029] In a possible implementation, after the recording of the first song is finished, the method further comprises: displaying by the electronic device a second interface, wherein the second interface includes a sound correction option, and the sound correction option includes an intonation correction option, a breathing sound correction option and a vibrato correction option. Electronic correction based on the original singer's a cappella characteristic information of a singing problem that occurs in the user's a cappella includes: in response to a sound correction option selected by the user, electronic correction based on the original singer's a cappella characteristic information, a singing problem that matches the sound correction option and appears in the user's a cappella.
[0030] В возможной реализации после окончания записи первой песни способ дополнительно включает в себя: отображение посредством электронного устройства второго интерфейса, причем второй интерфейс включает в себя опцию уточнения одного предложения; и в ответ на выбор пользователем опции уточнения одного предложения, отображение электронным устройством третьего интерфейса, при этом третий интерфейс включает в себя N (N > 1) предложений текста первой песни. В этом случае корректирование посредством электронного устройства на основе информации характеристики а капелла оригинального певца проблемы с пением, которая появляется в а капелла пользователя, в частности, включает в себя: если пользователь выбирает первый текст песни из N предложений текста песни, корректирование посредством электронного устройства на основе информации характеристики, содержащейся в а капелла оригинального певца и полученной после того, как оригинальный певец поет первый текст песни, проблемы с пением, которая соответствует первому тексту песни и которая появляется в а капелла пользователя. Таким образом, пользователь может корректировать, предложение за предложением, проблему с пением, которая появляется в а капелла пользователя, записанного на этот раз, чтобы корректировать песню, записанную пользователем, для певческого эффекта, который больше устраивает пользователя.[0030] In an exemplary implementation, after recording of the first song is finished, the method further includes: displaying, by the electronic device, a second interface, the second interface including a single sentence refinement option; and in response to the user selecting a single sentence refinement option, displaying a third interface by the electronic device, wherein the third interface includes N (N > 1) first song lyrics sentences. In this case, the correction by the electronic device based on the original singer's a cappella characteristic information of the singing problem that appears in the user's a cappella specifically includes: if the user selects the first lyrics from N sentences of lyrics, the correction by the electronic device to based on the characteristic information contained in the original singer's a cappella and obtained after the original singer sings the first lyrics of the song, a singing problem that matches the first lyrics and that appears in the user's a cappella. Thus, the user can correct, sentence by sentence, a singing problem that occurs in the a cappella of the user recorded this time to correct the song recorded by the user for a singing effect that is more suitable for the user.
[0031] Кроме того, при отображении третьего интерфейса электронное устройство может дополнительно отмечать в N предложениях текста песни на третьем интерфейсе место, в котором возникает проблема с пением. Таким образом, пользователь может интуитивно увидеть конкретную проблему, которая возникает, когда пользователь поет каждое предложение текста песни.[0031] In addition, when displaying the third interface, the electronic device may further mark in the N sentences of the lyrics on the third interface the place where the singing problem occurs. Thus, the user can intuitively see the specific problem that occurs when the user sings each sentence of the lyrics.
[0032] Согласно третьему аспекту настоящее изобретение обеспечивает электронное устройство, включающее в себя: сенсорный экран, один или более процессоров, одно или более запоминающих устройств, один или более микрофонов и одну или более компьютерных программ. Процессор связан с сенсорным экраном, памятью и микрофоном. Одна или более компьютерных программ хранятся в памяти. Когда электронное устройство работает, процессор выполняет одну или более компьютерных программ, хранящихся в памяти, так что электронное устройство выполняет способ записи песни или способ коррекции звука в соответствии с любой из вышеупомянутых реализаций.[0032] According to a third aspect, the present invention provides an electronic device including: a touch screen, one or more processors, one or more memory devices, one or more microphones, and one or more computer programs. The processor is connected to the touch screen, memory and microphone. One or more computer programs are stored in memory. When the electronic device is operating, the processor executes one or more computer programs stored in the memory such that the electronic device executes the song recording method or the sound correction method according to any of the above implementations.
[0033] Согласно четвертому аспекту настоящее изобретение обеспечивает компьютерный носитель данных, включающий в себя компьютерную инструкцию. Когда компьютерная инструкция выполняется на электронном устройстве, электронное устройство выполняет способ записи песни или способ коррекции звука в соответствии с любой реализацией первого аспекта.[0033] According to a fourth aspect, the present invention provides a computer storage medium including a computer instruction. When the computer instruction is executed on the electronic device, the electronic device executes the song recording method or the sound correction method according to any implementation of the first aspect.
[0034] Согласно пятому аспекту настоящее изобретение обеспечивает компьютерный программный продукт. Когда компьютерный программный продукт выполняется на электронном устройстве, электронное устройство выполняет способ записи песни или способ коррекции звука в соответствии с любой реализацией первого аспекта.[0034] According to a fifth aspect, the present invention provides a computer program product. When the computer program product is executed on the electronic device, the electronic device executes the song recording method or the sound correction method according to any implementation of the first aspect.
[0035] Согласно шестому аспекту настоящее изобретение обеспечивает графический интерфейс пользователя (GUI, graphical user interface), при этом графический интерфейс пользователя хранится в электронном устройстве, электронное устройство включает в себя сенсорный экран, память и процессор. Процессор выполнен с возможностью выполнения одной или более компьютерных программ, хранящихся в памяти. Графический интерфейс пользователя включает в себя: первый GUI, отображаемый на сенсорном экране, и первый GUI включает в себя кнопку записи, используемую для записи первой песни, второй GUI, отображаемый на сенсорном экране в ответ на событие касания для кнопки записи, при этом второй GUI представляет собой интерфейс записи для записи первой песни, второй GUI включает в себя информацию руководства для руководства пользователем, чтобы спеть первую песню, а информация руководства может включать в себя подсказку дыхания и/или подсказку вибрато.[0035] According to a sixth aspect, the present invention provides a graphical user interface (GUI), wherein the graphical user interface is stored in an electronic device, the electronic device includes a touch screen, a memory, and a processor. The processor is configured to execute one or more computer programs stored in memory. The GUI includes: a first GUI displayed on the touch screen, and the first GUI includes a record button used to record the first song, a second GUI displayed on the touch screen in response to a touch event for the record button, wherein the second GUI is a recording interface for recording the first song, the second GUI includes guide information for guiding the user to sing the first song, and the guide information may include a breath prompt and/or a vibrato prompt.
[0036] Например, второй GUI может дополнительно включать в себя результат оценки навыка дыхания и/или навыка вибрато пользователя во время пения.[0036] For example, the second GUI may further include an evaluation result of the user's breathing skill and/or vibrato skill while singing.
[0037] Например, после того, как второй GUI отображается на сенсорном экране, GUI дополнительно включает в себя: третий GUI, отображаемый на сенсорном экране после окончания записи первой песни, при этом третий GUI представляет собой интерфейс коррекции звука первой песни, и третий GUI включает в себя переключатель коррекции звука; и, когда переключатель коррекции звука включается пользователем, электронное устройство корректирует проблему с дыханием и/или проблему с вибрато, которые появляются в а капелла пользователя.[0037] For example, after the second GUI is displayed on the touch screen, the GUI further includes: a third GUI displayed on the touch screen after the recording of the first song is finished, the third GUI being the first song sound correction interface, and the third GUI includes a sound correction switch; and, when the sound correction switch is turned on by the user, the electronic device corrects the breathing problem and/or vibrato problem that appears in the user's a cappella.
[0038] Можно понять, что электронное устройство, обеспеченное в третьем аспекте, компьютерный носитель данных, обеспеченный в четвертом аспекте, компьютерный программный продукт, обеспеченный в пятом аспекте, и GUI, обеспеченный в шестом аспекте, все выполнены с возможностью выполнения соответствующих способов, обеспеченных выше. Поэтому для получения положительных эффектов, которые могут быть достигнуты, следует обратиться к положительным эффектам в соответствующих способах, приведенных выше. Подробности не описаны здесь снова.[0038] It can be understood that the electronic device provided in the third aspect, the computer storage medium provided in the fourth aspect, the computer program product provided in the fifth aspect, and the GUI provided in the sixth aspect are all capable of performing the respective methods provided above. Therefore, in order to obtain the positive effects that can be achieved, one should refer to the positive effects in the respective methods above. Details are not described here again.
КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙBRIEF DESCRIPTION OF THE DRAWINGS
[0039] Фиг. ФИГ. 1 - схематическая структурная диаграмма 1 электронного устройства согласно варианту осуществления изобретения согласно настоящей заявке;[0039] FIG. FIG. 1 is a schematic structural diagram 1 of an electronic device according to an embodiment of the invention according to the present application;
[0040] Фиг. ФИГ. 2 - схематическая архитектурная диаграмма операционной системы в электронном устройстве согласно варианту осуществления изобретения согласно настоящей заявке;[0040] FIG. FIG. 2 is a schematic architectural diagram of an operating system in an electronic device according to an embodiment of the invention according to the present application;
[0041] Фиг. 3 - схематическая блок-схема способа записи песни и способа коррекции звука согласно варианту осуществления изобретения согласно настоящей заявке;[0041] FIG. 3 is a schematic flowchart of a song recording method and a sound correction method according to an embodiment of the invention according to the present application;
[0042] Фиг. 4 - схематическая диаграмма 1 сценария способа записи песни согласно варианту осуществления изобретения согласно настоящей заявке;[0042] FIG. 4 is a schematic diagram 1 of a scenario of a song recording method according to an embodiment of the invention according to the present application;
[0043] Фиг. 5 - схематическая диаграмма 2 сценария способа записи песни согласно варианту осуществления изобретения согласно настоящей заявке;[0043] FIG. 5 is a schematic diagram 2 of a scenario of a song recording method according to an embodiment of the invention according to the present application;
[0044] Фиг. 6 - схематическая диаграмма 3 сценария способа записи песни согласно варианту осуществления изобретения согласно настоящей заявке;[0044] FIG. 6 is a schematic diagram 3 of a scenario of a song recording method according to an embodiment of the invention according to the present application;
[0045] Фиг. 7 - схематическая диаграмма 4 сценария способа записи песни согласно варианту осуществления изобретения согласно настоящей заявке;[0045] FIG. 7 is a schematic diagram 4 of a scenario of a song recording method according to an embodiment of the invention according to the present application;
[0046] Фиг. 8 - схематическая диаграмма 5 сценария способа записи песни согласно варианту осуществления изобретения согласно настоящей заявке;[0046] FIG. 8 is a schematic diagram 5 of a scenario of a song recording method according to an embodiment of the invention according to the present application;
[0047] Фиг. 9A и фиг. 9B - схематическая диаграмма 6 сценария способа записи песни согласно варианту осуществления изобретения согласно настоящей заявке;[0047] FIG. 9A and FIG. 9B is a schematic diagram 6 of a scenario of a song recording method according to an embodiment of the invention according to the present application;
[0048] Фиг. 10 (а), фиг. 10 (b) и фиг. 10 (c) - схематическая диаграмма 7 сценария способа записи песни согласно варианту осуществления изобретения согласно настоящей заявке;[0048] FIG. 10(a), fig. 10(b) and FIG. 10(c) is a schematic diagram 7 of a scenario of a song recording method according to an embodiment of the invention according to the present application;
[0049] Фиг. 11 (а) и фиг. 11 (b) - схематическая диаграмма 8 сценария способа записи песни согласно варианту осуществления изобретения согласно настоящей заявке;[0049] FIG. 11(a) and FIG. 11(b) is a schematic diagram 8 of a scenario of a song recording method according to an embodiment of the invention according to the present application;
[0050] Фиг. 12 (а) и фиг. 12 (b) - схематическая диаграмма 9 сценария способа записи песни согласно варианту осуществления изобретения согласно настоящей заявке;[0050] FIG. 12(a) and FIG. 12(b) is a schematic diagram 9 of a scenario of a song recording method according to an embodiment of the invention according to the present application;
[0051] Фиг. 13 - схематическая диаграмма 1 сценария способа коррекции звука согласно варианту осуществления изобретения согласно настоящей заявке;[0051] FIG. 13 is a schematic diagram 1 of a scenario of a sound correction method according to an embodiment of the invention according to the present application;
[0052] Фиг. 14 - схематическая диаграмма 2 сценария способа коррекции звука согласно варианту осуществления изобретения согласно настоящей заявке;[0052] FIG. 14 is a schematic diagram 2 of a scenario of an audio correction method according to an embodiment of the invention according to the present application;
[0053] Фиг. 15 (а) и фиг. 15 (b) - схематическая диаграмма 3 сценария способа коррекции звука согласно варианту осуществления изобретения согласно настоящей заявке;[0053] FIG. 15(a) and FIG. 15(b) is a schematic diagram 3 of a scenario of a sound correction method according to an embodiment of the invention according to the present application;
[0054] Фиг. 16 (а) и фиг. 16 (b) - схематическая диаграмма 4 сценария способа коррекции звука согласно варианту осуществления изобретения согласно настоящей заявке; и[0054] FIG. 16(a) and FIG. 16(b) is a schematic diagram 4 of a scenario of a sound correction method according to an embodiment of the invention according to the present application; and
[0055] Фиг. ФИГ. 17 - схематическая структурная диаграмма 2 электронного устройства согласно варианту осуществления изобретения согласно настоящей заявке.[0055] FIG. FIG. 17 is a schematic structural diagram 2 of an electronic device according to an embodiment of the invention according to the present application.
ОПИСАНИЕ ВАРИАНТОВ ОСУЩЕСТВЛЕНИЯ ИЗОБРЕТЕНИЯDESCRIPTION OF EMBODIMENTS
[0056] Ниже подробно описаны реализации вариантов осуществления изобретения со ссылкой на сопроводительные чертежи.[0056] The implementations of the embodiments of the invention are described in detail below with reference to the accompanying drawings.
[0057] Например, способ записи песни и способ коррекции звука, представленные в вариантах осуществления изобретения согласно настоящей заявке, могут применяться к электронным устройствам, таким как мобильный телефон, планшетный компьютер, портативный компьютер, ультрамобильный персональный компьютер (ultra-mobile personal computer, UMPC), карманный компьютер, нетбук, персональный цифровой помощник (personal digital assistant, PDA), носимое электронное устройство и устройство виртуальной реальности. В вариантах осуществления изобретения согласно настоящей заявке это не ограничено.[0057] For example, the song recording method and the sound correction method presented in the embodiments of the invention according to the present application can be applied to electronic devices such as a mobile phone, a tablet computer, a laptop computer, an ultra-mobile personal computer (UMPC). ), PDA, netbook, personal digital assistant (PDA), wearable electronic device and virtual reality device. In embodiments of the invention according to the present application, this is not limited.
[0058] Например, фиг. 1 представляет собой схематическую структурную схему электронного устройства 100.[0058] For example, FIG. 1 is a schematic block diagram of the electronic device 100.
[0059] Электронное устройство 100 может включать в себя процессор 110, интерфейс 120 внешней памяти, внутреннюю память 121, интерфейс 130 универсальной последовательной шины (universal serial bus, USB), модуль 140 управления зарядкой, модуль 141 управления питанием, аккумуляторную батарею 142, антенну 1, антенну 2, модуль 150 мобильной связи, модуль 160 беспроводной связи, аудиомодуль 170, громкоговоритель 170A, телефонную трубку 170B, микрофон 170C, интерфейс 170D гарнитуры, модуль 180 датчика, кнопку 190, электромотор 191, индикатор 192, камеру 193, дисплей 194 и интерфейс 195 карты модуля идентификации абонента (subscriber identification module, SIM). Модуль 180 датчика может включать в себя датчик 180A давления, гироскопический датчик 180B, датчик 180C барометрического давления, магнитный датчик 180D, датчик 180E ускорения, датчик 180F расстояния, оптический датчик 180G приближения, датчик 180H отпечатков пальцев, датчик 180J температуры, датчик 180K касания, датчик 180L окружающего света, датчик 180M костной проводимости и т.п.[0059] The electronic device 100 may include a processor 110, an external memory interface 120, an internal memory 121, a universal serial bus (USB) interface 130, a charge control module 140, a power control module 141, a
[0060] Можно понять, что структура, показанная в этом варианте осуществления изобретения согласно настоящей заявке, конкретно не ограничивает электронное устройство 100. В некоторых других вариантах осуществления изобретения согласно настоящей заявке электронное устройство 100 может включать в себя больше или меньше частей, чем показано на чертеже, или объединять некоторые части, или разделять некоторые части, или иметь другое расположение частей. Части, показанные на рисунке, могут быть реализованы посредством оборудования, программного обеспечения или комбинации программного обеспечения и оборудования.[0060] It can be understood that the structure shown in this embodiment of the invention according to the present application does not specifically limit the electronic device 100. In some other embodiments of the invention according to the present application, the electronic device 100 may include more or fewer parts than shown in drawing, or combine some parts, or separate some parts, or have a different arrangement of parts. The parts shown in the figure may be implemented by hardware, software, or a combination of software and hardware.
[0061] Процессор 110 может включать в себя один или более вычислительных блоков. Например, процессор 110 может включать в себя процессор приложений (application processor, AP), процессор модема, графический процессор (graphics processing unit, GPU), процессор сигналов изображения (image signal processor, ISP), контроллер, видеокодек, процессор цифровых сигналов (digital signal processor, DSP), процессор основной полосы частот и/или блок обработки нейронной сети (neural-network processing unit, NPU). Различные блоки обработки могут быть независимыми компонентами или могут быть интегрированы в один или более процессоров.[0061] The processor 110 may include one or more computing units. For example, processor 110 may include an application processor (AP), a modem processor, a graphics processing unit (GPU), an image signal processor (ISP), a controller, a video codec, a digital signal processor (digital signal processor (DSP), baseband processor, and/or neural-network processing unit (NPU). The various processing units may be independent components or may be integrated into one or more processors.
[0062] Контроллер может формировать сигнал управления операцией на основе кода операции инструкции и сигнала временной последовательности, чтобы управлять командой выборки и командой выполнения.[0062] The controller may generate an operation control signal based on the instruction opcode and the time sequence signal to control the fetch instruction and the execute instruction.
[0063] Память может быть дополнительно размещена в процессоре 110 и выполнена с возможностью хранения инструкций и данных. В некоторых вариантах осуществления изобретения память в процессоре 110 является кэш-памятью. В памяти может храниться инструкция или данные, которые только что используются или циклически используются процессором 110. Если процессору 110 необходимо снова использовать инструкцию или данные, процессор 110 может напрямую вызвать инструкцию или данные из памяти, тем самым избегая повторного доступа и сокращая время ожидания процессора 110. Таким образом повышается эффективность системы.[0063] The memory may be further located in the processor 110 and configured to store instructions and data. In some embodiments, the memory in processor 110 is a cache. The memory may store an instruction or data that is just being used or cycled by the processor 110. If the processor 110 needs to reuse the instruction or data, the processor 110 can directly recall the instruction or data from memory, thereby avoiding re-access and reducing the processor 110 wait time. This improves the efficiency of the system.
[0064] В некоторых вариантах осуществления процессор 110 может включать в себя один или более интерфейсов. Интерфейс может включать в себя интерфейс межинтегральной схемы (inter-integrated circuit sound, I2C), интерфейс звука межинтегральной схемы (inter-integrated circuit sound, I2S), интерфейс с импульсной кодовой модуляцией (pulse code modulation, PCM), интерфейс универсального асинхронного приемника/передатчика (universal asynchronous receiver/transmitter, UART), интерфейс процессора мобильной индустрии (mobile industry processor interface, MIPI), интерфейс ввода/вывода общего назначения (general-purpose input/output, GPIO), a интерфейс модуля идентификации абонента (subscriber identity module, SIM), интерфейс универсальной последовательной шины (universal serial bus, USB) и/или тому подобное.[0064] In some embodiments, processor 110 may include one or more interfaces. The interface may include an inter-integrated circuit sound (I2C) interface, an inter-integrated circuit sound (I2S) interface, a pulse code modulation (PCM) interface, a universal asynchronous receiver/ a universal asynchronous receiver/transmitter (UART), a mobile industry processor interface (MIPI), a general-purpose input/output (GPIO), a subscriber identity module , SIM), a universal serial bus (USB) interface, and/or the like.
[0065] Интерфейс I2C представляет собой двустороннюю синхронную последовательную шину и включает в себя одну линию последовательных данных (serial data line, SDA) и одну линию последовательной синхронизации (линия тактовых импульсов, derail clock line, SCL). В некоторых вариантах осуществления изобретения процессор 110 может включать в себя множество шин I2C. Процессор 110 может быть отдельно соединен с сенсорным датчиком 180K, зарядным устройством, вспышкой камеры, камерой 193 и т.п. с использованием различных интерфейсов шины I2C. Например, процессор 110 может быть связан с датчиком 180K касания посредством интерфейса I2C, так что процессор 110 обменивается данными с датчиком 180K касания посредством интерфейса шины I2C, чтобы реализовать функцию касания электронного устройства 100.[0065] The I2C interface is a two-way synchronous serial bus and includes one serial data line (serial data line, SDA) and one serial clock line (clock line, derail clock line, SCL). In some embodiments, processor 110 may include multiple I2C buses. The processor 110 may be separately connected to the touch sensor 180K, charger, camera flash, camera 193, and the like. using various I2C bus interfaces. For example, processor 110 may be coupled to touch sensor 180K via an I2C interface such that processor 110 communicates with touch sensor 180K via an I2C bus interface to implement the touch function of electronic device 100.
[0066] Интерфейс I2S может использоваться для аудиосвязи. В некоторых вариантах осуществления изобретения процессор 110 может включать в себя множество шин I2S. Процессор 110 может быть подключен к аудиомодулю 170 посредством шины I2S для реализации связи между процессором 110 и аудиомодулем 170. В некоторых вариантах осуществления изобретения аудиомодуль 170 может передавать аудиосигнал в модуль 160 беспроводной связи с использованием интерфейса I2S, чтобы реализовать функцию ответа на вызов посредством гарнитуры Bluetooth.[0066] The I2S interface may be used for audio communication. In some embodiments, processor 110 may include multiple I2S buses. The processor 110 may be connected to the audio module 170 via the I2S bus to enable communication between the processor 110 and the audio module 170. In some embodiments, the audio module 170 may transmit an audio signal to the wireless module 160 using the I2S interface to implement call answering functionality via a Bluetooth headset. .
[0067] Интерфейс PCM также может использоваться для аудиосвязи и дискретизации, квантования и кодирования аналогового сигнала. В некоторых вариантах осуществления изобретения аудиомодуль 170 может быть связан с модулем 160 беспроводной связи с использованием интерфейса шины PCM. В некоторых вариантах осуществления изобретения аудиомодуль 170 также может передавать аудиосигнал в модуль 160 беспроводной связи с использованием интерфейса PCM, чтобы реализовать функцию ответа на вызов посредством гарнитуры Bluetooth. И интерфейс I2S, и интерфейс PCM могут использоваться для аудиосвязи.[0067] The PCM interface can also be used for audio communication and analog signal sampling, quantization, and coding. In some embodiments of the invention, the audio module 170 may be associated with the wireless module 160 using a PCM bus interface. In some embodiments of the invention, the audio module 170 may also transmit an audio signal to the wireless communication module 160 using the PCM interface to implement the call answering function via a Bluetooth headset. Both the I2S interface and the PCM interface can be used for audio communication.
[0068] Интерфейс UART представляет собой универсальную шину последовательных данных, которая используется для асинхронной связи. Шина может быть шиной двусторонней связи. Шина преобразует подлежащие передаче данные между последовательной и параллельной связью. В некоторых вариантах осуществления изобретения интерфейс UART обычно конфигурируется для подключения процессора 110 к модулю 160 беспроводной связи. Например, процессор 110 обменивается данными с модулем Bluetooth в модуле 160 беспроводной связи посредством интерфейса UART для реализации характеристики Bluetooth. В некоторых вариантах осуществления изобретения аудиомодуль 170 может передавать аудиосигнал в модуль 160 беспроводной связи с использованием интерфейса UART, чтобы реализовать функцию воспроизведения музыки посредством гарнитуры Bluetooth.[0068] The UART interface is a universal serial data bus that is used for asynchronous communication. The bus may be a talkback bus. The bus converts the data to be transferred between serial and parallel communication. In some embodiments of the invention, the UART interface is typically configured to connect the processor 110 to the wireless module 160. For example, the processor 110 communicates with the Bluetooth module in the wireless module 160 via the UART interface to implement the Bluetooth feature. In some embodiments of the invention, the audio module 170 may transmit an audio signal to the wireless communication module 160 using a UART interface to implement the function of playing music through a Bluetooth headset.
[0069] Интерфейс MIPI может быть выполнен с возможностью подключения процессора 110 к периферийному компоненту, такому как дисплей 194 или камера 193. Интерфейс MIPI включает в себя последовательный интерфейс камеры (camera serial interface, CSI), последовательный интерфейс дисплея (display serial interface, DSI) и т.п. В некоторых вариантах осуществления изобретения процессор 110 связывается с камерой 193 посредством интерфейса CSI, чтобы реализовать функцию фотографирования электронного устройства 100. Процессор 110 обменивается данными с дисплеем 194 посредством интерфейса DSI, чтобы реализовать функцию отображения электронного устройства 100.[0069] The MIPI interface may be configured to connect the processor 110 to a peripheral component such as a display 194 or a camera 193. The MIPI interface includes a camera serial interface (CSI), a display serial interface (DSI ) etc. In some embodiments, the processor 110 communicates with the camera 193 via the CSI interface to implement the photographing function of the electronic device 100. The processor 110 communicates with the display 194 via the DSI interface to implement the display function of the electronic device 100.
[0070] GPIO интерфейс можно настроить посредством программного обеспечения. GPIO интерфейс может быть настроен как сигнал управления или может быть настроен как сигнал данных. В некоторых вариантах осуществления изобретения GPIO интерфейс может быть выполнен с возможностью подключения процессора 110 к камере 193, дисплею 194, модулю 160 беспроводной связи, аудиомодулю 170, модулю 180 датчика и т.п. GPIO интерфейс может быть альтернативно сконфигурирован как I2C интерфейс, I2S интерфейс, UART интерфейс, MIPI интерфейс и т.п.[0070] The GPIO interface can be configured via software. The GPIO interface can be configured as a control signal or can be configured as a data signal. In some embodiments, the GPIO interface may be configured to connect processor 110 to camera 193, display 194, wireless module 160, audio module 170, sensor module 180, and the like. The GPIO interface can be alternatively configured as I2C interface, I2S interface, UART interface, MIPI interface, etc.
[0071] Можно понять, что взаимосвязь интерфейсного соединения между модулями, показанными в этом варианте осуществления настоящего изобретения, является просто схематическим описанием и не ограничивает структуру электронного устройства 100. В некоторых других вариантах осуществления изобретения согласно настоящей заявке электронное устройство 100 может альтернативно использовать способ подключения интерфейса, отличный от того, что в предыдущем варианте осуществления изобретения, или использовать комбинацию множества способов подключения интерфейса.[0071] It can be understood that the interface connection relationship between the modules shown in this embodiment of the present invention is merely a schematic description and does not limit the structure of the electronic device 100. In some other embodiments of the invention according to the present application, the electronic device 100 may alternatively use the connection method interface other than that of the previous embodiment of the invention, or use a combination of multiple interface connection methods.
[0072] Модуль 140 управления зарядкой выполнен с возможностью приема входного сигнала зарядки от зарядного устройства. Зарядное устройство может быть беспроводным или проводным. В некоторых вариантах осуществления проводной зарядки модуль 140 управления зарядкой может принимать ввод зарядки проводного зарядного устройства посредством USB интерфейса 130. В некоторых вариантах осуществления беспроводной зарядки модуль 140 управления зарядкой может принимать ввод беспроводной зарядки посредством катушки беспроводной зарядки электронного устройства 100. Во время зарядки аккумуляторной батареи 142 модуль 140 управления зарядкой может дополнительно подавать питание на электронное устройство, используя модуль 141 управления питанием.[0072] The charging control module 140 is configured to receive a charging input signal from a charger. The charger can be wireless or wired. In some wired charging embodiments, charge control module 140 may receive charging input from a wired charger via USB interface 130. In some wireless charging embodiments, charge control module 140 may receive wireless charging input via wireless charging coil of electronic device 100. While charging a
[0073] Модуль 141 управления питанием выполнен с возможностью подключения аккумуляторной батареи 142, модуля 140 управления зарядкой и процессора 110. Модуль 141 управления питанием принимает входные данные от аккумуляторной батареи 142 и/или модуля 140 управления зарядкой и подает питание на процессор 110, внутреннюю память 121, дисплей 194, камеру 193, модуль 160 беспроводной связи и т.п. Модуль 141 управления питанием может быть дополнительно выполнен с возможностью мониторинга параметров, таких как емкость батареи, количество циклов батареи и состояние работоспособности батареи (утечка тока или сопротивление). В некоторых других вариантах осуществления изобретения модуль 141 управления питанием может быть альтернативно расположен в процессоре 110. В некоторых других вариантах осуществления изобретения модуль 141 управления питанием и модуль 140 управления зарядкой альтернативно могут быть расположены в одном и том же компоненте.[0073] Power control module 141 is configured to connect
[0074] Функция беспроводной связи электронного устройства 100 может быть реализована с использованием антенны 1, антенны 2, модуля 150 мобильной связи, модуля 160 беспроводной связи, процессора модема, процессора основной полосы частот и т.п.[0074] The wireless communication function of the electronic device 100 may be implemented using antenna 1, antenna 2, mobile communication module 150, wireless communication module 160, modem processor, baseband processor, and the like.
[0075] Антенна 1 и антенна 2 выполнены с возможностью передачи и приема сигнала электромагнитной волны. Каждая антенна в электронном устройстве 100 может быть выполнена с возможностью покрытия одной полосы частот связи или множества полос частот связи. Различные антенны могут быть дополнительно мультиплексированы для улучшения использования антенны. Например, антенна 1 может быть мультиплексирована как разнесенная антенна беспроводной локальной сети. В некоторых других вариантах осуществления изобретения антенна может использоваться в сочетании с переключателем настройки.[0075] Antenna 1 and antenna 2 are configured to transmit and receive an electromagnetic wave signal. Each antenna in electronic device 100 may be configured to cover a single communication band or multiple communication bands. Various antennas can be further multiplexed to improve antenna utilization. For example, antenna 1 may be multiplexed as a wireless LAN diversity antenna. In some other embodiments of the invention, the antenna may be used in combination with a tuning switch.
[0076] Модуль 150 мобильной связи может обеспечивать решение для беспроводной связи, включая 2G/3G/4G/5G и т.п., применяемое к электронному устройству 100. Модуль 150 мобильной связи может включать в себя один или более фильтров, один или более переключателей, один или более усилителей мощности, один или более усилителей с низким уровнем шума (low noise amplifier, LNA) и т.п. Модуль 150 мобильной связи может принимать электромагнитную волну посредством антенны 1, выполнять обработку, такую как фильтрация или усиление принятой электромагнитной волны, и передавать электромагнитную волну процессору модема для демодуляции. Модуль 150 мобильной связи может дополнительно усиливать сигнал, модулированный процессором модема, преобразовывать сигнал в электромагнитную волну посредством антенны 1 и излучать электромагнитную волну. В некоторых вариантах осуществления изобретения, по меньшей мере, некоторые функциональные модули модуля 150 мобильной связи могут быть расположены в процессоре 110. В некоторых вариантах осуществления изобретения по меньшей мере некоторые функциональные модули в модуле 150 мобильной связи и по меньшей мере некоторые модули в процессоре 110 могут быть расположены в одном компоненте.[0076] The mobile communication module 150 may provide a wireless communication solution, including 2G/3G/4G/5G, etc., applied to the electronic device 100. The mobile communication module 150 may include one or more filters, one or more switches, one or more power amplifiers, one or more low noise amplifiers (LNA), and the like. The mobile communication unit 150 may receive the electromagnetic wave through the antenna 1, perform processing such as filtering or amplifying the received electromagnetic wave, and transmit the electromagnetic wave to the modem processor for demodulation. The mobile communication unit 150 can further amplify the signal modulated by the modem processor, convert the signal into an electromagnetic wave via the antenna 1, and emit an electromagnetic wave. In some embodiments, at least some of the functional modules of the mobile module 150 may be located in the processor 110. In some embodiments, at least some of the functional modules in the mobile module 150 and at least some of the modules in the processor 110 may be located in one component.
[0077] Процессор модема может включать в себя модулятор и демодулятор. Модулятор выполнен с возможностью модуляции отправляемого низкочастотного сигнала основной полосы частот в сигнал средней и высокой частоты. Демодулятор выполнен с возможностью демодуляции принятого сигнала электромагнитной волны в низкочастотный сигнал основной полосы частот. Затем демодулятор передает низкочастотный сигнал основной полосы частот, полученный посредством демодуляции, процессору основной полосы частот для обработки. Низкочастотный сигнал основной полосы частот обрабатывается процессором основной полосы частот, а затем передается процессору приложений. Процессор приложения выводит звуковой сигнал посредством аудиоустройства (которое не ограничивается громкоговорителем 170A, телефонной трубкой 170B и т.п.) или отображает изображение или видео посредством дисплея 194. В некоторых вариантах осуществления изобретения процессор модема может быть независимым компонентом. В некоторых других вариантах осуществления изобретения процессор модема может быть независимым от процессора 110 и расположен в одном компоненте с модулем 150 мобильной связи или другим функциональным модулем.[0077] The modem processor may include a modulator and a demodulator. The modulator is configured to modulate the low frequency baseband signal to be sent into a medium and high frequency signal. The demodulator is configured to demodulate the received electromagnetic wave signal into a low frequency baseband signal. Then, the demodulator transmits the low frequency baseband signal obtained by demodulation to the baseband processor for processing. The low frequency baseband signal is processed by the baseband processor and then transmitted to the application processor. The application processor outputs audio via an audio device (which is not limited to
[0078] Модуль 160 беспроводной связи может обеспечивать решение для беспроводной связи, включая в себя беспроводную локальную сеть (wireless local area networks, WLAN) (например, сеть с верностью беспроводной связи (Wireless Fidelity, Wi-Fi)), Bluetooth (Bluetooth, BT), глобальную навигационную спутниковую систему (global navigation satellite system, GNSS), частотную модуляцию (frequency modulation, FM), технологию ближней радиосвязи (near field communicatio, NFC), инфракрасную (infrared, IR) технологию и т.п., применяемые к электронному устройству 100. Модуль 160 беспроводной связи может быть одним или более компонентами, интегрированными с одним или более модулями обработки связи. Модуль 160 беспроводной связи принимает электромагнитную волну посредством антенны 2, выполняет частотную модуляцию и фильтрацию сигнала электромагнитной волны и отправляет обработанный сигнал процессору 110. Модуль 160 беспроводной связи может дополнительно принимать сигнал, который должен быть отправлен от процессора 110, выполнять частотную модуляцию сигнала и усиливать сигнал, преобразовывать сигнал в электромагнитную волну посредством антенны 2 и излучать электромагнитную волну.[0078] The wireless communication module 160 may provide a wireless communication solution including wireless local area networks (WLAN) (e.g., a wireless fidelity network (Wireless Fidelity, Wi-Fi)), Bluetooth (Bluetooth, BT), global navigation satellite system (GNSS), frequency modulation (FM), near field communicatio (NFC), infrared (infrared, IR) technology, etc., applied to the electronic device 100. The wireless communication module 160 may be one or more components integrated with one or more communication processing modules. The wireless communication module 160 receives the electromagnetic wave through the antenna 2, performs frequency modulation and filtering of the electromagnetic wave signal, and sends the processed signal to the processor 110. The wireless communication module 160 may further receive the signal to be sent from the processor 110, perform frequency modulation of the signal, and amplify the signal. , convert the signal into an electromagnetic wave by means of the antenna 2, and emit an electromagnetic wave.
[0079] В некоторых вариантах осуществления изобретения антенна 1 и модуль 150 мобильной связи электронного устройства 100 связаны, а антенна 2 и модуль 160 беспроводной связи связаны, так что электронное устройство 100 может связываться с сетью и другим устройством посредством технологии беспроводной связи. Технология беспроводной связи может включать в себя глобальную систему мобильной связи (lobal system for mobile communications, GSM), общую услугу пакетной радиосвязи (general packet radio service, GPRS), множественный доступ с кодовым разделением (code division multiple access, CDMA), широкополосный множественный доступ с кодовым разделением каналов (wideband code division multiple access, WCDMA), множественный доступ с кодовым разделением каналов с временным разделением каналов (time-division code division multiple access, TD-SCDMA), стандарт долгосрочное развитие сетей связи (long term evolution, LTE), BT, GNSS , WLAN, NFC, FM, IR-технология и/или тому подобное. GNSS может включать в себя глобальную систему позиционирования (global positioning system, GPS), глобальную навигационную спутниковую систему (global navigation satellite system, , GLONASS), навигационную спутниковую систему BeiDou (beidou navigation satellite system, BDS), квазизенитную спутниковую систему (quasi-zenith satellite system, QZSS)) и/или спутниковую систему функционального дополнения (satellite based augmentation systems, SBAS).[0079] In some embodiments, antenna 1 and mobile communication module 150 of electronic device 100 are coupled, and antenna 2 and wireless module 160 are coupled so that electronic device 100 can communicate with a network and another device via wireless technology. Wireless technology may include global system for mobile communications (GSM), general packet radio service (GPRS), code division multiple access (CDMA), wideband multiple wideband code division multiple access (WCDMA), time-division code division multiple access (TD-SCDMA), long-term evolution (LTE) standard ), BT, GNSS , WLAN, NFC, FM, IR technology and/or the like. GNSS may include a global positioning system (GPS), a global navigation satellite system (global navigation satellite system, GLONASS), a BeiDou navigation satellite system (BDS), a quasi-zenith satellite system (quasi-zenith satellite system, QZSS)) and/or satellite based augmentation systems (SBAS).
[0080] Электронное устройство 100 реализует функцию отображения посредством графического процессора, дисплея 194, процессора приложений и т.п. Графический процессор представляет собой микропроцессор для обработки изображений, подключенный к дисплею 194 и процессору приложений. Графический процессор выполнен с возможностью выполнения математических и геометрических вычислений и используется для рендеринга изображений. Процессор 110 может включать в себя один или более графических процессоров, которые выполняют программную инструкцию для генерации или изменения отображаемой информации.[0080] The electronic device 100 implements a display function via a graphics processor, a display 194, an application processor, or the like. The graphics processor is an image processing microprocessor connected to the display 194 and the application processor. The graphics processor is configured to perform mathematical and geometric calculations and is used to render images. Processor 110 may include one or more graphics processors that execute a software instruction to generate or modify displayed information.
[0081] Дисплей 194 выполнен с возможностью отображения изображения, видео и т.п. Дисплей 194 включает в себя панель дисплея. Панель дисплея может использовать жидкокристаллический дисплей (liquid crystal display, LCD), органический светоизлучающий диод (organic light-emitting diode, OLED), органический светоизлучающий диод с активной матрицей или органический светоизлучающий диод с активной матрицей ((active-matrix organic light emitting diode, AMOLED), гибкий светодиод (flex light-emitting diode, FLED), мини-светодиод, микро-светодиод, микро-OLED, светоизлучающий диод с квантовой точкой ( quantum dot light emitting diodes, QLED) или тому подобное. В некоторых вариантах осуществления изобретения электронное устройство 100 может включать в себя один или N дисплеев 194, где N - положительное целое число больше 1.[0081] The display 194 is configured to display an image, video, or the like. Display 194 includes a display panel. The display panel can use liquid crystal display (LCD), organic light-emitting diode (OLED), active-matrix organic light-emitting diode (active-matrix organic light emitting diode, AMOLED), flexible light emitting diode (FLED), mini LED, micro LED, micro OLED, quantum dot light emitting diodes (QLED), or the like. In some embodiments of the invention electronic device 100 may include one or N displays 194, where N is a positive integer greater than 1.
[0082] Электронное устройство 100 может реализовывать функцию фотографирования с использованием ISP, камеры 193, видеокодека, GPU, дисплея 194, процессора приложений и т.п.[0082] The electronic device 100 may implement a photographing function using an ISP, a camera 193, a video codec, a GPU, a display 194, an application processor, and the like.
[0083] Интернет-провайдер выполнен с возможностью обработки данных, возвращаемых камерой 193. Например, во время фотографирования включается затвор, свет передается на светочувствительный элемент камеры через объектив, оптический сигнал преобразуется в электрический сигнал, а светочувствительный элемент камеры передает электрический сигнал на ISP для обработки, чтобы преобразовать электрический сигнал в изображение, которое можно увидеть. Интернет-провайдер может дополнительно выполнить оптимизацию алгоритма для шума, яркости и цвета лица изображения. Интернет-провайдер может дополнительно оптимизировать такие параметры, как экспозиция и цветовая температура сцены фотографирования. В некоторых вариантах осуществления ISP может быть расположен в камере 193.[0083] The ISP is configured to process the data returned by the camera 193. For example, during photographing, the shutter is turned on, light is transmitted to the camera photosensitive element through the lens, the optical signal is converted to an electrical signal, and the camera photosensitive element transmits an electrical signal to the ISP for processing to convert the electrical signal into an image that can be seen. The ISP may further optimize the algorithm for image noise, brightness, and complexion. The ISP may further optimize parameters such as exposure and color temperature of the photographic scene. In some embodiments, the ISP may be located in chamber 193.
[0084] Камера 193 выполнена с возможностью захвата статического изображения или видео. Оптическое изображение объекта создается посредством линзы и проецируется на светочувствительный элемент. Фоточувствительный элемент может быть устройством с зарядовой связью (charge coupled device, CCD) или фотоэлектрическим транзистором комплементарный металл-оксид-полупроводник (complementary metal-oxide-semiconductor, CMOS). Светочувствительный элемент преобразует оптический сигнал в электрический сигнал, а затем передает электрический сигнал в ISP для преобразования электрического сигнала в сигнал цифрового изображения. Интернет-провайдер выводит цифровой сигнал изображения на DSP для обработки. DSP преобразует сигнал цифрового изображения в сигнал изображения в стандартном формате, таком как RGB или YUV. В некоторых вариантах осуществления изобретения электронное устройство 100 может включать в себя одну или N камер 193, где N - положительное целое число больше 1.[0084] Camera 193 is configured to capture a still image or video. An optical image of an object is created by means of a lens and projected onto a photosensitive element. The photosensitive element may be a charge coupled device (CCD) or a complementary metal-oxide-semiconductor (CMOS) photoelectric transistor. The photosensitive element converts the optical signal into an electrical signal, and then transmits the electrical signal to the ISP to convert the electrical signal into a digital image signal. The ISP outputs the digital image signal to the DSP for processing. The DSP converts the digital image signal into an image signal in a standard format such as RGB or YUV. In some embodiments, the electronic device 100 may include one or N cameras 193, where N is a positive integer greater than 1.
[0085] Процессор цифровых сигналов выполнен с возможностью обработки цифрового сигнала и может дополнительно обрабатывать другой цифровой сигнал в дополнение к сигналу цифрового изображения. Например, когда электронное устройство 100 выбирает частоту, процессор цифровых сигналов конфигурируется для выполнения преобразования Фурье или подобного над частотной энергией.[0085] The digital signal processor is configured to process a digital signal and may further process another digital signal in addition to the digital image signal. For example, when the electronic device 100 selects a frequency, the digital signal processor is configured to perform a Fourier transform or the like on the frequency energy.
[0086] Видеокодек выполнен с возможностью сжатия или распаковки цифрового видео. Электронное устройство 100 может поддерживать один или более видеокодеков. Таким образом, электронное устройство 100 может воспроизводить или записывать видео во множестве форматов кодирования, например, группа экспертов по движущимся изображениям (moving picture experts group, MPEG) 1, MPEG 2, MPEG 3 и MPEG 4.[0086] The video codec is configured to compress or decompress digital video. Electronic device 100 may support one or more video codecs. Thus, the electronic device 100 can play back or record video in a variety of coding formats, such as moving picture experts group (MPEG) 1, MPEG 2, MPEG 3, and MPEG 4.
[0087] NPU - это вычислительный процессор нейронной сети (neural-network, NN), который быстро обрабатывает входную информацию, обращаясь к структуре биологической нейронной сети, например, обращаясь к режиму передачи между нейронами человеческого мозга, и может в дальнейшем непрерывно выполнять – самообучение. Такие приложения, как интеллектуальное распознавание электронного устройства 100, могут быть реализованы с использованием NPU, такие как распознавание изображений, распознавание лиц, распознавание речи и понимание текста.[0087] An NPU is a neural-network (NN) computational processor that quickly processes input information by referring to the structure of a biological neural network, for example, referring to the transmission mode between neurons of the human brain, and can further continuously perform - self-learning . Applications such as intelligent recognition of the electronic device 100 can be implemented using the NPU, such as image recognition, face recognition, speech recognition, and text understanding.
[0088] Интерфейс 120 внешней памяти может быть выполнен с возможностью подключения к внешней карте памяти, такой как карта микро SD, для расширения возможностей хранения электронного устройства 100. Внешняя карта памяти связывается с процессором 110 посредством интерфейса 120 внешней памяти, чтобы реализовать функцию хранения данных, например, для сохранения файла, такого как музыка или видео, на внешней карте памяти.[0088] The external memory interface 120 may be configured to connect to an external memory card, such as a micro SD card, to expand the storage capabilities of the electronic device 100. The external memory card communicates with the processor 110 via the external memory interface 120 to realize a data storage function. , for example, to save a file such as music or video to an external memory card.
[0089] Внутренняя память 121 может быть выполнена с возможностью хранения одной или более компьютерных программ, и одна или более компьютерных программ включают в себя инструкции. Процессор 110 может выполнять инструкцию, хранящуюся во внутренней памяти 121, чтобы электронное устройство 100 могло выполнять способ интеллектуальной рекомендации контакта, предусмотренный в некоторых вариантах осуществления изобретения согласно настоящей заявке, различных функциональных приложениях, обработке данных и т.п. Внутренняя память 121 может включать в себя область хранения программ и область хранения данных. В области хранения программ может храниться операционная система. Область хранения программ может дополнительно хранить одну или более прикладных программ (таких как Галерея и Контакты). В области хранения данных могут храниться данные (например, фотография и контакт), созданные во время использования электронного устройства 101. Кроме того, внутренняя память 121 может включать в себя высокоскоростную память с произвольным доступом и может дополнительно включать в себя энергонезависимую память, такую как один или более компонентов дискового хранилища, компонент флэш-памяти или универсальное флэш-хранилище (universal flash storage, УФС). В некоторых других вариантах осуществления изобретения процессор 110 выполняет инструкцию, хранящуюся во внутренней памяти 121, и/или инструкцию, хранящуюся в памяти, расположенной в процессоре, чтобы электронное устройство 100 могло выполнять способ интеллектуальной рекомендации номера, предусмотренного в вариантах осуществления изобретения согласно настоящей заявке, различных функциональных приложений и обработки данных.[0089] The internal memory 121 may be configured to store one or more computer programs, and the one or more computer programs include instructions. The processor 110 may execute an instruction stored in the internal memory 121 so that the electronic device 100 may perform the smart contact recommendation method provided in some embodiments of the invention according to the present application, various functional applications, data processing, and the like. The internal memory 121 may include a program storage area and a data storage area. The program storage area can store an operating system. The program storage area may optionally store one or more application programs (such as Gallery and Contacts). The data storage area may store data (for example, a photograph and a contact) created during use of the electronic device 101. In addition, the internal memory 121 may include a high-speed random access memory, and may further include a non-volatile memory such as one or more disk storage components, a flash memory component, or universal flash storage (UFS). In some other embodiments of the invention, the processor 110 executes an instruction stored in the internal memory 121 and/or an instruction stored in the memory located in the processor so that the electronic device 100 can perform the smart number recommendation method provided in the embodiments of the invention according to the present application, various functional applications and data processing.
[0090] Электронное устройство 100 может реализовывать звуковую функцию, такую как воспроизведение или запись музыки, с использованием аудиомодуля 170, громкоговорителя 170A, телефонной трубки 170B, микрофона 170C, интерфейса 170D гарнитуры, процессора приложений и т.п.[0090] The electronic device 100 can realize an audio function such as playing or recording music using an audio module 170, a
[0091] Аудиомодуль 170 выполнен с возможностью преобразования цифровой аудиоинформации в аналоговый аудиосигнал и вывода аналогового аудиосигнала, а также выполнен с возможностью преобразования аналогового аудиовхода в цифровой аудиосигнал. Аудиомодуль 170 может быть дополнительно выполнен с возможностью кодирования и декодирования аудиосигнала. В некоторых вариантах осуществления изобретения аудиомодуль 170 может быть расположен в процессоре 110, или некоторые функциональные модули аудиомодуля 170 расположены в процессоре 110.[0091] The audio module 170 is configured to convert the digital audio information to an analog audio signal and output the analog audio signal, and is also configured to convert the analog audio input to a digital audio signal. The audio module 170 may be further configured to encode and decode the audio signal. In some embodiments of the invention, the audio module 170 may be located in the processor 110, or some of the functional modules of the audio module 170 may be located in the processor 110.
[0092] Громкоговоритель 170A, также называемый «динамиком», выполнен с возможностью преобразования звукового электрического сигнала в звуковой сигнал. Электронное устройство 100 может воспроизводить музыку или отвечать на вызов в режиме громкой связи, используя громкоговоритель 170A.[0092] The
[0093] Телефонная трубка 170B, также называемая «наушником», выполнена с возможностью преобразования звукового электрического сигнала в звуковой сигнал. При ответе на вызов или при прослушивании речевой информации посредством электронного устройства 100 телефонную трубку 170B можно поднести близко к человеческому уху для прослушивания голоса.[0093] The handset 170B, also referred to as an "earphone", is configured to convert an audio electrical signal into an audio signal. When answering a call or listening to voice information through the electronic device 100, the handset 170B can be brought close to the human ear to hear the voice.
[0094] Микрофон 170C, также называемый «микрофоном» или «микрофоном», выполнен с возможностью преобразования звукового сигнала в электрический сигнал. При совершении вызова или отправке голосовой информации пользователь может издавать звук, приближаясь ртом к микрофону 170C, чтобы ввести звуковой сигнал в микрофон 170C. Один или более микрофонов 170C могут быть расположены в электронном устройстве 100. В некоторых других вариантах осуществления изобретения два микрофона 170C могут быть расположены в электронном устройстве 100 и могут дополнительно реализовывать функцию шумоподавления в дополнение к сбору звукового сигнала. В некоторых других вариантах осуществления изобретения, в качестве альтернативы, в электронном устройстве 100 могут быть расположены три, четыре или более микрофонов 170C для сбора звукового сигнала, уменьшения шума и дополнительной идентификации источника звука, а также для реализации функции направленной записи и т.п.[0094] The microphone 170C, also referred to as a "microphone" or "microphone", is configured to convert an audio signal into an electrical signal. When making a call or sending voice information, the user may make a sound by approaching the microphone 170C with his mouth to input an audio signal into the microphone 170C. One or more microphones 170C may be located in the electronic device 100. In some other embodiments of the invention, two microphones 170C may be located in the electronic device 100 and may additionally implement a noise cancellation function in addition to collecting the audio signal. In some other embodiments of the invention, three, four or more microphones 170C may alternatively be located in the electronic device 100 to collect the audio signal, reduce noise and additionally identify the source of the sound, as well as to implement the function of directional recording, etc.
[0095] В этом варианте осуществления изобретения согласно настоящей заявке, когда электронное устройство 100 запускает караоке приложение, микрофон 170C может использоваться для сбора а капелла пользователя, а точнее, чистого человеческого голоса без музыки, когда пользователь поет песню. Кроме того, аудиомодуль 170 может использовать соответствующий алгоритм коррекции звука для корректировки собранной а капелла пользователя.[0095] In this embodiment of the invention according to the present application, when the electronic device 100 starts the karaoke application, the microphone 170C can be used to collect the user's a cappella, more specifically, a pure human voice without music when the user sings the song. In addition, the audio module 170 may use an appropriate audio correction algorithm to correct the user's collected a cappella.
[0096] Например, если относительно очевидный или беспорядочный звук дыхания появляется в а капелла пользователя в песне А, записанной пользователем, аудиомодуль 170 может выполнять обработку ослабления звука дыхания в соответствующем месте в а капелла пользователя, чтобы улучшить качество прослушивания песни.[0096] For example, if a relatively obvious or erratic breath sound appears in a user's a cappella in song A recorded by a user, the audio module 170 may perform breathing sound attenuation processing at a corresponding location in the user's a cappella to improve the listening experience of the song.
[0097] В качестве другого примера, если вибрато появляется в а капелла оригинального исполнителя песни А, аудиомодуль 170 может определять, используется ли вибрато также в соответствующем месте а капелла пользователя песни А, записанной пользователем. Если эффект вибрато, используемый пользователем, не является хорошим, аудиомодуль 170 может корректировать вибрато в соответствующем месте а капелла пользователя, чтобы улучшить качество прослушивания песни.[0097] As another example, if vibrato appears in the original artist's a cappella of song A, audio module 170 may determine if vibrato is also used at the corresponding user a cappella location of song A recorded by the user. If the vibrato effect used by the user is not good, the audio module 170 may correct the vibrato at the appropriate location a cappella of the user to improve the listening experience of the song.
[0098] В качестве другого примера, аудиомодуль 170 может идентифицировать, сравнивая а капелла пользователя песни А с а капелла оригинального певца, место, в котором «out of tune (не в тон)» происходит в а капелла пользователя, и, кроме того, аудиомодуль 170 может выполнять соответствующее повышение или понижение тона в том месте, где происходит «out of tune (не в тон)» в а капелла пользователя, тем самым корректируя проблему интонации в а капелла пользователя. Конкретный способ коррекции посредством электронного устройства 100 а капелла пользователя, который улавливается микрофоном 170C, подробно описан в следующем варианте осуществления изобретения. Поэтому подробности здесь не описываются.[0098] As another example, audio module 170 can identify, by comparing song user A's a cappella with the original singer's a cappella, the location at which "out of tune" occurs in the user's a cappella, and furthermore, the audio module 170 may perform an appropriate pitch up or down at the point where "out of tune" occurs in the user's a cappella, thereby correcting the intonation problem in the user's a cappella. The specific correction method by the user a cappella electronic device 100 that is picked up by the microphone 170C is described in detail in the following embodiment. Therefore, the details are not described here.
[0099] Можно узнать, что в этом варианте осуществления изобретения согласно настоящей заявке, помимо калибровки интонации для песни, записанной пользователем, электронное устройство может дополнительно решить проблему навыков пения, такую как дыхание или вибрато в песне, записанной пользователем. Таким образом, обычный пользователь, который не имеет профессионального музыкального образования в области вокала, также может записывать певческий голос с относительно хорошим качеством прослушивания, тем самым улучшая эффект записи и удобство использования, когда пользователь использует караоке приложение.[0099] It can be recognized that in this embodiment according to the present application, in addition to calibrating intonation for a song recorded by a user, the electronic device can further solve a problem of singing skills such as breathing or vibrato in a song recorded by a user. Thus, a general user who does not have a professional music education in the field of vocals can also record a singing voice with a relatively good listening quality, thereby improving the recording effect and usability when the user uses the karaoke application.
[0100] Интерфейс 170D гарнитуры выполнен с возможностью подключения к проводной гарнитуре. Интерфейс 170D гарнитуры может быть USB-интерфейсом 130 или может быть стандартным интерфейсом открытой платформы мобильного терминала (open mobile terminal platform, OMTP) 3,5 мм или стандартным интерфейсом ассоциации индустрии сотовой связи США (cellular telecommunications industry association of the USA, CTIA).[0100] The headset interface 170D is configured to connect to a wired headset. The headset interface 170D may be a USB interface 130 or may be a standard 3.5mm open mobile terminal platform (OMTP) interface or a standard cellular telecommunications industry association of the USA (CTIA) interface.
[0101] Датчик 180 может включать в себя датчик 180A давления, гироскопический датчик 180B, датчик 180C барометрического давления, магнитный датчик 180D, датчик 180E ускорения, датчик 180F расстояния, оптический датчик 180G приближения, датчик 180H отпечатков пальцев, датчик 180J температуры, сенсорный датчик 180K, датчик 180L окружающего света, датчик 180M костной проводимости и т.п.[0101] The sensor 180 may include a pressure sensor 180A, a gyro sensor 180B, a barometric pressure sensor 180C, a magnetic sensor 180D, an acceleration sensor 180E, a distance sensor 180F, an optical proximity sensor 180G, a fingerprint sensor 180H, a temperature sensor 180J, a touch sensor 180K, ambient light sensor 180L, bone conduction sensor 180M, etc.
[0102] Кнопка 190 включает в себя кнопку питания, кнопку громкости и т.п. Кнопка 190 может быть механической кнопкой или сенсорной кнопкой. Электронное устройство 100 может принимать ввод от кнопки и формировать ввод сигнала кнопки, относящийся к пользовательским настройкам и управлению функциями электронного устройства 100.[0102] The button 190 includes a power button, a volume button, and the like. The button 190 may be a mechanical button or a touch button. The electronic device 100 may receive input from a button and generate a button signal input related to user settings and control of the functions of the electronic device 100.
[0103] Электромотор 191 может формировать подсказку о вибрации. Электромотор 191 может использоваться для вибрации при входящем вызове, а также может использоваться для обратной связи с вибрацией касания. Например, сенсорные операции, выполняемые в разных приложениях (например, фотосъемка и воспроизведение звука), могут соответствовать различным эффектам вибрационной обратной связи. Электромотор 191 также может соответствовать различным эффектам обратной связи по вибрации для операций касания, выполняемых в разных областях дисплея 194. Различные сценарии приложений (например, напоминание о времени, получение информации, будильник и игра) также могут соответствовать различным эффектам вибрационной обратной связи. Дополнительно может поддерживаться настройка эффекта обратной связи с вибрацией при прикосновении.[0103] The electric motor 191 may generate a vibration prompt. The motor 191 may be used to vibrate on an incoming call, and may also be used for touch vibration feedback. For example, touch operations performed in different applications (such as taking photos and playing audio) may correspond to different vibration feedback effects. The electric motor 191 may also correspond to different vibration feedback effects for touch operations performed in different areas of the display 194. Different application scenarios (eg, time reminder, get information, alarm clock, and game) may also correspond to different vibration feedback effects. Optionally, a vibration touch feedback effect setting can be supported.
[0104] Индикатор 192 может быть световым индикатором, который может использоваться для индикации состояния зарядки и изменения мощности, или может использоваться для обозначения сообщения, пропущенного вызова, уведомления и т.п.[0104] The indicator 192 may be an indicator light that may be used to indicate charging status and power change, or may be used to indicate a message, missed call, notification, or the like.
[0105] Интерфейс 195 SIM-карты выполнен с возможностью подключения к SIM-карте. SIM-карта может быть вставлена в интерфейс 195 SIM-карты или отсоединена от интерфейса 195 SIM-карты, чтобы входить в контакт с электронным устройством 100 или отделяться от него. Электронное устройство 100 может поддерживать один или N интерфейсов SIM-карты, где N - положительное целое число больше 1. Интерфейс 195 SIM-карты может поддерживать нано-SIM-карту, микро-SIM-карту, SIM-карту и т.п. Множество карт может быть вставлено в один и тот же интерфейс 195 SIM-карты одновременно. Множество карт может быть одного или разных типов. Интерфейс 195 SIM-карты также может быть совместим с различными типами SIM-карт. Интерфейс 195 SIM-карты также может быть совместим с внешней картой памяти. Электронное устройство 100 взаимодействует с сетью посредством SIM-карты для реализации функции вызова, функции передачи данных и т.п. В некоторых вариантах осуществления изобретения электронное устройство 100 использует eSIM, а именно встроенную SIM-карту. Карта eSIM может быть встроена в электронное устройство 100 и не может быть отделена от электронного устройства 100.[0105] The SIM card interface 195 is configured to be connected to a SIM card. The SIM card can be inserted into the SIM card interface 195 or detached from the SIM card interface 195 to come into contact with or be separated from the electronic device 100. The electronic device 100 may support one or N SIM card interfaces, where N is a positive integer greater than 1. The SIM card interface 195 may support a nano SIM card, a micro SIM card, a SIM card, and the like. Multiple cards can be inserted into the same SIM card interface 195 at the same time. The plurality of cards may be of the same or different types. The SIM card interface 195 can also be compatible with various types of SIM cards. The SIM card interface 195 may also be compatible with an external memory card. The electronic device 100 communicates with the network via a SIM card to realize a calling function, a data transmission function, and the like. In some embodiments of the invention, the electronic device 100 uses an eSIM, namely an embedded SIM card. The eSIM card may be embedded in the electronic device 100 and cannot be separated from the electronic device 100.
[0106] Программная система электронного устройства 100 может использовать иерархическую архитектуру, управляемую событиями архитектуру, архитектуру микропроцессора, архитектуру микросервисов или облачную архитектуру. В этом варианте осуществления изобретения согласно настоящей заявке система Android с иерархической архитектурой используется в качестве примера для иллюстрации структуры программного обеспечения электронного устройства 100.[0106] The software system of the electronic device 100 may use a hierarchical architecture, an event-driven architecture, a microprocessor architecture, a microservices architecture, or a cloud architecture. In this embodiment of the present application, the hierarchical Android system is used as an example to illustrate the software structure of the electronic device 100.
[0107] Фиг. 2 является блок-схемой структуры программного обеспечения электронного устройства 100 согласно варианту осуществления изобретения согласно настоящей заявке.[0107] FIG. 2 is a block diagram of the software structure of an electronic device 100 according to an embodiment of the invention according to the present application.
[0108] В иерархической архитектуре программное обеспечение разделено на несколько уровней, и каждый уровень имеет четкую роль и задачу. Уровни взаимодействуют друг с другом посредством программного интерфейса. В некоторых вариантах осуществления изобретения система Android разделена на четыре уровня, а именно уровень прикладной программы, уровень структуры прикладной программы, среда выполнения Android (Android runtime) и системная библиотека, а также уровень ядра сверху вниз.[0108] In a hierarchical architecture, the software is divided into several layers, and each layer has a clear role and task. The levels interact with each other through a software interface. In some embodiments of the invention, the Android system is divided into four levels, namely the application program level, the application structure level, the Android runtime and the system library, and the kernel level from top to bottom.
[0109] Уровень прикладных программ может включать в себя ряд пакетов приложений.[0109] The application program layer may include a number of application packages.
[0110] Как показано на фиг. 2, пакет приложений может включать в себя приложения (application), такие как звонки, контакты, камера, галерея, календарь, карта, навигация, Bluetooth, музыка, видео и сообщения.[0110] As shown in FIG. 2, the application package may include applications (application), such as calls, contacts, camera, gallery, calendar, map, navigation, Bluetooth, music, video and messages.
[0111] В этом варианте осуществления изобретения согласно настоящей заявке караоке приложение, такое как приложение «Changba» или приложение «WeSing», может быть дополнительно установлено на уровне прикладных программ. Пользователь может записать песню посредством караоке приложения и интегрировать певческий голос пользователя в аккомпанемент, обеспечиваемый караоке приложением.[0111] In this embodiment of the invention according to the present application, a karaoke application such as the "Changba" application or the "WeSing" application may be further installed at the application level. The user can record a song through the karaoke application and integrate the user's singing voice into the accompaniment provided by the karaoke application.
[0112] Уровень структуры прикладной программы обеспечивает интерфейс прикладного программирования (application programming interface, API) и структуру программирования для прикладной программы на уровне прикладной программы. Уровень структуры прикладной программы включает в себя некоторые предопределенные функции.[0112] The application program structure layer provides an application programming interface (API) and a programming structure for an application program at the application program level. The application structure layer includes some predefined functions.
[0113] Как показано на фиг. 2, уровень структуры прикладной программы может включать в себя диспетчер окон, провайдера контента, систему представлений, диспетчер ресурсов, диспетчер уведомлений и т.п.[0113] As shown in FIG. 2, the application structure layer may include a window manager, a content provider, a presentation system, a resource manager, a notification manager, and the like.
[0114] Оконный менеджер выполнен с возможностью управления оконной программой. Диспетчер окон может получать размер отображения и определять, есть ли строка состояния, экран блокировки, захват экрана и т.п. Провайдер контента выполнен с возможностью: хранения и получения данных и обеспечения доступа к данным прикладной программе. Данные могут включать в себя видео, изображение, аудио, звонки, которые были сделаны и отвечены, историю просмотра и закладку, адресную книгу и т.п. Система представлений включает в себя визуальный элемент управления, такой как элемент управления для отображения текста и элемент управления для отображения изображения. Система представлений может быть выполнена с возможностью создания прикладной программы. Интерфейс дисплея может включать в себя одно или более представлений. Например, интерфейс дисплея, включающий в себя значок уведомления службы коротких сообщений, может включать в себя представление для отображения текста и представление для отображения изображения. Менеджер ресурсов обеспечивает различные ресурсы, такие как строка локализованных символов, значок, изображение, файл макета и видеофайл для прикладной программы. Диспетчер уведомлений позволяет прикладной программе отображать информацию уведомления в строке состояния и может быть выполнен с возможностью передачи сообщения типа уведомления. Сообщение типа уведомления может автоматически исчезнуть после короткой паузы, и взаимодействие с пользователем не требуется. Например, диспетчер уведомлений выполнен с возможностью уведомления о завершении загрузки, вывода сообщения и т.п. В качестве альтернативы диспетчер уведомлений может быть уведомлением, которое появляется в верхней строке состояния системы в форме графика или текста полосы прокрутки, например, уведомлением о прикладной программе, работающей в фоновом режиме, или может быть уведомлением, которое появляется на экране в виде диалогового окна. Например, текстовая информация запрашивается в строке состояния, издается звуковой сигнал, электронное устройство вибрирует или мигает световой индикатор.[0114] The window manager is configured to manage a window program. The window manager can get the display size and determine if there is a status bar, lock screen, screen capture, and the like. The content provider is configured to: store and receive data and provide access to the data to the application program. The data may include video, image, audio, calls made and answered, browsing history and bookmark, address book, and the like. The presentation system includes a visual control such as a control for displaying text and a control for displaying an image. The presentation system may be configured to create an application program. The display interface may include one or more views. For example, the display interface including the short message service notification icon may include a view for displaying text and a view for displaying an image. The resource manager provides various resources such as a localized character string, an icon, an image, a layout file, and a video file for an application. The notification manager allows an application to display notification information in a status bar and may be configured to send a notification type message. The notification type message may automatically disappear after a short pause and no user interaction is required. For example, the notification manager is configured to notify the completion of a download, display a message, and the like. Alternatively, the notification manager may be a notification that appears on the top system status bar in the form of a graphic or scroll bar text, such as a notification about an application running in the background, or may be a notification that appears on the screen as a dialog box. For example, text information is requested in the status bar, an audible signal is emitted, an electronic device vibrates, or an indicator light flashes.
[0115] Системная библиотека может включать в себя множество функциональных модулей, таких как диспетчер поверхностей (surface manager), библиотека мультимедиа (Media Libraries), библиотека обработки трехмерной графики (например, OpenGL ES) и движок 2D-графики (для например, SGL).[0115] The system library may include a plurality of functional modules, such as a surface manager (surface manager), a multimedia library (Media Libraries), a 3D graphics processing library (for example, OpenGL ES) and a 2D graphics engine (for example, SGL) .
[0116] Диспетчер поверхностей выполнен с возможностью: управления подсистемой отображения и обеспечения объединения двухмерных и трехмерных уровней для множества прикладных программ. Медиа-библиотека поддерживает воспроизведение и запись множества широко используемых аудио- и видеоформатов, файла статического изображения и т.п. Медиа-библиотека может поддерживать множество форматов кодирования аудио и видео, таких как MPEG4, H.264, MP3, AAC, AMR, JPG и PNG. Библиотека обработки трехмерной графики выполнена с возможностью реализации рисования трехмерной графики, визуализации изображения, композиции, обработки уровней и т.п. Движок 2D-графики - это движок рисования для 2D-рисования.[0116] The surface manager is configured to: control the display subsystem and provide a combination of two-dimensional and three-dimensional levels for a variety of application programs. The media library supports the playback and recording of many widely used audio and video formats, still image file, and so on. The media library can support many audio and video encoding formats such as MPEG4, H.264, MP3, AAC, AMR, JPG, and PNG. The 3D graphics processing library is configured to implement 3D graphics drawing, image rendering, composition, level processing, and the like. The 2D graphics engine is a drawing engine for 2D drawing.
[0117] В этом варианте осуществления изобретения согласно настоящей заявке, как показано на фиг. 2, соответствующий алгоритм коррекции звука, представленный в этом варианте осуществления изобретения согласно настоящей заявке, может быть установлен в системной библиотеке в форме библиотеки динамических алгоритмов (dynamic link library, DLL). Например, библиотека динамических алгоритмов алгоритма коррекции звука может храниться в каталоге system/lib. Когда караоке приложение запускается на уровне прикладной программы, караоке приложение может вызывать библиотеку динамических алгоритмов алгоритма коррекции звука для корректировки такой проблемы, как интонация, вибрато или звук дыхания а капелла пользователя, тем самым реализуя функцию коррекции звука.[0117] In this embodiment of the invention according to the present application, as shown in FIG. 2, the corresponding sound correction algorithm provided in this embodiment according to the present application can be installed in the system library in the form of a dynamic link library (DLL). For example, a library of dynamic sound correction algorithms may be stored in the system/lib directory. When a karaoke application is launched at the application level, the karaoke application can call the audio correction algorithm dynamic algorithm library to correct a problem such as intonation, vibrato, or a cappella breathing sound of the user, thereby realizing the audio correction function.
[0118] Среда выполнения Android включает в себя библиотеку ядра и виртуальную машину. Среда выполнения Android отвечает за планирование и управление системой Android.[0118] The Android runtime includes a kernel library and a virtual machine. The Android runtime is responsible for scheduling and managing the Android system.
[0119] Библиотека ядра включает в себя две части: функция, которая должна быть вызвана языком Java, и библиотека ядра Android.[0119] The core library includes two parts: a function to be called by the Java language, and an Android core library.
[0120] Уровень прикладной программы и уровень структуры прикладной программы выполняются на виртуальной машине. Виртуальная машина выполняет файлы java на уровне прикладной программы и на уровне структуры прикладной программы в виде двоичных файлов. Виртуальная машина выполнена с возможностью выполнения таких функций, как управление жизненным циклом объекта, управление стеком, управление потоками, управление безопасностью и исключениями, а также сборка мусора.[0120] The application program layer and the application structure layer are executed in a virtual machine. The virtual machine executes java files at the application program level and at the application structure level as binary files. The virtual machine is configured to perform functions such as object lifecycle management, stack management, thread management, security and exception management, and garbage collection.
[0121] Уровень ядра - это уровень между аппаратным и программным обеспечением. Уровень ядра включает в себя по меньшей мере драйвер дисплея, драйвер камеры, драйвер аудио, драйвер датчика и т.п. Это не ограничено в этом варианте осуществления изобретения согласно настоящей заявке.[0121] The kernel level is the level between hardware and software. The kernel level includes at least a display driver, a camera driver, an audio driver, a sensor driver, and the like. This is not limited in this embodiment of the invention according to the present application.
[0122] Мобильный телефон используется в качестве примера электронного устройства ниже, чтобы подробно описать способ записи песни и способ коррекции звука, представленные в вариантах осуществления изобретения согласно настоящей заявке, со ссылкой на сопроводительные чертежи. Как показано на фиг. 3, способ включает в себя следующие этапы с S301 по S306.[0122] The mobile phone is used as an example of an electronic device below to describe in detail the song recording method and the sound correction method presented in the embodiments of the invention according to the present application, with reference to the accompanying drawings. As shown in FIG. 3, the method includes the following steps S301 to S306.
[0123] S301. При запуске караоке-приложения мобильный телефон принимает операцию выбора пользователем для записи песни A.[0123] S301. When the karaoke application is started, the mobile phone receives a user selection operation to record song A.
[0124] Караоке приложение - это прикладное программное обеспечение, которое может обеспечивать пользователю такие функции, как запрос песни, запись песни и корректирование звука. Например, караоке-приложение может быть приложением «WeSing» или приложением «Changba». Это не ограничено в этом варианте осуществления изобретения согласно настоящей заявке.[0124] A karaoke application is an application software that can provide a user with functions such as song request, song recording, and audio editing. For example, the karaoke application may be the "WeSing" application or the "Changba" application. This is not limited in this embodiment of the invention according to the present application.
[0125] Если мобильный телефон обнаруживает операцию открытия караоке-приложения пользователем, как показано на фиг. 4, мобильный телефон может начать запускать караоке приложение и отображать первый интерфейс 401 караоке приложения. Пользователь может искать в первом интерфейсе 401 песню, которая ему нравится, и записывать песню. В качестве альтернативы пользователь может вручную выполнить поиск в строке 402 поиска и выбрать песню, которую необходимо записать. Конечно, пользователь может альтернативно выбрать на другом экране караоке-приложения песню, которую нужно записать на этот раз. Это не ограничено в этом варианте осуществления изобретения согласно настоящей заявке.[0125] If the mobile phone detects the operation of opening the karaoke application by the user, as shown in FIG. 4, the mobile phone can start running the karaoke application and display the
[0126] Тем не менее, как показано на фиг. 4, если пользователь хочет записать песню «Red Bean», пользователь может нажать кнопку 403 записи для песни «Red Bean» на первом интерфейсе 401. В этом случае мобильный телефон может получить операцию выбора пользователем для записи песни «Red Bean». В ответ на операцию выбора пользователем записи песни «Red Bean» мобильный телефон может продолжать выполнять следующие шаги с S302 по S306 для завершения таких процессов, как запись и звуковое корректирование песни.[0126] However, as shown in FIG. 4, if the user wants to record the song "Red Bean", the user can press the
[0127] S302. Мобильный телефон получает аккомпанемент песни A и содержит информацию характеристики а капелла оригинального певца.[0127] S302. The mobile phone receives the accompaniment of song A and contains the a cappella characteristic information of the original singer.
[0128] Запись пользователем песни «Red Bean» по-прежнему используется в качестве примера. После обнаружения того, что пользователь нажимает кнопку 403 записи для песни «Red Bean», мобильный телефон может загрузить с сервера аккомпанемент песни «Red Bean». Конечно, если на этот раз мобильный телефон сохраняет аккомпанемент песни «Red Bean», мобильный телефон может получить аккомпанемент из локальной памяти. Обычно часть песни, за исключением человеческого голоса, может называться аккомпанементом, а некоторый аккомпанемент может дополнительно включать в себя гармонию, фоновый звук и т.п.[0128] The user's recording of the song "Red Bean" is still used as an example. Upon detecting that the user presses the
[0129] В этом варианте осуществления изобретения согласно настоящей заявке после обнаружения того, что пользователь нажимает кнопку 403 записи для песни «Red Bean», мобильный телефон может дополнительно загрузить информацию характеристики а капелла оригинального исполнителя песни «Red Bean» из сервера. Информация характеристики может отражать характеристики пения оригинальной певицы (например, Фэй Вонг) при исполнении песни «Red Bean». Например, информация характеристики может включать в себя одну или более из информации об основной частоте, месте дыхания и характеристике вибрато а капелла оригинального певца. Характеристика вибрато может включать в себя одно или более из места вибрато, информации о стабильности основной частоты вибрато, частоты вибрато и амплитуды вибрато.[0129] In this embodiment according to the present application, after detecting that the user presses the
[0130] Информация об основной частоте может отражать основной тон звука. Как показано на фиг. 5, сервер может заранее извлекать фундаментальную кривую частотно-временного изменения f (t) кадр за кадром из а капелла оригинального певца песни «Red Bean», а кривая вариации f (t) представляет собой информацию об основной частоте песни «Red Bean». Тем не менее, как показано на фиг. 5, сервер может дополнительно обнаруживать место, в котором оригинальный певец дышит в а капелла оригинального певца, и использовать в качестве одного элемента информации характеристики момента, когда оригинальный певец дышит. Точно так же, как показано на фиг. 5, сервер может дополнительно обнаруживать место, в котором вибрато появляется в а капелла оригинального певца, и использовать в качестве одного элемента информации характеристики момента появления вибрато.[0130] The fundamental frequency information may reflect the fundamental tone of the sound. As shown in FIG. 5, the server can extract the fundamental time-frequency change curve f(t) frame by frame from the a cappella of the original singer of the song "Red Bean" in advance, and the variation curve f(t) is information about the fundamental frequency of the song "Red Bean". However, as shown in FIG. 5, the server may further detect the place where the original singer breathes in the original singer's a cappella, and use as one piece of information the characteristics of the moment when the original singer breathes. Just as shown in FIG. 5, the server may further detect the location at which the vibrato appears in the original singer's a cappella, and use the vibrato occurrence timing characteristics as one piece of information.
[0131] Обычно вибрато проявляется в виде периодических изменений высоты звука. Три изменяющиеся во времени характеристики, а именно амплитуда вибрации A (t), частота вибрации Φ (t) и срок стабильной тренда V (t), могут быть извлечены из кривой основной частоты посредством характеристики вибрато. Например, вибрато 1 появляется в третьем предложении а капелла оригинального исполнителя песни «Red Bean». Кривая основной частоты, соответствующая вибрато 1, имеет вид f3 (t) = V (t) + A (t) cos (Φ (t)), где t находится в пределах [8s, 10s]. V (t) - это информация о стабильности основной частоты вибрато 1, Φ (t) - частота вибрато вибрато 1, а A (t) - амплитуда вибрато вибрато 1. Сервер может отправлять на мобильный телефон информацию о стабильности основной частоты, частоту вибрато и амплитуду вибрато каждого вибрато в песне «Red Bean» в качестве информации характеристики.[0131] Typically, vibrato appears as periodic changes in pitch. Three time-varying characteristics, namely vibration amplitude A(t), vibration frequency Φ(t), and stable trend time V(t), can be extracted from the fundamental frequency curve by means of a vibrato characteristic. For example, vibrato 1 appears in the third a cappella sentence of the original artist of the song "Red Bean". The fundamental frequency curve corresponding to vibrato 1 is f3(t) = V(t) + A(t) cos(Φ(t)), where t is within [8s, 10s]. V(t) is vibrato 1 fundamental frequency stability information, Φ(t) is vibrato 1 vibrato frequency, and A(t) is vibrato 1 vibrato amplitude. The server can send fundamental frequency stability information, vibrato frequency and the amplitude of the vibrato of each vibrato in the song "Red Bean" as characteristic information.
[0132] Например, каждый раз, когда новая песня добавляется в библиотеку песен на сервере, сервер может извлекать соответствующую информацию характеристики на основе а капелла оригинального певца новой песни и сохранять извлеченную информацию характеристики на сервере. Впоследствии, если пользователь решит записать песню на мобильный телефон, мобильный телефон может получить аккомпанемент песни с сервера и может дополнительно получить с сервера информацию характеристики а капелла оригинального певца, соответствующего песне. Полученная информация характеристики а капелла оригинального певца может использоваться для руководства пользователем при записи песни, а также может использоваться в качестве основы для коррекции звука для корректировки песни, записанной пользователем.[0132] For example, each time a new song is added to the song library on the server, the server may extract the corresponding feature information based on the a cappella original singer of the new song, and store the extracted feature information on the server. Subsequently, if the user decides to record the song on the mobile phone, the mobile phone can obtain the accompaniment of the song from the server, and can further obtain from the server the a cappella characteristic information of the original singer corresponding to the song. The obtained a cappella characteristic information of the original singer can be used to guide the user when recording a song, and can also be used as the basis for sound correction to correct a song recorded by the user.
[0133] S303. При отображении интерфейса записи караоке-приложения мобильный телефон воспроизводит аккомпанемент песни A и записывает а капелла пользователя, которую поет пользователь.[0133] S303. When the recording interface of the karaoke application is displayed, the mobile phone plays the accompaniment of song A and records the user's a cappella that the user sings.
[0134] Запись пользователем песни «Red Bean» по-прежнему используется в качестве примера. После того, как мобильный телефон получит аккомпанемент песни «Red Bean», мобильный телефон может начать воспроизведение аккомпанемента песни «Red Bean». Кроме того, мобильный телефон может позволить микрофону начать запись а капелла пользователя, которая получается после того, как пользователь поет песню «Red Bean».[0134] The user's recording of the song "Red Bean" is still used as an example. After the mobile phone receives the accompaniment of the song "Red Bean", the mobile phone can start playing the accompaniment of the song "Red Bean". In addition, the mobile phone may allow the microphone to start the user's a cappella recording, which is obtained after the user sings the song "Red Bean".
[0135] Как показано на фиг. 6, в процессе записи песни «Red Bean» мобильный телефон может отображать интерфейс 601 записи песни «Red Bean». Интерфейс 601 записи может отображать текст 602 песни «Red Bean», и место записываемого текста песни может быть отмечено в реальном времени в тексте 602 песни, так что пользователь может записать песню на основе подсказки в тексте 602 песни.[0135] As shown in FIG. 6, in the process of recording the song "Red Bean", the mobile phone can display the
[0136] S304. Когда песня A записывается, мобильный телефон на основе информации характеристики а капелла оригинального певца дает пользователю инструкцию регулироавть манеру пения, такую как интонация, дыхание или вибрато.[0136] S304. When song A is recorded, the mobile phone, based on the original singer's a cappella characteristic information, instructs the user to adjust the singing manner such as intonation, breathing, or vibrato.
[0137] Например, когда пользователь записывает песню посредством караоке приложения, при отображении текста 602 песни, мобильный телефон может руководить пользователем на основе информации характеристики, полученной на этапе S302, для пения песни, например, руководить манерой пения пользователя, такой как интонация, дыхание или вибрато.[0137] For example, when the user records a song through the karaoke application, when the
[0138] Запись пользователем песни «Red Bean» по-прежнему используется в качестве примера. Информация характеристики а капелла пользователя, получаемая мобильным телефоном, включает в себя такую информацию, как место дыхания и место вибрато. В этом случае, как показано на фиг. 7, при отображении текста 602 песни «Red Bean» в реальном времени мобильный телефон может отметить место 701 дыхания (то есть подсказку дыхания) в соответствующем месте текста 602 песни на основе места дыхания, записанного в характеристики информации а капелла оригинального певца. Таким образом, при записи песни «Red Bean» пользователь может дышать на основе места 701 дыхания, указанного в тексте 602 песни, чтобы помочь пользователю контролировать вариации дыхания во время пения, тем самым уменьшая относительно очевидный и беспорядочный звук дыхания в записанном песня, чтобы улучшить качество прослушивания записанной песни.[0138] The user's recording of the song "Red Bean" is still used as an example. The a cappella characteristic information of the user received by the mobile phone includes information such as breathing position and vibrato position. In this case, as shown in FIG. 7, when displaying the
[0139] В качестве другого примера, как показано на фиг. 7, при отображении текста 602 песни «Red Bean» в реальном времени мобильный телефон может дополнительно отметить место 702 вибрато (то есть подсказку вибрато) в соответствующем месте текста 602 песни на основе записанного места вибрато в информации характеристике а капелла оригинального певца. Таким образом, при записи песни «Red Bean» пользователь может петь с вибрато на основе места 702 вибрато, указанного в тексте 602 песни, чтобы улучшить ощущение иерархии песни и навыки пения, когда пользователь поет, тем самым улучшая качество прослушивания записанной песни.[0139] As another example, as shown in FIG. 7, when displaying the
[0140] В некоторых других вариантах осуществления изобретения, помимо руководства, в тексте песни, отображаемом в реальном времени, пользователю для пения, мобильный телефон может дополнительно установить инструмент для пения в интерфейсе записи. Мобильный телефон в инструменте для пения может руководить пользователем при регулировании манеры пения, например интонации, дыхания или вибрато.[0140] In some other embodiments of the invention, in addition to the guide, in the lyrics displayed in real time to the user for singing, the mobile phone can additionally set the singing tool in the recording interface. The mobile phone in the singing instrument can guide the user in adjusting the manner of singing, such as intonation, breathing, or vibrato.
[0141] Запись пользователем песни «Red Bean» по-прежнему используется в качестве примера. Как показано на фиг. 8, при отображении интерфейса 601 записи мобильный телефон может установить инструмент 801 для пения на интерфейсе 601 записи. Инструмент 801 для пения может отображать заметку к каждому слову в предложении текста песни, записываемой в данный момент. Например, мобильный телефон может отображать тональную линию 802 (то есть подсказку интонации) в инструменте 801 для пения в реальном времени на основе информации об основной частоте а капелла оригинального певца. Более высокий тон текущей заметки приводит к более высокому месту тональной линии 802. В качестве другого примера мобильный телефон может отображать заметку 803 вибрато (то есть подсказку вибрато) в инструменте 801 для пения на основе места вибрато в а капелла оригинального певца. Заметка 803 вибрато может быть представлена линией разрыва или сегментом линии определенного цвета. Место, в котором появляется заметка 803 вибрато, совпадает с местом появления вибрато в а капелла оригинального певца. В качестве другого примера, если звук дыхания появляется в а капелла оригинального певца, соответствующего текущему предложению текста песни, мобильный телефон может отображать заметку 804 дыхания (то есть подсказку дыхания) в инструменте 801 для пения на основе места дыхания в а капелла оригинального певца. Заметка 804 дыхания может быть представлена графиком определенной формы, например треугольником или кругом. Место, в котором появляется заметка 804 дыхания, совпадает с местом, в котором звук дыхания появляется в а капелла оригинального певца.[0141] The user's recording of the song "Red Bean" is still used as an example. As shown in FIG. 8, when the
[0142] Таким образом, при записи песни пользователь может регулировать интонацию человеческого голоса на основе тональной линии, отображаемой в инструменте 801 для пения в реальном времени, или может петь с вибрато в соответствующем месте на основе заметки вибрато, отображаемой в инструменте 801 для пения в реальном времени или может дышать в соответствующем месте на основе заметки дыхания, отображаемой в инструменте 801 для пения в реальном времени, для руководства навыками пения, такими как интонация, вибрато и дыхание во время пения пользователя в процессе записи, тем самым улучшая качество записи песни.[0142] Thus, when recording a song, the user may adjust the intonation of the human voice based on the pitch line displayed in the
[0143] Можно понять, что, когда пользователь записывает песню, в дополнение к руководству, в текстах песен и инструменте для пения, которые отображаются в интерфейсе записи, пользователь поет, когда пользователь записывает песню, специалист в данной области может дополнительно руководить пользователем, основываясь на реальном опыте или реальном сценарии применения, с использованием информации характеристики а капелла оригинального певца, как лучше спеть песню. Это не ограничено в этом варианте осуществления изобретения согласно настоящей заявке.[0143] It can be understood that when the user records a song, in addition to the guide, in the lyrics and the singing tool that are displayed on the recording interface, the user sings, when the user records the song, one skilled in the art can further guide the user based on based on real experience or real application scenario, using the original singer's a cappella characteristics information, how best to sing the song. This is not limited in this embodiment of the invention according to the present application.
[0144] S305. Когда песня A записывается, мобильный телефон оценивает пение пользователя, сравнивая информацию характеристики а капелла оригинального певца с информацией характеристики а капелла пользователя.[0144] S305. When the song A is recorded, the mobile phone evaluates the user's singing by comparing the original singer's a cappella characteristic information with the user's a cappella characteristic information.
[0145] Запись пользователем песни «Red Bean» по-прежнему используется в качестве примера. Когда записывается песня «Red Bean», мобильный телефон может дополнительно оценивать текущее пение пользователя в реальном времени на основе информации характеристики а капелла оригинального певца. Например, мобильный телефон может оценивать пение пользователя, используя слово, фразу или предложение в тексте песни в качестве степени детализации. Как показано на фиг. 9A и фиг. 9B, после того, как мобильный телефон собирает а капелла пользователя, полученную после того, как пользователь поет «I believe an end comes at a time», мобильный телефон может извлечь информацию характеристики а капелла пользователя этого предложения. Подобно информации характеристики а капелла оригинального певца, мобильный телефон может сначала извлечь информацию об основной частоте а капелла пользователя этого предложения и обнаружить одну или более частей информации характеристики, например, место дыхания пользователя, место вибрато, информация о стабильности основной частоты вибрато, частота вибрато и амплитуда вибрато на основе информации основной частоты а капелла пользователя.[0145] The user's recording of the song "Red Bean" is still used as an example. When the song "Red Bean" is recorded, the mobile phone can further evaluate the user's current singing in real time based on the a cappella characteristic information of the original singer. For example, the mobile phone may rate the user's singing using a word, phrase, or sentence in the lyrics as the granularity. As shown in FIG. 9A and FIG. 9B, after the mobile phone collects the user's a cappella obtained after the user sings "I believe an end comes at a time", the mobile phone can extract the user's a cappella characteristic information of this sentence. Similar to the original singer's a cappella characteristic information, the mobile phone can first extract the user's a cappella fundamental frequency information of this sentence and detect one or more pieces of characteristic information, such as the user's breathing position, vibrato position, vibrato fundamental frequency stability information, vibrato frequency, and vibrato amplitude based on the user's a cappella fundamental frequency information.
[0146] В этом случае, сравнивая информацию 1 характеристики оригинального певца при пении «I believe an end comes at a time» с информацией 2 характеристики пользователя, когда он поет «I believe an end comes at a time», мобильный телефон может определить результат оценки навыков пения, таких как интонация, вибрато и дыхание пользователя при пении этого предложения.[0146] In this case, by comparing the original singer's characteristic information 1 when singing "I believe an end comes at a time" with the user's characteristic information 2 when singing "I believe an end comes at a time", the mobile phone can determine the result evaluating singing skills such as intonation, vibrato, and breathing of the user while singing this sentence.
[0147] Например, если разница между информацией об основной частоте а капелла пользователя и информацией об основной частоте а капелла оригинального певца меньше порогового значения, это означает, что интонация пользователя при пении этого предложения совпадает с этой оригинального певца. Как показано на фиг. 10 (a), мобильный телефон может отображать подсказку 1001 «Эксперт по интонации» на интерфейсе 601 записи, чтобы уведомить пользователя о том, что пользователь правильно интонационно поет это предложение. Если место вибрато в а капелла пользователя совпадает с местом вибрато в а капелла оригинального певца, и разница между характеристикой вибрато (точнее, частотой вибрато, амплитудой вибрато и основной частотой информация о стабильности) вибрато в а капелла пользователя и соответствующая характеристика вибрато в а капелла оригинального певца меньше порогового значения, это указывает на то, что вибрато, произведенное пользователем при пении этого предложения, совпадает с вибрато оригинального певца. Как показано на фиг. 10 (b), мобильный телефон может отображать подсказку 1002 «Королева вибрато» на интерфейсе 601 записи. Если место звука дыхания в а капелла пользователя совпадает с местом звука дыхания в а капелла оригинального певца, это указывает на то, что регулировка дыхания пользователя при пении этого предложения совпадает с таковой у оригинального певца. Как показано на фиг. 10 (c), мобильный телефон может отображать подсказку 1003 «Получить подсказку дыхания» на интерфейсе 601 записи.[0147] For example, if the difference between the user's a cappella fundamental frequency information and the original singer's a cappella fundamental frequency information is less than a threshold value, it means that the intonation of the user when singing this sentence matches that of the original singer. As shown in FIG. 10(a), the mobile phone may display the "Intonation Expert" prompt 1001 on the
[0148] В дополнение к уведомлению пользователя о текущем результате оценки в режиме реального времени посредством текста, мобильный телефон может отображать текущий результат оценки пользователю в реальном времени с использованием цвета, вибрации, специального эффекта и т.п.[0148] In addition to notifying the user of the current evaluation result in real time via text, the mobile phone can display the current evaluation result in real time to the user using color, vibration, special effect, and the like.
[0149] Например, как показано на фиг. 11 (a), если вибрато, используемое пользователем при пении текста песни «I believe an end comes at a time», несовместимо с вибрато, используемым, когда оригинальный певец поет это предложение, при отображении «конца» 1101 текста песни, соответствующего вибрато, мобильный телефон может пометить «конец» 1101 как цвет, отличный от других текстов песен, использовать другой шрифт и т.п. В другом примере, как показано на фиг. 11 (b), если место дыхания пользователя при пении этого предложения несовместимо с местом дыхания оригинального певца при пении этого предложения, мобильный телефон может отметить знак 1102 ошибки дыхания при отображении текста песни, соответствующего месту дыхания.[0149] For example, as shown in FIG. 11(a), if the vibrato used by the user when singing the lyrics of "I believe an end comes at a time" is incompatible with the vibrato used when the original singer sings this sentence, when displaying the "end" 1101 of the lyrics corresponding to the vibrato, the mobile phone may mark the "end" 1101 as a different color from other lyrics, use a different font, and the like. In another example, as shown in FIG. 11(b), if the user's breathing position while singing this sentence is incompatible with the original singer's breathing position while singing this sentence, the mobile phone may flag a
[0150] В качестве альтернативы мобильный телефон может дополнительно отображать пользователю и в инструменте 801 для пения на интерфейсе 601 записи результат оценки, определенный мобильным телефоном. Например, как показано на фиг. 12 (a), когда пользователь поет слово «comes», мобильный телефон может не только отображать в инструменте 801 для пения в реальном времени тональную линию 1201, полученную, когда оригинальный певец поет «comes», но также может отображать , в то же время, тональную линию 1202, полученную, когда пользователь на этот раз поет слово «comes». Если основная частота, используемая, когда пользователь поет слово «comes», ниже основной частоты, используемой, когда оригинальный певец поет слово «comes», это означает, что тон пользователя при пение «comes» ниже, чем тон оригинального певца, при пение «comes», и тональная линия 1202, отображаемая мобильным телефоном, ниже, чем тональная линия 1201. Соответственно, если обнаружено, что тон пользователя при пении слова «comes» выше, чем тон оригинального певца при пении слова «comes», тональная линия 1202, отображаемая мобильным телефоном, может быть выше, чем тональная линия 1201. Кроме того, если обнаружено, что тон пользователя при пении слова «comes» такой же, как тон оригинального певца при пении слова «comes», тональная линия 1202 в инструменте 801 для пения совпадает с тоном тональная линия 1201. Таким образом, пользователь может узнать интонационную ситуацию текущего пения из инструмента 801 для пения во время пения в реальном времени.[0150] Alternatively, the mobile phone may further display to the user in the
[0151] В другом примере, как показано на фиг. 12 (b), мобильный телефон может отображать в инструменте 801 для пения заметку 1203 вибрато, полученную, когда оригинальный певец поет вибрато 1. После обнаружения а капелла пользователя, когда пользователь поет вибрато 1, мобильный телефон может определить путем сравнения, место вибрато, амплитуда вибрато A (t), частота вибрато Φ (t) и фрагмент стабильного тренда V (t), полученный, когда пользователь поет вибрато 1, соответствует ли месту вибрато, амплитуде вибрато A (t), частоте вибрато Φ (t) и фрагменту стабильного тренда V (t), полученному, когда оригинальный певец поет вибрато 1. Если место вибрато, амплитуда вибрато A (t), частота вибрато Φ (t) и фрагмент стабильного тренда V (t), полученные, когда пользователь поет вибрато 1, не соответствуют месту вибрато, амплитуде вибрато A ( t), частоте вибрато Φ (t) и фрагменту стабильного тренда V (t), полученных, когда оригинальный певец поет вибрато 1, это указывает на то, что предварительно установленный эффект вибрато не достигается, когда пользователь поет вибрато 1 на этот раз, и мобильный телефон может отображать заметку 1203 вибрато как эффект отображения, такой как пунктирная линия. Соответственно, если место вибрато, амплитуда вибрато A (t), частота вибрато Φ (t) и фрагмент стабильного тренда V (t), полученные, когда пользователь поет вибрато 1, соответствуют месту вибрато, амплитуде вибрато A ( t), частоте вибрато Φ (t) и фрагменту стабильного тренда V (t), полученных, когда оригинальный певец поет вибрато 1, это указывает на то, что предварительно установленный эффект вибрато достигается, когда пользователь на этот раз поет вибрато 1, и как показано на фиг. 12 (b) мобильный телефон может выделять жирным шрифтом или выделять заметку 1203 вибрато, чтобы пользователь мог изучить текущий эффект пения вибрато из инструмента 801 для пения в процессе пения в реальном времени.[0151] In another example, as shown in FIG. 12(b), the mobile phone can display in the
[0152] Можно понять, что специалист в данной области может дополнительно оценить, основываясь на фактическом опыте или реальном сценарии применения и на основе информации характеристики а капелла оригинального певца, а капелла пользователя, которую поет пользователь в режиме реального времени при записи песни и отображает результат оценки навыка дыхания, навыка вибрато или интонации для пользователя, например, мобильный телефон может оценивать а капелла пользователя на основе информации характеристики а капелла оригинального певца и отобразить оценочный результат пользователю. Это не ограничено в этом варианте осуществления изобретения согласно настоящей заявке.[0152] It can be understood that a person skilled in the art can further evaluate based on actual experience or a real application scenario and based on the information of the a cappella characteristics of the original singer and the user cappella that the user sings in real time when recording a song and displays the result evaluating the breath skill, vibrato skill, or intonation skill for the user, for example, the mobile phone can rate the user's a cappella based on the original singer's a cappella characteristic information and display the evaluation result to the user. This is not limited in this embodiment of the invention according to the present application.
[0153] Можно узнать, что в этом варианте осуществления изобретения согласно настоящей заявке в процессе записи песни пользователя одно или более певческих навыков пользователя, таких как интонация, вибрато или дыхание, могут оцениваться в реальном времени на основе информации характеристики а капелла оригинального певца. По сравнению с оценкой уровня пения пользователя только на основе интонации, в этом варианте осуществления изобретения согласно настоящей заявке такие факторы, как дыхание и вибрато пользователя, также учитываются во время оценки пения пользователя, и, следовательно, полученный результат оценки является более точным, объемным и объективным. Кроме того, мобильный телефон может возвращать результат оценки пения пользователя пользователю в режиме реального времени в процессе записи, так что пользователь вовремя узнает текущий эффект пения пользователя, и пользователь может регулировать манеру пения вовремя в последующем процессе записи.[0153] It can be recognized that in this embodiment according to the present application, in the process of recording a user's song, one or more of the user's singing skills, such as intonation, vibrato, or breathing, can be assessed in real time based on the a cappella characteristic information of the original singer. Compared to judging the level of a user's singing based on intonation alone, in this embodiment of the invention according to the present application, factors such as the user's breathing and vibrato are also taken into account during the judging of the user's singing, and therefore the resulting judging result is more accurate, voluminous, and objective. In addition, the mobile phone can return the user's singing evaluation result to the user in real time during the recording process, so that the user knows the current effect of the user's singing in time, and the user can adjust the singing manner in time in the subsequent recording process.
[0154] S306. После завершения записи песни A мобильный телефон корректирует а капелла пользователя на основе информации характеристики а капелла оригинального певца и информации характеристики а капелла пользователя.[0154] S306. After the recording of song A is completed, the mobile phone corrects the user's a cappella based on the original singer's a cappella characteristic information and the user's a cappella characteristic information.
[0155] Когда мобильный телефон заканчивает воспроизведение аккомпанемента песни A или обнаруживает операцию завершения записи, введенную пользователем, мобильный телефон может отключить микрофон, чтобы прекратить сбор а капелла, сделанный пользователем. Кроме того, после того, как запись песни A закончится, как показано на фиг. 13, мобильный телефон может отображать интерфейс 1301 коррекции звука караоке приложения. Интерфейс 1301 коррекции звука может включать в себя переключатель 1302 коррекции звука. Если обнаружено, что пользователь включает переключатель 1302 коррекции звука, мобильный телефон может корректировать на основе информации характеристики а капелла оригинального певца песни A проблему с пением (например, одна или более из таких проблем с пением, как интонация, вибрато и звук дыхания), который появляется в а капелла пользователя и собирается, когда пользователь на этот раз записывает песню A.[0155] When the mobile phone finishes playing the accompaniment of song A or detects a recording end operation inputted by the user, the mobile phone can turn off the microphone to stop the a cappella collection made by the user. In addition, after the recording of song A ends, as shown in FIG. 13, the mobile phone can display the
[0156] Например, запись пользователем песни «Red Bean» по-прежнему используется в качестве примера. После того, как пользователь записывает песню «Red Bean» в интерфейсе записи, мобильный телефон может отображать интерфейс 1301 коррекции звука, показанный на фиг. 13. Если обнаружено, что пользователь включает переключатель 1302 коррекции звука на интерфейсе 1301 коррекции звука, мобильный телефон может выполнить коррекцию на основе информации характеристики а капелла оригинального певца, интонации, звука дыхания и вибрато в а капелла пользователя, собранной на этот раз.[0156] For example, the user's recording of the song "Red Bean" is still used as an example. After the user records the song "Red Bean" in the recording interface, the mobile phone can display the
[0157] Например, мобильный телефон может сравнивать информацию основной частоты а капелла оригинального певца с информацией основной частоты песни «Red Bean», записанной на этот раз пользователем, чтобы корректировать проблему интонации, которая появляется в а капелла пользователя на этот раз. Например, если тон от десятой до двадцатой секунды в а капелла пользователя ниже, чем тон от десятой до двадцатой секунды в а капелла оригинального певца, мобильный телефон может воспроизводить тон: обработка нарастания тона этой части в а капелла пользователя, так что тон этой части в а капелла пользователя такой же или близкий к тону а капелла оригинального певца. Например, если тон от первой минуты и двенадцатой секунды до первой минуты и двадцать седьмой секунды в а капелла пользователя выше, чем тон от первой минуты и двенадцатой секунды до первой минуты и двадцать седьмой секунды в а капелла оригинального певца мобильный телефон может выполнять обработку с понижением тона для тона этой части а капелла пользователя, так что тон этой части в а капелла пользователя такой же, как или близко к тону а капелла оригинального певца.[0157] For example, the mobile phone may compare the original singer's a cappella fundamental frequency information with the fundamental frequency information of the song "Red Bean" recorded this time by the user to correct the intonation problem that appears in the user's a cappella this time. For example, if the tenth to twentieth second tone in the user's a cappella is lower than the tenth to twentieth second tone in the original singer's a cappella, the mobile phone can play the tone: the user's a cappella is the same or close to the original singer's a cappella tone. For example, if the tone from the first minute and twelfth second to the first minute and twenty-seventh second in the user's a cappella is higher than the tone from the first minute and twelfth second to the first minute and twenty-seventh second in the original singer's a cappella, the mobile phone may perform down processing tones for the tone of that user's a cappella part, so that the user's a cappella part's tone is the same as or close to the original singer's a cappella tone.
[0158] В качестве другого примера мобильный телефон может извлекать место звука дыхания из а капелла пользователя песни «Red Bean», записанной на этот раз пользователем. Например, мобильный телефон может обнаруживать, используя предустановленную модель обнаружения дыхания, этот звук дыхания появляется как на четырнадцатой, так и на семьдесят восьмой секунде а капелла пользователя. Кроме того, мобильный телефон может уменьшить энергию и частотную характеристику а капелла пользователя на четырнадцатой секунде и семьдесят восьмой секунде, тем самым ослабляя звук дыхания, который появляется на четырнадцатой секунде и семьдесят восьмой секунде, для улучшения качество прослушивания записанной песни.[0158] As another example, the mobile phone can extract the location of the breath sound from the user's a cappella song "Red Bean" recorded this time by the user. For example, a mobile phone can detect, using a preset breath detection pattern, that breath sound appears at both the fourteenth and seventy-eighth seconds a cappella of the user. In addition, the mobile phone can reduce the user's energy and a cappella frequency response at the fourteenth second and seventy-eighth second, thereby attenuating the breathing sound that appears at the fourteenth second and seventy-eighth seconds, to improve the listening quality of the recorded song.
[0159] В качестве другого примера, мобильный телефон может сравнить характеристику вибрато а капелла оригинального певца с характеристикой вибрато песни «Red Bean», записанной на этот раз пользователем, чтобы корректировать вибрато с плохим эффектом вибрато в а капелла пользователя на этот раз. Например, мобильный телефон может обнаруживать, используя предварительно установленную модель обнаружения вибрато, место, в котором вибрато появляется в а капелла пользователя. Например, вибрато 1 обнаруживается на пятнадцатой секунде в а капелла пользователя, и если амплитуду вибрации A1 (t), частоту вибрации Φ1 (t) и фрагмент стабильного тренда V1 (t) вибрато 1 сопоставить с амплитудой вибрации A2 (t), частотой вибрации Φ2 (t) и фрагментом стабильного тренда V2 (t) вибрато 2 на пятнадцатой секунде а капелла оригинального певца, это указывает на то, что эффект вибрато 1, спетый пользователем, в основном такой же, как и оригинальный певец, и мобильный телефон не нуждается в коррекции вибрато 1. Соответственно, если амплитуда колебаний A1 (t), частота колебаний Φ1 (t) и фрагмент стабильного тренда V1 (t) вибрато 1 не соответствуют амплитуде колебаний A2 (t), частота колебаний Φ2 (t) и фрагменту стабильного тренда V2 (t) вибрато 2 на пятнадцатой секунде а капелла оригинального певца, мобильный телефон может синтезировать новое вибрато в а капелла пользователя на пятнадцатой секунде, используя амплитуду вибрации A2 (t), частоту Φ2 (t) вибрации и фрагмент стабильного тренда V2 (t) вибрато 2 для улучшения звукового эффекта вибрато, который появляется в а капелла пользователя.[0159] As another example, the mobile phone can compare the a cappella vibrato characteristic of the original singer with the vibrato characteristic of the song "Red Bean" recorded this time by the user to correct the vibrato with the user's poor a cappella vibrato effect this time. For example, the mobile phone can detect, using a preset vibrato detection pattern, the location where the vibrato appears in the user's a cappella. For example, vibrato 1 is detected at the fifteenth second in the user's a cappella, and if vibration amplitude A1 (t), vibration frequency Φ1 (t) and a fragment of a stable trend V1 (t) of vibrato 1 are compared with vibration amplitude A2 (t), vibration frequency Φ2 (t) and a fragment of the stable trend V2 (t) vibrato 2 at the fifteenth second a cappella of the original singer, this indicates that the effect of vibrato 1 sung by the user is basically the same as the original singer, and the mobile phone does not need correction of vibrato 1. Accordingly, if the oscillation amplitude A1 (t), the oscillation frequency Φ1 (t) and the stable trend fragment V1 (t) vibrato 1 do not correspond to the oscillation amplitude A2 (t), the oscillation frequency Φ2 (t) and the stable trend fragment V2 (t) vibrato 2 at the fifteenth second of the original singer's a cappella, the mobile phone can synthesize a new user's a cappella vibrato at the fifteenth second, using the vibration amplitude A2 (t), the frequency Φ2 (t) of the vibration and the fragment is stable V2 (t) Vibrato 2 to enhance the vibrato sound effect that appears in the user's a cappella.
[0160] В некоторых вариантах осуществления изобретения, как показано на фиг. 14, после обнаружения того, что пользователь включает переключатель 1302 коррекции звука на интерфейсе 1301 коррекции звука, мобильный телефон может дополнительно отображать опцию 1401 коррекции звука для коррекции интонации, опцию 1402 коррекции звука для коррекции звука дыхания и опцию 1403 коррекции звука для коррекции вибрато. Таким образом, пользователь может вручную выбрать в интерфейсе 1301 коррекции звука, чтобы корректировать проблему с интонацией, проблему со звуком дыхания или проблему с вибрато в а капелла пользователя, которая записывается на этот раз.[0160] In some embodiments of the invention, as shown in FIG. 14, upon detecting that the user turns on the
[0161] В некоторых других вариантах осуществления изобретения после сбора а капелла пользователя песни «Red Bean», записанной пользователем на этот раз, мобильный телефон может дополнительно автоматически корректировать такие проблемы, как интонация, звук дыхания и вибрато в а капелла песни пользователя, чтобы улучшить качество прослушивания песни при последующем ее воспроизведении. Например, как показано на фиг. 14, кнопка 1404 воспроизведения расположена на интерфейсе 1301 коррекции звука. Если обнаружено, что пользователь нажимает кнопку 1404 воспроизведения, мобильный телефон может автоматически корректировать на основе информации характеристики а капелла оригинального певца такие проблемы, как интонация, звук дыхания и вибрато в а капелла пользователя и интегрировать скорректированную а капелла пользователя в аккомпанемент песни «Red Bean» для воспроизведения.[0161] In some other embodiments, after collecting the user's a cappella song "Red Bean" recorded by the user this time, the mobile phone can further automatically correct problems such as intonation, breathing sound, and vibrato in the user's song a cappella to improve the quality of listening to a song during its subsequent playback. For example, as shown in FIG. 14, a
[0162] В некоторых вариантах осуществления изобретения, как показано на фиг. 15 (a), опция 1501 уточнения одного предложения может быть дополнительно установлена в интерфейсе 1301 коррекции звука караоке приложения. Если обнаружено, что пользователь выбирает опцию 1501, как показано на фиг. 15 (b), мобильный телефон может отображать интерфейс 1502 уточнения. В интерфейсе 1502 уточнения мобильный телефон может отображать каждое предложение текста песни, исполненное пользователем в песне «Red Bean», и использовать каждое предложение текста песни в качестве опции для выбора пользователем. Например, пользователь выбирает текст 1503 песни «I believe an end comes at a time». После того, как пользователь выберет текст 1503 песни, мобильный телефон может воспроизвести записанную часть песни, соответствующую тексту 1503 песни. Кнопка 1504 интонации, кнопка 1505 вибрато и кнопка 1506 дыхания дополнительно устанавливаются в интерфейсе 1301 коррекции звука. Пользователь может вручную выбрать в интерфейсе 1502 уточнения, корректировать одну или более проблем с пением, таких как интонация, вибрато или звук дыхания, которые появляются в а капелла пользователя и соответствуют тексту 1503 песни. Если пользователь нажимает кнопку 1525 вибрато и кнопку 1504 интонации после выбора текста 1503 песни, мобильный телефон может корректировать проблему интонации и проблему с вибрато в а капелла пользователя, соответствующую тексту 1503 песни, и интегрировать скорректированную а капелла пользователя в соответствующий аккомпанемент для воспроизведения. Таким образом, пользователь может корректировать, предложение за предложением, проблему с пением, которая появляется в а капелла пользователя, записанного на этот раз, и пользователь может сравнивать, предложение за предложением, записанные эффекты, достигнутые до и после корректировки, чтобы корректировать песню, записанную пользователем с певческим эффектом, который больше всего устраивает пользователя.[0162] In some embodiments of the invention, as shown in FIG. 15(a), a single
[0163] В некоторых других вариантах осуществления изобретения, как показано на фиг. 16 (a), опция 1601 редактирования с одним предложением может быть дополнительно установлена в интерфейсе 1301 коррекции звука караоке приложения. Если обнаружено, что пользователь выбирает опцию 1601, как показано на фиг. 16 (b), мобильный телефон может отображать интерфейс 1602 редактирования. В интерфейсе 1602 редактирования мобильный телефон может отображать каждое предложение текста песни, исполненное пользователем в песне «Red Bean». Кроме того, при отображении каждого предложения текста песни, мобильный телефон может дополнительно указывать в соответствующем месте текста песни проблему с пением, которая возникает, когда пользователь поет предложение текста песни, например, с неточным тоном, относительно высоким звуком дыхания, нестабильным вибрато или отсутствием вибрато. Таким образом, пользователь может интуитивно увидеть конкретную проблему, которая возникает, когда пользователь поет каждое предложение текста песни.[0163] In some other embodiments of the invention, as shown in FIG. 16(a), the single
[0164] Кроме того, как показано на фиг. 16 (b), кнопка 1603 редактирования, соответствующая каждому предложению текста песни, может быть дополнительно установлена в интерфейсе 1602 редактирования. Если обнаружено, что пользователь нажимает кнопку 1603 редактирования, соответствующую конкретному предложению текста песни, мобильный телефон может воспроизводить аккомпанемент, соответствующий тексту песни, и позволяет микрофону собирать а капелла пользователя, полученную после того, как пользователь повторно - поет текст песни. После того, как мобильный телефон соберет а капелла пользователя, полученную после того, как пользователь повторно спет текст песни, а капелла пользователя, соответствующая записанной песне «Red Bean», может быть заменена а капелла пользователя, которая перезаписал на этот раз. Когда тексты песен отображаются в интерфейсе 1602 редактирования, мобильный телефон уведомляет пользователя о конкретной проблеме с пением, которая появляется, когда пользователь поет текст песни. Следовательно, когда пользователь повторно поет текст песни, пользователь может вовремя регулировать манеру пения, чтобы корректировать проблему с пением, которая появляется, когда текст песни записывается в последний раз. Таким образом улучшается качество пения и записи.[0164] In addition, as shown in FIG. 16(b), an
[0165] Как показано на фиг. 17, вариант осуществления изобретения согласно настоящей заявке раскрывает электронное устройство, и электронное устройство включает в себя: сенсорный экран 1701, при этом сенсорный экран 1701 включает в себя сенсорную поверхность 1706 и дисплей 1707; один или более процессоров 1702; память 1703; один или более микрофонов 1708; и одна или более компьютерных программ 1704. Вышеупомянутые компоненты могут быть соединены посредством одной или более коммуникационных шин 1705. Одна или более компьютерных программ 1704 хранятся в памяти 1703 и выполнены с возможностью выполнения одним или более процессорами 1702. Одна или более компьютерных программ 1704 включают в себя инструкцию, и инструкция может использоваться для выполнения шагов в вышеупомянутых вариантах осуществления изобретения.[0165] As shown in FIG. 17, an embodiment of the invention according to the present application discloses an electronic device, and the electronic device includes: a
[0166] Например, процессор 1702 может быть, в частности, процессором 110, показанным на фиг. 1, память 1703 может быть, в частности, внутренней памятью 121 и/или внешней памятью 120, показанной на фиг. 1, дисплей 1707 может быть, в частности, дисплеем 194, показанным на фиг. 1 микрофон 1708 может быть, в частности, микрофоном 170C, показанным на фиг. 1, и сенсорная поверхность 1706 может быть, в частности, датчиком 180K касания в модуле 180 датчика, показанном на фиг. 1. Это не ограничено в этом варианте осуществления изобретения согласно настоящей заявке.[0166] For example,
[0167] В некоторых вариантах осуществления настоящее изобретение дополнительно обеспечивает графический интерфейс пользователя (GUI), и графический интерфейс пользователя может храниться в электронном устройстве. Например, электронное устройство может быть электронным устройством, показанным на фиг. 1 или фиг. 17.[0167] In some embodiments, the present invention further provides a graphical user interface (GUI), and the graphical user interface may be stored on the electronic device. For example, the electronic device may be the electronic device shown in FIG. 1 or fig. 17.
[0168] Например, графический интерфейс пользователя включает в себя первый GUI, отображаемый на сенсорном экране. Как показано на фиг. 4, первый GUI может быть интерфейсом 401 караоке приложения, а первый GUI содержит в себя кнопку 403 записи, используемую для записи первой песни. В ответ на событие касания для кнопки записи электронное устройство может отображать второй GUI на сенсорном экране. Как показано на фиг. 7 или фиг. 8, второй GUI может быть интерфейсом 601 записи для записи первой песни пользователем. Второй GUI может включать в себя информацию руководства для руководства пользователем в пении первой песни, а информация руководства включает в себя подсказку дыхания и/или подсказку вибрато. Например, как показано на фиг. 7 текст 602 песни, отображаемый на интерфейсе 601 записи, содержит подсказку 701 дыхания и подсказку 702 вибрато. В другом примере, как показано на фиг. 8, инструмент 801 для пения, отображаемый на интерфейсе 601 записи, имеет подсказку 802 интонации, подсказку 804 дыхания и подсказку 803 вибрато. Информация руководства на втором GUI пользователя формируется электронным устройством на основе информации характеристики а капелла оригинального певца.[0168] For example, a graphical user interface includes a first GUI displayed on a touch screen. As shown in FIG. 4, the first GUI may be a
[0169] В некоторых вариантах осуществления второй GUI может дополнительно включать в себя результат оценки навыка дыхания и/или навыка вибрато пользователя во время пения. Например, как показано на фиг. С 10 (а) по фиг. 10 (c), интерфейс 601 записи включает в себя результат 1001 оценки навыка дыхания пользователя, результат 1002 оценки навыка вибрато пользователя и результат 1003 оценки интонации пользователя. В другом примере, как показано на фиг. С 12 (а) по фиг. 12 (b), результат 1202 оценки интонации пользователя, результат 1203 оценки навыка вибрато пользователя и т.п. могут отображаться в инструменте для пения на интерфейсе 601 записи. Это не ограничено в этом варианте осуществления изобретения согласно настоящей заявке.[0169] In some embodiments, the implementation of the second GUI may further include the result of an assessment of the breath skill and/or vibrato skill of the user while singing. For example, as shown in FIG. C 10(a) in FIG. 10(c), the
[0170] В некоторых вариантах осуществления после окончания записи первой песни электронное устройство может отображать третий GUI на сенсорном экране. Как показано на фиг. 13 или фиг. 14, третий GUI может быть интерфейсом 1301 коррекции звука первой песни, а третий GUI включает в себя переключатель 1302 коррекции звука. Когда пользователь включает переключатель 1302 коррекции звука, электронное устройство может корректировать проблему с пением, такую как проблема с дыханием и/или проблема с вибрато, которая появляется в а капелла пользователя.[0170] In some embodiments, after recording of the first song is finished, the electronic device may display a third GUI on the touch screen. As shown in FIG. 13 or FIG. 14, the third GUI may be the first song
[0171] Приведенное выше описание реализаций позволяет специалисту в данной области техники ясно понять, что для простоты удобного и краткого описания разделение вышеупомянутых функциональных модулей используется в качестве примера для иллюстрации. В реальном приложении вышеупомянутые функции могут быть назначены различным модулям для реализации по мере необходимости, то есть внутренняя структура устройства разделена на разные функциональные модули для реализации всех или некоторых функций, описанных выше. Для подробных рабочих процессов вышеупомянутой системы, устройства и блока следует обратиться к соответствующим процессам в вышеупомянутых вариантах осуществления способа, и подробности здесь снова не описываются.[0171] The above description of the implementations allows the person skilled in the art to clearly understand that for ease of convenient and concise description, the separation of the above functional modules is used as an example for illustration. In a real application, the above functions can be assigned to different modules to be implemented as needed, that is, the internal structure of the device is divided into different functional modules to implement all or some of the functions described above. For the detailed working processes of the aforementioned system, apparatus, and unit, the respective processes in the aforementioned method embodiments should be referred to, and the details are not described here again.
[0172] Функциональные блоки в вариантах осуществления изобретения согласно настоящей заявке могут быть интегрированы в один блок обработки, или каждый из блоков может существовать отдельно физически, или два или более блоков объединены в один блок. Интегрированный блок может быть реализован в виде аппаратных средств или может быть реализован в виде программного функционального блока.[0172] Functional blocks in embodiments of the invention according to the present application may be integrated into one processing unit, or each of the units may exist separately physically, or two or more blocks are combined into one unit. An integrated block may be implemented in hardware or may be implemented in a software function block.
[0173] Когда интегрированный блок реализован в форме программного функционального блока и продан или используется в качестве независимого продукта, интегрированный блок может храниться на компьютерно-читаемом носителе. Основываясь на таком понимании, технические решения вариантов осуществления изобретения согласно настоящей заявке по существу или часть, вносящая вклад в предшествующий уровень техники, или все или некоторые из технических решений могут быть реализованы в форме программного продукта. Программный продукт хранится на носителе данных и включает в себя несколько инструкций для указания компьютерному устройству (которое может быть персональным компьютером, сервером или сетевым устройством) выполнять все или некоторые из этапов способов, описанных в вариантах осуществления настоящего изобретения. Вышеупомянутый носитель данных включает в себя любой носитель, который может хранить программный код, такой как флэш-память, съемный жесткий диск, постоянное запоминающее устройство, оперативное запоминающее устройство, магнитный диск или оптический диск.[0173] When an integrated block is implemented in the form of a software functional block and sold or used as a standalone product, the integrated block may be stored on a computer-readable medium. Based on this understanding, the technical solutions of the embodiments of the invention according to the present application, essentially or part contributing to the prior art, or all or some of the technical solutions can be implemented in the form of a software product. The software product is stored on a storage medium and includes several instructions for instructing a computing device (which may be a personal computer, a server, or a network device) to perform all or some of the steps of the methods described in the embodiments of the present invention. The aforementioned storage medium includes any medium that can store program code, such as flash memory, removable hard disk, read only memory, random access memory, magnetic disk or optical disk.
[0174] Вышеизложенное является просто конкретными реализациями вариантов осуществления изобретения согласно настоящей заявке, но объем защиты вариантов осуществления изобретения согласно настоящей заявке не ограничивается этим. Любое изменение или замена в пределах технического объема, раскрытого в вариантах осуществления изобретения согласно настоящей заявке, должны находиться в пределах объема защиты вариантов осуществления изобретения согласно настоящей заявке. Следовательно, объем защиты вариантов осуществления изобретения согласно настоящей заявке должен быть предметом объема защиты формулы изобретения. [0174] The foregoing are merely specific implementations of the embodiments of the invention according to the present application, but the scope of protection of the embodiments of the invention according to the present application is not limited to this. Any change or replacement within the technical scope disclosed in the embodiments of the invention according to this application should be within the protection scope of the embodiments of the invention according to this application. Therefore, the scope of the embodiments of the invention according to the present application should be subject to the scope of the claims.
Claims (84)
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910152655.3 | 2019-02-28 |
Publications (1)
Publication Number | Publication Date |
---|---|
RU2777617C1 true RU2777617C1 (en) | 2022-08-08 |
Family
ID=
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5955693A (en) * | 1995-01-17 | 1999-09-21 | Yamaha Corporation | Karaoke apparatus modifying live singing voice by model voice |
JP2010256425A (en) * | 2009-04-21 | 2010-11-11 | Daiichikosho Co Ltd | Karaoke device for automatically changing key, when person sings whose gender is different from original singer |
CN104715760A (en) * | 2015-02-13 | 2015-06-17 | 朱威 | KTV song matching analyzing method and system |
US10008193B1 (en) * | 2016-08-19 | 2018-06-26 | Oben, Inc. | Method and system for speech-to-singing voice conversion |
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5955693A (en) * | 1995-01-17 | 1999-09-21 | Yamaha Corporation | Karaoke apparatus modifying live singing voice by model voice |
JP2010256425A (en) * | 2009-04-21 | 2010-11-11 | Daiichikosho Co Ltd | Karaoke device for automatically changing key, when person sings whose gender is different from original singer |
CN104715760A (en) * | 2015-02-13 | 2015-06-17 | 朱威 | KTV song matching analyzing method and system |
US10008193B1 (en) * | 2016-08-19 | 2018-06-26 | Oben, Inc. | Method and system for speech-to-singing voice conversion |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7222112B2 (en) | Singing recording methods, voice correction methods, and electronic devices | |
CN110134316B (en) | Model training method, emotion recognition method, and related device and equipment | |
CN112231025A (en) | UI component display method and electronic equipment | |
CN109286725B (en) | Translation method and terminal | |
WO2021258814A1 (en) | Video synthesis method and apparatus, electronic device, and storage medium | |
CN109819306B (en) | Media file clipping method, electronic device and server | |
CN111628916A (en) | Method for cooperation of intelligent sound box and electronic equipment | |
CN114697732A (en) | Shooting method, system and electronic equipment | |
CN116208704A (en) | Sound processing method and device | |
WO2023000778A9 (en) | Audio signal processing method and related electronic device | |
CN111031492A (en) | Call demand response method and device and electronic equipment | |
CN114173184B (en) | Screen projection method and electronic equipment | |
CN115359156B (en) | Audio playing method, device, equipment and storage medium | |
RU2777617C1 (en) | Song recording method, sound correction method and electronic device | |
WO2023273904A1 (en) | Method for storing audio data and related device thereof | |
WO2022007757A1 (en) | Cross-device voiceprint registration method, electronic device and storage medium | |
CN113407300B (en) | Application false killing evaluation method and related equipment | |
CN114500728B (en) | Incoming call bell setting method, incoming call prompting method and electronic equipment | |
CN113867851A (en) | Electronic equipment operation guide information recording method, electronic equipment operation guide information acquisition method and terminal equipment | |
CN113938556B (en) | Incoming call prompting method and device and electronic equipment | |
CN117689776B (en) | Audio playing method, electronic equipment and storage medium | |
CN113470638B (en) | Method for slot filling, chip, electronic device and readable storage medium | |
CN117133311B (en) | Audio scene recognition method and electronic equipment | |
CN117785312A (en) | Audio playing method, electronic device and storage medium | |
CN116541589A (en) | Broadcast record display method and related equipment |