KR100533160B1 - Method for updating the visualizing of voice - Google Patents
Method for updating the visualizing of voice Download PDFInfo
- Publication number
- KR100533160B1 KR100533160B1 KR10-2003-0088032A KR20030088032A KR100533160B1 KR 100533160 B1 KR100533160 B1 KR 100533160B1 KR 20030088032 A KR20030088032 A KR 20030088032A KR 100533160 B1 KR100533160 B1 KR 100533160B1
- Authority
- KR
- South Korea
- Prior art keywords
- voice
- frequency band
- level value
- visualization
- speech
- Prior art date
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04B—TRANSMISSION
- H04B1/00—Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
- H04B1/38—Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
- H04B1/40—Circuits
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Telephone Function (AREA)
Abstract
1. 청구범위에 기재된 발명이 속하는 기술분야1. TECHNICAL FIELD OF THE INVENTION
본 발명은, 음성 시각화 데이터 부분 업데이트 방법에 관한 것임.The present invention relates to a method of updating a part of speech visualization data.
2. 발명이 해결하려고 하는 기술적 과제2. The technical problem to be solved by the invention
본 발명은, 음성 시각화 시 각 주파수 대역별로 변경되는 음성 레벨값의 차이값을 부분적으로 업데이트하는, 음성 시각화 데이터 부분 업데이트 방법을 제공하는데 그 목적이 있음.An object of the present invention is to provide a method for partially updating the visualization data of the speech visualization, which partially updates the difference value of the speech level value changed for each frequency band during the visualization of the speech.
3. 발명의 해결 방법의 요지3. Summary of the Solution of the Invention
본 발명은, 음성 시각화 데이터 부분 업데이트 방법에 있어서, 음성의 주파수 대역 범위와 각 주파수 대역의 음성 레벨값 구간 및 그 표현색상과 스펙트럼 바의 형태를 설정하는 설정 단계; 음성 시각화 모드를 설정하는 음성 시각화 모드 설정 단계; 상기 음성 시각화 모드가 지정하는 음성의 각 주파수 대역별 음성 레벨값을 업데이트 시간 주기마다 추출하는 음성 레벨값 추출 단계: 현재 업데이트 시간동안 추출한 각 주파수 대역별 음성 레벨값과 이전 업데이트 시간동안 추출한 각 주파수 대역별 음성 레벨값을 각각 비교하는 음성 레벨값 비교 단계; 상기 비교 결과에 따라 상기 각 주파수 대역별로 변경된 음성 레벨값의 차이값을 산출하는 음성 레벨 차이값 산출 단계; 및 그래픽 처리함수를 이용하여 상기 각 주파수 대역별로 변경된 음성 레벨값의 차이값을 이전 업데이트 시간 주기의 음성 시각화 데이터에 가감하여 표시하는 음성 시각화 데이터 표시 단계를 포함함.According to an aspect of the present invention, there is provided a method of updating a speech visualization data portion, comprising: a setting step of setting a frequency band range of a voice, a voice level value section of each frequency band, a representation color thereof, and a shape of a spectrum bar; A voice visualization mode setting step of setting a voice visualization mode; Speech level value extraction step of extracting the speech level value for each frequency band of the voice designated by the speech visualization mode for each update time period: speech level value for each frequency band extracted during the current update time and each frequency band extracted during the previous update time A voice level value comparing step of comparing respective voice level values; A voice level difference value calculating step of calculating a difference value of the voice level value changed for each frequency band according to the comparison result; And a voice visualization data display step of displaying a difference value of the voice level value changed for each frequency band by using a graphic processing function by adding or subtracting the voice visualization data of a previous update time period.
4. 발명의 중요한 용도4. Important uses of the invention
본 발명은 무선통신 단말기 등에 이용됨.The present invention is used in a wireless communication terminal.
Description
본 발명은, 음성 시각화 데이터 부분 업데이트 방법에 관한 것으로, 더욱 상세하게는 음성 시각화 시 각 주파수 대역별로 변경되는 음성 레벨값의 차이값을 부분적으로 업데이트하는, 음성 시각화 데이터 부분 업데이트 방법에 관한 것이다.The present invention relates to a method for updating a part of a voice visualization data, and more particularly, to a method for updating part of a voice visualization data, in which partly updates a difference value of a voice level value changed for each frequency band during voice visualization.
본 발명에서 무선통신 단말기란 이동통신 단말기, 개인 휴대통신 단말기(PCS), 개인용 디지털 단말기(PDA), 스마트폰, 차세대 이동통신 단말기(IMT-2000), 무선랜 단말기 등과 같이 개인이 휴대하면서 무선통신이 가능한 단말기를 말한다.In the present invention, a wireless communication terminal is a mobile communication terminal, a personal digital communication terminal (PCS), a personal digital terminal (PDA), a smart phone, a next generation mobile communication terminal (IMT-2000), wireless communication while being carried by an individual such as a wireless LAN terminal. Say this is possible terminal.
그리고, 본 발명에서 음성이란 사람의 목소리, 자연음, 사운드음, 동물소리 및 기계적 음향 등과 같은 모든 음을 포함하는 개념의 용어이다.And, in the present invention, the term voice is a term of a concept including all sounds such as human voice, natural sound, sound sound, animal sound, and mechanical sound.
최근에 영상, 음성 관련 기술의 발전에 따라 멀티미디어 기능이 탑재된 무선통신 단말기가 보편화되고 있는 추세이다. 예를 들어, 통화 시 상대방의 음색을 변환하여 다른 음성으로 들리도록 하거나, MP3 재생기가 구비되어 무선통신 단말기를 이용하여 원하는 노래를 감상할 수 있거나, 상대방 목소리 또는 MP3 재생기로부터 출력되는 사운드음의 음성 레벨값에 따라 발광 다이오드를 발광시켜 시각적 효과를 내고 있다.Recently, with the development of video and audio related technologies, wireless communication terminals equipped with multimedia functions are becoming more common. For example, during a call, the voice of the other party can be converted to be heard in another voice, or an MP3 player is provided to listen to a desired song using a wireless communication terminal, or the voice of the sound output from the other voice or the MP3 player. According to the level value, the light emitting diode emits light to produce a visual effect.
일반적으로 음성의 시각화는 스펙트럼 분석기 출력 형태로 상기 음성의 각 주파수 대역별 음성 레벨값을 디스플레이부에 출력한다. 예를 들어, MP3 재생 응용 프로그램이 내장된 컴퓨터에서는 재생되는 사운드음의 각 주파수 대역별 음성 레벨값을 샘플링하여 그 결과값을 디스플레이부에 출력한다.In general, the visualization of the voice outputs a voice level value for each frequency band of the voice to the display unit in the form of a spectrum analyzer output. For example, in a computer in which an MP3 playback application is embedded, a voice level value of each frequency band of a sound sound to be reproduced is sampled and the result value is output to the display unit.
이 때, 상기 컴퓨터는 고성능의 중앙 처리부(CPU)가 탑재되어 있기 때문에 음성의 각 주파수 대역별 음성 레벨값을 일정 주기마다 추출하여 매번 그 결과값 전부(즉, 모든 주파수 대역별 음성 레벨값 전 구간)를 갱신하여 디스플레이부에 음성 시각화 데이터 전부가 새로 그려지도록 할 수 있다.At this time, the computer is equipped with a high performance CPU (CPU), so that the voice level value of each frequency band of the voice is extracted at regular intervals, and all of the result values (that is, the entire voice level value of every frequency band). ) Can be updated so that all the voice visualization data is newly drawn on the display.
그러나, 무선통신 단말기는 상기 컴퓨터보다 중앙 처리부(CPU)의 성능이 떨어지기 때문에 추출한 모든 주파수 대역별 음성 레벨값 전 구간을 매 업데이트 주기마다 전부 스펙트럼 분석기 출력 형태로 모두 디스플레이부에 업데이트시키는데 따른 부하가 많이 걸리며, 그에 따라 디스플레이부에서 표시되는 각 주파수 대역별 음성 레벨값이 자주 깜박이게 되는 문제점이 있다.However, since the performance of the central processing unit (CPU) is lower than that of the computer, the wireless communication terminal has a load of updating all the extracted voice level values for each frequency band to the display unit in the form of spectrum analyzer output in every update period. It takes a lot, and there is a problem that the voice level value of each frequency band displayed on the display unit often blinks.
한편, MP3 재생기에서 재생되는 사운드음(음성)의 각 주파수 대역별 음성 레벨값을 디스플레이부에 출력하는 무선통신 단말기 제품이 일부 출시되고 있다. 그러나, 이러한 무선통신 단말기에서는 음성(사운드음)의 각 주파수 대역별로 음성 레벨값을 실시간으로 샘플링하여 그 결과값을 이용하여 음성 시각화를 수행하는 것이 아니라, 사전에 스펙트럼 바 이미지를 만들어서 이 이미지를 음성(사운드음)이 재생됨에 따라 반복적으로 디스플레이부에 랜덤하게 출력하는 방식이 이용되고 있다.Meanwhile, some wireless communication terminal products that output voice level values for respective frequency bands of sound sounds (voice) reproduced in an MP3 player have been released. However, in such a wireless communication terminal, the voice level value is sampled in real time for each frequency band of the voice (sound), and the voice is visualized using the result value. As (sound sounds) are reproduced, a method of repeatedly randomly outputting the display unit is used.
이처럼, 상기와 같은 종래 방식의 무선통신 단말기에서는 음성(사운드음)과 관계없이 사전에 만든 스펙트럼 바 이미지를 그냥 랜덤하게 반복적으로 출력하므로 정확히는 음성(사운드음)의 음성 시각화라 말할 수 없다.As described above, in the conventional wireless communication terminal as described above, the spectral bar image produced in advance and repeatedly outputs randomly and repeatedly regardless of the voice (sound sound), and thus cannot be exactly called a voice visualization of the sound (sound sound).
본 발명은, 상기와 같은 문제점을 해결하기 위하여 제안된 것으로, 음성 시각화 시 각 주파수 대역별로 변경되는 음성 레벨값의 차이값을 부분적으로 업데이트하는, 음성 시각화 데이터 부분 업데이트 방법을 제공하는데 그 목적이 있다. The present invention has been proposed to solve the above problems, and an object of the present invention is to provide a method for partially updating speech visualization data, which partially updates a difference value of a speech level value changed for each frequency band during speech visualization. .
상기의 목적을 달성하기 위한 본 발명은, 음성 시각화 데이터 부분 업데이트 방법에 있어서, 음성의 주파수 대역 범위와 각 주파수 대역의 음성 레벨값 구간 및 그 표현색상과 스펙트럼 바의 형태를 설정하는 설정 단계; 음성 시각화 모드를 설정하는 음성 시각화 모드 설정 단계; 상기 음성 시각화 모드가 지정하는 음성의 각 주파수 대역별 음성 레벨값을 업데이트 시간 주기마다 추출하는 음성 레벨값 추출 단계: 현재 업데이트 시간동안 추출한 각 주파수 대역별 음성 레벨값과 이전 업데이트 시간동안 추출한 각 주파수 대역별 음성 레벨값을 각각 비교하는 음성 레벨값 비교 단계; 상기 비교 결과에 따라 상기 각 주파수 대역별로 변경된 음성 레벨값의 차이값을 산출하는 음성 레벨 차이값 산출 단계; 및 그래픽 처리함수를 이용하여 상기 각 주파수 대역별로 변경된 음성 레벨값의 차이값을 이전 업데이트 시간 주기의 음성 시각화 데이터에 가감하여 표시하는 음성 시각화 데이터 표시 단계를 포함한다.According to an aspect of the present invention, there is provided a method of updating a speech visualization data portion, the method comprising: setting a frequency band range of a voice, a voice level value section of each frequency band, and a representation color and a shape of a spectrum bar; A voice visualization mode setting step of setting a voice visualization mode; Speech level value extraction step of extracting the speech level value for each frequency band of the voice designated by the speech visualization mode for each update time period: speech level value for each frequency band extracted during the current update time and each frequency band extracted during the previous update time A voice level value comparing step of comparing respective voice level values; A voice level difference value calculating step of calculating a difference value of the voice level value changed for each frequency band according to the comparison result; And a speech visualization data display step of displaying a difference value of the speech level value changed for each frequency band by using a graphic processing function by adding or subtracting the speech visualization data of the previous update time period.
상술한 목적, 특징들 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일실시예를 상세히 설명한다.The above objects, features and advantages will become more apparent from the following detailed description taken in conjunction with the accompanying drawings. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.
도 1은 본 발명에 따른 음성 시각화 데이터 부분 업데이트 장치에 대한 일실예 구성도이다.1 is an exemplary configuration diagram of an apparatus for updating voice visualization data part according to the present invention.
도 1에 도시된 바와 같이, 본 발명에 따른 음성 시각화 데이터 부분 업데이트 장치는, 무선으로 신호를 송수신하기 위한 무선 송수신부(100)와, 무선통신 단말기 구동 프로그램과 음성 시각화 관련 데이터(예; 음성 시각화 플러그-인 프로그램, 드로윙 스펙트럼 함수 등) 등을 저장하기 위한 메모리(110)와, 오디오음, 멜로디음 등과 같은 사운드음을 공급하기 위한 사운드 공급부(120)와, 상기 무선 송수신부(100)를 통해 전달된 상대방 목소리 또는 마이크(160)를 통해 전달된 사용자 목소리 또는 상기 사운드 공급부(120)로부터 전달된 사운드음을 신호 처리하여, 업데이트 시간동안 각 주파수 대역별 음성 레벨값을 추출한 후에 이전 업데이트 시간동안 추출된 각 주파수 대역별 음성 레벨값과 비교하여 변경되는 주파수 대역의 음성 레벨값의 차이값을 메모리(110)에 저장시키고 이전에 디스플레이부(140)에 출력되어 있는 음성 시각화 데이터에 추가적으로 표시되거나 삭제되도록 하기 위한 연산/제어부(130)와, 상기 연산/제어부(130)의 제어에 의한 음성 시각화 데이터를 화면에 표시하기 위한 디스플레이부(140)와, 버튼을 통해 음성 시각화 선택 신호(음성 시각화 모드) 등을 입력받기 위한 키 입력부(150)와, 음성 등을 입력받기 위한 마이크(160)와, 음성 등을 출력하기 위한 스피커(또는 이어폰)(170)를 포함한다. 이 외에도 상기 무선통신 단말기는 무선 통신을 위한 기본적인 구성 요소들(도면에 도시되지 않음)을 포함한다.As shown in FIG. 1, the apparatus for updating a part of a voice visualization data according to the present invention includes a wireless transceiver 100 for transmitting and receiving a signal wirelessly, a wireless communication terminal driving program and data related to voice visualization (eg, voice visualization). Memory 110 for storing a plug-in program, a drawing spectrum function, etc.), a sound supply unit 120 for supplying sound sounds such as audio sound, melody sound, and the like, and the wireless transceiver 100 By processing the other party's voice or the user's voice transmitted through the microphone 160 or the sound sound transmitted from the sound supply unit 120, the voice level value of each frequency band is extracted during the update time, and then extracted during the previous update time. The difference value of the voice level value of the changed frequency band is compared with the voice level value of each frequency band that has been changed. ) And a calculation / control unit 130 for displaying or deleting the voice visualization data previously output to the display unit 140, and the voice visualization data under the control of the calculation / control unit 130. A display unit 140 for displaying on the screen, a key input unit 150 for receiving a voice visualization selection signal (voice visualization mode), etc. through a button, a microphone 160 for receiving voice, etc. And a speaker (or earphone) 170 for outputting. In addition, the wireless communication terminal includes basic components (not shown) for wireless communication.
상기 연산/제어부(130)는 음성 시각화 모드가 설정됨에 따라 기 설정된 음성 시각화 업데이트(또는 리프레쉬) 시간(예; 33 ms)마다 무선 송수신부(100)를 통해 전달되는 상대방 아날로그 음성 신호 또는 마이크(160)를 통해 전달되는 사용자 아날로그 음성 신호 또는 사운드 공급부(120)로부터 전달되는 디지털 사운드음 신호를 신호 처리(예; 샘플링)하여 각 주파수 대역별 음성 레벨값을 추출한다. 그런 후, 상기 연산/제어부(130)는 추출한 각 주파수 대역별 음성 레벨값을 메모리(110)에 저장한 후에 드로윙 스펙트럼 함수를 이용하여 해당 주파수 대역의 음성 레벨값 데이터를 그려서 디스플레이부(140)에 출력되도록 한다. 이 후, 상기 연산/제어부(130)는 음성 시각화 업데이트 시간마다 무선 송수신부(100)를 통해 전달되는 상대방 아날로그 음성 신호 또는 마이크(160)를 통해 전달되는 사용자 아날로그 음성 신호 또는 사운드 공급부(120)로부터 전달되는 디지털 사운드음 신호를 신호 처리하여 각 주파수 대역별 음성 레벨값을 추출한 후에, 상기 메모리(110)에 기 저장된 이전 업데이트 시간동안의 각 주파수 대역별 음성 레벨값과 현재 추출된 각 주파수 대역별 음성 레벨값을 비교한다. 그런 다음, 상기 연산/제어부(130)는 상기 각 주파수 대역별로 음성 레벨값이 증가되면 각 주파수 대역별로 그 음성 레벨값의 증가값을 저장하고, 상기 각 주파수 대역별로 음성 레벨값이 감소되면 각 주파수 대역별로 그 음성 레벨값의 감소값을 저장한다. 그런 후, 상기 연산/제어부(130)는 드로윙 스펙트럼 함수를 호출하여, 각 주파수 대역별로 증가된 음성 레벨값 구간만 더 그려서 디스플레이부(140)에 추가적으로 표시되도록 하고, 각 주파수 대역별로 감소된 음성 레벨값 구간은 삭제하여 디스플레이부(140)에 표시되도록 한다.As the voice visualization mode is set, the operation / control unit 130 may counterpart the analog voice signal or the microphone 160 transmitted through the wireless transmission / reception unit 100 at a preset voice visualization update (or refresh) time (eg, 33 ms). The user's analog voice signal transmitted through the digital audio signal or the digital sound signal transmitted from the sound supply unit 120 is processed (eg, sampled) to extract a voice level value for each frequency band. Thereafter, the operation / control unit 130 stores the extracted voice level value of each frequency band in the memory 110 and draws the voice level value data of the corresponding frequency band by using a drawing spectrum function on the display unit 140. To be printed. Subsequently, the operation / control unit 130 is provided from the user analog voice signal or the sound supply unit 120 transmitted through the counterpart analog voice signal or the microphone 160 transmitted through the wireless transceiver 100 at every voice visualization update time. After processing the extracted digital sound tone signal to extract the voice level value for each frequency band, the voice level value for each frequency band during the previous update time previously stored in the memory 110 and the voice for each frequency band currently extracted. Compare the level values. Then, the operation / control unit 130 stores the increase value of the voice level value for each frequency band when the voice level value is increased for each frequency band, and if the voice level value is decreased for each frequency band, each frequency The decrease value of the voice level value is stored for each band. Thereafter, the operation / control unit 130 calls the drawing spectrum function to draw only the voice level value section increased for each frequency band so that the display unit 140 displays the additional voice level and decreases the voice level for each frequency band. The value section is deleted to be displayed on the display unit 140.
부가적으로, 메뉴 중 음성 시각화 옵션 메뉴항목에서 상기 음성 시각화 관련 옵션을 다양하게 설정할 수 있다. 예를 들어, 상기 음성 시각화를 출력할 대상을 사용자 음성 또는 상대방 음성 또는 사운드음 등 다양하게 선택할 수 있다. 여기서, 음성 시각화 출력 대상이 상대방 음성인 경우에는 무선 송수신부(100)를 통해 착신호 또는 발신호가 발생됨에 따라 자동적으로 상대방 음성 시각화 모드가 수행된다. 한편, 음성 시각화 출력 대상이 사운드음인 경우에는 사운드 공급부(120)에서 멜로디음, MP3 등이 공급됨에 따라 자동적으로 사운드음 시각화 모드가 수행된다.Additionally, the voice visualization related options may be variously set in the voice visualization option menu item of the menu. For example, a target for outputting the voice visualization may be variously selected such as a user voice, a counterpart voice, or a sound sound. Here, when the voice visualization output target is the other party's voice, the other party's voice visualization mode is automatically performed as the incoming or outgoing signal is generated through the wireless transceiver 100. Meanwhile, when the voice visualization output target is a sound sound, as the melody sound, the MP3, etc. are supplied from the sound supply unit 120, the sound sound visualization mode is automatically performed.
또한, 디스플레이부(140) 화면에서 음성 시각화 업데이트 시간을 설정할 수도 있으며, 디스플레이부(140) 화면에서 출력되는 스펙트럼 바의 형태를 얇은 바(thin bar) 또는 두꺼운 바(thick bar)로 선택할 수도 있으며, 이 스펙트럼 바의 모양을 블록 또는 연속된 바로 선택할 수도 있으며, 디스플레이부(140) 화면에서 상대방과의 통화 시간, 날짜 및 시간 등이 출력되도록 선택할 수도 있으며, 주파수 대역에 상응되는 스펙트럼 바의 개수 및 각 스펙트럼 바에서 표시되는 음성 레벨값의 개수 및 그 표현색상을 다양하게 설정할 수도 있다.In addition, the voice visualization update time may be set on the screen of the display 140, and the shape of the spectrum bar output from the screen of the display 140 may be selected as a thin bar or a thick bar. The shape of the spectrum bar may be selected as a block or a continuous bar, and the display unit 140 may select to display a talk time, date, and time with the other party, and the number and the number of spectrum bars corresponding to the frequency band. The number of speech level values displayed in the spectrum bar and the expression color thereof may be variously set.
상기 사운드 공급부(120)는 상기 연산/제어부(130)의 제어에 의해 각종 사운드를 출력한다. 이 사운드 공급부(120)는 오디오칩 또는 멜로디칩 또는 MP3 디코더 등으로 구현될 수 있다. 한편, 상기 사운드 공급부(120)는 상기 연산/제어부(130)에 포함되어 구현될 수도 있다.The sound supply unit 120 outputs various sounds under the control of the operation / control unit 130. The sound supply unit 120 may be implemented as an audio chip, a melody chip, or an MP3 decoder. Meanwhile, the sound supply unit 120 may be included in the operation / control unit 130 and implemented.
도 2는 본 발명에 따른 음성 시각화 데이터 부분 업데이트 방법에 대한 일시예 흐름도이다.2 is a flowchart illustrating an example of a method of updating a part of voice visualization data according to the present invention.
먼저, 음성에 대한 주파수 대역 범위와, 각 주파수 대역의 음성 레벨값 구간 및 그 표현색상과, 스펙트럼 바의 형태 등을 설정한다(200). 예를 들어, 저음 주파수 대역은 316Hz ~ 530Hz, 중저음 주파수 대역은 531Hz ~ 795Hz, 중음 주파수 대역은 796Hz ~ 1.30kHz, 중고음 주파수 대역은 1.31kHz ~ 1.75kHz 및 고음 주파수 대역은 1.76kHz ~ 2.30kHz 등으로 설정한다. 또한, 각각의 저음/중저음/중음/중고음/고음 주파수 대역에서 각각 표현되는 음성 레벨값을 0 ~ 5 db, 6 ~ 10 db, 11 ~ 15 db 등의 구간으로 설정하고, 각 음성 레벨값 구간에서 표현되는 색상을 0 ~ 5 db 구간은 녹색, 6 ~ 10 db 구간은 노란색, 11 ~ 15 db 구간은 빨간색 등으로 설정한다. 또한, 스펙트럼 바의 모양을 블록 또는 연속된 바로 선택하고, 그 형태를 얇은 스펙트럼 바 또는 두꺼운 스펙트럼 바 등으로 설정한다.First, a frequency band range for voice, a voice level value section of each frequency band, its expression color, a shape of a spectrum bar, and the like are set (200). For example, the low frequency band is 316Hz to 530Hz, the mid and low frequency band is 531Hz to 795Hz, the mid and high frequency band is from 796Hz to 1.30kHz, the mid and high frequency band is from 1.31kHz to 1.75kHz, and the high frequency band is 1.76kHz to 2.30kHz. Set it. In addition, each voice level value expressed in each of the bass / bass / mid / bass / treble frequency bands is set to 0 to 5 db, 6 to 10 db, 11 to 15 db, and so on. Set the expressed color to 0 to 5 db for green, 6 to 10 db for yellow, and 11 to 15 db for red. Also, the shape of the spectral bar is selected as a block or a continuous bar, and the shape is set as a thin spectral bar or a thick spectral bar.
이 후, 음성 시각화 모드인지를 검사한다(201). 예를 들어, 사전에 음성 시각화 옵션 메뉴항목에서, 상대방 음성 시각화 모드가 설정된 경우에는 착신호 또는 발신호가 발생되는지를 검사하고, 사운드음 시각화 모드가 설정된 경우에는 사운드 공급부(120)로부터 멜로디음, MP3 등이 공급되는지를 검사한다. 다른 예로, 통화 중 또는 멜로디음 등이 공급되는 도중에 사용자로부터 키 입력부(150)를 통해 상대방 음성 또는 사용자 음성 또는 사운드음 시각화 선택 신호가 발생되는지를 검사할 수도 있다. 이 후 과정에서는 사전에 상대방 음성 시각화 모드가 설정된 경우에 착신호 또는 발신호가 발생됨에 따라 상대방 음성 시각화 모드가 수행되는 과정에 대해서 설명하기로 한다.Thereafter, it is checked whether the voice visualization mode is performed (201). For example, in the voice visualization option menu item, if the other party's voice visualization mode is set, it checks whether an incoming call or an outgoing call is generated, and when the sound visualization mode is set, the melody sound and the MP3 sound are input from the sound supply unit 120. Check that the lamp is supplied. As another example, it may be checked whether a counterpart voice or a user voice or sound tone visualization selection signal is generated from the user through the key input unit 150 during a call or while a melody sound is supplied. In the following process, when the other party's voice visualization mode is set in advance, a process of performing the other party's voice visualization mode is performed as an incoming call or an outgoing signal is generated.
상기 검사 결과(201), 음성 시각화 모드가 아니면 음성 시각화 업데이트 과정을 종료하고, 음성 시각화 모드이면 음성 시각화 영역을 초기화시킴과 아울러 드로윙 스펙트럼 함수를 호출한다(202). 여기서, 음성 시각화 영역이란 메모리(110)에 할당된 음성 시각화 관련 데이터가 저장되는 영역이다. 즉, 추출한 상대방 음성의 각 주파수 대역별 음성 레벨값과, 스펙트럼 바를 그리는 드로윙 스펙트럼 함수 및 그 매개변수(스펙트럼 바의 음성 레벨값, 표현색상, 디스플레이부의 화소 좌표 등) 등이 저장되는 영역이다.If the inspection result 201 is not in the voice visualization mode, the voice visualization update process is terminated. In the voice visualization mode, the voice visualization area is initialized and a drawing spectrum function is called (202). Here, the voice visualization area is an area in which voice visualization related data allocated to the memory 110 is stored. That is, it is an area for storing the voice level value of each extracted frequency band of the other party's voice, the drawing spectrum function for drawing the spectrum bar and its parameters (voice level value of the spectrum bar, expression color, pixel coordinates of the display unit, etc.).
그런 후, 상대방 음성의 각 주파수 대역별 음성 레벨값을 추출한다(203). 예를 들어, 무선 송수신부(100)를 통해 전달되는 상대방 아날로그 음성 신호를 디지털 아날로그 신호로 신호 처리하여 샘플링한 후에 각 주파수 대역별 음성 레벨값을 추출한다.Thereafter, a voice level value of each frequency band of the other party's voice is extracted (203). For example, after processing and sampling a counterpart analog voice signal transmitted through the wireless transceiver 100 as a digital analog signal, the voice level value of each frequency band is extracted.
그런 후, 상기 추출한 각 주파수 대역별 음성 레벨값을 음성 시각화 영역에 저장한다(204). 여기서, 각 주파수 대역별 음성 레벨값의 최대 크기(peak)는 사전에 설정되어 정적변수로서 저장되어 있으며, 상기 추출한 각 주파수 대역별 음성 레벨값의 크기는 음성 시각화 영역에 정적변수로 저장한다. 그리고, 상기 각 주파수 대역별 음성 레벨값의 최대 크기는 디스플레이부(140)에서 출력되는 스펙트럼 바의 최대 높이에 상응하며, 상기 추출한 각 주파수 대역별 음성 레벨값의 크기는 디스플레이부(140)에 출력되는 상대방 음성에 따른 스펙트럼 바의 높이에 상응한다. 이 후, 업데이트 주기마다 상대방 음성의 각 주파수 대역별 음성 레벨값을 추출한 후에 정적변수로 저장된 이전의 각 주파수 대역별 음성 레벨값과 비교하여, 변경되는 각 주파수 대역별 음성 레벨값의 차이값만을 정적변수로서 재저장한다.Thereafter, the extracted speech level value of each frequency band is stored in the speech visualization region (204). Here, the maximum magnitude (peak) of the voice level value for each frequency band is set in advance and stored as a static variable, and the magnitude of the extracted voice level value for each frequency band is stored as a static variable in the voice visualization area. The maximum magnitude of the voice level value for each frequency band corresponds to the maximum height of the spectrum bar output from the display unit 140, and the magnitude of the extracted voice level value for each frequency band is output to the display unit 140. It corresponds to the height of the spectrum bar according to the other party's voice. After that, the voice level value of each frequency band of the other party's voice is extracted at each update period, and compared with the previous voice level value of each frequency band stored as a static variable, and only the difference value of the voice level value for each frequency band to be changed is static. Resave as a variable.
한편, 상기 '204' 과정 수행 후, 상기 호출한 드로윙 스펙트럼 함수를 이용하여 상기 저장된 각 주파수 대역별 음성 레벨값을 디스플레이부(140)에 출력한다(205). 여기서, 각 주파수 대역별 음성 레벨값을 시각화하여 그리는 드로윙 스펙트럼 함수로는 드로윙 렉탱글(drawing rectangle) 함수를 이용한다. 한편, 상기 드로윙 스펙트럼 함수로 드로윙 라인(drawing line) 함수를 이용할 수도 있으나, 각 주파수 대역별 하나의 음성 레벨값의 구간을 모두 그리는데 드로윙 라인 함수가 자주 호출됨에 따라 그만큼 시스템 부하가 걸리게 된다. 따라서, 하나의 라인으로 표현되는 구간 범위가 작은 음성 레벨값에 대해서는 드로윙 랙탱글 함수를 이용하여 높이가 작은(예; 높이: 1 mm) 사각형으로 그린다.Meanwhile, after performing the '204' process, the stored voice level value for each frequency band is output to the display unit 140 using the called drawing spectrum function (205). Here, as a drawing spectrum function for visualizing and drawing a voice level value of each frequency band, a drawing rectangle function is used. On the other hand, although the drawing line function may be used as the drawing spectrum function, the drawing line function is frequently called to draw all the sections of one voice level value for each frequency band, so that the system load is applied to the drawing line function. Therefore, a voice level value having a small range of a section represented by one line is drawn as a rectangle having a small height (eg, height: 1 mm) using a drawing racktangle function.
이 후, 업데이트 시간이 지났는지를 검사한다(206). 예를 들어, 사전에 음성 시각화 업데이트(또는 리프레쉬) 시간을 33 ms 로 설정한다. 그에 따라 각 주파수 대역별 음성 레벨값이 33fps(frame per second) 업데이트 비율(refresh rate)로 디스플레이부(140)에 출력되도록 하기 위하여 업데이트 시간이 지났는지를 검사한다.Thereafter, it is checked whether the update time has passed (206). For example, the voice visualization update (or refresh) time is set to 33 ms in advance. Accordingly, it is checked whether the update time has elapsed so that the voice level value of each frequency band is output to the display unit 140 at a frame rate per second (fps) update rate.
상기 검사 결과(206), 업데이트 시간이 지나지 않았으면 상기 '201' 과정으로 진행하여 음성 시각화 모드인지를 재차 검사하고, 업데이트 시간이 지났으면 상대방 음성의 각 주파수 대역별 음성 레벨값을 재차 추출한다(207).In step 206, if the update time has not passed, the process proceeds to step '201' to check whether the voice visualization mode is repeated, and if the update time has passed, extracts the voice level value for each frequency band of the other party's voice again. 207).
그런 후, 상기 음성 시각화 영역에 저장된 각 주파수 대역별 음성 레벨값과 재차 추출한 각 주파수 대역별 음성 레벨값을 비교한다(208).Thereafter, the voice level value of each frequency band stored in the voice visualization area is compared with the voice level value of each frequency band extracted again (208).
상기 비교 결과에 따라, 각 주파수 대역별로 변경된 음성 레벨값의 차이값을 산출하여 음성 시각화 영역에 저장한다(209).According to the comparison result, a difference value of the voice level value changed for each frequency band is calculated and stored in the voice visualization area (209).
그런 후, 상기 호출한 드로윙 스펙트럼 함수를 이용하여 상기 저장한 각 주파수 대역별로 변경된 음성 레벨값의 차이값을 출력한다(210). 여기서, 상기 각 주파수 대역별로 감소된 음성 레벨값의 차이값에 대해서는 드로윙 스펙트럼 함수의 표현색상의 매개변수를 디스플레이부(140)의 바탕 화면 색상과 동일하게 하여 삭제되는 것처럼 처리한다. 그리고, 상기 각 주파수별로 증가된 음성 레벨값의 차이값에 대해서는 드로윙 스펙트럼 함수를 이용하여 이전의 음성 시각화 데이터에 추가적으로 더 그려서 표시한다.Thereafter, the difference value of the changed voice level value for each of the stored frequency bands is output using the called drawing spectrum function (210). Here, the difference value of the voice level value reduced for each frequency band is processed as if the parameter of the expression color of the drawing spectrum function is the same as the background color of the display unit 140 and is deleted. In addition, the difference value of the voice level value increased for each frequency is further drawn and displayed on the previous voice visualization data using a drawing spectrum function.
도 3a 및 도 3b는 본 발명이 적용된 스펙트럼 분석기 출력 형태의 음성 시각화에 대한 일실시예 설명도이다. 본 발명에서는 스펙트럼 분석기(spectrum analyzer) 출력 형태로 각 주파수 대역별 음성 레벨값을 디스플레이부(140) 화면에 출력하며, 도 3a는 두꺼운 스펙트럼 바(bar)로 음성이 시각화된 화면을 나타내고, 도 3b는 얇은 스펙트럼 바(bar)로 음성이 시각화된 화면을 나타낸다.3A and 3B illustrate exemplary embodiments of speech visualization of a spectrum analyzer output form to which the present invention is applied. In the present invention, the voice level value of each frequency band is output on the screen of the display unit 140 in the form of a spectrum analyzer, and FIG. 3A illustrates a screen in which voice is visualized by a thick spectrum bar. Represents a screen in which speech is visualized as a thin spectral bar.
부가적으로, 본 발명에서는 상기 일실시예와 같이 업데이트 시간 주기마다 음성의 모든 주파수 대역별 음성 레벨값을 추출하여 이전 업데이트 시간 주기에 추출한 모든 주파수 대역별 음성 레벨값과의 차이값 비교 결과에 따라, 이전 업데이트 시간 주기의 음성 시각화 데이터에 그 차이값을 가감하여 표시할 수 있거나, 다른 실시예로, 음성의 모든 주파수 대역 중 추출 대상 주파수 대역(메인 주파수)을 특정 주파수 대역으로 설정하여 그 음성 레벨값만을 추출하여 이전 업데이트 주기에 추출한 특정 주파수 대역의 차이값을 가감하여 표시하고, 그 이외의 나머지 주파수 대역에 대해서는 음성 레벨값 추출 과정을 거치지 않고 랜덤하게 음성 레벨값이 디스플레이부에 표시되도록 할 수도 있다.In addition, the present invention extracts the voice level values of all the frequency bands of the voice every update time period as in the embodiment, and according to the result of comparing the difference with the voice level values of all the frequency bands extracted in the previous update time period. The voice visualization data of the previous update time period may be displayed by adding or subtracting the difference value, or in another embodiment, the extraction target frequency band (main frequency) among all frequency bands of the voice may be set to a specific frequency band, and the voice level may be displayed. It is also possible to extract only the value and to display the difference value of the specific frequency band extracted in the previous update period, and to display the voice level value randomly on the display without going through the voice level value extraction process for the remaining frequency bands. have.
이상에서 설명한 본 발명은 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니고, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하다는 것이 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 명백할 것이다.The present invention described above is not limited to the above-described embodiments and the accompanying drawings, and various substitutions, modifications, and changes are possible in the art without departing from the technical spirit of the present invention. It will be clear to those of ordinary knowledge.
상기와 같은 본 발명은, 음성 시각화 시 주파수 대역별로 변경되는 음성 레벨값의 차이값이 부분적으로 더 그려지거나 삭제되도록 함으로써, 연산/제어부의 부하를 감소시켜 음성 시각화 출력 화면이 깜빡이는 것을 방지할 수 있고, 그에 따라 다른 작업의 수행 속도를 향상시킬 수 있는 효과가 있다.In the present invention as described above, the difference value of the voice level value changed for each frequency band during the voice visualization may be partially drawn or deleted, thereby reducing the load of the operation / control unit to prevent the voice visualization output screen from flickering. Therefore, there is an effect that can improve the speed of performing other tasks.
또한, 본 발명은, 음성의 각 주파수 대역별로 음성 레벨값을 추출하여 이에 상응되는 음성 시각화 데이터를 정확하게 스펙트럼 분석기 출력 형태로 제공함으로써, 음악 등을 감상하는 사용자에게 보다 미려한 시각적인 감동을 줄 수 있는 효과가 있다.In addition, the present invention, by extracting the voice level value for each frequency band of the voice to provide the corresponding voice visualization data accurately in the form of spectrum analyzer output, which can give a more beautiful visual impression to the user listening to music, etc. It works.
도 1은 본 발명에 따른 음성 시각화 데이터 부분 업데이트 장치에 대한 일실예 구성도.1 is an exemplary configuration diagram of an apparatus for updating voice visualization data part according to the present invention.
도 2는 본 발명에 따른 음성 시각화 데이터 부분 업데이트 방법에 대한 일시예 흐름도.2 is a flow chart of an example of a method of updating a part of speech visualization data according to the present invention.
도 3a 및 도 3b는 본 발명이 적용된 스펙트럼 분석기 출력 형태의 음성 시각화에 대한 일실시예 설명도.3A and 3B are diagrams illustrating an embodiment of speech visualization of a spectrum analyzer output form to which the present invention is applied.
* 도면의 주요 부분에 대한 부호 설명* Explanation of symbols on the main parts of the drawing
100 : 무선 송수신부 110 : 메모리100: wireless transceiver 110: memory
120 : 사운드 공급부 130 : 연산/제어부120: sound supply unit 130: operation / control unit
140 : 디스플레이부 150 : 키 입력부140: display unit 150: key input unit
160 : 마이크 170 : 스피커160: microphone 170: speaker
Claims (5)
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR10-2003-0088032A KR100533160B1 (en) | 2003-12-05 | 2003-12-05 | Method for updating the visualizing of voice |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR10-2003-0088032A KR100533160B1 (en) | 2003-12-05 | 2003-12-05 | Method for updating the visualizing of voice |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20050054639A KR20050054639A (en) | 2005-06-10 |
| KR100533160B1 true KR100533160B1 (en) | 2005-12-01 |
Family
ID=37249897
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR10-2003-0088032A KR100533160B1 (en) | 2003-12-05 | 2003-12-05 | Method for updating the visualizing of voice |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR100533160B1 (en) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8560303B2 (en) | 2006-02-03 | 2013-10-15 | Electronics And Telecommunications Research Institute | Apparatus and method for visualization of multichannel audio signals |
| KR100755713B1 (en) * | 2006-03-10 | 2007-09-05 | 삼성전자주식회사 | Apparatus and method for providing visualization image |
| KR102127909B1 (en) * | 2014-03-17 | 2020-06-29 | 에스케이텔레콤 주식회사 | Chatting service providing system, apparatus and method thereof |
-
2003
- 2003-12-05 KR KR10-2003-0088032A patent/KR100533160B1/en not_active IP Right Cessation
Also Published As
| Publication number | Publication date |
|---|---|
| KR20050054639A (en) | 2005-06-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105487780B (en) | Control display method and device | |
| US9086779B2 (en) | Input device | |
| CN105632508B (en) | Audio processing method and audio processing device | |
| KR20090077950A (en) | Method for providing an alert signal | |
| KR100677350B1 (en) | Method for controlling menu of mobile communication terminal under hearing mp3 | |
| KR100533160B1 (en) | Method for updating the visualizing of voice | |
| CN1901554B (en) | Incoming call informing device and method for mobile terminal | |
| JP2006352250A (en) | Acoustic output apparatus, mobile phone terminal, and acoustic output program | |
| CN111552452A (en) | Method, apparatus and storage medium for matching audio output parameters | |
| CN107483732A (en) | Method for controlling volume, device and the storage medium and mobile terminal of mobile terminal | |
| KR100705163B1 (en) | portable termial and signal transmission method for service the background music | |
| US20060189357A1 (en) | Mobile communication apparatus and method for altering telephone audio functions | |
| KR20010076533A (en) | Implementation Method Of Karaoke Function For Portable Hand Held Phone And It's Using Method | |
| CN112750443A (en) | Call voice output method and device, storage medium and electronic equipment | |
| US12014113B2 (en) | Content playback program, content playback device, content playback method, and content playback system | |
| JP6119783B2 (en) | Music playback device and music playback program | |
| CN115914456B (en) | Audio processing method, electronic device and computer readable storage medium | |
| KR100923307B1 (en) | A mobile communication terminal for a video call and method for servicing a video call using the same | |
| KR20070021456A (en) | Performing and generating music pattern game in wireless terminal | |
| KR20030048256A (en) | Method for altering color tone of screen in a mobile communication terminal having a color display unit | |
| JP2002261884A (en) | Mobile communication terminal | |
| KR101023301B1 (en) | Method for sending and editing mp3 file in wireless terminal | |
| KR20050004536A (en) | Method to compose hair style of picture in mobile phone | |
| CN117998009A (en) | Call control method, electronic device and storage medium | |
| KR101037872B1 (en) | Speaker for high level sound in mobile communication device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant | ||
| FPAY | Annual fee payment |
Payment date: 20121102 Year of fee payment: 8 |
|
| FPAY | Annual fee payment |
Payment date: 20131030 Year of fee payment: 9 |
|
| LAPS | Lapse due to unpaid annual fee |