KR20180002064A - Device and method for optimizing sound level based on user and environment information - Google Patents
Device and method for optimizing sound level based on user and environment information Download PDFInfo
- Publication number
- KR20180002064A KR20180002064A KR1020170081801A KR20170081801A KR20180002064A KR 20180002064 A KR20180002064 A KR 20180002064A KR 1020170081801 A KR1020170081801 A KR 1020170081801A KR 20170081801 A KR20170081801 A KR 20170081801A KR 20180002064 A KR20180002064 A KR 20180002064A
- Authority
- KR
- South Korea
- Prior art keywords
- user
- volume
- noise
- information
- volume level
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/439—Processing of audio elementary streams
- H04N21/4398—Processing of audio elementary streams involving reformatting operations of audio signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/439—Processing of audio elementary streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/485—End-user interface for client configuration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/485—End-user interface for client configuration
- H04N21/4852—End-user interface for client configuration for modifying audio parameters, e.g. switching between mono and stereo
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Circuit For Audible Band Transducer (AREA)
- Telephone Function (AREA)
Abstract
Description
아래의 설명은 음량 최적화 장치 및 그 방법에 관한 것으로, 보다 상세하게는, 사용자 및 환경 정보를 기반으로 사용자에게 제공되는 멀티미디어 파일의 음량을 제어하는 기술에 대한 것이다.The following description relates to a volume optimizing apparatus and method thereof, and more particularly, to a technique for controlling the volume of a multimedia file provided to a user based on user and environment information.
멀티미디어 서비스는, 음성, 동영상 등의 다양한 형식의 정보가 혼합된 콘텐츠인 멀티미디어 파일을 사용자에게 제공하는 서비스이다. 이러한 멀티미디어 서비스에서 멀티미디어 파일이 사용자에게 제공되는 음량 레벨은, 일반적으로 사용자의 수동 조작에 의해 제어되었다.The multimedia service is a service for providing a multimedia file, which is a mixed content of various types of information such as voice and video, to a user. In such a multimedia service, the volume level at which the multimedia file is provided to the user is generally controlled by manual operation of the user.
한편, 사용자에 의해 휴대되는 스마트 전자 장치의 출시 및 보급에 힘입어, 멀티미디어 서비스는 공간의 제약 없이 사용자에게 제공되고 있다.On the other hand, due to the release and spread of smart electronic devices carried by users, multimedia services are being provided to users without restriction of space.
이에, 멀티미디어 서비스를 제공받는 과정에서, 사용자가 소음이 적은 공간 공간에서 소음이 가득한 공간으로 이동하게 되는 경우, 멀티미디어 파일이 제공되는 음량 레벨을 수동 조작으로 일일이 제어해야 하는 번거로움이 발생된다.Therefore, when the user moves from a small space to a noisy space in a process of receiving a multimedia service, it is troublesome to manually control the volume level at which the multimedia file is provided.
더욱이, 근래 멀티미디어 파일은 특정 구간에서 음량 레벨이 대폭 상승하는 효과를 갖기 때문에, 사용자가 미처 대처하지 못한 채 고 레벨의 음량 레벨로 멀티미디어 파일을 제공받게 되어, 청각에 문제가 발생될 수도 있다.In addition, since the multimedia file has the effect of significantly increasing the volume level in a specific section, the multimedia file may be provided at a high level level without the user being able to cope with the problem, which may cause a problem of hearing.
따라서, 변화하는 소음 환경에 적응적으로 멀티미디어 파일의 음량 레벨을 제어하는 기술이 요구된다.Therefore, there is a need for a technique for controlling the volume level of a multimedia file adaptively to a changing noise environment.
일 실시예들은, 사용자가 위치하는 공간에서의 소음을 실시간으로 측정하고, 측정된 소음이 사용자의 귀로 유입될 때 변형되는 변형 소음을 예측한 뒤, 변형 소음에 기초하여, 사용자에게 제공되는 멀티미디어 파일의 음량 레벨을 자동으로 제어하는 방법 및 장치를 제안한다.In one embodiment, the noise in the space in which the user is located is measured in real time, the distortion noise that is measured when the measured noise enters the user's ear is predicted, And a method and apparatus for automatically controlling the volume level of the sound.
특히, 일 실시예들은, 사용자의 청각 능력 정보 및 음량 선호 정보를 획득하여 저장 및 유지해둠으로써, 변형 소음에 기초하여 멀티미디어 파일의 음량 레벨을 자동으로 제어하는 과정에서, 사용자의 청각 능력 정보 및 음량 선호 정보를 반영하는 방법 및 장치를 제안한다.Particularly, in one embodiment, by acquiring, storing and maintaining the hearing ability information and the volume preference information of the user, in the process of automatically controlling the volume level of the multimedia file based on the variation noise, A method and apparatus for reflecting preference information are proposed.
구체적으로, 일 실시예들은, 복수의 멀티미디어 파일들 각각의 음원 특성에 대한 사용자의 청각 능력 정보 및 음량 선호 정보를 획득하여 저장 및 유지해두다가, 사용자에게 제공되는 멀티미디어 파일의 음원 특성을 확인하고, 확인된 음원 특성에 대한 사용자의 청각 능력 정보 및 음량 선호 정보에 기초하여 산출된 음량 레벨이 변형 소음의 음량 레벨을 압도하는지 여부를 판단함으로써, 판단 결과에 따라 멀티미디어 파일의 음량 레벨을 제어하는 방법 및 장치를 제안한다.In particular, the embodiments may be configured to acquire and store the auditory capability information and the volume preference information of the user regarding the sound source characteristics of each of the plurality of multimedia files, to confirm the sound source characteristics of the multimedia file provided to the user, A method for controlling the volume level of the multimedia file according to the determination result by determining whether the volume level calculated based on the user's hearing ability information and the volume preference information for the identified sound source characteristics overwhelms the volume level of the variation noise, Device.
이 때, 일 실시예들은 복수의 멀티미디어 파일들 각각의 음원 특성이 복수의 멀티미디어 파일들 각각의 음량 레벨 제어 정보를 포함하도록 함으로써, 사용자에게 제공되는 멀티미디어 파일의 음원 특성을 확인한 결과, 확인된 음원 특성에 포함되는 음량 레벨 제어 정보에 기초하여 멀티미디어 파일의 음량 레벨 변화에 대한 알람을 사용자에게 통지하는 방법 및 장치를 제안한다.In this case, in one embodiment, the sound source characteristics of each of the plurality of multimedia files includes the volume level control information of each of the plurality of multimedia files. As a result, the sound source characteristics of the multimedia file provided to the user are checked. And notifies the user of an alarm about a change in the volume level of the multimedia file based on the volume level control information included in the multimedia file.
일 실시예에 따르면, 사용자 및 환경 정보 기반의 음량 최적화 장치는, 용자의 청각 능력 정보 및 음량 선호 정보를 획득하여 저장 및 유지하는 사용자 청력 분석 모듈; 상기 사용자가 위치하는 공간에서의 소음을 실시간으로 측정하는 실시간 소음 측정 모듈; 상기 측정된 소음이 상기 사용자의 귀로 유입될 때 변형되는 변형 소음을 예측하는 사용자 관점 소음 예측 모듈; 및 상기 변형 소음, 상기 사용자의 청각 능력 정보 및 음량 선호 정보에 기초하여, 상기 사용자에게 제공되는 멀티미디어 파일의 음량 레벨을 자동으로 제어하는 사용자 맞춤형 음량 최적화 모듈을 포함한다.According to an embodiment, the user volume and environment information volume optimizing apparatus includes a user's hearing capacity analyzing module for acquiring, storing and maintaining auditory ability information and volume preference information of a user; A real-time noise measurement module for measuring real-time noise in a space where the user is located; A user perspective noise prediction module for predicting a variation noise to be deformed when the measured noise flows into the user's ear; And a user-customized volume optimization module for automatically controlling the volume level of the multimedia file provided to the user based on the deformation noise, the auditory capability information of the user, and the volume preference information.
일측에 따르면, 상기 사용자 청력 분석 모듈은, 복수의 멀티미디어 파일들 각각의 음원 특성에 대한 상기 사용자의 청각 능력 정보 및 음량 선호 정보를 획득하여 저장 및 유지하고, 상기 사용자 맞춤형 음량 최적화 모듈은, 상기 사용자에게 제공되는 멀티미디어 파일의 음원 특성을 확인하고, 상기 확인된 음원 특성에 대한 상기 사용자의 청각 능력 정보 및 음량 선호 정보에 기초하여 상기 멀티미디어 파일의 음량 레벨을 자동으로 제어할 수 있다.According to one aspect of the present invention, the user's hearing analysis module acquires and stores the auditory capability information and the volume preference information for the sound source characteristics of each of the plurality of multimedia files, and the user- And may automatically control the volume level of the multimedia file based on the audible capability information and the volume preference information of the user with respect to the identified sound source characteristics.
또 다른 일측에 따르면, 상기 복수의 멀티미디어 파일들 각각의 음원 특성은, 상기 복수의 멀티미디어 파일들 각각의 장르, 상기 복수의 멀티미디어 파일들 각각에 포함되는 사운드 신호들의 종류, 상기 복수의 멀티미디어 파일들 각각에 포함되는 사운드 신호들이 갖는 주파수 대역 또는 상기 복수의 멀티미디어 파일들 각각의 음량 레벨 제어 정보 중 적어도 하나를 포함할 수 있다.According to another aspect of the present invention, the sound source characteristics of each of the plurality of multimedia files include a genre of each of the plurality of multimedia files, a kind of sound signals included in each of the plurality of multimedia files, Or a volume level control information of each of the plurality of multimedia files.
또 다른 일측에 따르면, 상기 복수의 멀티미디어 파일들 각각의 음원 특성은, 상기 복수의 멀티미디어 파일들 각각의 메타 정보에 저장 및 유지되고, 상기 사용자 맞춤형 음량 최적화 모듈은, 상기 사용자에게 제공되는 멀티미디어 파일의 메타 정보를 분석하여 상기 멀티미디어 파일의 음원 특성을 확인할 수 있다.According to another aspect of the present invention, sound source characteristics of each of the plurality of multimedia files are stored and held in meta information of each of the plurality of multimedia files, and the user- And analyze the meta information to check the sound source characteristics of the multimedia file.
또 다른 일측에 따르면, 상기 사용자 맞춤형 음량 최적화 모듈은, 상기 확인된 음원 특성에 포함되는 음량 레벨 제어 정보에 기초하여, 상기 멀티미디어 파일의 음량 레벨 변화에 대한 알람을 상기 사용자에게 통지할 수 있다.According to another aspect of the present invention, the user-customized volume optimization module may notify the user of an alarm about a change in volume level of the multimedia file based on volume level control information included in the identified sound source characteristics.
또 다른 일측에 따르면, 상기 사용자 맞춤형 음량 최적화 모듈은, 상기 사용자에게 제공되는 멀티미디어 파일에 대해 상기 사용자의 청각 능력 정보 및 음량 선호 정보에 의해 산출된 음량 레벨이 상기 변형 소음의 음량 레벨을 압도하는지 여부를 판단하고, 판단 결과 상기 산출된 음량 레벨이 상기 변형 소음의 음량 레벨을 압도하는 경우, 상기 멀티미디어 파일의 음량 레벨을 상기 산출된 음량 레벨로 제어할 수 있다.According to another aspect of the present invention, the user-customized volume optimization module determines whether or not the volume level calculated by the user's auditory capability information and the volume preference information over the multimedia file provided to the user overwhelms the volume level of the variation noise And when the calculated volume level exceeds the volume level of the deformation noise as a result of the determination, the volume level of the multimedia file can be controlled to the calculated volume level.
또 다른 일측에 따르면, 상기 사용자 맞춤형 음량 최적화 모듈은, 판단 결과 상기 산출된 음량 레벨이 상기 변형 소음의 음량 레벨을 압도하지 못하는 경우, 상기 멀티미디어 파일의 음량 레벨이 상기 사용자의 청각 능력 정보 및 음량 선호 정보에 의해 산출된 음량 레벨을 초과하는 고 레벨로 상승됨을 상기 사용자에게 알람으로 통지할 수 있다.According to another aspect of the present invention, the user-customized volume optimization module may be configured such that, when it is determined that the calculated volume level does not overwhelm the volume level of the variation noise, the volume level of the multimedia file corresponds to the audio- The user can be informed of an alarm that the user is elevated to a high level exceeding the volume level calculated by the information.
또 다른 일측에 따르면, 상기 사용자 맞춤형 음량 최적화 모듈은, 상기 변형 소음을 상쇄시키는 상쇄 신호를 생성 및 출력하여 상기 변형 소음을 감소시킴으로써, 상기 감소된 변형 소음, 상기 사용자의 청각 능력 정보 및 음량 선호 정보에 기초하여, 상기 사용자에게 제공되는 멀티미디어 파일의 음량 레벨을 자동으로 제어할 수 있다.According to another aspect of the present invention, the user-customized volume optimization module generates and outputs an offset signal canceling the deformation noise to reduce the deformation noise, thereby reducing the deformation noise, the user's hearing ability information, and the volume preference information The volume level of the multimedia file provided to the user can be automatically controlled.
또 다른 일측에 따르면, 상기 사용자 및 환경 정보 기반의 음량 최적화 장치는, 상기 멀티미디어 파일이 상기 사용자에게 이어폰을 통하여 제공되는 경우, 상기 이어폰의 소음 차단 능력을 계측하는 이어폰 소음 차단 능력 계측 모듈을 더 포함하고, 상기 사용자 관점 소음 예측 모듈은, 상기 이어폰의 소음 차단 능력에 기초하여, 상기 실시간 소음 측정 모듈에서 측정된 소음이 상기 사용자의 귀로 유입될 때 변형되는 변형 소음을 예측할 수 있다.According to another aspect of the present invention, the volume and volume optimization apparatus based on the user and environment information further includes an earphone noise cancellation ability measurement module for measuring the noise cancellation capability of the earphone when the multimedia file is provided to the user through an earphone And the user viewpoint noise prediction module can predict a variation noise to be deformed when noise measured in the real time noise measurement module flows into the user's ear based on the noise cancellation capability of the earphone.
또 다른 일측에 따르면, 상기 사용자 청력 분석 모듈은, 복수의 소음들 각각의 소음 특성에 대한 상기 사용자의 청각 능력 정보를 획득하여 저장 및 유지하고, 상기 사용자 관점 소음 예측 모듈은, 상기 실시간 소음 측정 모듈에서 측정된 소음의 소음 특성을 확인하고, 상기 확인된 소음 특성에 대한 상기 사용자의 청각 능력 정보에 기초하여 상기 측정된 소음이 상기 사용자의 귀로 유입될 때 변형되는 변형 소음의 음량 레벨을 예측할 수 있다.According to another aspect of the present invention, the user's hearing analysis module acquires, stores and maintains the hearing ability information of the user with respect to the noise characteristics of each of the plurality of noises, and the user- And to estimate a volume level of the deformation noise that is modified when the measured noise is introduced into the user's ear based on the user's hearing ability information on the identified noise characteristics .
또 다른 일측에 따르면, 상기 사용자 맞춤형 음량 최적화 모듈은, 상기 사용자 관점 소음 예측 모듈에서 변형 소음을 실시간으로 예측함에 응답하여, 상기 사용자에게 제공되는 멀티미디어 파일의 음량 레벨을 실시간으로 자동으로 제어할 수 있다.According to another aspect of the present invention, the user-customized volume optimization module may automatically control the volume level of the multimedia file provided to the user in real time in response to predicting the variation noise in real time in the user- .
일 실시예에 따르면, 사용자 및 환경 정보 기반의 음량 최적화 방법은, 사용자의 청각 능력 정보 및 음량 선호 정보를 획득하여 저장 및 유지하는 단계; 상기 사용자가 위치하는 공간에서의 소음을 실시간으로 측정하는 단계; 상기 측정된 소음이 상기 사용자의 귀로 유입될 때 변형되는 변형 소음을 예측하는 단계; 및 상기 변형 소음, 상기 사용자의 청각 능력 정보 및 음량 선호 정보에 기초하여, 상기 사용자에게 제공되는 멀티미디어 파일의 음량 레벨을 자동으로 제어하는 단계를 포함한다.According to one embodiment, a method for volume optimization based on user and environment information includes the steps of acquiring, storing, and maintaining audio capability information and volume preference information of a user; Measuring in real time the noise in the space where the user is located; Predicting a variation noise to be deformed when the measured noise flows into the user's ear; And automatically controlling the volume level of the multimedia file provided to the user based on the deformation noise, the auditory capability information of the user, and the volume preference information.
일측에 따르면, 상기 사용자의 청각 능력 정보 및 음량 선호 정보를 획득하여 저장 및 유지하는 단계는, 복수의 멀티미디어 파일들 각각의 음원 특성에 대한 상기 사용자의 청각 능력 정보 및 음량 선호 정보를 획득하여 저장 및 유지하는 단계를 포함하고, 상기 사용자에게 제공되는 멀티미디어 파일의 음량 레벨을 자동으로 제어하는 단계는, 상기 사용자에게 제공되는 멀티미디어 파일의 음원 특성을 확인하는 단계; 및 상기 확인된 음원 특성에 대한 상기 사용자의 청각 능력 정보 및 음량 선호 정보에 기초하여 상기 멀티미디어 파일의 음량 레벨을 자동으로 제어하는 단계를 포함할 수 있다.According to one aspect of the present invention, the step of acquiring, storing and maintaining the auditory capability information and the volume preference information of the user acquires and stores the auditory capability information and the volume preference information of the user for each sound source characteristic of the plurality of multimedia files, Wherein the step of automatically controlling the volume level of the multimedia file provided to the user comprises: checking sound source characteristics of a multimedia file provided to the user; And automatically controlling the volume level of the multimedia file based on the audible capability information and the volume preference information of the user with respect to the identified sound source characteristics.
또 다른 일측에 따르면, 상기 복수의 멀티미디어 파일들 각각의 음원 특성은, 상기 복수의 멀티미디어 파일들 각각의 장르, 상기 복수의 멀티미디어 파일들 각각에 포함되는 사운드 신호들의 종류, 상기 복수의 멀티미디어 파일들 각각에 포함되는 사운드 신호들이 갖는 주파수 대역 또는 상기 복수의 멀티미디어 파일들 각각의 음량 레벨 제어 정보 중 적어도 하나를 포함할 수 있다.According to another aspect of the present invention, the sound source characteristics of each of the plurality of multimedia files include a genre of each of the plurality of multimedia files, a kind of sound signals included in each of the plurality of multimedia files, Or a volume level control information of each of the plurality of multimedia files.
또 다른 일측에 따르면, 상기 복수의 멀티미디어 파일들 각각의 음원 특성은, 상기 복수의 멀티미디어 파일들 각각의 메타 정보에 저장 및 유지되고, 상기 사용자에게 제공되는 멀티미디어 파일의 음원 특성을 확인하는 단계는, 상기 사용자에게 제공되는 멀티미디어 파일의 메타 정보를 분석하여 상기 멀티미디어 파일의 음원 특성을 확인하는 단계일 수 있다.According to another aspect of the present invention, the sound source characteristics of each of the plurality of multimedia files are stored and held in meta information of each of the plurality of multimedia files, and the step of checking the sound source characteristics of the multimedia file provided to the user, Analyzing the meta information of the multimedia file provided to the user and checking the sound source characteristics of the multimedia file.
또 다른 일측에 따르면, 상기 확인된 음원 특성에 대한 상기 사용자의 청각 능력 정보 및 음량 선호 정보에 기초하여 상기 멀티미디어 파일의 음량 레벨을 자동으로 제어하는 단계는, 상기 확인된 음원 특성에 포함되는 음량 레벨 제어 정보에 기초하여, 상기 멀티미디어 파일의 음량 레벨 변화에 대한 알람을 상기 사용자에게 통지하는 단계를 더 포함할 수 있다.According to another aspect of the present invention, the step of automatically controlling the volume level of the multimedia file based on the audible capability information and the volume preference information of the user with respect to the identified sound source characteristic may include: And notifying the user of an alarm about a change in volume level of the multimedia file based on the control information.
또 다른 일측에 따르면, 상기 사용자에게 제공되는 멀티미디어 파일의 음량 레벨을 자동으로 제어하는 단계는, 상기 사용자에게 제공되는 멀티미디어 파일에 대해 상기 사용자의 청각 능력 정보 및 음량 선호 정보에 의해 산출된 음량 레벨이 상기 변형 소음의 음량 레벨을 압도하는지 여부를 판단하는 단계; 및 판단 결과 상기 산출된 음량 레벨이 상기 변형 소음의 음량 레벨을 압도하는 경우, 상기 멀티미디어 파일의 음량 레벨을 상기 산출된 음량 레벨로 제어하는 단계를 포함할 수 있다.According to another aspect of the present invention, the step of automatically controlling the volume level of the multimedia file provided to the user includes the steps of: determining whether the volume level calculated by the user's hearing ability information and the volume preference information Determining whether the volume level of the deformation noise is overwhelmed; And controlling the volume level of the multimedia file to the calculated volume level when the calculated volume level overwhelms the volume level of the deformation noise.
일 실시예들은, 사용자가 위치하는 공간에서의 소음을 실시간으로 측정하고, 측정된 소음이 사용자의 귀로 유입될 때 변형되는 변형 소음을 예측한 뒤, 변형 소음에 기초하여, 사용자에게 제공되는 멀티미디어 파일의 음량 레벨을 자동으로 제어하는 방법 및 장치를 제안할 수 있다.In one embodiment, the noise in the space in which the user is located is measured in real time, the distortion noise that is measured when the measured noise enters the user's ear is predicted, A method and an apparatus for automatically controlling the volume level of the audio signal can be proposed.
특히, 일 실시예들은, 사용자의 청각 능력 정보 및 음량 선호 정보를 획득하여 저장 및 유지해둠으로써, 변형 소음에 기초하여 멀티미디어 파일의 음량 레벨을 자동으로 제어하는 과정에서, 사용자의 청각 능력 정보 및 음량 선호 정보를 반영하는 방법 및 장치를 제안할 수 있다.Particularly, in one embodiment, by acquiring, storing and maintaining the hearing ability information and the volume preference information of the user, in the process of automatically controlling the volume level of the multimedia file based on the variation noise, A method and apparatus for reflecting preference information can be proposed.
구체적으로, 일 실시예들은, 복수의 멀티미디어 파일들 각각의 음원 특성에 대한 사용자의 청각 능력 정보 및 음량 선호 정보를 획득하여 저장 및 유지해두다가, 사용자에게 제공되는 멀티미디어 파일의 음원 특성을 확인하고, 확인된 음원 특성에 대한 사용자의 청각 능력 정보 및 음량 선호 정보에 기초하여 산출된 음량 레벨이 변형 소음의 음량 레벨을 압도하는지 여부를 판단함으로써, 판단 결과에 따라 멀티미디어 파일의 음량 레벨을 제어하는 방법 및 장치를 제안할 수 있다.In particular, the embodiments may be configured to acquire and store the auditory capability information and the volume preference information of the user regarding the sound source characteristics of each of the plurality of multimedia files, to confirm the sound source characteristics of the multimedia file provided to the user, A method for controlling the volume level of the multimedia file according to the determination result by determining whether the volume level calculated based on the user's hearing ability information and the volume preference information for the identified sound source characteristics overwhelms the volume level of the variation noise, Device can be proposed.
이 때, 일 실시예들은 복수의 멀티미디어 파일들 각각의 음원 특성이 복수의 멀티미디어 파일들 각각의 음량 레벨 제어 정보를 포함하도록 함으로써, 사용자에게 제공되는 멀티미디어 파일의 음원 특성을 확인한 결과, 확인된 음원 특성에 포함되는 음량 레벨 제어 정보에 기초하여 멀티미디어 파일의 음량 레벨 변화에 대한 알람을 사용자에게 통지하는 방법 및 장치를 제안할 수 있다.In this case, in one embodiment, the sound source characteristics of each of the plurality of multimedia files includes the volume level control information of each of the plurality of multimedia files. As a result, the sound source characteristics of the multimedia file provided to the user are checked. It is possible to propose a method and apparatus for notifying a user of an alarm about a change in volume level of a multimedia file based on volume level control information included in the multimedia file.
도 1은 일 실시예에 따른 사용자 및 환경 정보 기반의 음량 최적화 장치의 음량 레벨 제어 동작을 설명하기 위한 도면이다.
도 2는 일 실시예에 따른 사용자 및 환경 정보 기반의 음량 최적화 장치를 나타낸 블록도이다.
도 3a 내지 3b는 일 실시예에 따른 사용자 및 환경 정보 기반의 음량 최적화 장치의 음량 레벨 제어 동작 중 멀티미디어 파일의 음원 특성에 대한 사용자의 청각 능력 정보 및 음량 선호 정보를 반영하는 과정을 설명하기 위한 도면이다.
도 4는 일 실시예에 따른 사용자 및 환경 정보 기반의 음량 최적화 장치의 음량 레벨 제어 동작 중 소음 특성에 대한 사용자의 청각 능력 정보를 반영하는 과정을 설명하기 위한 도면이다.
도 5는 일 실시예에 따른 사용자 및 환경 정보 기반의 음량 최적화 방법을 나타낸 플로우 차트이다.FIG. 1 is a view for explaining a volume level control operation of a volume optimization apparatus based on user and environment information according to an embodiment.
2 is a block diagram illustrating a volume optimization apparatus based on user and environment information according to an embodiment.
3A and 3B are diagrams for explaining a process of reflecting auditory ability information and volume preference information of a user regarding a sound source characteristic of a multimedia file during a volume level control operation of a user and environment information volume optimizing apparatus according to an exemplary embodiment to be.
4 is a diagram for explaining a process of reflecting a user's hearing ability information on a noise characteristic in a volume level control operation of a volume optimization device based on user and environment information according to an exemplary embodiment.
FIG. 5 is a flowchart illustrating a method for optimizing volume based on user and environment information according to an embodiment.
이하, 본 발명에 따른 실시예들을 첨부된 도면을 참조하여 상세하게 설명한다. 그러나 본 발명이 실시예들에 의해 제한되거나 한정되는 것은 아니다. 또한, 각 도면에 제시된 동일한 참조 부호는 동일한 부재를 나타낸다.Hereinafter, embodiments according to the present invention will be described in detail with reference to the accompanying drawings. However, the present invention is not limited to or limited by the embodiments. In addition, the same reference numerals shown in the drawings denote the same members.
또한, 본 명세서에서 사용되는 용어(terminology)들은 본 발명의 바람직한 실시예를 적절히 표현하기 위해 사용된 용어들로서, 이는 시청자, 운용자의 의도 또는 본 발명이 속하는 분야의 관례 등에 따라 달라질 수 있다. 따라서, 본 용어들에 대한 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.Also, terminologies used herein are terms used to properly represent preferred embodiments of the present invention, which may vary depending on the viewer, the intention of the operator, or the custom in the field to which the present invention belongs. Therefore, the definitions of these terms should be based on the contents throughout this specification.
도 1은 일 실시예에 따른 사용자 및 환경 정보 기반의 음량 최적화 장치의 음량 레벨 제어 동작을 설명하기 위한 도면이고, 도 2는 일 실시예에 따른 사용자 및 환경 정보 기반의 음량 최적화 장치를 나타낸 블록도이다.FIG. 1 is a view for explaining a volume level control operation of a user and environment information volume optimizing apparatus according to an embodiment. FIG. 2 is a block diagram illustrating a volume optimizing apparatus based on user and environment information according to an embodiment to be.
도 1 내지 2를 참조하면, 일 실시예에 따른 사용자 및 환경 정보 기반의 음량 최적화 장치(이하, 음량 최적화 장치)(110)는, 소음이 변화하는 환경에서 실시간으로 측정되는 소음에 기초하여 사용자(111)에게 제공되는 멀티미디어 파일의 음량 레벨을 자동으로 제어한다.1 and 2, a volume optimization apparatus (hereinafter referred to as a volume optimization apparatus) 110 based on user and environment information according to an embodiment calculates a noise level of a
이하, 음량 최적화 장치(110)는, 사용자(111)에 의해 휴대되는 사용자 단말 내부에 탑재되는 장치인 것으로 설명하나, 이에 제한되거나 한정되지 않고, 사용자 단말에 대해 독립적으로 구비되는 별도의 장치로 구현될 수 있다.Hereinafter, the
이러한, 음량 최적화 장치(110)는, 사용자 청력 분석 모듈(210), 실시간 소음 측정 모듈(220), 사용자 관점 소음 예측 모듈(230) 및 사용자 맞춤형 음량 최적화 모듈(240)을 포함함으로써, 멀티미디어 파일의 음량 레벨 제어 동작을 수행할 수 있다.The
구체적으로, 음량 최적화 장치(110)는, 실시간 소음 측정 모듈(220)을 통하여 사용자(111)가 위치하는 공간(112, 113)에서의 소음을 실시간으로 측정하고, 사용자 관점 소음 예측 모듈(230)을 통하여 소음이 사용자(111)의 귀로 유입될 때 변형되는 변형 소음을 예측함으로써, 사용자 맞춤형 음량 최적화 모듈(240)을 이용하여, 변형 소음을 기초로 사용자(111)에게 제공되는 멀티미디어 파일의 음량 레벨을 자동을 제어한다.Specifically, the
예를 들어, 사용자(111)가 소음이 적은 제1 공간(112)에 위치한 경우, 실시간 소음 측정 모듈(220)은 제1 공간(112)에서의 소음을 실시간으로 측정하고, 사용자 관점 소음 예측 모듈(230)은 실시간 소음 측정 모듈(220)로부터 전달되는 소음이 사용자(111)의 귀로 유입될 때 변형되는 변형 소음을 예측할 수 있다. 이에, 사용자 맞춤형 음량 최적화 모듈(240)은 사용자(111)에게 제공되는 멀티미디어 파일의 음량 레벨이 사용자 관점 소음 예측 모듈(230)로부터 전달되는 변형 소음의 음량 레벨을 압도하도록 자동으로 제어할 수 있다. 만약, 소음이 적은 제1 공간(112)에서 변형 소음이 20dB이라면, 사용자 맞춤형 음량 최적화 모듈(240)은 사용자(111)에게 제공되는 멀티미디어 파일의 음량 레벨이 20dB을 압도하도록, 예컨대, 멀티미디어 파일의 음량 레벨을 50dB의 음량 레벨로 제어할 수 있다.For example, when the
반면에, 사용자(111)가 제1 공간(112)으로부터 소음이 가득한 제2 공간(113)으로 이동하게 되는 경우, 실시간 소음 측정 모듈(220)은 제2 공간(113)에서의 소음을 실시간으로 측정하고, 사용자 관점 소음 예측 모듈(230)은 실시간 소음 측정 모듈(220)로부터 전달되는 소음이 사용자(111)의 귀로 유입될 때 변형되는 변형 소음을 예측할 수 있다. 이에, 사용자 맞춤형 음량 최적화 모듈(240)은 사용자(111)에게 제공되는 멀티미디어 파일의 음량 레벨이 사용자 관점 소음 예측 모듈(230)로부터 전달되는 변형 소음의 음량 레벨을 압도하도록 자동으로 제어할 수 있다. 만약, 소음이 가득한 제2 공간(113)에서 변형 소음이 60dB이라면, 사용자 맞춤형 음량 최적화 모듈(240)은 사용자(111)에게 제공되는 멀티미디어 파일의 음량 레벨이 60dB을 압도하도록, 예컨대, 멀티미디어 파일의 음량 레벨을 80dB의 음량 레벨로 제어할 수 있다.On the other hand, when the
이하, 멀티미디어 파일의 음량 레벨이 변형 소음의 음량 레벨을 압도한다는 것은, 멀티미디어 파일의 음량 레벨이 변형 소음의 음량 레벨을 기준 값만큼 초과하는 것을 의미한다. 따라서, 멀티미디어 파일의 음량 레벨이 변형 소음의 음량 레벨을 압도하도록 멀티미디어 파일의 음량 레벨을 제어한다는 것은, 멀티미디어 파일의 음량 레벨이 변형 소음의 음량 레벨을 기준 값만큼 초과하도록 멀티미디어 파일의 음량 레벨을 높게 조절하는 것을 의미한다. 예를 들어, 기준 값이 30dB로 설정되는 경우, 멀티미디어 파일의 음량 레벨이 변형 소음의 음량 레벨인 20dB를 압도하도록 제어되면, 멀티미디어 파일의 음량 레벨은 50dB로 높게 조절될 수 있다. 다른 예를 들면, 기준 값이 20dB로 설정되는 경우, 멀티미디어 파일의 음량 레벨이 변형 소음의 음량 레벨인 60dB를 압도하도록 제어되면, 멀티미디어 파일의 음량 레벨은 80dB로 높게 조절될 수 있다.Hereinafter, the volume level of the multimedia file overwhelms the volume level of the variation noise means that the volume level of the multimedia file exceeds the volume level of the variation noise by the reference value. Therefore, controlling the volume level of the multimedia file such that the volume level of the multimedia file overwhelms the volume level of the variation noise means that the volume level of the multimedia file is set to a high level so that the volume level of the multimedia file exceeds the volume level of the variation noise. It means adjusting. For example, when the reference value is set to 30 dB, if the volume level of the multimedia file is controlled to overcome the volume level of the variation noise of 20 dB, the volume level of the multimedia file can be adjusted as high as 50 dB. As another example, when the reference value is set to 20 dB, if the volume level of the multimedia file is controlled to overwhelm the volume level of the variation noise of 60 dB, the volume level of the multimedia file can be adjusted as high as 80 dB.
이상, 설명된 기준 값은 음량 최적화 장치(110)에 의해 적응적으로 설정될 수 있다. 예를 들어, 기준 값은, 멀티미디어 파일의 음량 레벨이 변형 소음의 음량 레벨을 압도하도록 제어된 값이 사용자(111)의 청각에 문제를 발생시키지 않는 범위 내에서 적응적으로 조절될 수 있다. 더 구체적인 예를 들면, 소음이 적은 제1 공간(112)에서, 기준 값은 30dB의 값으로 설정될 수 있으나, 소음이 가득한 제2 공간(113)에서, 기준 값은 멀티미디어 파일의 음량 레벨이 변형 소음의 음량 레벨을 압도하도록 제어된 값이 사용자(111)의 청각에 문제를 발생시키는 90dB미만이 되도록 20dB의 값으로 설정될 수 있다.As described above, the reference value described above can be adaptively set by the
또한, 일 실시예에 따른 음량 최적화 장치(110)는, 이어폰 소음 차단 능력 계측 모듈(도면에는 도시되지 않음)을 더 포함함으로써, 멀티미디어 파일이 사용자(111)에게 이어폰을 통하여 제공되는 경우, 이어폰 소음 차단 능력 계측 모듈에서 이어폰의 소음 차단 능력을 계측할 수 있다. 따라서, 사용자 관점 소음 예측 모듈(230)은, 실시간 소음 측정 모듈(220)에서 측정된 소음이 사용자(111)의 귀로 유입될 때 변형되는 변형 소음을 예측하는 과정에서, 이어폰 소음 차단 능력 계측 모듈에서 계측된 이어폰의 소음 차단 능력을 고려할 수 있다.In addition, the
이처럼, 일 실시예에 따른 음량 최적화 장치(110)는, 사용자(111)가 위치하는 공간(112, 113)에서의 소음을 실시간으로 측정하여, 이를 기초로 사용자(111)에게 제공되는 멀티미디어 파일의 음량 레벨을 자동으로 제어함으로써, 변화되는 소음 환경에서 사용자(111)가 수동 조작으로 음량 레벨을 제어하는 번거로움을 방지할 수 있으며, 사용자(111)의 청각에 문제를 발생시키는 고 레벨의 음량 레벨로 멀티미디어가 제공되는 것을 방지할 수 있다.In this way, the
또한, 일 실시예에 따른 음량 최적화 장치(110)는, 사용자 청력 분석 모듈(210)을 활용함으로써, 멀티미디어 파일의 음량 레벨을 자동으로 제어하는 과정에서, 사용자(111)의 청각 능력 정보 및 음량 선호 정보를 반영할 수 있다.In addition, the
이러한 경우, 음량 최적화 장치(110)는, 사용자 청력 분석 모듈(210)을 통하여, 사용자(111)의 청각 능력 정보 및 음량 선호 정보를 획득하여 저장 및 유지하다가, 실시간 소음 측정 모듈(220)을 통하여 사용자(111)가 위치하는 공간(112, 113)에서의 소음을 실시간으로 측정하고, 사용자 관점 소음 예측 모듈(230)을 통하여 소음이 사용자(111)의 귀로 유입될 때 변형되는 변형 소음을 예측함으로써, 사용자 맞춤형 음량 최적화 모듈(240)을 이용하여, 변형 소음, 사용자(111)의 청각 능력 정보 및 음량 선호 정보를 기초로 사용자(111)에게 제공되는 멀티미디어 파일의 음량 레벨을 자동을 제어한다.In this case, the
구체적으로, 사용자 청력 분석 모듈(210)이복수의 멀티미디어 파일들 각각의 음원 특성에 대한 사용자(111)의 청각 능력 정보 및 음량 선호 정보를 획득하여 저장 및 유지하고 있으면, 사용자 맞춤형 음량 최적화 모듈(240)은, 사용자(111)에게 제공되는 멀티미디어 파일의 음원 특성을 확인하고, 확인된 음원 특성에 대한 사용자(111)의 청각 능력 정보 및 음량 선호 정보를 사용자 청력 분석 모듈(210)로부터 획득할 수 있다. 이에, 사용자 맞춤형 음량 최적화 모듈(240)은, 사용자 관점 소음 예측 모듈(230)로부터 전달되는 예측 소음과 확인된 음원 특성에 대한 사용자(111)의 청각 능력 정보 및 음량 선호 정보에 기초하여 멀티미디어 파일의 음량 레벨을 자동으로 제어할 수 있다.In detail, if the user's hearing
보다 상세하게는, 사용자 맞춤형 음량 최적화 모듈(240)은, 확인된 음원 특성(사용자(111)에게 제공되는 멀티미디어 파일의 음원 특성)에 대한 사용자(111)의 청각 능력 정보 및 음량 선호 정보에 기초하여 음량 레벨을 산출하고, 산출된 음량 레벨이 변형 소음의 음량 레벨을 압도하는지 여부를 판단함으로써, 판단 결과 산출된 음량 레벨이 변형 소음의 음량 레벨을 압도하는 경우, 멀티미디어 파일의 음량 레벨을 산출된 음량 레벨로 제어할 수 있다.More specifically, the user-customized
이 때, 복수의 멀티미디어 파일들 각각의 음원 특성은, 복수의 멀티미디어 파일들 각각의 장르, 복수의 멀티미디어 파일들 각각에 포함되는 사운드 신호들의 종류, 복수의 멀티미디어 파일들 각각에 포함되는 사운드 신호들이 갖는 주파수 대역 또는 복수의 멀티미디어 파일들 각각의 음량 레벨 제어 정보 중 적어도 하나를 포함할 수 있다.In this case, the sound source characteristics of each of the plurality of multimedia files may include a genre of each of the plurality of multimedia files, a kind of sound signals included in each of the plurality of multimedia files, a sound signal included in each of the plurality of multimedia files Frequency band, or volume level control information of each of a plurality of multimedia files.
따라서, 사용자 청력 분석 모듈(210)이, 복수의 멀티미디어 파일들 각각의 장르 별 사용자(111)의 청각 능력 정보 및 음량 선호 정보를 획득하여 저장 및 유지하고, 복수의 멀티미디어 파일들 각각에 포함되는 사운드 신호들의 종류 별 사용자(111)의 청각 능력 정보 및 음량 선호 정보를 획득하여 저장 및 유지하며, 복수의 멀티미디어 파일들 각각에 포함되는 사운드 신호들이 갖는 주파수 대역 별 사용자(111)의 청각 능력 정보 및 음량 선호 정보를 획득하여 저장 및 유지하고, 복수의 멀티미디어 파일들 각각의 음량 레벨 제어 정보 별 사용자(111)의 청각 능력 정보 및 음량 선호 정보를 획득하여 저장 및 유지해둠으로써, 사용자 맞춤형 음량 최적화 모듈(240)은, 사용자(111)에게 제공되는 멀티미디어 파일의 장르, 사운드 신호들의 종류, 사운드 신호들이 갖는 주파수 대역, 음량 레벨 제어 정보에 대한 사용자(111)의 청각 능력 정보 및 음량 선호 정보를 사용자 청력 분석 모듈(210)로부터 획득하고, 이에 기초하여 사용자(111)에게 제공되는 멀티미디어 파일에 대한 적정 음량 레벨을 산출할 수 있다.Accordingly, the user's
여기서, 멀티미디어 파일의 음원 특성은, 멀티미디어 파일의 메타 정보에 저장 및 유지되게 된다. 이에, 사용자 맞춤형 음량 최적화 모듈(240)은, 사용자(111)에게 제공되는 멀티미디어 파일의 메타 정보를 분석함으로써, 멀티미디어 파일의 음원 특성을 확인할 수 있다.Here, the sound source characteristics of the multimedia file are stored and held in the meta information of the multimedia file. Accordingly, the user-customized
반면에, 판단 결과 산출된 음량 레벨이 변형 소음의 음량 레벨을 압도하지 못하는 경우, 사용자 맞춤형 음량 최적화 모듈(240)은, 멀티미디어 파일의 음량 레벨이 사용자(111)의 청각 능력 정보 및 음량 선호 정보에 의해 산출된 음량 레벨을 초과하는 고 레벨로 상승됨을 사용자(111)에게 알람으로 통지할 수 있다.On the other hand, if the calculated volume level does not overwhelm the volume level of the deformation noise, the user-customized
이와 같이, 음량 레벨 제어 동작 중 멀티미디어 파일의 음원 특성에 대한 사용자(111)의 청각 능력 정보 및 음량 선호 정보를 반영하는 과정의 상세한 설명은 도 3a 내지 3b를 참조하여 기재하기로 한다.The details of the process of reflecting the auditory capability information and the volume preference information of the
또한, 사용자 맞춤형 음량 최적화 모듈(240)은, 사용자 관점 소음 예측 모듈(230)에서 예측된 변형 소음을 상쇄시키는 상쇄 신호를 생성 및 출력하여, 변형 소음을 감소시킴으로써, 감소된 변형 소음, 사용자(111)의 청각 능력 정보 및 음량 선호 정보에 기초하여 멀티미디어 파일의 음량 레벨을 자동으로 제어할 수도 있다.In addition, the user-customized
또한, 사용자 청력 분석 모듈(210)은, 복수의 멀티미디어 파일들 각각의 음원 특성에 대한 사용자(111)의 청각 능력 정보 및 음량 선호 정보를 획득하여 저장 및 유지하는 것과 마찬가지로, 복수의 소음들 각각의 소음 특성에 대한 사용자(111)의 청각 능력 정보를 획득하여 저장 및 유지할 수 있다. 이에, 사용자 관점 소음 예측 모듈(230)은, 실시간 소음 측정 모듈(220)에서 측정된 소음의 소음 특성을 확인하고, 확인된 소음 특성에 대한 사용자(111)의 청각 능력 정보에 기초하여 측정된 소음이 사용자(111)의 귀로 유입될 때 변형되는 변형 소음의 음량 레벨을 예측할 수 있다. 이에 대한 상세한 설명은 도 4를 참조하여 기재하기로 한다.In addition, the user's
이와 같은 음량 레벨 제어 동작은 실시간으로 수행될 수 있다. 이는, 소음 측정 모듈(220)이 사용자(111)가 위치하는 공간(112, 113)에서의 소음을 실시간으로 측정함에 따라, 사용자 관점 소음 예측 모듈(230)이 변형 소음을 실시간으로 예측하게 되고, 사용자 관점 소음 예측 모듈(230)이 변형 소음을 실시간으로 예측함에 응답하여, 사용자 맞춤형 음량 최적화 모듈(240)이 사용자(111)에게 제공되는 멀티미디어 파일의 음량 레벨을 실시간으로 자동으로 제어하게 되기 때문이다.Such a volume level control operation can be performed in real time. This is because the
도 3a 내지 3b는 일 실시예에 따른 사용자 및 환경 정보 기반의 음량 최적화 장치의 음량 레벨 제어 동작 중 멀티미디어 파일의 음원 특성에 대한 사용자의 청각 능력 정보 및 음량 선호 정보를 반영하는 과정을 설명하기 위한 도면이다. 보다 자세하게는, 도 3a는 멀티미디어 파일의 음원 특성에 포함되는 장르, 사운드 신호들의 종류, 사운드 신호들이 갖는 주파수 대역에 대한 사용자의 청각 능력 정보 및 음량 선호 정보를 반영하는 과정을 설명하기 위한 도면이고, 도 3b는 멀티미디어 파일의 음원 특성에 포함되는 음량 레벨 제어 정보에 대한 사용자의 청각 능력 정보 및 음량 선호 정보를 반영하는 과정을 설명하기 위한 도면이다.3A and 3B are diagrams for explaining a process of reflecting auditory ability information and volume preference information of a user regarding a sound source characteristic of a multimedia file during a volume level control operation of a user and environment information volume optimizing apparatus according to an exemplary embodiment to be. More specifically, FIG. 3A is a diagram for explaining a process of reflecting a genre included in a sound source characteristic of a multimedia file, a kind of sound signals, a user's hearing ability information on a frequency band of sound signals, and a volume preference information, FIG. 3B is a diagram for explaining a process of reflecting auditory capability information and volume preference information of a user with respect to volume level control information included in a sound source characteristic of a multimedia file.
도 3a를 참조하면, 일 실시예에 따른 음량 최적화 장치는, 사용자 청력 분석 모듈을 통하여, 복수의 멀티미디어 파일들 각각의 음원 특성 중 장르, 사운드 신호들의 종류 및 사운드 신호들이 갖는 주파수 대역 각각에 대한 사용자의 청각 능력 정보(310, 320, 330) 및 음량 선호 정보(340, 350, 360)를 획득하여 저장 및 유지할 수 있다.Referring to FIG. 3A, a volume optimizing apparatus according to an exemplary embodiment of the present invention includes a user's hearing analysis module, a user's hearing ability analyzing module, a user's hearing ability analyzing module, 310, 320, and 330 and the
이 때, 복수의 멀티미디어 파일들 각각의 장르에 대한 사용자의 청각 능력 정보(310)는, 복수의 멀티미디어 파일들 각각의 장르 별로 미리 설정된 음량 레벨에 대한 사용자의 가청 여부를 나타내는 정보일 수 있다. 이하, 사용자의 가청 여부는, 사용자의 청각에 문제를 발생시키지 않는 제한 아래, 해당 음량 레벨을 사용자가 들을 수 있는지 여부를 의미한다. 예를 들어, 제1 멀티미디어 파일의 장르가 "재즈"인 경우, 제1 멀티미디어 파일에 대한 사용자의 청각 능력 정보(310)는, "재즈" 장르인 제1 멀티미디어 파일이 갖고 있는 미리 설정된 음량 레벨인 50-60dB을 사용자가 들을 수 있는지 여부를 나타내는 정보일 수 있다.At this time, the user's
마찬가지로, 복수의 멀티미디어 파일들 각각에 포함되는 사운드 신호들의 종류에 대한 사용자의 청각 능력 정보(320)는, 복수의 멀티미디어 파일들 각각에 포함되는 사운드 신호들의 종류 별로 미리 설정된 음량 레벨에 대한 사용자의 가청 여부를 나타내는 정보일 수 있다. 예를 들어, 제2 멀티미디어 파일에 포함되는 사운드 신호들의 종류가 "남자 음성"인 경우, 제2 멀티미디어 파일에 대한 사용자의 청각 능력 정보(320)는, "남자 음성"인 사운드 신호들로 구성되는 제2 멀티미디어 파일이 갖고 있는 미리 설정된 음량 레벨인 40-50dB을 사용자가 들을 수 있는지 여부를 나타내는 정보일 수 있다.Likewise, the user's
또한, 복수의 멀티미디어 파일들 각각에 포함되는 사운드 신호들의 주파수 대역에 대한 사용자의 청각 능력 정보(330)는, 복수의 멀티미디어 파일들 각각에 포함되는 사운드 신호들의 주파수 대역에 대한 사용자의 가청 여부를 나타내는 정보일 수 있다. 예를 들어, 제3 멀티미디어 파일에 포함되는 사운드 신호들의 주파수 대역이 "5-6kHz"인 경우, 제3 멀티미디어 파일에 대한 사용자의 청각 능력 정보(330)는, 제3 멀티미디어 파일을 구성하는 "5-6kHz"인 사운드 신호들을 사용자가 들을 수 있는지 여부를 나타내는 정보일 수 있다.In addition, the user's
또한, 복수의 멀티미디어 파일들 각각의 장르에 대한 사용자의 음량 선호 정보(340)는, 복수의 멀티미디어 파일들 각각의 장르 별로 사용자가 선호하는 음량 레벨을 나타내는 정보일 수 있다. 예를 들어, 제1 멀티미디어 파일의 장르가 "재즈"인 경우, 제1 멀티미디어 파일에 대한 사용자의 음량 선호 정보(340)는, "재즈" 장르인 제1 멀티미디어 파일을 재생할 때 사용자가 선호하는 음량 레벨인 60dB을 나타내는 정보일 수 있다.In addition, the user's
마찬가지로, 복수의 멀티미디어 파일들 각각에 포함되는 사운드 신호들의 종류에 대한 사용자의 음량 선호 정보(350)는, 복수의 멀티미디어 파일들 각각에 포함되는 사운드 신호들의 종류 별로 사용자가 선호하는 음량 레벨을 나타내는 정보일 수 있다. 예를 들어, 제2 멀티미디어 파일에 포함되는 사운드 신호들의 종류가 "남자 음성"인 경우, 제2 멀티미디어 파일에 대한 사용자의 음량 선호 정보(340)는, "남자 음성"인 사운드 신호들로 구성되는 제2 멀티미디어 파일을 재생할 때 사용자가 선호하는 음량 레벨인 70dB을 나타내는 정보일 수 있다.Likewise, the user's
또한, 복수의 멀티미디어 파일들 각각에 포함되는 사운드 신호들의 주파수 대역에 대한 사용자의 음량 선호 정보(360)는, 복수의 멀티미디어 파일들 각각에 포함되는 사운드 신호들의 주파수 대역에 대한 사용자의 선호 여부를 나타내는 정보일 수 있다. 예를 들어, 제3 멀티미디어 파일에 포함되는 사운드 신호들의 주파수 대역이 "5-6kHz"인 경우, 제3 멀티미디어 파일에 대한 사용자의 음량 선호 정보(360)는, 제3 멀티미디어 파일을 구성하는 "5-6kHz"인 사운드 신호들을 사용자가 선호하는지 여부를 나타내는 정보일 수 있다.In addition, the user's
일 실시예에 따른 사용자 청력 분석 모듈은, 상술한 바와 같이 복수의 멀티미디어 파일들 각각의 음원 특성 중 장르, 사운드 신호들의 종류 및 사운드 신호들이 갖는 주파수 대역 각각에 대한 사용자의 청각 능력 정보(310, 320, 330) 및 음량 선호 정보(340, 350, 360)를 미리 획득하여 저장 및 유지해둠으로써, 사용자 맞춤형 음량 최적화 모듈이사용자에게 제공되는 멀티미디어 파일의 음원 특성을 확인한 뒤, 확인된 음원 특성에 대한 사용자의 청각 능력 정보 및 음량 선호 정보를 획득하도록 할 수 있다.As described above, the user's hearing analysis module according to an exemplary embodiment of the present invention includes a user's
예를 들어, 사용자에게 제공되는 멀티미디어 파일이 제1 멀티미디어 파일인 경우, 사용자 맞춤형 음량 최적화 모듈은, 제1 멀티미디어 파일의 메타 정보를 분석하여, 사용자 청력 분석 모듈이 저장 및 유지하고 있는 제1 멀티미디어 파일의 음원 특성인 장르에 대한 사용자의 청각 능력 정보(310) 및 음량 선호 정보(340)를 확인할 수 있다. 이에. 제1 멀티미디어 파일에 대한 사용자의 청각 능력 정보(310)가 제1 멀티미디어 파일이 갖고 있는 미리 설정된 음량 레벨인 50-60dB을 사용자가 들을 수 있음을 나타내는 "가능"이고, 제1 멀티미디어 파일에 대한 사용자의 선호 음량 정보(340)가 음량 레벨 60dB인 것으로 확인되게 되면, 사용자 맞춤형 음량 최적화 모듈은, 사용자의 청각 능력 정보(310) 및 음량 선호 정보(340)에 기초하여, 제1 멀티미디어 파일에 대한 사용자의 음량 레벨을 음량 레벨 60dB로 산출할 수 있다. 따라서, 사용자 맞춤형 음량 최적화 모듈은, 산출된 60dB의 음량 레벨이 변형 소음의 음량 레벨인 30dB을 압도하는지 여부를 판단한 뒤, 산출된 60dB의 음량 레벨이 변형 소음의 음량 레벨인 30dB을 압도하므로, 제1 멀티미디어파일의 음량 레벨을 산출된 60dB로 제어할 수 있다.For example, if the multimedia file provided to the user is a first multimedia file, the user-customized volume optimization module analyzes the meta information of the first multimedia file, and analyzes the meta information of the first multimedia file The user's
다른 예를 들면, 사용자에게 제공되는 멀티미디어 파일이 제2 멀티미디어 파일인 경우, 사용자 맞춤형 음량 최적화 모듈은, 제2 멀티미디어 파일의 메타 정보를 분석하여, 사용자 청력 분석 모듈이 저장 및 유지하고 있는 제2 멀티미디어 파일의 음원 특성인 장르에 대한 사용자의 청각 능력 정보(320) 및 음량 선호 정보(350)를 확인할 수 있다. 이에. 제2 멀티미디어 파일에 대한 사용자의 청각 능력 정보(320)가 제2 멀티미디어 파일이 갖고 있는 미리 설정된 음량 레벨인 40-50dB을 사용자가 들을 수 없음을 나타내는 "불가능"이고, 제2 멀티미디어 파일에 대한 사용자의 선호 음량 정보(350)가 음량 레벨 70dB인 것으로 확인되게 되면, 사용자 맞춤형 음량 최적화 모듈은, 사용자의 청각 능력 정보(320) 및 음량 선호 정보(350)에 기초하여, 제2 멀티미디어 파일에 대한 사용자의 음량 레벨을 음량 레벨 70dB로 산출할 수 있다. 따라서, 사용자 맞춤형 음량 최적화 모듈은, 산출된 70dB의 음량 레벨이 변형 소음의 음량 레벨인 60dB을 압도하는지 여부를 판단한 뒤, 산출된 70dB의 음량 레벨이 변형 소음의 음량 레벨인 60dB을 압도하지 못하므로, 제2 멀티미디어 파일의 음량 레벨을 산출된 음량 레벨인 70dB을 초과하는 고 레벨 90dB로 제어하고, 이를 사용자에게 알람으로 통지할 수 있다.In another example, if the multimedia file provided to the user is a second multimedia file, the user-customized volume optimization module analyzes the meta information of the second multimedia file and stores the meta information of the second multimedia file The user's
도 3b를 참조하면, 일 실시예에 따른 음량 최적화 장치는, 사용자 청력 분석 모듈을 통하여, 복수의 멀티미디어 파일들 각각의 음원 특성 중 음량 레벨 제어 정보(370)에 대한 사용자의 청각 능력 정보(371) 및 음량 선호 정보(372)를 획득하여 저장 및 유지할 수 있다.Referring to FIG. 3B, the volume optimization apparatus according to an embodiment of the present invention includes a user's hearing
이 때, 복수의 멀티미디어 파일들 각각의 음량 레벨 제어 정보(370)는, 복수의 멀티미디어 파일들 각각이 재생되는 과정에서 음량 레벨이 변화되는 정도를 나타내는 정보일 수 있다. 이러한 음량 레벨 제어 정보(370)는, 일반적으로 멀티미디어 파일을 제작한 제작자 또는 공급하는 공급자에 의해 생성되어, 멀티미디어 파일의 메타 정보에 포함되어 있을 수 있다. 예를 들어, 제4 멀티미디어 파일의 음량 레벨 제어 정보(370)가 도면과 같은 경우, 제4 멀티미디어 파일의 음량 레벨 제어 정보(370)는 재생 1분이 되는 구간에 음량 레벨이 80dB로 상승하고, 나머지 구간에서는 음량 레벨이 50dB로 유지되는 것을 나타내는 정보일 수 있다.In this case, the volume
이에, 복수의 멀티미디어 파일들 각각의 음량 레벨 제어 정보(370)에 대한 사용자의 청각 능력 정보(371)는, 복수의 멀티미디어 파일들 각각의 음량 레벨 제어 정보(370)에 대한 사용자의 가청 여부를 나타내는 정보일 수 있다. 예를 들어, 제4 멀티미디어 파일의 음량 제어 정보(370)가 상술한 바와 같이, 재생 1분이 되는 구간에 음량 레벨이 80dB로 상승하고, 나머지 구간에서 음량 레벨이 50dB로 유지되는 것을 나타내는 정보인 경우, 제4 멀티미디어 파일의 음량 제어 정보(370)에 대한 사용자의 청각 능력 정보(371)는, 이러한 음량 레벨의 변화를 사용자가 들을 수 있는지 여부를 나타내는 정보일 수 있다.Therefore, the user's
또한, 복수의 멀티미디어 파일들 각각의 음량 레벨 제어 정보(370)에 대한 사용자의 음량 선호 정보(372)는, 복수의 멀티미디어 파일들 각각의 음량 레벨 제어 정보(370)에 대해 사용자가 선호하는지 여부를 나타내는 정보일 수 있다. 예를 들어, 제4 멀티미디어 파일의 음량 제어 정보(370)가 상술한 바와 같이, 재생 1분이 되는 구간에서 음량 레벨이 80dB로 상승하고, 나머지 구간에서 음량 레벨이 50dB로 유지되는 것을 나타내는 정보인 경우, 제4 멀티미디어 파일의 음량 제어 정보(370)에 대한 사용자의 음량 선호 정보(372)는, 이러한 음량 레벨의 변화를 사용자가 선호하는지 여부를 나타내는, 예컨대, "선호함"과 같은 정보일 수 있다.The user's
일 실시예에 따른 사용자 청력 분석 모듈은, 상술한 바와 같이 복수의 멀티미디어 파일들 각각의 음원 특성 중 음량 레벨 제어 정보(370)에 대한 사용자의 청각 능력 정보(371) 및 음량 선호 정보(372)를 미리 획득하여 저장 및 유지해둠으로써, 사용자 맞춤형 음량 최적화 모듈이 사용자에게 제공되는 멀티미디어 파일의 음원 특성을 확인한 뒤, 확인된 음원 특성에 대한 사용자의 청각 능력 정보 및 음량 선호 정보를 획득하도록 할 수 있다.The user's hearing analysis module according to one embodiment stores the
예를 들어, 사용자에게 제공되는 멀티미디어 파일이 제4 멀티미디어 파일인 경우, 사용자 맞춤형 음량 최적화 모듈은, 제4 멀티미디어 파일의 메타 정보를 분석하여, 사용자 청력 분석 모듈이 저장 및 유지하고 있는 제4 멀티미디어 파일의 음원 특성인 음량 레벨 제어 정보(370)에 대한 사용자의 청각 능력 정보(371) 및 음량 선호 정보(372)를 확인할 수 있다. 이에. 제4 멀티미디어 파일에 대한 사용자의 청각 능력 정보(371)가 "가능"이고, 제4 멀티미디어 파일에 대한 사용자의 선호 음량 정보(372)가 "선호함"인 것으로 확인되게 되면, 사용자 맞춤형 음량 최적화 모듈은, 사용자의 청각 능력 정보(371) 및 음량 선호 정보(372)에 기초하여, 제4 멀티미디어 파일에 대한 사용자의 음량 레벨을 제4 멀티미디어 파일의 음량 레벨 제어 정보(370)와 동일하게 제어할 수 있다.For example, if the multimedia file provided to the user is a fourth multimedia file, the user-customized volume optimization module analyzes the meta information of the fourth multimedia file, and stores the fourth multimedia file The user's
또한, 사용자 맞춤형 음량 최적화 모듈은, 확인된 음원 특성에 포함되는 음량 레벨 제어 정보(370)에 기초하여, 멀티미디어 파일의 음량 레벨 변화에 대한 알람을 사용자에게 통지할 수도 있다. 예를 들어, 제4 멀티미디어 파일에 대한 사용자의 음량 레벨을 제4 멀티미디어 파일의 음량 레벨 제어 정보(370)와 동일하게 제어하게 되는 경우, 사용자 맞춤형 음량 최적화 모듈은, 제4 멀티미디어 파일의 음량 레벨을 제어하는 과정에서, 음량 레벨 제어 정보(370)에 따라 재생 1분이 되는 구간에서 음량 레벨이 80dB으로 상승됨을 미리 사용자에게 알람으로 통지할 수 있다(예컨대, 재생 55초가 되는 구간에서 경보음이 울림).In addition, the user-customized volume optimization module may notify the user of an alarm on the volume level change of the multimedia file based on the volume
도 4는 일 실시예에 따른 사용자 및 환경 정보 기반의 음량 최적화 장치의 음량 레벨 제어 동작 중 소음 특성에 대한 사용자의 청각 능력 정보를 반영하는 과정을 설명하기 위한 도면이다.4 is a diagram for explaining a process of reflecting a user's hearing ability information on a noise characteristic in a volume level control operation of a volume optimization device based on user and environment information according to an exemplary embodiment.
도 4를 참조하면, 일 실시예에 따른 음량 최적화 장치는, 사용자 청력 분석 모듈을 통하여, 복수의 소음들 각각의 소음 특성에 대한 사용자의 청각 능력 정보(410)를 획득하여 저장 및 유지할 수 있다.Referring to FIG. 4, the volume optimizing apparatus according to an exemplary embodiment may acquire, store, and maintain the user's
이 때, 복수의 소음들 각각의 소음 특성에 대한 사용자의 청각 능력 정보(410)는, 복수의 소음들 각각의 종류 별로 사용자가 실제 받아들이게 되는 음량 레벨의 변화를 나타내는 정보일 수 있다. 예를 들어, 50dB의 음량 레벨을 갖는 제1 소음의 소음 특성에 대한 사용자의 청각 능력 정보(411)가 "-10dB"인 경우, 제1 소음의 소음 특성에 대한 사용자의 청각 능력 정보(411)는 제1 소음이 사용자의 귀로 유입될 때 사용자가 실제 받아들이게 되는 소음의 음량 레벨이 -10dB된다는 것(사용자 관점에서 제1 소음을 40dB로 받아들이게 된다는 것)을 의미한다. 다른 예를 들어, 40dB의 음량 레벨을 갖는 제2 소음의 소음 특성에 대한 사용자의 청각 능력 정보(412)가 "+10dB"인 경우, 제2 소음의 소음 특성에 대한 사용자의 청각 능력 정보(412)는 제2 소음이 사용자의 귀로 유입될 때 사용자가 실제 받아들이게 되는 소음의 음량 레벨이 +10dB된다는 것(사용자 관점에서 제2 소음을 50dB로 받아들이게 된다는 것)을 의미한다.At this time, the user's
일 실시예에 따른 사용자 청력 분석 모듈은, 상술한 바와 같이 복수의 소음들 각각의 소음 특성에 대한 사용자의 청각 능력 정보(410)를 미리 획득하여 저장 및 유지해둠으로써, 사용자 관점 소음 예측 모듈이 실시간 소음 측정 모듈에서 측정된 소음의 소음 특성을 확인하고, 확인된 소음 특성에 대한 사용자의 청각 능력 정보를 획득하도록 할 수 있다.As described above, the user's hearing ability analysis module according to one embodiment acquires and stores the user's
예를 들어, 실시간 소음 측정 모듈에서 측정된 소음을 확인한 결과, 해당 소음이 50dB인 제1 소음인 경우, 사용자 관점 소음 예측 모듈은, 사용자 청력 분석 모듈이 저장 및 유지하고 있는 제1 소음의 소음 특성에 대한 사용자의 청각 능력 정보(410)를 확인할 수 있다. 이에. 제1 소음에 대한 사용자의 청각 능력 정보(410)가 "-10dB"인 것으로 확인되게 되면, 사용자 관점 소음 예측 모듈은, 사용자의 청각 능력 정보(410)에 기초하여, 제1 소음으로부터 예측되는 변형 소음을 40dB로 예측할 수 있다.For example, if the noise measured by the real-time noise measurement module is a first noise with a corresponding noise of 50 dB, the user-based noise prediction module calculates the noise characteristics of the first noise, which is stored and maintained by the user's hearing analysis module, The user's
도 5는 일 실시예에 따른 사용자 및 환경 정보 기반의 음량 최적화 방법을 나타낸 플로우 차트이다.FIG. 5 is a flowchart illustrating a method for optimizing volume based on user and environment information according to an embodiment.
도 5를 참조하면, 일 실시예에 따른 사용자 및 환경 정보 기반의 음량 최적화 방법은, 도 1 내지 4를 참조하여 상술된 음량 최적화 장치에 의해 수행된다.Referring to FIG. 5, a method for optimizing volume based on user and environment information according to an exemplary embodiment is performed by the volume optimizing apparatus described above with reference to FIGS.
우선, 음량 최적화 장치는, 사용자의 청각 능력 정보 및 음량 선호 정보를 획득하여 저장 및 유지한다(510).First, the volume optimizer acquires, stores, and maintains the user's hearing ability information and volume preference information (510).
이어서, 음량 최적화 장치는, 사용자가 위치하는 공간에서의 소음을 실시간으로 측정한다(520).Then, the volume optimizer measures the noise in the space where the user is located in real time (520).
그 다음, 음량 최적화 장치는, 측정된 소음이 사용자의 귀로 유입될 때 변형되는 변형 소음을 예측한다(530).The volume optimizer then predicts (530) the deformation noise that is transformed when the measured noise is introduced into the user's ear.
만약, 멀티미디어 파일이 사용자에게 이어폰을 통하여 제공되는 경우, 음량 최적화 장치는, 이어폰의 소음 차단 능력을 계측함으로써, 530 단계에서 이어폰의 소음 차단 능력에 기초하여, 측정된 소음이 사용자의 귀로 유입될 때 변형되는 변형 소음을 예측할 수 있다.If the multimedia file is provided to the user through the earphone, the volume optimizer measures the noise cancellation capability of the earphone, thereby determining, based on the noise cancellation capability of the earphone in
또한, 음량 최적화 장치는, 510 단계에서 복수의 소음들 각각의 소음 특성에 대한 사용자의 청각 능력 정보를 획득하여 저장 및 유지함으로써, 530 단계에서 측정된 소음의 소음 특성을 확인하고, 확인된 소음 특성에 대한 사용자의 청각 능력 정보에 기초하여 측정된 소음이 사용자의 귀로 유입될 때 변형되는 변형 소음의 음량 레벨을 예측할 수 있다.In addition, the volume optimization apparatus obtains the user's hearing ability information on the noise characteristics of each of the plurality of noises in
그 후, 음량 최적화 장치는, 변형 소음, 사용자의 청각 능력 정보 및 음량 선호 정보에 기초하여, 사용자에게 제공되는 멀티미디어 파일의 음량 레벨을 자동으로 제어한다(540).Thereafter, the volume optimizer automatically controls the volume level of the multimedia file provided to the user based on the deformation noise, the user's hearing ability information, and the volume preference information (540).
보다 상세하게는, 음량 최적화 장치는, 510 단계에서 복수의 멀티미디어 파일들 각각의 음원 특성에 대한 사용자의 청각 능력 정보 및 음량 선호 정보를 획득하여 저장 및 유지함으로써, 540 단계에서 사용자에게 제공되는 멀티미디어 파일의 음원 특성을 확인하고, 확인된 음원 특성에 대한 사용자의 청각 능력 정보 및 음량 선호 정보에 기초하여 멀티미디어 파일의 음량 레벨을 자동으로 제어할 수 있다.In more detail, the volume optimizing apparatus acquires and stores the auditory capability information and the volume preference information of the user regarding the sound source characteristics of each of the plurality of multimedia files, and stores and maintains the sound preference information in
여기서, 복수의 멀티미디어 파일들 각각의 음원 특성은, 복수의 멀티미디어 파일들 각각의 장르, 복수의 멀티미디어 파일들 각각에 포함되는 사운드 신호들의 종류, 복수의 멀티미디어 파일들 각각에 포함되는 사운드 신호들이 갖는 주파수 대역 또는 복수의 멀티미디어 파일들 각각의 음량 레벨 제어 정보 중 적어도 하나를 포함할 수 있다.Here, the sound source characteristics of each of the plurality of multimedia files may include a genre of each of the plurality of multimedia files, a kind of sound signals included in each of the plurality of multimedia files, a frequency of sound signals included in each of the plurality of multimedia files Band or volume level control information of each of a plurality of multimedia files.
이러한 복수의 멀티미디어 파일들 각각의 음원 특성은, 복수의 멀티미디어 파일들 각각의 메타 정보에 저장 및 유지되기 때문에, 540 단계 중 사용자에게 제공되는 멀티미디어 파일의 음원 특성을 확인하는 과정에서, 음량 최적화 장치는, 사용자에게 제공되는 멀티미디어 파일의 메타 정보를 분석하여 멀티미디어 파일의 음원 특성을 확인할 수 있다.Since the sound source characteristics of each of the plurality of multimedia files are stored and held in the meta information of each of the plurality of multimedia files, in the process of checking the sound source characteristics of the multimedia file provided to the user during
또한, 음량 최적화 장치는, 540 단계 중 사용자에게 제공되는 멀티미디어 파일의 음원 특성을 확인한 뒤, 확인된 음원 특성에 포함되는 음량 레벨 제어 정보에 기초하여, 멀티미디어 파일의 음량 레벨 변화에 대한 알람을 사용자에게 통지할 수 있다.In addition, the volume optimizing device checks the sound source characteristics of the multimedia file provided to the user during
또한, 540 단계에서, 음량 최적화 장치는, 사용자에게 제공되는 멀티미디어 파일에 대해 사용자의 청각 능력 정보 및 음량 선호 정보에 의해 산출된 음량 레벨이 변형 소음의 음량 레벨을 압도하는지 여부를 판단함으로써, 판단 결과 산출된 음량 레벨이 변형 소음의 음량 레벨을 압도하는 경우, 멀티미디어 파일의 음량 레벨을 산출된 음량 레벨로 제어할 수 있다.In addition, in
반면에, 판단 결과 산출된 음량 레벨이 변형 소음의 음량 레벨을 압도하지 못하는 경우, 음량 최적화 장치는, 멀티미디어 파일의 음량 레벨이 사용자의 청각 능력 정보 및 음량 선호 정보에 의해 산출된 음량 레벨을 초과하는 고 레벨로 상승됨을 사용자에게 알람으로 통지할 수 있다.On the other hand, if the calculated volume level does not overwhelm the volume level of the deformation noise, the volume optimization device determines that the volume level of the multimedia file exceeds the volume level calculated by the user's hearing ability information and volume preference information It is possible to notify the user of an alarm by a high level.
또한, 540 단계에서, 음량 최적화 장치는, 변형 소음을 상쇄시키는 상쇄 신호를 생성 및 출력하여 변형 소음을 감소시킴으로써, 감소된 변형 소음, 사용자의 청각 능력 정보 및 음량 선호 정보에 기초하여, 사용자에게 제공되는 멀티미디어 파일의 음량 레벨을 자동으로 제어할 수도 있다.In addition, in
이와 같은 520 단계 내지 530 단계가 실시간으로 수행됨에 응답하여, 540 단계 역시 실시간으로 수행될 수 있다.In response to the
이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments. For example, it is to be understood that the techniques described may be performed in a different order than the described methods, and / or that components of the described systems, structures, devices, circuits, Lt; / RTI > or equivalents, even if it is replaced or replaced.
그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.Therefore, other implementations, other embodiments, and equivalents to the claims are also within the scope of the following claims.
Claims (17)
상기 사용자가 위치하는 공간에서의 소음을 실시간으로 측정하는 실시간 소음 측정 모듈;
상기 측정된 소음이 상기 사용자의 귀로 유입될 때 변형되는 변형 소음을 예측하는 사용자 관점 소음 예측 모듈; 및
상기 변형 소음, 상기 사용자의 청각 능력 정보 및 음량 선호 정보에 기초하여, 상기 사용자에게 제공되는 멀티미디어 파일의 음량 레벨을 자동으로 제어하는 사용자 맞춤형 음량 최적화 모듈
을 포함하는 사용자 및 환경 정보 기반의 음량 최적화 장치.A user's hearing ability analysis module for acquiring, storing and maintaining auditory ability information and volume preference information of a user;
A real-time noise measurement module for measuring real-time noise in a space where the user is located;
A user perspective noise prediction module for predicting a variation noise to be deformed when the measured noise flows into the user's ear; And
A user-customized volume optimization module for automatically controlling the volume level of the multimedia file provided to the user based on the deformation noise, the hearing ability information of the user, and the volume preference information,
And a volume optimizer based on user and environment information.
상기 사용자 청력 분석 모듈은,
복수의 멀티미디어 파일들 각각의 음원 특성에 대한 상기 사용자의 청각 능력 정보 및 음량 선호 정보를 획득하여 저장 및 유지하고,
상기 사용자 맞춤형 음량 최적화 모듈은,
상기 사용자에게 제공되는 멀티미디어 파일의 음원 특성을 확인하고, 상기 확인된 음원 특성에 대한 상기 사용자의 청각 능력 정보 및 음량 선호 정보에 기초하여 상기 멀티미디어 파일의 음량 레벨을 자동으로 제어하는, 사용자 및 환경 정보 기반의 음량 최적화 장치.The method according to claim 1,
The user's hearing analysis module includes:
Acquiring, storing and maintaining the auditory capability information and the volume preference information of the user for the sound source characteristics of each of the plurality of multimedia files,
Wherein the user-customized volume optimization module comprises:
And a control unit for automatically controlling the volume level of the multimedia file based on the audible capability information and the volume preference information of the user with respect to the identified sound source characteristic, Based volume optimization device.
상기 복수의 멀티미디어 파일들 각각의 음원 특성은,
상기 복수의 멀티미디어 파일들 각각의 장르, 상기 복수의 멀티미디어 파일들 각각에 포함되는 사운드 신호들의 종류, 상기 복수의 멀티미디어 파일들 각각에 포함되는 사운드 신호들이 갖는 주파수 대역 또는 상기 복수의 멀티미디어 파일들 각각의 음량 레벨 제어 정보 중 적어도 하나를 포함하는, 사용자 및 환경 정보 기반의 음량 최적화 장치.3. The method of claim 2,
Wherein the sound source characteristics of each of the plurality of multimedia files include:
A genre of each of the plurality of multimedia files, a kind of sound signals included in each of the plurality of multimedia files, a frequency band of sound signals contained in each of the plurality of multimedia files, or a frequency band of each of the plurality of multimedia files And volume level control information. ≪ Desc / Clms Page number 24 >
상기 복수의 멀티미디어 파일들 각각의 음원 특성은,
상기 복수의 멀티미디어 파일들 각각의 메타 정보에 저장 및 유지되고,
상기 사용자 맞춤형 음량 최적화 모듈은,
상기 사용자에게 제공되는 멀티미디어 파일의 메타 정보를 분석하여 상기 멀티미디어 파일의 음원 특성을 확인하는, 사용자 및 환경 정보 기반의 음량 최적화 장치.3. The method of claim 2,
Wherein the sound source characteristics of each of the plurality of multimedia files include:
Storing and maintaining the meta information of each of the plurality of multimedia files,
Wherein the user-customized volume optimization module comprises:
And analyzing meta information of the multimedia file provided to the user to confirm sound source characteristics of the multimedia file.
상기 사용자 맞춤형 음량 최적화 모듈은,
상기 확인된 음원 특성에 포함되는 음량 레벨 제어 정보에 기초하여, 상기 멀티미디어 파일의 음량 레벨 변화에 대한 알람을 상기 사용자에게 통지하는, 사용자 및 환경 정보 기반의 음량 최적화 장치.3. The method of claim 2,
Wherein the user-customized volume optimization module comprises:
And notifies the user of an alarm on a change in volume level of the multimedia file based on volume level control information included in the identified sound source characteristics.
상기 사용자 맞춤형 음량 최적화 모듈은,
상기 사용자에게 제공되는 멀티미디어 파일에 대해 상기 사용자의 청각 능력 정보 및 음량 선호 정보에 의해 산출된 음량 레벨이 상기 변형 소음의 음량 레벨을 압도하는지 여부를 판단하고, 판단 결과 상기 산출된 음량 레벨이 상기 변형 소음의 음량 레벨을 압도하는 경우, 상기 멀티미디어 파일의 음량 레벨을 상기 산출된 음량 레벨로 제어하는, 사용자 및 환경 정보 기반의 음량 최적화 장치.The method according to claim 1,
Wherein the user-customized volume optimization module comprises:
Determining whether the volume level calculated by the auditory capability information and the volume preference information of the user for the multimedia file provided to the user is overwhelmed by the volume level of the deformation noise, and if the calculated volume level is the deformation And controls the volume level of the multimedia file to the calculated volume level when overwriting the volume level of the noise.
상기 사용자 맞춤형 음량 최적화 모듈은,
판단 결과 상기 산출된 음량 레벨이 상기 변형 소음의 음량 레벨을 압도하지 못하는 경우, 상기 멀티미디어 파일의 음량 레벨이 상기 사용자의 청각 능력 정보 및 음량 선호 정보에 의해 산출된 음량 레벨을 초과하는 고 레벨로 상승됨을 상기 사용자에게 알람으로 통지하는, 사용자 및 환경 정보 기반의 음량 최적화 장치.The method according to claim 6,
Wherein the user-customized volume optimization module comprises:
When the calculated volume level does not overwhelm the volume level of the deformation noise, the volume level of the multimedia file is increased to a high level exceeding the volume level calculated by the user's auditory capability information and volume preference information And notifies the user of an alarm as an alarm.
상기 사용자 맞춤형 음량 최적화 모듈은,
상기 변형 소음을 상쇄시키는 상쇄 신호를 생성 및 출력하여 상기 변형 소음을 감소시킴으로써, 상기 감소된 변형 소음, 상기 사용자의 청각 능력 정보 및 음량 선호 정보에 기초하여, 상기 사용자에게 제공되는 멀티미디어 파일의 음량 레벨을 자동으로 제어하는, 사용자 및 환경 정보 기반의 음량 최적화 장치.The method according to claim 1,
Wherein the user-customized volume optimization module comprises:
A volume level of a multimedia file provided to the user based on the reduced deformation noise, the auditory capability information of the user, and the volume preference information by generating and outputting an offset signal canceling the deformation noise, A volume optimization device based on user and environment information.
상기 멀티미디어 파일이 상기 사용자에게 이어폰을 통하여 제공되는 경우, 상기 이어폰의 소음 차단 능력을 계측하는 이어폰 소음 차단 능력 계측 모듈
을 더 포함하고,
상기 사용자 관점 소음 예측 모듈은,
상기 이어폰의 소음 차단 능력에 기초하여, 상기 실시간 소음 측정 모듈에서 측정된 소음이 상기 사용자의 귀로 유입될 때 변형되는 변형 소음을 예측하는, 사용자 및 환경 정보 기반의 음량 최적화 장치.The method according to claim 1,
An earphone noise cancellation capability measuring module for measuring a noise cancellation capability of the earphone when the multimedia file is provided to the user through an earphone,
Further comprising:
Wherein the user perspective noise prediction module comprises:
And estimates a deformation noise to be deformed when the noise measured in the real-time noise measurement module is introduced into the user's ear, based on the noise cancellation capability of the earphone.
상기 사용자 청력 분석 모듈은,
복수의 소음들 각각의 소음 특성에 대한 상기 사용자의 청각 능력 정보를 획득하여 저장 및 유지하고,
상기 사용자 관점 소음 예측 모듈은,
상기 실시간 소음 측정 모듈에서 측정된 소음의 소음 특성을 확인하고, 상기 확인된 소음 특성에 대한 상기 사용자의 청각 능력 정보에 기초하여 상기 측정된 소음이 상기 사용자의 귀로 유입될 때 변형되는 변형 소음의 음량 레벨을 예측하는, 사용자 및 환경 정보 기반의 음량 최적화 장치.The method according to claim 1,
The user's hearing analysis module includes:
Acquiring, storing and maintaining the user's hearing ability information on the noise characteristics of each of the plurality of noises,
Wherein the user perspective noise prediction module comprises:
Wherein the control unit checks the noise characteristics of the noise measured by the real-time noise measurement module and calculates a volume of the deformation sound when the measured noise is introduced into the user's ear based on the hearing ability information of the user with respect to the identified noise characteristic A volume optimization device based on user and environment information that predicts levels.
상기 사용자 맞춤형 음량 최적화 모듈은,
상기 사용자 관점 소음 예측 모듈에서 변형 소음을 실시간으로 예측함에 응답하여, 상기 사용자에게 제공되는 멀티미디어 파일의 음량 레벨을 실시간으로 자동으로 제어하는, 사용자 및 환경 정보 기반의 음량 최적화 장치.The method according to claim 1,
Wherein the user-customized volume optimization module comprises:
Wherein the user-perspective noise prediction module automatically controls the volume level of the multimedia file provided to the user in real time in response to prediction of the variation noise in real time.
상기 사용자가 위치하는 공간에서의 소음을 실시간으로 측정하는 단계;
상기 측정된 소음이 상기 사용자의 귀로 유입될 때 변형되는 변형 소음을 예측하는 단계; 및
상기 변형 소음, 상기 사용자의 청각 능력 정보 및 음량 선호 정보에 기초하여, 상기 사용자에게 제공되는 멀티미디어 파일의 음량 레벨을 자동으로 제어하는 단계
를 포함하는 사용자 및 환경 정보 기반의 음량 최적화 방법.Acquiring, storing and maintaining audio capability information and volume preference information of a user;
Measuring in real time the noise in the space where the user is located;
Predicting a variation noise to be deformed when the measured noise flows into the user's ear; And
Automatically controlling the volume level of the multimedia file provided to the user based on the deformation noise, the hearing ability information of the user, and the volume preference information
And a volume optimization method based on user and environment information.
상기 사용자의 청각 능력 정보 및 음량 선호 정보를 획득하여 저장 및 유지하는 단계는,
복수의 멀티미디어 파일들 각각의 음원 특성에 대한 상기 사용자의 청각 능력 정보 및 음량 선호 정보를 획득하여 저장 및 유지하는 단계
를 포함하고,
상기 사용자에게 제공되는 멀티미디어 파일의 음량 레벨을 자동으로 제어하는 단계는,
상기 사용자에게 제공되는 멀티미디어 파일의 음원 특성을 확인하는 단계; 및
상기 확인된 음원 특성에 대한 상기 사용자의 청각 능력 정보 및 음량 선호 정보에 기초하여 상기 멀티미디어 파일의 음량 레벨을 자동으로 제어하는 단계
를 포함하는 사용자 및 환경 정보 기반의 음량 최적화 방법.13. The method of claim 12,
Acquiring, storing and maintaining the hearing ability information and the volume preference information of the user,
Acquiring, storing and maintaining the auditory capability information and the volume preference information of the user regarding the sound source characteristics of each of the plurality of multimedia files
Lt; / RTI >
Wherein the step of automatically controlling the volume level of the multimedia file provided to the user comprises:
Checking a sound source characteristic of a multimedia file provided to the user; And
Automatically controlling the volume level of the multimedia file based on the audible capability information and the volume preference information of the user with respect to the identified sound source characteristics
And a volume optimization method based on user and environment information.
상기 복수의 멀티미디어 파일들 각각의 음원 특성은,
상기 복수의 멀티미디어 파일들 각각의 장르, 상기 복수의 멀티미디어 파일들 각각에 포함되는 사운드 신호들의 종류, 상기 복수의 멀티미디어 파일들 각각에 포함되는 사운드 신호들이 갖는 주파수 대역 또는 상기 복수의 멀티미디어 파일들 각각의 음량 레벨 제어 정보 중 적어도 하나를 포함하는, 사용자 및 환경 정보 기반의 음량 최적화 방법.14. The method of claim 13,
Wherein the sound source characteristics of each of the plurality of multimedia files include:
A genre of each of the plurality of multimedia files, a kind of sound signals included in each of the plurality of multimedia files, a frequency band of sound signals contained in each of the plurality of multimedia files, or a frequency band of each of the plurality of multimedia files And volume level control information. ≪ Desc / Clms Page number 19 >
상기 복수의 멀티미디어 파일들 각각의 음원 특성은,
상기 복수의 멀티미디어 파일들 각각의 메타 정보에 저장 및 유지되고,
상기 사용자에게 제공되는 멀티미디어 파일의 음원 특성을 확인하는 단계는,
상기 사용자에게 제공되는 멀티미디어 파일의 메타 정보를 분석하여 상기 멀티미디어 파일의 음원 특성을 확인하는 단계인, 사용자 및 환경 정보 기반의 음량 최적화 방법.14. The method of claim 13,
Wherein the sound source characteristics of each of the plurality of multimedia files include:
Storing and maintaining the meta information of each of the plurality of multimedia files,
Wherein the step of verifying the sound source characteristics of the multimedia file provided to the user comprises:
And analyzing meta information of the multimedia file provided to the user to check sound source characteristics of the multimedia file.
상기 확인된 음원 특성에 대한 상기 사용자의 청각 능력 정보 및 음량 선호 정보에 기초하여 상기 멀티미디어 파일의 음량 레벨을 자동으로 제어하는 단계는,
상기 확인된 음원 특성에 포함되는 음량 레벨 제어 정보에 기초하여, 상기 멀티미디어 파일의 음량 레벨 변화에 대한 알람을 상기 사용자에게 통지하는 단계
를 더 포함하는 사용자 및 환경 정보 기반의 음량 최적화 방법.14. The method of claim 13,
Wherein the step of automatically controlling the volume level of the multimedia file based on the audible capability information and the volume preference information of the user with respect to the identified sound source characteristics comprises:
Notifying the user of an alarm on a change in volume level of the multimedia file based on volume level control information included in the identified sound source characteristics
Further comprising: a user and environment information based volume optimization method.
상기 사용자에게 제공되는 멀티미디어 파일의 음량 레벨을 자동으로 제어하는 단계는,
상기 사용자에게 제공되는 멀티미디어 파일에 대해 상기 사용자의 청각 능력 정보 및 음량 선호 정보에 의해 산출된 음량 레벨이 상기 변형 소음의 음량 레벨을 압도하는지 여부를 판단하는 단계; 및
판단 결과 상기 산출된 음량 레벨이 상기 변형 소음의 음량 레벨을 압도하는 경우, 상기 멀티미디어 파일의 음량 레벨을 상기 산출된 음량 레벨로 제어하는 단계
를 포함하는 사용자 및 환경 정보 기반의 음량 최적화 방법.13. The method of claim 12,
Wherein the step of automatically controlling the volume level of the multimedia file provided to the user comprises:
Determining whether a volume level calculated by the user's auditory capability information and volume preference information for a multimedia file provided to the user overwhelms a volume level of the variation noise; And
Controlling the volume level of the multimedia file to be the calculated volume level when the calculated volume level exceeds the volume level of the deformation noise
And a volume optimization method based on user and environment information.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/KR2018/007344 WO2019004745A1 (en) | 2016-06-28 | 2018-06-28 | Device and method for optimizing sound volume on basis of user and environment information |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020160081186 | 2016-06-28 | ||
KR20160081186 | 2016-06-28 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20180002064A true KR20180002064A (en) | 2018-01-05 |
Family
ID=61001726
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020170081801A KR20180002064A (en) | 2016-06-28 | 2017-06-28 | Device and method for optimizing sound level based on user and environment information |
Country Status (2)
Country | Link |
---|---|
KR (1) | KR20180002064A (en) |
WO (1) | WO2019004745A1 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20190104820A (en) * | 2018-03-02 | 2019-09-11 | 한림대학교 산학협력단 | Volume control apparatus and system for preventing music-induced hearing loss |
CN112767965A (en) * | 2019-11-01 | 2021-05-07 | 上海博泰悦臻电子设备制造有限公司 | Method, system, medium, and service/terminal for generating/applying noise recognition model |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05121983A (en) * | 1991-10-30 | 1993-05-18 | Mitsubishi Electric Corp | On-vehicle audio equipment |
WO2015001391A1 (en) * | 2013-07-04 | 2015-01-08 | Basf Se | Compositions with improved urease-inhibiting effect comprising (thio)phosphoric acid triamide and further compounds |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20010077269A (en) * | 2000-02-01 | 2001-08-17 | 정명식 | Apparatus and method for automatically controlling volume |
KR100718423B1 (en) * | 2005-12-14 | 2007-05-14 | 주식회사 대우일렉트로닉스 | Method and apparatus for controling volume in audio system |
KR20070066788A (en) * | 2005-12-22 | 2007-06-27 | 주식회사 대우일렉트로닉스 | Method and apparatus for controling sound field in car a/v system |
CN102113312B (en) * | 2008-07-29 | 2013-07-17 | Lg电子株式会社 | Method and apparatus for processing audio signal |
-
2017
- 2017-06-28 KR KR1020170081801A patent/KR20180002064A/en not_active Application Discontinuation
-
2018
- 2018-06-28 WO PCT/KR2018/007344 patent/WO2019004745A1/en active Application Filing
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05121983A (en) * | 1991-10-30 | 1993-05-18 | Mitsubishi Electric Corp | On-vehicle audio equipment |
WO2015001391A1 (en) * | 2013-07-04 | 2015-01-08 | Basf Se | Compositions with improved urease-inhibiting effect comprising (thio)phosphoric acid triamide and further compounds |
Non-Patent Citations (1)
Title |
---|
일본 공개특허공보 특개평05-121983호(1993.05.18.) 1부. * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20190104820A (en) * | 2018-03-02 | 2019-09-11 | 한림대학교 산학협력단 | Volume control apparatus and system for preventing music-induced hearing loss |
CN112767965A (en) * | 2019-11-01 | 2021-05-07 | 上海博泰悦臻电子设备制造有限公司 | Method, system, medium, and service/terminal for generating/applying noise recognition model |
Also Published As
Publication number | Publication date |
---|---|
WO2019004745A1 (en) | 2019-01-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10607592B2 (en) | Noise reducing device, noise reducing method, noise reducing program, and noise reducing audio outputting device | |
JP5256190B2 (en) | Method and apparatus for automatic noise compensation used in audio playback equipment | |
US10049653B2 (en) | Active noise cancelation with controllable levels | |
US8059833B2 (en) | Method of compensating audio frequency response characteristics in real-time and a sound system using the same | |
US8855343B2 (en) | Method and device to maintain audio content level reproduction | |
US8315400B2 (en) | Method and device for acoustic management control of multiple microphones | |
US9014382B2 (en) | Controller for a headphone arrangement | |
CN103152668B (en) | Adjusting method of output audio and system thereof | |
US20090016541A1 (en) | Method and Device for Acoustic Management Control of Multiple Microphones | |
CN115442693A (en) | System, audio wearable device and method for evaluating fitting quality of headphones | |
US9559650B1 (en) | Loudness limiter | |
US20100296669A1 (en) | Apparatus for processing an audio signal and method thereof | |
JP2014502103A (en) | Improved communication earphone apparatus and method | |
CN118197340A (en) | Background noise estimation using gap confidence | |
KR20180002064A (en) | Device and method for optimizing sound level based on user and environment information | |
US9123322B2 (en) | Howling suppression device, hearing aid, howling suppression method, and integrated circuit | |
CN112437957B (en) | Forced gap insertion for full listening | |
US9503815B2 (en) | Perceptual echo gate approach and design for improved echo control to support higher audio and conversational quality | |
EP1511358A2 (en) | Automatic sound field correction apparatus and computer program therefor | |
JP4283645B2 (en) | Signal delay time measuring apparatus and computer program therefor | |
US11856375B2 (en) | Method and device for in-ear echo suppression | |
CA2721558C (en) | Sound pressure level-aware music playlists | |
WO2017106281A1 (en) | Nuisance notification | |
RU2574821C2 (en) | Controller for headphone arrangement |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E601 | Decision to refuse application |