Nothing Special   »   [go: up one dir, main page]

CN114071323A - 基于全景播放的tws音响的控制方法及控制装置 - Google Patents

基于全景播放的tws音响的控制方法及控制装置 Download PDF

Info

Publication number
CN114071323A
CN114071323A CN202111318457.3A CN202111318457A CN114071323A CN 114071323 A CN114071323 A CN 114071323A CN 202111318457 A CN202111318457 A CN 202111318457A CN 114071323 A CN114071323 A CN 114071323A
Authority
CN
China
Prior art keywords
tws
sound
signal
audio
tws sound
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202111318457.3A
Other languages
English (en)
Other versions
CN114071323B (zh
Inventor
庄少宏
曾庆法
葛丰达
肖关胜
莫砺
莫孙泉
刘展亮
陈小林
劳凯邦
邹海青
骆晓晖
陈文强
卢小飞
曾浩球
刘学满
张泽远
黄永添
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Panyu Juda Car Audio Equipment Co ltd
Original Assignee
Guangzhou Panyu Juda Car Audio Equipment Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Panyu Juda Car Audio Equipment Co ltd filed Critical Guangzhou Panyu Juda Car Audio Equipment Co ltd
Priority to CN202111318457.3A priority Critical patent/CN114071323B/zh
Publication of CN114071323A publication Critical patent/CN114071323A/zh
Application granted granted Critical
Publication of CN114071323B publication Critical patent/CN114071323B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00Stereophonic arrangements
    • H04R5/02Spatial or constructional arrangements of loudspeakers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Studio Devices (AREA)
  • Studio Circuits (AREA)

Abstract

本发明公开了一种基于全景播放的TWS音响的控制方法及控制装置,其中,包括:基于TWS音响检测外部环境,并基于操作用户的到位感应而激活所述TWS音响;获取所述操作用户的语音指令,以同步所述TWS音响的音频播放;基于所述TWS音响的音频信号筛选对应MV的数字信号;根据所述数字信号进行全景投射,并将所述数字信号转化为映射画面;同步所述映射画面和所述音频信号,并以保真回放的状态下进行播放;关联所述TWS音响和室内投射灯,并基于所述TWS音响的气氛信号进行室内气氛成像。

Description

基于全景播放的TWS音响的控制方法及控制装置
技术领域
本发明涉及音响技术领域,尤其涉及一种基于全景播放的TWS音响的控制方法及控制装置。
背景技术
随着科技的发展,TWS音响逐步应用于人们的生活中,并提高良好的音频效果,目前TWS音响更多基于音频效果进行深造,可是,TWS音响仅仅实现音频播放是满足不了人们当前的需求,并且TWS音响无法实现对应的画面的呈现。
发明内容
本发明的目的在于克服现有技术的不足,本发明提供了一种基于全景播放的TWS音响的控制方法及控制装置,基于TWS音响检测外部环境,并基于操作用户的到位感应而激活所述TWS音响;获取所述操作用户的语音指令,以同步所述TWS音响的音频播放;基于所述TWS音响的音频信号筛选对应MV的数字信号;根据所述数字信号进行全景投射,并将所述数字信号转化为映射画面;同步所述映射画面和所述音频信号,并以保真回放的状态下进行播放;关联所述TWS音响和室内投射灯,并基于所述TWS音响的气氛信号进行室内气氛成像,其中,TWS音响于外部环境中基于操作用户的到位感应进行激活,并且在语音指令下进行音频播放和数字化映射画面的呈现,该映射画面基于MV的数字信号进行转化,并同步对应的音频信号,以实现声控和画面的同步呈现,另外,声控和画面在保真回放的状态下进行呈现,并不需要当前的下载,提高声控和画面在呈现的流畅性,并且保证呈现效果。
为了解决上述技术问题,本发明实施例提供了一种基于全景播放的TWS音响的控制方法,包括:基于TWS音响检测外部环境,并基于操作用户的到位感应而激活所述TWS音响;获取所述操作用户的语音指令,以同步所述TWS音响的音频播放;基于所述TWS音响的音频信号筛选对应MV的数字信号;根据所述数字信号进行全景投射,并将所述数字信号转化为映射画面;同步所述映射画面和所述音频信号,并以保真回放的状态下进行播放;关联所述TWS音响和室内投射灯,并基于所述TWS音响的气氛信号进行室内气氛成像。
可选的,所述基于TWS音响检测外部环境,并基于操作用户的到位感应而激活所述TWS音响,包括:所述TWS音响在待机状态下单独向外发出检测信号;基于所述检测信号进行室内环境建模,并初步构建室内环境外轮廓图;基于所述室内环境外轮廓图进行动态物或静态物的识别,并圈定所述动态物;基于所述动态物进行用户识别,并把所述操作用户的到来确定为到位感应;基于操作用户的到位感应而激活所述TWS音响。
可选的,所述获取所述操作用户的语音指令,以同步所述TWS音响的音频播放,包括:所述TWS音响由待机状态转化为工作状态;在工作状态中,所述TWS音响获取所述操作用户的语音指令,并对所述操作用户的语音指令进行解析;从所述操作用户的语音指令解析出对应的音频名称,并根据所述音频名称进行音频寻找;基于物联网进行音频定位,并且将对应的音频进行音频播放,以同步所述TWS音响的音频播放;实时监控所述TWS音响的音频播放效果,并对所述TWS音响的音频播放效果进行升级,以调整所述TWS音响的音频对应的波段,降低所述TWS音响中卡顿声和噪音。
可选的,所述基于所述TWS音响的音频信号筛选对应MV的数字信号,包括:定格所述TWS音响的音频信号;基于所述TWS音响的音频信号进行视频寻找,以确定MV视频和非MV视频;将所述MV视频和所述非MV视频进行排列,并依次进行对比,以确定完整性较全的预备视频;基于所述预备视频进行视频信号的格式化,并转化为对应的MV信号,以同质化MV视频的数字信号。
可选的,所述根据所述数字信号进行全景投射,并将所述数字信号转化为映射画面,包括:根据所述数字信号进行预演,并内部虚拟视频画面;针对所述视频画面进行异常捕捉,并对异常部分进行对应定格;基于所定格的所述视频画进行对应信号的呈现,并对该信号进行修复,以反馈至所述视频画面,直至预演完成,并将所述数字信号转化为映射画面;将所述映射画面进行全景投射,投射至所述TWS音响的正前方,并在预设范围内进场景呈现。
可选的,所述同步所述映射画面和所述音频信号,并以保真回放的状态下进行播放,包括:检测所述映射画面中各视频帧中对应的虚拟信号,并将该虚拟信号匹配所述音频信号;同步所述映射画面和所述音频信号,所述音频信号随着所述映射画面的变化而进行滚动播放;监控所述映射画面和所述音频信号的同步率;对于所述同步率随着时间的移动而降低,当所述同步率下降至预设范围,则触发所述音频信号的播放调整,并以所述映射画面的参考视频帧进行时间同步化。
可选的,所述关联所述TWS音响和室内投射灯,并基于所述TWS音响的气氛信号进行室内气氛成像,包括:所述TWS音响向外发出气氛信号,并基于气氛信号匹配对应的室内投射灯;基于物联网进行所述TWS音响和所述室内投射灯的无线关联,并构建的所述TWS音响和所述室内投射灯无线通道;在无线通道中,所述TWS音响将气氛信号进行向外输送;所述室内投射灯接收所述气氛信号,并将所述气氛信号进行转化,以形成对应的投射信号;基于所述投射信号的不同波段进行所述室内投射灯的灯光呈现,并且进行气氛效果的渲染。
可选的,还包括:基于所述TWS音响内部形成视频画面和气氛渲染,并将所述视频画面和所述气氛渲染进行信号化,以转化虚拟信号;基于所述虚拟信号寻找操作用户的佩戴设备,并定格所述佩戴设备的VR接口;
基于所述VR接口进行虚拟画面的展示;所述操作用户于所述虚拟画面进行人物造型选择,并且将该人物造型在虚拟画面中呈现;基于所述人物造型与其他用户进行交互,并且根据所述人物造型所载入的虚拟信号进行环境同化,并且能够根据所述人物造型与其他用户的交互类型进行环境改变。
另外,本发明实施例还提供了一种基于全景播放的TWS音响的控制装置,所述基于全景播放的TWS音响的控制装置包括:检测模块:用于基于TWS音响检测外部环境,并基于操作用户的到位感应而激活所述TWS音响;获取模块:用于获取所述操作用户的语音指令,以同步所述TWS音响的音频播放;筛选模块:用于基于所述TWS音响的音频信号筛选对应MV的数字信号;投射模块:用于根据所述数字信号进行全景投射,并将所述数字信号转化为映射画面;播放模块:用于同步所述映射画面和所述音频信号,并以保真回放的状态下进行播放;关联模块:用于关联所述TWS音响和室内投射灯,并基于所述TWS音响的气氛信号进行室内气氛成像。
在本发明实施例中,通过本发明实施例中的方法,基于TWS音响检测外部环境,并基于操作用户的到位感应而激活所述TWS音响;获取所述操作用户的语音指令,以同步所述TWS音响的音频播放;基于所述TWS音响的音频信号筛选对应MV的数字信号;根据所述数字信号进行全景投射,并将所述数字信号转化为映射画面;同步所述映射画面和所述音频信号,并以保真回放的状态下进行播放;关联所述TWS音响和室内投射灯,并基于所述TWS音响的气氛信号进行室内气氛成像,其中,TWS音响于外部环境中基于操作用户的到位感应进行激活,并且在语音指令下进行音频播放和数字化映射画面的呈现,该映射画面基于MV的数字信号进行转化,并同步对应的音频信号,以实现声控和画面的同步呈现,另外,声控和画面在保真回放的状态下进行呈现,并不需要当前的下载,提高声控和画面在呈现的流畅性,并且保证呈现效果。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见的,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它的附图。
图1是本发明实施例中的基于全景播放的TWS音响的控制方法的流程示意图;
图2是本发明实施例中的基于全景播放的TWS音响的控制装置的结构组成示意图;
图3是根据一示例性实施例示出的一种电子装置的硬件图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
实施例
请参阅图1,图1是本发明实施例中的基于全景播放的TWS音响的控制方法的流程示意图。
如图1所示,一种基于全景播放的TWS音响的控制方法,所述方法包括:
S11:基于TWS音响检测外部环境,并基于操作用户的到位感应而激活所述TWS音响;
在本发明具体实施过程中,具体的步骤可以为:所述TWS音响在待机状态下单独向外发出检测信号;基于所述检测信号进行室内环境建模,并初步构建室内环境外轮廓图;基于所述室内环境外轮廓图进行动态物或静态物的识别,并圈定所述动态物;基于所述动态物进行用户识别,并把所述操作用户的到来确定为到位感应;基于操作用户的到位感应而激活所述TWS音响。
其中,通过所述TWS音响对外检测,以确定动态物,并且基于动态物进行用户识别,以便于在动态物下对操作用户的识别,并且并把所述操作用户的到来确定为到位感应,基于操作用户的到位感应而激活所述TWS音响,从而实现所述TWS音响的到位检测和工作状态的转化。
S12:获取所述操作用户的语音指令,以同步所述TWS音响的音频播放;
在本发明具体实施过程中,具体的步骤可以为:所述TWS音响由待机状态转化为工作状态;在工作状态中,所述TWS音响获取所述操作用户的语音指令,并对所述操作用户的语音指令进行解析;从所述操作用户的语音指令解析出对应的音频名称,并根据所述音频名称进行音频寻找;基于物联网进行音频定位,并且将对应的音频进行音频播放,以同步所述TWS音响的音频播放;实时监控所述TWS音响的音频播放效果,并对所述TWS音响的音频播放效果进行升级,以调整所述TWS音响的音频对应的波段,降低所述TWS音响中卡顿声和噪音。
其中,所述TWS音响基于工作状态下进行语音指令的获取,并根据语音指令进行对应的音频的寻找,以便于后续的音频播放,另外,实时监控所述TWS音响的音频播放效果,并对所述TWS音响的音频播放效果进行升级,以调整所述TWS音响的音频对应的波段,降低所述TWS音响中卡顿声和噪音。
另外,基于所述TWS音响的音频播放效果进行等级划分,并且针对不同的效果等级匹配不同的调整波动,降低原有音频波段的变化率,并且便于后去的保真播放,其中,所述TWS音响基于以往的音频波段进行学习,并基于模型进行设计,以产出对应的音频模型,通过音频模型进行音频效果的直接定级,预计效果映射表进行音频波段的变化调整幅度限制。
S13:基于所述TWS音响的音频信号筛选对应MV的数字信号;
在本发明具体实施过程中,具体的步骤可以为:定格所述TWS音响的音频信号;基于所述TWS音响的音频信号进行视频寻找,以确定MV视频和非MV视频;将所述MV视频和所述非MV视频进行排列,并依次进行对比,以确定完整性较全的预备视频;基于所述预备视频进行视频信号的格式化,并转化为对应的MV信号,以同质化MV视频的数字信号。
其中,基于所述TWS音响的音频信号进行视频寻找,并不限制MV视频,以便于实现MV视频和非MV视频的获取,并且对所述MV视频和所述非MV视频进行排列,并依次进行对比,以确定完整性较全的预备视频,将预备视频进行MV信号的转化,并且同质化MV视频的数字信号,以便于后期统一实现MV效果的呈现。
另外,
S14:根据所述数字信号进行全景投射,并将所述数字信号转化为映射画面;
在本发明具体实施过程中,具体的步骤可以为:根据所述数字信号进行预演,并内部虚拟视频画面;针对所述视频画面进行异常捕捉,并对异常部分进行对应定格;基于所定格的所述视频画进行对应信号的呈现,并对该信号进行修复,以反馈至所述视频画面,直至预演完成,并将所述数字信号转化为映射画面;将所述映射画面进行全景投射,投射至所述TWS音响的正前方,并在预设范围内进场景呈现。
其中,通过所述数字信号的视频画面的预演,以便于确定视频画面中异常部分的初步呈现,通过在该视频画面中的异常画面进行修改,并逐步完成整体视频画面的预演,以便于后期针对数字信号的画面实体化提供有效的基础,并且便于将数字信号所映射的映射画面进行全景投射,投射至所述TWS音响的正前方,并在预设范围内进场景呈现。
S15:同步所述映射画面和所述音频信号,并以保真回放的状态下进行播放;
在本发明具体实施过程中,具体的步骤包括:检测所述映射画面中各视频帧中对应的虚拟信号,并将该虚拟信号匹配所述音频信号;同步所述映射画面和所述音频信号,所述音频信号随着所述映射画面的变化而进行滚动播放;监控所述映射画面和所述音频信号的同步率;对于所述同步率随着时间的移动而降低,当所述同步率下降至预设范围,则触发所述音频信号的播放调整,并以所述映射画面的参考视频帧进行时间同步化。
其中,通过对虚拟信号和音频信号的匹配,以再次同步映射画面和音频信号,便于实现映射画面的同步播放,并且监控所述映射画面和所述音频信号的同步率;对于所述同步率随着时间的移动而降低,当所述同步率下降至预设范围,则触发所述音频信号的播放调整,并以所述映射画面的参考视频帧进行时间同步化。
另外,为了进一步提高音频的播放效果,所述TWS音响基于映射画面和对应的音频进行内部播放,并将对应的播放进度记录存放于所述TWS音响的存储库,基于所述TWS音响的存储库进行进度上的管制,并且在所述TWS音响需要进行对应播放时,所述TWS音响能够从存储库中找到对应的映射画面,并且能够无需下载就可以进行播放,从而维持保真回放的状态下进行播放。
S16:关联所述TWS音响和室内投射灯,并基于所述TWS音响的气氛信号进行室内气氛成像。
在本发明具体实施过程中,具体的步骤包括:所述TWS音响向外发出气氛信号,并基于气氛信号匹配对应的室内投射灯;基于物联网进行所述TWS音响和所述室内投射灯的无线关联,并构建的所述TWS音响和所述室内投射灯无线通道;在无线通道中,所述TWS音响将气氛信号进行向外输送;所述室内投射灯接收所述气氛信号,并将所述气氛信号进行转化,以形成对应的投射信号;基于所述投射信号的不同波段进行所述室内投射灯的灯光呈现,并且进行气氛效果的渲染。
其中,基于物联网进行所述TWS音响和所述室内投射灯的无线关联,并构建的所述TWS音响和所述室内投射灯无线通道,基于无线通道进行气氛信号的输送,便于气氛信号的完整性,所述室内投射灯接收所述气氛信号,并将所述气氛信号进行转化,以形成对应的投射信号;基于所述投射信号的不同波段进行所述室内投射灯的灯光呈现,并且进行气氛效果的渲染。。
另外,所述基于全景播放的TWS音响的控制方法还包括:基于所述TWS音响内部形成视频画面和气氛渲染,并将所述视频画面和所述气氛渲染进行信号化,以转化虚拟信号;基于所述虚拟信号寻找操作用户的佩戴设备,并定格所述佩戴设备的VR接口;基于所述VR接口进行虚拟画面的展示;所述操作用户于所述虚拟画面进行人物造型选择,并且将该人物造型在虚拟画面中呈现;基于所述人物造型与其他用户进行交互,并且根据所述人物造型所载入的虚拟信号进行环境同化,并且能够根据所述人物造型与其他用户的交互类型进行环境改变。
在本发明实施例中,通过本发明实施例中的方法,基于TWS音响检测外部环境,并基于操作用户的到位感应而激活所述TWS音响;获取所述操作用户的语音指令,以同步所述TWS音响的音频播放;基于所述TWS音响的音频信号筛选对应MV的数字信号;根据所述数字信号进行全景投射,并将所述数字信号转化为映射画面;同步所述映射画面和所述音频信号,并以保真回放的状态下进行播放;关联所述TWS音响和室内投射灯,并基于所述TWS音响的气氛信号进行室内气氛成像,其中,TWS音响于外部环境中基于操作用户的到位感应进行激活,并且在语音指令下进行音频播放和数字化映射画面的呈现,该映射画面基于MV的数字信号进行转化,并同步对应的音频信号,以实现声控和画面的同步呈现,另外,声控和画面在保真回放的状态下进行呈现,并不需要当前的下载,提高声控和画面在呈现的流畅性,并且保证呈现效果。
实施例
请参阅图2,图2是本发明实施例中的基于全景播放的TWS音响的控制装置的结构组成示意图。
如图2所示,一种基于全景播放的TWS音响的控制装置,所述基于全景播放的TWS音响的控制装置包括:
检测模块21:用于基于TWS音响检测外部环境,并基于操作用户的到位感应而激活所述TWS音响;
获取模块22:用于获取所述操作用户的语音指令,以同步所述TWS音响的音频播放;
筛选模块23:用于基于所述TWS音响的音频信号筛选对应MV的数字信号;
投射模块24:用于根据所述数字信号进行全景投射,并将所述数字信号转化为映射画面;
播放模块25:用于同步所述映射画面和所述音频信号,并以保真回放的状态下进行播放;
关联模块26:用于关联所述TWS音响和室内投射灯,并基于所述TWS音响的气氛信号进行室内气氛成像。
实施例
请参阅图3,下面参照图3来描述根据本发明的这种实施方式的电子设备40。图3显示的电子设备40仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图3所示,电子设备40以通用计算设备的形式表现。电子设备40的组件可以包括但不限于:上述至少一个处理单元41、上述至少一个存储单元42、连接不同系统组件(包括存储单元42和处理单元41)的总线43。
其中,所述存储单元存储有程序代码,所述程序代码可以被所述处理单元41执行,使得所述处理单元41执行本说明书上述“实施例方法”部分中描述的根据本发明各种示例性实施方式的步骤。
存储单元42可以包括易失性存储单元形式的可读介质,例如随机存取存储单元(RAM)421和/或高速缓存存储单元422,还可以进一步包括只读存储单元(ROM)423。
存储单元42还可以包括具有一组(至少一个)程序模块425的程序/实用工具424,这样的程序模块425包括但不限于:操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。
总线43可以为表示几类总线结构中的一种或多种,包括存储单元总线或者存储单元控制器、外围总线、图形加速端口、处理单元或者使用多种总线结构中的任意总线结构的局域总线。
电子设备40也可以与一个或多个外部设备(例如键盘、指向设备、蓝牙设备等)通信,还可与一个或者多个使得用户能与该电子设备40交互的设备通信,和/或与使得该电子设备40能与一个或多个其它计算设备进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口45进行。并且,电子设备40还可以通过网络适配器46与一个或者多个网络(例如局域网(LAN),广域网(WAN)和/或公共网络,例如因特网)通信。如图3所示,网络适配器46通过总线43与电子设备40的其它模块通信。应当明白,尽管图3中未示出,可以结合电子设备40使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
通过以上的实施方式的描述,本领域的技术人员易于理解,这里描述的示例实施方式可以通过软件实现,也可以通过软件结合必要的硬件的方式来实现。因此,根据本公开实施方式的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM,U盘,移动硬盘等)中或网络上,包括若干指令以使得一台计算设备(可以是个人计算机、服务器、终端装置、或者网络设备等)执行根据本公开实施方式的方法。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:只读存储器(ROM,ReadOnly Memory)、随机存取存储器(RAM,Random AccessMemory)、磁盘或光盘等。并且,其存储有计算机程序指令,当所述计算机程序指令被计算机执行时,使计算机执行根据上述的方法。
另外,以上对本发明实施例所提供的基于全景播放的TWS音响的控制方法及控制装置进行了详细介绍,本文中应采用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (9)

1.一种基于全景播放的TWS音响的控制方法,其特征在于,包括:
基于TWS音响检测外部环境,并基于操作用户的到位感应而激活所述TWS音响;
获取所述操作用户的语音指令,以同步所述TWS音响的音频播放;
基于所述TWS音响的音频信号筛选对应MV的数字信号;
根据所述数字信号进行全景投射,并将所述数字信号转化为映射画面;
同步所述映射画面和所述音频信号,并以保真回放的状态下进行播放;
关联所述TWS音响和室内投射灯,并基于所述TWS音响的气氛信号进行室内气氛成像。
2.根据权利要求1所述的基于全景播放的TWS音响的控制方法,其特征在于,所述基于TWS音响检测外部环境,并基于操作用户的到位感应而激活所述TWS音响,包括:
所述TWS音响在待机状态下单独向外发出检测信号;
基于所述检测信号进行室内环境建模,并初步构建室内环境外轮廓图;
基于所述室内环境外轮廓图进行动态物或静态物的识别,并圈定所述动态物;
基于所述动态物进行用户识别,并把所述操作用户的到来确定为到位感应;
基于操作用户的到位感应而激活所述TWS音响。
3.根据权利要求2所述的基于全景播放的TWS音响的控制方法,其特征在于,所述获取所述操作用户的语音指令,以同步所述TWS音响的音频播放,包括:
所述TWS音响由待机状态转化为工作状态;
在工作状态中,所述TWS音响获取所述操作用户的语音指令,并对所述操作用户的语音指令进行解析;
从所述操作用户的语音指令解析出对应的音频名称,并根据所述音频名称进行音频寻找;
基于物联网进行音频定位,并且将对应的音频进行音频播放,以同步所述TWS音响的音频播放;
实时监控所述TWS音响的音频播放效果,并对所述TWS音响的音频播放效果进行升级,以调整所述TWS音响的音频对应的波段,降低所述TWS音响中卡顿声和噪音。
4.根据权利要求3所述的基于全景播放的TWS音响的控制方法,其特征在于,所述基于所述TWS音响的音频信号筛选对应MV的数字信号,包括:
定格所述TWS音响的音频信号;
基于所述TWS音响的音频信号进行视频寻找,以确定MV视频和非MV视频;
将所述MV视频和所述非MV视频进行排列,并依次进行对比,以确定完整性较全的预备视频;
基于所述预备视频进行视频信号的格式化,并转化为对应的MV信号,以同质化MV视频的数字信号。
5.根据权利要求4所述的基于全景播放的TWS音响的控制方法,其特征在于,所述根据所述数字信号进行全景投射,并将所述数字信号转化为映射画面,包括:
根据所述数字信号进行预演,并内部虚拟视频画面;
针对所述视频画面进行异常捕捉,并对异常部分进行对应定格;
基于所定格的所述视频画进行对应信号的呈现,并对该信号进行修复,以反馈至所述视频画面,直至预演完成,并将所述数字信号转化为映射画面;
将所述映射画面进行全景投射,投射至所述TWS音响的正前方,并在预设范围内进场景呈现。
6.根据权利要求5所述的基于全景播放的TWS音响的控制方法,其特征在于,所述同步所述映射画面和所述音频信号,并以保真回放的状态下进行播放,包括:
检测所述映射画面中各视频帧中对应的虚拟信号,并将该虚拟信号匹配所述音频信号;
同步所述映射画面和所述音频信号,所述音频信号随着所述映射画面的变化而进行滚动播放;
监控所述映射画面和所述音频信号的同步率;
对于所述同步率随着时间的移动而降低,当所述同步率下降至预设范围,则触发所述音频信号的播放调整,并以所述映射画面的参考视频帧进行时间同步化。
7.根据权利要求6所述的基于全景播放的TWS音响的控制方法,其特征在于,所述关联所述TWS音响和室内投射灯,并基于所述TWS音响的气氛信号进行室内气氛成像,包括:
所述TWS音响向外发出气氛信号,并基于气氛信号匹配对应的室内投射灯;
基于物联网进行所述TWS音响和所述室内投射灯的无线关联,并构建的所述TWS音响和所述室内投射灯无线通道;
在无线通道中,所述TWS音响将气氛信号进行向外输送;
所述室内投射灯接收所述气氛信号,并将所述气氛信号进行转化,以形成对应的投射信号;
基于所述投射信号的不同波段进行所述室内投射灯的灯光呈现,并且进行气氛效果的渲染。
8.根据权利要求7所述的基于全景播放的TWS音响的控制方法,其特征在于,还包括:
基于所述TWS音响内部形成视频画面和气氛渲染,并将所述视频画面和所述气氛渲染进行信号化,以转化虚拟信号;
基于所述虚拟信号寻找操作用户的佩戴设备,并定格所述佩戴设备的VR接口;
基于所述VR接口进行虚拟画面的展示;
所述操作用户于所述虚拟画面进行人物造型选择,并且将该人物造型在虚拟画面中呈现;
基于所述人物造型与其他用户进行交互,并且根据所述人物造型所载入的虚拟信号进行环境同化,并且能够根据所述人物造型与其他用户的交互类型进行环境改变。
9.一种基于全景播放的TWS音响的控制装置,其特征在于,所述基于全景播放的TWS音响的控制装置包括:
检测模块:用于基于TWS音响检测外部环境,并基于操作用户的到位感应而激活所述TWS音响;
获取模块:用于获取所述操作用户的语音指令,以同步所述TWS音响的音频播放;
筛选模块:用于基于所述TWS音响的音频信号筛选对应MV的数字信号;
投射模块:用于根据所述数字信号进行全景投射,并将所述数字信号转化为映射画面;
播放模块:用于同步所述映射画面和所述音频信号,并以保真回放的状态下进行播放;
关联模块:用于关联所述TWS音响和室内投射灯,并基于所述TWS音响的气氛信号进行室内气氛成像。
CN202111318457.3A 2021-11-08 2021-11-08 基于全景播放的tws音响的控制方法及控制装置 Active CN114071323B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111318457.3A CN114071323B (zh) 2021-11-08 2021-11-08 基于全景播放的tws音响的控制方法及控制装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111318457.3A CN114071323B (zh) 2021-11-08 2021-11-08 基于全景播放的tws音响的控制方法及控制装置

Publications (2)

Publication Number Publication Date
CN114071323A true CN114071323A (zh) 2022-02-18
CN114071323B CN114071323B (zh) 2023-09-12

Family

ID=80273676

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111318457.3A Active CN114071323B (zh) 2021-11-08 2021-11-08 基于全景播放的tws音响的控制方法及控制装置

Country Status (1)

Country Link
CN (1) CN114071323B (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104320735A (zh) * 2014-10-08 2015-01-28 黄铭杰 内置投影模块及投影幕布的音箱
CN104867511A (zh) * 2014-02-26 2015-08-26 苏州乐聚一堂电子科技有限公司 卡拉ok互动关键词特效系统
CN205450745U (zh) * 2016-02-02 2016-08-10 深圳市优思曼科技有限公司 智能音响
WO2020063675A1 (zh) * 2018-09-27 2020-04-02 深圳市冠旭电子股份有限公司 一种智能音箱及智能音箱使用的方法
CN111642040A (zh) * 2020-06-16 2020-09-08 广东台德智联科技有限公司 一种智能音箱控制led灯的方法
US20200408906A1 (en) * 2019-06-28 2020-12-31 Synaptics Incorporated Acoustic locationing for smart environments
US20210151048A1 (en) * 2019-11-18 2021-05-20 Baidu Online Network Technology (Beijing) Co., Ltd. Smart Speaker Wake-Up Method and Device, Smart Speaker and Storage Medium
CN113365013A (zh) * 2020-03-06 2021-09-07 华为技术有限公司 一种音频处理方法及设备

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104867511A (zh) * 2014-02-26 2015-08-26 苏州乐聚一堂电子科技有限公司 卡拉ok互动关键词特效系统
CN104320735A (zh) * 2014-10-08 2015-01-28 黄铭杰 内置投影模块及投影幕布的音箱
CN205450745U (zh) * 2016-02-02 2016-08-10 深圳市优思曼科技有限公司 智能音响
WO2020063675A1 (zh) * 2018-09-27 2020-04-02 深圳市冠旭电子股份有限公司 一种智能音箱及智能音箱使用的方法
CN110958537A (zh) * 2018-09-27 2020-04-03 深圳市冠旭电子股份有限公司 一种智能音箱及智能音箱使用的方法
US20200408906A1 (en) * 2019-06-28 2020-12-31 Synaptics Incorporated Acoustic locationing for smart environments
US20210151048A1 (en) * 2019-11-18 2021-05-20 Baidu Online Network Technology (Beijing) Co., Ltd. Smart Speaker Wake-Up Method and Device, Smart Speaker and Storage Medium
CN113365013A (zh) * 2020-03-06 2021-09-07 华为技术有限公司 一种音频处理方法及设备
CN111642040A (zh) * 2020-06-16 2020-09-08 广东台德智联科技有限公司 一种智能音箱控制led灯的方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
MICHIAKI KATSUMOTO: "A novel 3D audio display system using radiated loudspeaker for future 3D multimodal communications" *
佚名: "全景声多声道沉浸式音效, MusicCast多房间无线智能音响-雅马哈家庭音响高端技术培训", 《高保真音响》 *
游子鑫: "基于蓝牙5.0的真无线立体音箱设计" *

Also Published As

Publication number Publication date
CN114071323B (zh) 2023-09-12

Similar Documents

Publication Publication Date Title
US11477156B2 (en) Watermarking and signal recognition for managing and sharing captured content, metadata discovery and related arrangements
US11463779B2 (en) Video stream processing method and apparatus, computer device, and storage medium
US11252444B2 (en) Video stream processing method, computer device, and storage medium
US11564001B2 (en) Media content identification on mobile devices
US20210337250A1 (en) A method and device for combining audio and video data streams
CN111050201B (zh) 数据处理方法、装置、电子设备及存储介质
CN110519477B (zh) 用于多媒体捕获的嵌入式装置
US11445242B2 (en) Media content identification on mobile devices
US8913189B1 (en) Audio and video processing associated with visual events
WO2005099251A1 (en) Video-audio synchronization
CN108881765A (zh) 轻量录播方法、装置及系统
JP5775814B2 (ja) 視聴覚システムを視聴者の注目度に合わせる装置及び方法
US20150078729A1 (en) Synchronizing videos with frame-based metadata using video content
CN114071323A (zh) 基于全景播放的tws音响的控制方法及控制装置
CN114341866A (zh) 同声传译方法、装置、服务器和存储介质
JPH11313273A (ja) 表示装置
CN115767158A (zh) 同步播放方法、终端设备及存储介质
KR101230746B1 (ko) 음악데이터와 동시 출력을 위한 동기화된 영상데이터 생성방법과 그 동기화 출력을 위한 재생 방법
CN114257844B (zh) 一种多视频同步播放方法、装置、设备及可读存储介质
KR102625045B1 (ko) 영상 편집 장치, 영상 편집 방법 및 컴퓨터 프로그램
CN118301398A (zh) 视频渲染方法、装置、电子设备、存储介质及程序产品
CN114661923A (zh) 影音播放优化方法、装置、电子设备及可读存储介质
TWI483613B (zh) 視訊播放裝置及其操作方法
WO2018191169A1 (en) Synchronous capture and playback of 4d content
AU2019204751A1 (en) Embedded appliance for multimedia capture

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant