Nothing Special   »   [go: up one dir, main page]

CN106454481A - 一种移动终端直播互动的方法及装置 - Google Patents

一种移动终端直播互动的方法及装置 Download PDF

Info

Publication number
CN106454481A
CN106454481A CN201610878194.4A CN201610878194A CN106454481A CN 106454481 A CN106454481 A CN 106454481A CN 201610878194 A CN201610878194 A CN 201610878194A CN 106454481 A CN106454481 A CN 106454481A
Authority
CN
China
Prior art keywords
face
live
interaction
attribute
mobile terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610878194.4A
Other languages
English (en)
Other versions
CN106454481B (zh
Inventor
肖鸿亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Cubesili Information Technology Co Ltd
Original Assignee
Guangzhou Huaduo Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Huaduo Network Technology Co Ltd filed Critical Guangzhou Huaduo Network Technology Co Ltd
Priority to CN201610878194.4A priority Critical patent/CN106454481B/zh
Publication of CN106454481A publication Critical patent/CN106454481A/zh
Application granted granted Critical
Publication of CN106454481B publication Critical patent/CN106454481B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/611—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for multicast or broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44222—Analytics of user selections, e.g. selection of programs or purchase activity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4882—Data services, e.g. news ticker for displaying messages, e.g. warnings, reminders

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明实施例公开了一种移动终端直播互动的方法及装置，用于解决现有技术中，观众用户在移动终端上与主播进行互动过程中，由于移动终端可显示区域有限，进行互动操作时的互动界面必然会遮挡住当前直播画面，影响观众观看体验，且观众用户进行互动操作需要完成多个操作方可成功进行与主播的互动，过程繁琐，效率低下的技术问题。本发明实施例方法包括：获取直播画面，分析直播画面，根据直播画面所符合的人体特征属性，进行与人体特征属性对应的互动方式类别提示；接收用户确认的互动方式类别提示的互动指令，进行互动。

Description

一种移动终端直播互动的方法及装置
技术领域
本发明涉及移动终端多媒体技术领域，尤其涉及一种移动终端直播互动的方法及装置。
背景技术
随着互联网的发展，直播用户可以在视频直播系统上通过创建视频直播房间来向观众进行表演或者展示才艺。视频直播系统包括了：直播服务器、主播端客户端以及各用户使用的客户端。通常，主播用户和观众用户处于同一频道中的同一房间中。
而在主播用户通过视频直播房间向观众用户进行表演或者展示才艺的过程中，观众用户可以与主播进行互动，如通过用户端向主播用户赠送虚拟物品作为礼物或者向主播用户留言、点赞等。比如，观众用户在用户端中点击礼物图标，用户端弹出可供选择礼物清单，用户在礼物清单中选择所想要赠送的礼物，再点击确认按钮才可成功赠送礼物。比如，观众用户在用户端中点击聊天框，用户端弹出聊天输入框，用户在聊天输入框中键入与主播互动的话语，再点击确认按钮才可成功留言。
目前，现有技术中，观众用户在移动终端上与主播进行互动过程中，由于移动终端可显示区域有限，进行互动操作时的互动界面必然会遮挡住当前直播画面，影响观众观看体验，且观众用户进行互动操作需要完成多个操作方可成功进行与主播的互动，过程繁琐，效率低下。
发明内容
本发明实施例提供了一种移动终端直播互动的方法及装置，解决了现有技术中，观众用户在移动终端上与主播进行互动过程中，由于移动终端可显示区域有限，进行互动操作时的互动界面必然会遮挡住当前直播画面，影响观众观看体验，且观众用户赠送礼物需要完成多个操作方可成功赠送礼物，过程繁琐，效率低下的技术问题。
本发明实施例提供了的一种移动终端直播互动的方法，包括：
获取直播画面，分析直播画面，根据直播画面所符合的人体特征属性，进行与人体特征属性对应的互动方式类别提示；
接收用户确认的与互动方式类别提示对应的互动指令，进行互动。
优选地，获取直播画面，分析直播画面，包括：
获取直播画面，每隔一时间段分析直播画面是否符合人体脸部轮廓，若是，则将符合人体脸部轮廓的直播画面区域整合指定为人脸轮廓区域。
优选地，获取直播画面，分析直播画面，具体包括：
获取直播画面，每隔一时间段分析直播画面是否符合人体脸部轮廓，若是，则将符合人体脸部轮廓的直播画面区域整合指定为人脸轮廓区域；
对人脸轮廓区域内人脸特征部位进行确定，判断人脸特征部位占据屏幕面积和/或宽度是否符合预置占据屏幕面积和/或宽度，若是，则对符合预置占据屏幕面积和/或宽度的人脸特征部位进行持续时间是否满足预置时长的判断，若是，则将人脸特征部位指定为第一人脸部位。
优选地，根据直播画面所符合的人体特征属性，进行与人体特征属性对应的互动方式类别提示，包括：
根据第一人脸部位所属人脸部位的属性，显示与第一人脸部位对应的由文字和/或图像构成的互动提示。
优选地，接收用户确认的与互动方式类别提示对应的互动指令，进行互动，包括：
接收用户通过在屏幕点击或滑动操作确认的与互动方式类别提示对应的互动指令，进行互动。
优选地，接收用户确认的与互动方式类别提示对应的互动指令，进行互动之后，包括：
根据第一人脸部位所属人脸部位的属性，将与第一人脸部位对应的互动方式文字和/或图像叠加于屏幕中对应的位置上。
本发明实施例提供的一种移动终端直播互动装置，包括：
获取单元、分析单元、显示单元、接收单元、叠加单元；
获取单元，用于获取直播画面；
分析单元，用于分析直播画面符合的人体特征属性；
显示单元，用于根据直播画面所符合的人体特征属性，进行与人体特征属性对应的互动方式类别提示；
接收单元，用于接收用户确认的与互动方式类别提示对应的互动指令，进行互动；
叠加单元，用于根据直播画面所符合的人体特征属性，将与人体特征属性对应的互动方式图像叠加于屏幕中对应的位置上。
优选地，分析单元，包括：
定时分析子单元、整合指定子单元、第一分析子单元、判断指定子单元；
定时分析子单元，用于每隔一时间段分析直播画面是否符合人体脸部轮廓；
整合指定子单元，用于将符合人体脸部轮廓的直播画面区域整合指定为人脸轮廓区域；
第一分析子单元，用于对人脸轮廓区域内人脸特征部位进行确定，判断人脸特征部位占据屏幕面积和/或宽度是否符合预置占据屏幕面积和/或宽度；
判断指定子单元，用于对符合预置占据屏幕面积和/或宽度的人脸特征部位进行持续时间是否满足预置时长的判断，若是，则将人脸特征部位指定为第一人脸部位。
优选地，显示单元具体用于根据第一人脸部位所属人脸部位的属性，显示与第一人脸部位对应的由文字和/或图像构成的互动提示。
优选地，叠加单元具体用于根据第一人脸部位所属人脸部位的属性，将与第一人脸部位对应的互动方式文字和/或图像叠加于屏幕中对应的位置上。
从以上技术方案可以看出，本发明实施例具有以下优点：
本发明实施例提供了一种移动终端直播互动的方法及装置，包括：获取直播画面，分析直播画面，根据直播画面所符合的人体特征属性，进行与人体特征属性对应的互动方式类别提示；接收用户确认的互动方式类别提示的互动指令，进行互动，解决了现有技术中，观众用户在移动终端上与主播进行互动过程中，由于移动终端可显示区域有限，进行互动操作时的互动界面必然会遮挡住当前直播画面，影响观众观看体验，且观众用户进行互动操作需要完成多个操作方可成功进行与主播的互动，过程繁琐，效率低下的技术问题。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其它的附图。
图1为本发明实施例提供的一种移动终端直播互动的方法的一个实施例流程示意图；
图2为本发明实施例提供的一种移动终端直播互动的方法的另一个实施例流程示意图；
图3为本发明实施例提供的一种移动终端直播互动装置的一个实施例结构示意图；
图4为本发明实施例提供的一种移动终端直播互动装置的另一个实施例结构示意图；
图5为主播引导互动提示送礼场景示意图；
图6为观众送出礼物效果示意图；
图7为主播引导互动提示送礼场景另一个示意图；
图8为观众送出礼物效果另一个示意图。
具体实施方式
本发明实施例提供了一种移动终端直播互动的方法及装置，用于解决现有技术中，观众用户在移动终端上与主播进行互动过程中，由于移动终端可显示区域有限，进行互动操作时的互动界面必然会遮挡住当前直播画面，影响观众观看体验，且观众用户进行互动操作需要完成多个操作方可成功进行与主播的互动，过程繁琐，效率低下的技术问题。
为使得本发明的发明目的、特征、优点能够更加的明显和易懂，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，下面所描述的实施例仅仅是本发明一部分实施例，而非全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
请参阅图1，本发明实施例提供的一种移动终端直播互动的方法的一个是实施例包括：
101、获取直播画面，分析直播画面，根据直播画面所符合的人体特征属性，进行与人体特征属性对应的互动方式类别提示。
本发明实施例适用于现有的带可触摸屏的移动终端，包括平板电脑、手机等。首先，先获取到移动终端中正在进行的直播中的画面，获取的方式可采用截屏或帧捕获等的方法。
在获得直播中的画面后，对获得的直播画面进行分析，判断其是否符合预先设定的人体特征属性。如果直播画面满足预先设定好的人体特征属性条件，则分析判断直播画面所符合的的条件属于何种类型的人体特征属性条件，其中，人体特征属性条件包括脸、眼睛、脖子、手掌等，然后再根据直播画面所属的人体特征属性，在用户端显示互动方式，进行对用户的互动方式的自动提示。其中，上述的互动方式包括：向主播赠送礼物、给主播留言或给主播点赞等，但不仅仅限于此。
102、接收用户确认的与互动方式类别提示对应的互动指令，进行互动。
在用户端进行了可快速进行互动的互动方式类别提示后，接收由用户确认的与互动方式类别提示对应的互动指令，然后根据用户发出的确认互动提示的指令，进行互动，如向主播赠送礼物、给主播留言或给主播点赞等。
本发明实施例中通过获取直播画面，分析直播画面，根据直播画面所符合的人体特征属性，进行与人体特征属性对应的互动方式类别提示；接收用户确认的与所述互动方式类别提示对应的互动指令，进行互动，解决了现有技术中，观众用户在移动终端上与主播进行互动过程中，由于移动终端可显示区域有限，进行互动操作时的互动界面必然会遮挡住当前直播画面，影响观众观看体验，且观众用户赠送礼物需要完成多个操作方可成功赠送礼物，过程繁琐，效率低下的技术问题。
以上为本发明实施例提供的一种移动终端直播互动的方法的一个实施例，以下将针对移动终端直播互动方法的具体过程进行详细的描述。
请参阅图2，本发明实施例提供的一种移动终端直播互动的方法的另一个实施例包括：
201、获取直播画面，每隔一时间段分析直播画面是否符合人体脸部轮廓，若是，则将符合人体脸部轮廓的直播画面区域整合指定为人脸轮廓区域。
本发明实施例适用于现有的带可触摸屏的移动终端，包括平板电脑、手机等。首先，获取到移动终端中正在进行的直播中的画面，获取的方式可采用截屏或帧捕获的方法。
在获得直播中的画面后，进行定时分析识别直播画面，如每200毫秒计算一次主播脸部特征。由于从技术上系统识别主播行为需要耗费客户端cpu，不建议实时间隔太密的检测，本发明实施例采取每200毫秒提取一次直播画面进行检测分析，能够尽量减少性能消耗并保证识别的准确性。根据直播画面中的颜色是否满足预置的人体肤色条件，若满足，则将满足预置的人体肤色条件的区域图像认为人体的一部分。然后，再将该区域图像进行分析，判断其是否符合人体脸部轮廓特征。根据人体脸部特征，如深色眼睛，鼻子，及嘴巴等，进行对符合人体脸部轮廓特征的区域图像进行整合，并指定其为人脸轮廓区域。
此外，还可在直播画面中的颜色满足预置的人体肤色条件，而不符合人体脸部轮廓特征的情况下，进行进一步的识别出满足预置人体肤色条件的直播区域画面所符合的人体指定部位。比如，对该直播区域画面进行识别分析，识别出人体的手掌或头部或脖子等人体特征，并指定该区域画面为第一人体区域图像。
202、对人脸轮廓区域内人脸特征部位进行确定，判断人脸特征部位占据屏幕面积和/或宽度是否符合预置占据屏幕面积和/或宽度，若是，则对符合预置占据屏幕面积和/或宽度的人脸特征部位进行持续时间是否满足预置时长的判断，若是，则将人脸特征部位指定为第一人脸部位。
得到经整合指定的人脸轮廓区域图像后，进行对人脸轮廓区域图像的进一步分析，确定其中的人体脸部特征具体部位，如正脸、侧脸、眼睛等。根据所确定的人体脸部特征各个具体部位，分析判断人体脸部特征各个具体部位占据屏幕面积和/或宽度是否符合预置占据屏幕面积和/或宽度。如侧脸横向占屏幕面积宽度80％以上；双眼中心点直线距离，占到屏幕横向宽度的80％以上等等，即视为符合预置占据屏幕面积和/或宽度。
在分析得人体脸部特征具体部位占据屏幕面积和/或宽度符合预置占据屏幕面积和/或宽度后，进行对符合预置占据屏幕面积和/或宽度的人脸特征部位持续时间是否满足预置时长的判断。如侧脸横向占屏幕面积80％以上，且持续时间2秒以上；或，双眼中心点直线距离，占到屏幕横向宽度的80％以上，且持续时间2秒以上，则其持续时间满足预置时长。若上述符合预置占据屏幕面积和/或宽度的人脸特征部位持续时间也满足预置时长，则将该人脸特征部位指定为第一人脸部位。
此外，若得到的为第一人体区域图像，则根据该第一人体区域图像所属的人体特征类型，分析判断该人体特征类型占据屏幕面积和/或宽度是否符合预置占据屏幕面积和/或宽度。如脖子横向占屏幕面积宽度80％以上，手掌横向长度占到屏幕横向宽度的80％以上，即可视为该人体特征类型占据屏幕面积和/或宽度符合预置占据屏幕面积和/或宽度。
在分析得上述人体特征类型占据屏幕面积和/或宽度符合预置占据屏幕面积和/或宽度后，进行对符合预置占据屏幕面积和/或宽度的人脸特征部位持续时间是否满足预置时长的判断。如脖子横向占屏幕面积宽度80％以上，且持续时间2秒以上；或，手掌横向长度占到屏幕横向宽度的80％以上，且持续时间2秒以上，则其持续时间满足预置时长。若上述符合预置占据屏幕面积和/或宽度的第一人体区域图像持续时间也满足预置时长，则将该第一人体区域图像指定为第二人体区域图像。
203、根据第一人脸部位所属人脸部位的属性，显示与第一人脸部位对应的由文字和/或图像构成的互动提示。
在指定了具体某人脸特征部位指定为第一人脸部位之后，根据第一人脸部位所属人脸部位的属性，如正脸、侧脸、双眼等，对用户端进行显示特定的以文字和/或图像构成的互动方式消息，具体如“点击快捷送眼镜礼物”、“点击快捷送亲亲礼物”、“点击快捷点赞”等。请参阅图5和图7，为主播引导互动提示送礼场景示意图。其中，图5为主播引导互动提示送眼镜礼物示意图，图7为主播引导互动提示送亲亲礼物示意图。
此外，在指定了第一人体区域图像为第二人体区域图像后，根据第二人体区域图像中的具体人体特征的属性，如脖子、手掌、头部等，对用户端进行显示特定的以文字和/或图像构成的互动方式消息，具体如“点击快捷送吊坠礼物”、“点击快捷送戒指礼物”、“点击快捷点赞”等，此处不作具体限定。
204、接收用户通过在屏幕点击或滑动操作确认的互动方式类别提示的互动指令，进行互动。
在通过用户端对用户展示了互动提示后，接收由用户输入的确认互动指令，其中该确认互动指令可为快速双击屏幕或滑动操作等确认互动指令，此处不作具体限定。在接收到用户确认互动信息后，进行对服务器通信确认互动方式类别，并在用户端中进行互动操作。
205、根据第一人脸部位所属人脸部位的属性，将与第一人脸部位对应的互动方式图像叠加于屏幕中对应的位置上。
在接收用户通过在屏幕点击或滑动操作确认的互动方式类别提示的互动指令后，根据第一人脸部位所属人脸部位的属性，如正脸、侧脸、双眼等；或根据第二人体区域图像中的具体人体特征的属性，如脖子、手掌、头部等，将与第一人脸部位对应的礼物图像、文字图像或点赞图像，如眼镜，亲亲嘴唇等礼物图像，或与第二人体区域图像中的具体人体特征对应的礼物图像、文字图像或点赞图像，叠加于屏幕中对应的位置上，如眼镜礼物图像叠加于眼睛之上，亲亲嘴唇礼物图像叠加于侧脸之上，吊坠礼物图像叠加于脖子之上等，此处不作具体限定。请参阅图6和图8，为观众送出礼物效果示意图。其中，图6为观众送出眼镜礼物效果示意图，图8为观众送出亲亲礼物效果示意图。
本发明实施例中通过获取直播画面，分析直播画面，根据直播画面所符合的人体特征属性，进行与人体特征属性对应的互动方式类别提示；接收用户确认的互动方式类别提示的互动指令，进行互动，解决了现有技术中，观众用户在移动终端上与主播进行互动过程中，由于移动终端可显示区域有限，进行互动操作时的互动界面必然会遮挡住当前直播画面，影响观众观看体验，且观众用户进行互动操作需要完成多个操作方可成功进行与主播的互动，过程繁琐，效率低下的技术问题。
以上为对移动终端直播互动的方法的具体过程所进行的详细的描述，以下将针对本发明实施例提供的移动终端直播互动装置进行描述。
请参阅图3，本发明实施例提供的一种移动终端直播互动装置的一个实施例包括：
获取单元301，用于获取直播画面；
分析单元302，用于分析直播画面符合的人体特征属性；
显示单元303，用于根据直播画面所符合的人体特征属性，进行与人体特征属性对应的互动方式类别提示；
接收单元304，用于接收用户确认的互动方式类别提示的互动指令，进行互动；
叠加单元305，用于根据直播画面所符合的人体特征属性，将与人体特征属性对应的互动方式图像叠加于屏幕中对应的位置上。
以上为对本发明实施例提供的一种移动终端直播互动装置的一个实施例进行的描述，以下将对本发明实施例提供的移动终端直播互动装置的具体部分进行详细的描述。
请参阅图4，本发明实施例提供的一种移动终端直播互动装置的另一个实施例包括：
获取单元401，用于获取直播画面。
分析单元402，具体包括：定时分析子单元4021，整合指定子单元4022，第一分析子单元4023，判断指定子单元4024。
定时分析子单元4021，用于每隔一时间段分析直播画面是否符合人体脸部轮廓或其它的人体指定部位。
整合指定子单元4022，用于将符合人体脸部轮廓的直播画面区域整合指定为人脸轮廓区域，将符合人体指定部位的区域画面指定为第一人体区域图像。
第一分析子单元4023，用于对人脸轮廓区域内人脸特征部位进行确定，分析判断人脸特征部位占据屏幕面积和/或宽度是否符合预置占据屏幕面积和/或宽度，对第一人体区域图像内的人体指定部位进行确定，分析判断第一人体区域图像内的人体指定部位占据屏幕面积和/或宽度是否符合预置占据屏幕面积和/或宽度。
判断指定子单元4024，用于对符合预置占据屏幕面积和/或宽度的人脸特征部位或第一人体区域图像内的人体指定部位，进行持续时间是否满足预置时长的判断，若是，则将人脸特征部位指定为第一人脸部位，将第一人体区域图像指定为第二人体区域图像。
显示单元403，用于根据第一人脸部位所属人脸部位的属性，显示与第一人脸部位对应的由文字和/或图像构成的互动提示，或根据第二人体区域图像中的具体人体特征的属性，显示与第二人体区域图像中的具体人体特征的属性对应的由文字和/或图像构成的互动提示。
接收单元404，用于接收用户确认的互动方式类别提示的互动指令，进行互动。
叠加单元405，用于根据第一人脸部位所属人脸部位的属性，将与第一人脸部位对应的互动方式图像叠加于屏幕中对应的位置上，或根据第二人体区域图像中的具体人体特征的属性，将与第二人体区域图像中的具体人体特征的属性对应的互动方式图像叠加于屏幕中对应的位置上。
以上则为对本发明实施例提供的一种移动终端直播互动装置的具体部分进行的详细的描述。
本发明实施例中通过获取单元401获取直播画面，分析单元402分析直播画面，根据直播画面所符合的人体特征属性，进行与人体特征属性对应的互动方式类别提示；接收单元404接收用户确认的互动方式类别提示的互动指令，进行互动，解决了现有技术中，观众用户在移动终端上与主播进行互动过程中，由于移动终端可显示区域有限，进行互动操作时的互动界面必然会遮挡住当前直播画面，影响观众观看体验，且观众用户进行互动操作需要完成多个操作方可成功进行与主播的互动，过程繁琐，效率低下的技术问题。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种移动终端直播互动的方法，其特征在于，包括：
获取直播画面，分析所述直播画面，根据所述直播画面所符合的人体特征属性，进行与所述人体特征属性对应的互动方式类别提示；
接收用户确认的与所述互动方式类别提示对应的互动指令，进行互动。
2.根据权利要求1所述的移动终端直播互动的方法，其特征在于，所述获取直播画面，分析所述直播画面，包括：
获取直播画面，每隔一时间段分析所述直播画面是否符合人体脸部轮廓，若是，则将符合所述人体脸部轮廓的直播画面区域整合指定为人脸轮廓区域。
3.根据权利要求2所述的移动终端直播互动的方法，其特征在于，所述获取直播画面，分析所述直播画面，具体包括：
获取直播画面，每隔一时间段分析所述直播画面是否符合人体脸部轮廓，若是，则将符合所述人体脸部轮廓的直播画面区域整合指定为人脸轮廓区域；
对所述人脸轮廓区域内人脸特征部位进行确定，判断所述人脸特征部位占据屏幕面积和/或宽度是否符合预置占据屏幕面积和/或宽度，若是，则对符合所述预置占据屏幕面积和/或宽度的所述人脸特征部位进行持续时间是否满足预置时长的判断，若是，则将所述人脸特征部位指定为第一人脸部位。
4.根据权利要求3所述的移动终端直播互动的方法，其特征在于，所述根据所述直播画面所符合的人体特征属性，进行与所述人体特征属性对应的互动方式类别提示，包括：
根据所述第一人脸部位所属人脸部位的属性，显示与所述第一人脸部位对应的由文字和/或图像构成的互动提示。
5.根据权利要求1所述的移动终端直播互动的方法，其特征在于，所述接收用户确认的与所述互动方式类别提示对应的互动指令，进行互动，包括：
接收用户通过在屏幕点击或滑动操作确认的与所述互动方式类别提示对应的互动指令，进行互动。
6.根据权利要求3所述的移动终端直播互动的方法，其特征在于，所述接收用户确认的与所述互动方式类别提示对应的互动指令，进行互动之后，包括：
根据所述第一人脸部位所属人脸部位的属性，将与所述第一人脸部位对应的互动方式图像叠加于所述屏幕中对应的位置上。
7.一种移动终端直播互动装置，其特征在于，包括：
获取单元、分析单元、显示单元、接收单元、叠加单元；
所述获取单元，用于获取直播画面；
所述分析单元，用于分析所述直播画面符合的人体特征属性；
显示单元，用于根据直播画面所符合的人体特征属性，进行与所述人体特征属性对应的互动方式类别提示；
接收单元，用于接收用户确认的与所述互动方式类别提示对应的互动指令，进行互动；
叠加单元，用于根据所述直播画面所符合的人体特征属性，将与所述人体特征属性对应的互动方式图像叠加于所述屏幕中对应的位置上。
8.根据权利要求7所述的移动终端直播互动装置，其特征在于，所述分析单元，包括：
定时分析子单元、整合指定子单元、第一分析子单元、判断指定子单元；
所述定时分析子单元，用于每隔一时间段分析所述直播画面是否符合人体脸部轮廓；
所述整合指定子单元，用于将符合所述人体脸部轮廓的直播画面区域整合指定为人脸轮廓区域；
所述第一分析子单元，用于对所述人脸轮廓区域内人脸特征部位进行确定，判断所述人脸特征部位占据屏幕面积和/或宽度是否符合预置占据屏幕面积和/或宽度；
所述判断指定子单元，用于对符合所述预置占据屏幕面积和/或宽度的所述人脸特征部位进行持续时间是否满足预置时长的判断，若是，则将所述人脸特征部位指定为第一人脸部位。
9.根据权利要求7所述的移动终端直播互动装置，其特征在于，所述显示单元具体用于根据所述第一人脸部位所属人脸部位的属性，显示与所述第一人脸部位对应的由文字和/或图像构成的互动提示。
10.根据权利要求7所述的移动终端直播互动装置，其特征在于，所述叠加单元具体用于根据所述第一人脸部位所属人脸部位的属性，将与所述第一人脸部位对应的互动方式文字和/或图像叠加于所述屏幕中对应的位置上。
CN201610878194.4A 2016-09-30 2016-09-30 一种移动终端直播互动的方法及装置 Active CN106454481B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610878194.4A CN106454481B (zh) 2016-09-30 2016-09-30 一种移动终端直播互动的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610878194.4A CN106454481B (zh) 2016-09-30 2016-09-30 一种移动终端直播互动的方法及装置

Publications (2)

Publication Number Publication Date
CN106454481A true CN106454481A (zh) 2017-02-22
CN106454481B CN106454481B (zh) 2019-08-23

Family

ID=58172306

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610878194.4A Active CN106454481B (zh) 2016-09-30 2016-09-30 一种移动终端直播互动的方法及装置

Country Status (1)

Country Link
CN (1) CN106454481B (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107222754A (zh) * 2017-05-27 2017-09-29 武汉斗鱼网络科技有限公司 礼物赠送通知方法、装置及服务器
CN107564038A (zh) * 2017-08-28 2018-01-09 北京小米移动软件有限公司 偏移参数确定方法和装置以及偏移控制方法和装置
CN108391174A (zh) * 2018-03-22 2018-08-10 乐蜜有限公司 直播互动方法、装置和电子设备
CN108401173A (zh) * 2017-12-21 2018-08-14 平安科技（深圳）有限公司 移动直播的互动终端、方法及计算机可读存储介质
CN108536492A (zh) * 2018-04-08 2018-09-14 武汉斗鱼网络科技有限公司 一种直播间属性信息获取方法、装置、设备及存储介质
CN108924661A (zh) * 2018-07-12 2018-11-30 北京微播视界科技有限公司 基于直播间的数据交互方法、装置、终端和存储介质
CN109286835A (zh) * 2018-09-05 2019-01-29 武汉斗鱼网络科技有限公司 直播间互动元素显示方法、存储介质、设备及系统
CN110830811A (zh) * 2019-10-31 2020-02-21 广州酷狗计算机科技有限公司 直播互动方法及装置、系统、终端、存储介质
CN111131127A (zh) * 2018-10-30 2020-05-08 武汉斗鱼网络科技有限公司 一种基于直播平台的通信方法及相关装置
CN112019906A (zh) * 2019-05-30 2020-12-01 上海哔哩哔哩科技有限公司 直播方法、计算机设备及可读存储介质
WO2021109652A1 (zh) * 2019-12-06 2021-06-10 广州华多网络科技有限公司 文字虚拟礼物的赠送方法、装置、设备及存储介质
CN112969087A (zh) * 2021-03-15 2021-06-15 北京城市网邻信息技术有限公司 一种信息展示方法、客户端、电子设备及存储介质
CN115079911A (zh) * 2022-06-14 2022-09-20 北京字跳网络技术有限公司 一种数据处理方法、装置、设备及存储介质

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101246541A (zh) * 2007-02-16 2008-08-20 索尼株式会社 图像处理设备和方法、图像拾取设备、以及计算机程序
CN101478629A (zh) * 2008-01-04 2009-07-08 华晶科技股份有限公司 调整人脸比例的图像处理方法
CN102055912A (zh) * 2009-10-29 2011-05-11 北京中星微电子有限公司 一种视频应用系统、视频特效处理系统和方法
CN103024338A (zh) * 2011-04-08 2013-04-03 数字光学欧洲有限公司 具有图像捕获和分析模块的显示设备
CN103108248A (zh) * 2013-01-06 2013-05-15 王汝迟 一种互动式视频的实现方法和系统
CN105049911A (zh) * 2015-07-10 2015-11-11 西安理工大学 一种基于人脸识别的视频特效处理方法
CN105187930A (zh) * 2015-09-18 2015-12-23 广州酷狗计算机科技有限公司 基于视频直播的互动方法及装置
CN105334963A (zh) * 2015-10-29 2016-02-17 广州华多网络科技有限公司 一种虚拟物品展示方法及系统
CN105451029A (zh) * 2015-12-02 2016-03-30 广州华多网络科技有限公司 一种视频图像的处理方法及装置
WO2016078189A1 (zh) * 2014-11-21 2016-05-26 广州华多网络科技有限公司 一种基于视频直播的互动方法及相关设备、系统
CN105872442A (zh) * 2016-03-30 2016-08-17 宁波三博电子科技有限公司 一种基于人脸识别的即时弹幕礼物赠送方法及系统

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101246541A (zh) * 2007-02-16 2008-08-20 索尼株式会社 图像处理设备和方法、图像拾取设备、以及计算机程序
CN101478629A (zh) * 2008-01-04 2009-07-08 华晶科技股份有限公司 调整人脸比例的图像处理方法
CN102055912A (zh) * 2009-10-29 2011-05-11 北京中星微电子有限公司 一种视频应用系统、视频特效处理系统和方法
CN103024338A (zh) * 2011-04-08 2013-04-03 数字光学欧洲有限公司 具有图像捕获和分析模块的显示设备
CN103108248A (zh) * 2013-01-06 2013-05-15 王汝迟 一种互动式视频的实现方法和系统
WO2016078189A1 (zh) * 2014-11-21 2016-05-26 广州华多网络科技有限公司 一种基于视频直播的互动方法及相关设备、系统
CN105049911A (zh) * 2015-07-10 2015-11-11 西安理工大学 一种基于人脸识别的视频特效处理方法
CN105187930A (zh) * 2015-09-18 2015-12-23 广州酷狗计算机科技有限公司 基于视频直播的互动方法及装置
CN105334963A (zh) * 2015-10-29 2016-02-17 广州华多网络科技有限公司 一种虚拟物品展示方法及系统
CN105451029A (zh) * 2015-12-02 2016-03-30 广州华多网络科技有限公司 一种视频图像的处理方法及装置
CN105872442A (zh) * 2016-03-30 2016-08-17 宁波三博电子科技有限公司 一种基于人脸识别的即时弹幕礼物赠送方法及系统

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107222754A (zh) * 2017-05-27 2017-09-29 武汉斗鱼网络科技有限公司 礼物赠送通知方法、装置及服务器
CN107564038A (zh) * 2017-08-28 2018-01-09 北京小米移动软件有限公司 偏移参数确定方法和装置以及偏移控制方法和装置
CN107564038B (zh) * 2017-08-28 2021-11-30 北京小米移动软件有限公司 偏移参数确定方法和装置以及偏移控制方法和装置
CN108401173B (zh) * 2017-12-21 2020-11-17 平安科技（深圳）有限公司 移动直播的互动终端、方法及计算机可读存储介质
CN108401173A (zh) * 2017-12-21 2018-08-14 平安科技（深圳）有限公司 移动直播的互动终端、方法及计算机可读存储介质
WO2019119643A1 (zh) * 2017-12-21 2019-06-27 平安科技（深圳）有限公司 移动直播的互动终端、方法及计算机可读存储介质
CN108391174A (zh) * 2018-03-22 2018-08-10 乐蜜有限公司 直播互动方法、装置和电子设备
CN108391174B (zh) * 2018-03-22 2021-08-20 卓米私人有限公司 直播互动方法、装置和电子设备
CN108536492A (zh) * 2018-04-08 2018-09-14 武汉斗鱼网络科技有限公司 一种直播间属性信息获取方法、装置、设备及存储介质
CN108536492B (zh) * 2018-04-08 2021-09-07 武汉斗鱼网络科技有限公司 一种直播间属性信息获取方法、装置、设备及存储介质
CN108924661A (zh) * 2018-07-12 2018-11-30 北京微播视界科技有限公司 基于直播间的数据交互方法、装置、终端和存储介质
WO2020010819A1 (zh) * 2018-07-12 2020-01-16 北京微播视界科技有限公司 基于直播间的数据交互方法、装置、终端和存储介质
CN109286835A (zh) * 2018-09-05 2019-01-29 武汉斗鱼网络科技有限公司 直播间互动元素显示方法、存储介质、设备及系统
CN111131127A (zh) * 2018-10-30 2020-05-08 武汉斗鱼网络科技有限公司 一种基于直播平台的通信方法及相关装置
CN111131127B (zh) * 2018-10-30 2022-04-12 武汉斗鱼网络科技有限公司 一种基于直播平台的通信方法及相关装置
CN112019906A (zh) * 2019-05-30 2020-12-01 上海哔哩哔哩科技有限公司 直播方法、计算机设备及可读存储介质
CN110830811A (zh) * 2019-10-31 2020-02-21 广州酷狗计算机科技有限公司 直播互动方法及装置、系统、终端、存储介质
WO2021109652A1 (zh) * 2019-12-06 2021-06-10 广州华多网络科技有限公司 文字虚拟礼物的赠送方法、装置、设备及存储介质
CN112969087A (zh) * 2021-03-15 2021-06-15 北京城市网邻信息技术有限公司 一种信息展示方法、客户端、电子设备及存储介质
CN115079911A (zh) * 2022-06-14 2022-09-20 北京字跳网络技术有限公司 一种数据处理方法、装置、设备及存储介质

Also Published As

Publication number Publication date
CN106454481B (zh) 2019-08-23

Similar Documents

Publication Publication Date Title
CN106454481A (zh) 一种移动终端直播互动的方法及装置
CN108322788B (zh) 一种视频直播中的广告展示方法及装置
CN110460899B (zh) 弹幕内容的展示方法、终端设备及计算机可读存储介质
CN102710991B (zh) 信息处理设备、信息处理方法和程序
CN104636501B (zh) 一种多媒体网络人工即时翻译系统及方法
CN110674664A (zh) 视觉注意力的识别方法及系统、存储介质、处理器
CN107343225B (zh) 在视频图像中展示业务对象的方法、装置和终端设备
CN107341434A (zh) 视频图像的处理方法、装置和终端设备
CN107341435A (zh) 视频图像的处理方法、装置和终端设备
CN103902046A (zh) 智能提醒方法和终端
CN106302477A (zh) 一种视频直播测试方法及系统
CN112188220A (zh) 直播中信息的提示方法和装置、存储介质、电子装置
CN107291416A (zh) 一种音频播放方法、系统及终端设备
CN105892635A (zh) 截图实现方法、装置及电子设备
CN108347578A (zh) 视频通话中视频图像的处理方法及装置
CN106375868A (zh) 一种显示设备切换观看模式的方法及装置
US11800217B2 (en) Multimedia data processing method and apparatus
CN108537026A (zh) 应用程序控制方法、装置和服务器
CN114245155A (zh) 直播方法、装置及电子设备
CN109344726A (zh) 一种广告投放方法和装置
CN113163269B (zh) 直播间进入方法、装置、电子设备及存储介质
CN111768478A (zh) 一种图像合成方法、装置、存储介质和电子设备
CN114374882A (zh) 弹幕信息的处理方法、装置、终端及计算机可读存储介质
US20230206093A1 (en) Music recommendation method and apparatus
CN112672219A (zh) 评论信息的交互方法和装置、电子设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20210111

Address after: 510000 3108, 79 Wanbo 2nd Road, Nancun Town, Panyu District, Guangzhou City, Guangdong Province

Patentee after: GUANGZHOU CUBESILI INFORMATION TECHNOLOGY Co.,Ltd.

Address before: 511449 Wanda Plaza, Nancun Town, Panyu District, Guangzhou City, Guangdong Province

Patentee before: GUANGZHOU HUADUO NETWORK TECHNOLOGY Co.,Ltd.

TR01 Transfer of patent right