Nothing Special   »   [go: up one dir, main page]

CN110225196B - 终端控制方法及终端设备 - Google Patents

终端控制方法及终端设备 Download PDF

Info

Publication number
CN110225196B
CN110225196B CN201910464526.8A CN201910464526A CN110225196B CN 110225196 B CN110225196 B CN 110225196B CN 201910464526 A CN201910464526 A CN 201910464526A CN 110225196 B CN110225196 B CN 110225196B
Authority
CN
China
Prior art keywords
user
screen image
image
target
terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910464526.8A
Other languages
English (en)
Other versions
CN110225196A (zh
Inventor
余志豪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Co Ltd
Original Assignee
Vivo Mobile Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Co Ltd filed Critical Vivo Mobile Communication Co Ltd
Priority to CN201910464526.8A priority Critical patent/CN110225196B/zh
Publication of CN110225196A publication Critical patent/CN110225196A/zh
Application granted granted Critical
Publication of CN110225196B publication Critical patent/CN110225196B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174Facial expression recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Environmental & Geological Engineering (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明实施例提供了一种终端控制方法及终端设备,涉及通信技术领域,以解决现有的终端设备对未成年造成的不利影响较大的问题。其中,所述终端控制方法,包括:采集用户的人脸图像;基于所述用户的人脸图像中的人脸特征信息,获得所述用户的表情信息;在所述表情信息与预设表情类型匹配的情况下,获取与所述用户的人脸图像属于同时段内的目标屏幕图像;向目标终端发送所述目标屏幕图像。本发明实施例中的终端控制方法应用于终端设备中。

Description

终端控制方法及终端设备
技术领域
本发明实施例涉及通信技术领域,尤其涉及一种终端控制方法及终端设备。
背景技术
目前,智能手机等终端设备的应用越来越广泛,不仅应用于成人群体,还应用于未成年群体。
一方面,家长和孩子之间可以通过终端设备快速建立联系、孩子还可以使用终端设备辅助学习。另一方面,未成年在使用终端设备看视频、玩游戏时,可能会观看到一些血腥、暴力甚至黄色的内容,对于未成年来说,这些内容会影响他们的健康成长。
可见,现有的终端设备对未成年造成的不利影响较大。
发明内容
本发明实施例提供一种终端控制方法,以解决现有的终端设备对未成年造成的不利影响较大的问题。
为了解决上述技术问题,本发明是这样实现的:
本发明实施例提供了一种终端控制方法,应用于终端设备,包括:采集用户的人脸图像;基于所述用户的人脸图像中的人脸特征信息,获得所述用户的表情信息;在所述表情信息与预设表情类型匹配的情况下,获取与所述用户的人脸图像属于同时段内的目标屏幕图像;向目标终端发送所述目标屏幕图像。
本发明实施例还提供了一种终端设备,包括:人脸图像采集模块,用于采集用户的人脸图像;表情信息获得模块,用于基于所述用户的人脸图像中的人脸特征信息,获得所述用户的表情信息;目标屏幕图像获取模块,用于在所述表情信息与预设表情类型匹配的情况下,获取与所述用户的人脸图像属于同时段内的目标屏幕图像;目标屏幕图像发送模块,用于向目标终端发送所述目标屏幕图像。
本发明实施例还提供了一种终端设备,包括处理器,存储器,存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现所述终端控制方法的步骤。
本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现所述终端控制方法的步骤。
在本实施例中,用户在使用终端设备的过程中,例如观看视频、玩游戏等,终端设备采集当前用户的人脸图像,并提取人脸图像中的人脸特征信息进行分析,并基于人脸图像中的人脸特征信息分析得到用户的表情信息。当用户的表情信息与预设表情类型匹配时,可以得到用户的表情信息满足特定的表情类型,例如不同于常态的表情类型等,则获取致使用户出现当前表情的目标屏幕图像,并发送至目标终端。特别是用户为儿童时,当儿童看到一些异常画面时,面部特征不同于常态下的面部特征,即儿童可能作出开心、难过、害怕等表情,从而获取致使儿童作出非常态表情的目标屏幕图像,发送给监护人所使用的目标终端,进而监护人第一时间看到目标屏幕图像,可对儿童进行相应的辅导,以帮助儿童合理利用终端设备,减少终端设备对儿童造成的不利影响。
附图说明
图1是本发明实施例的终端控制方法的流程图之一;
图2是本发明实施例的终端控制方法的流程图之二;
图3是本发明实施例的终端控制方法的流程图之三;
图4是本发明实施例的终端控制方法的流程图之四;
图5是本发明实施例的终端设备的框图之一;
图6是本发明实施例的终端设备的框图之二。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参见图1,示出了本发明一个实施例的终端控制方法的流程图,应用于终端设备,包括:
步骤S1:采集用户的人脸图像。
在用户使用终端设备时,采集用户的人脸图像,优选实时采集当前用户的人脸图像,以及时发现用户的人脸图像出现异常情况。
优选地,控制终端设备的前置摄像头采集屏幕前方用户的人脸图像。
步骤S2:基于用户的人脸图像中的人脸特征信息,获得用户的表情信息。
优选地,前置摄像头会基于人脸识别技术提取人脸图像的人脸特征信息,包括:嘴巴、眉毛、眼睛等特征信息。进一步地,对用户的人脸图像中的人脸特征信息进行分析,以得到用户的表情信息。
通常,当人们处于愤怒的情绪时,面部会出现额眉内皱、目光凝视、鼻翼扩张、张口呈方形或紧闭的特征,从而采集到的用户的表情信息对应为愤怒;当人们处于恐惧的情绪时,面部会出现额眉平直、眼睛张大、额头有些抬高或平行皱纹、眉头微皱、面部肌肉都较为紧张的特征,从而采集到的用户的表情信息对应为恐惧;当人们处于悲伤的情绪时,面部会出现眉毛下垂、眼角下塌、口角下拉、可能伴有流泪的特征,从而采集到的用户的表情信息对应为悲伤。而当人们处于平和的情绪时,可认为面部特征均处于常态,从而采集到的用户的表情信息对应为平和。
因此,在该步骤中,基于对用户的人脸图像中的人脸特征信息进行分析,可得到用户的表情信息为常态下的平和,还是非常态下的愤怒、悲伤、恐惧、难过、开心、激动等等。
示例性地,可设定阈值,当用户的人脸图像中的人脸特征信息与其中一种情绪下的人脸图像中的人脸特征信息的匹配度大于该阈值,则认为用户的表情信息对应为该情绪表情。
更为具体地,可将人脸图像中的各个特征点与任一情绪下人脸图像对应部位的各个特征点依次进行匹配,并综合得到的匹配度,判断用户的表情信息是否对应为该情绪表情。
示例性地,人脸识别系统会根据人脸图像中的各个特征信息的变化与不同情绪下的人脸图像中的人脸特征信息进行匹配。当分析出人脸图像中的特征信息与某种情绪下的人脸图像中的人脸特征信息的匹配度达到80%以上时,则识别出用户处于该种情绪下,用户的表情信息为该情绪表情。
优选地,可预存指定情绪下的人脸图像,以用作分析人脸图像的人脸特征信息的参考标准。
优选地,可通过大数据采集不同情绪下的大量人脸图像,并利用图像识别技术进行分析,提取识别情绪所需的主要人脸特征信息,例如嘴巴、眉毛、眼睛,得到共同的人脸特征信息,以作为分析人脸图像中的人脸特征信息的参考标准。
步骤S3:在用户的表情信息与预设表情类型匹配的情况下,获取与用户的人脸图像属于同时段内的目标屏幕图像。
优选地,为了及时发现用户表情出现异常的情况,可将非常态下的愤怒、悲伤、恐惧、难过、开心、激动等表情作为预设表情类型。
在该步骤中,当用户的表情信息为异常表情时,则获取与用户的人脸图像属于同时段内的目标屏幕图像,以获取致使用户产生异常表情的目标屏幕图像。
优选地,若某一时刻的用户的人脸图像的表情异常,则获取该时刻的屏幕截图或者该时刻前后的屏幕视频;若整个时段内用户的人脸图像的表情异常,则获取该时段的屏幕视频,或者该时段前后的屏幕视频。
步骤S4:向目标终端发送目标屏幕图像。
优选地,可预先在终端设备中录入目标终端的识别信息,以在用户的人脸图像的表情异常时,及时将终端设备所显示的目标屏幕图像发送至目标终端。
进一步地,目标终端所属的用户可及时发现该异常情况,并采取相应的处理措施。
特别地,本实施例中的终端控制方法更适用于终端设备的儿童模式。
示例性地,可在终端设备的系统模式中添加儿童模式,在该模式下,可绑定终端设备与指定的目标终端,并开启儿童监护功能,在该功能下前置摄像头会自动采集用户的人脸图像,优选为儿童的人脸图像,以在儿童表情异常时,及时告知目标终端所属的用户,通常目标终端所属的用户为监护人。
在本实施例中,用户在使用终端设备的过程中,例如观看视频、玩游戏等,终端设备采集当前用户的人脸图像,并提取人脸图像中的人脸特征信息进行分析,并基于人脸图像中的人脸特征信息分析得到用户的表情信息。当用户的表情信息与预设表情类型匹配时,可以得到用户的表情信息满足特定的表情类型,例如不同于常态的表情类型等,则获取致使用户出现当前表情的目标屏幕图像,并发送至目标终端。特别是用户为儿童时,当儿童看到一些异常画面时,面部特征不同于常态下的面部特征,即儿童可能作出开心、难过、害怕等表情,从而获取致使儿童作出非常态表情的目标屏幕图像,发送给监护人所使用的目标终端,进而监护人第一时间看到目标屏幕图像,可对儿童进行相应的辅导,以帮助儿童合理利用终端设备,减少终端设备对儿童造成的不利影响。
在图1所示实施例的基础上,图2示出了本发明一个实施例的终端控制方法的流程图,在步骤S3之前,还包括:
步骤S5:基于终端设备对用户的输入响应,录制终端设备显示的屏幕图像。
基于上述儿童监护功能,终端设备可自动打开前置摄像头采集用户的人脸图像,同时还可实时录制用户在屏幕桌面操作过程的视频。
其中,基于用户在终端设备上进行的输入,如触摸、按压、滑动等输入,终端设备相应于输入,在屏幕上显示相应的界面。在儿童监护功能下,终端设备通过录制屏幕显示内容的视频来录制用户在屏幕桌面操作过程的视频。
优选地,录制的视频可按照一定的周期不断更新存储在本地或者云端,以便于随时查看,从而更加有利于监护人了解儿童使用终端设备的情况,帮助儿童合理利用终端设备,进一步减少终端设备对儿童造成的不利影响。
对应地,步骤S3包括:
步骤S31:在第一时刻表情信息与预设表情类型匹配的情况下,获取第一时刻所属时段内的第一屏幕图像。
优选地,当第一时刻用户的表情信息与预设表情类型匹配时,可从步骤S5录制的监控视频中截取第一时刻所属时段内显示的第一屏幕图像。
其中,第一屏幕图像为动态图像,如视频、动图等,第一屏幕图像的起始时刻早于第一时刻,且第一屏幕图像的结束时刻晚于第一时刻。
优选地,可选取第一时刻前后一分钟时段内的第一屏幕图像。
可以想到,第一屏幕图像可以是某一时刻的静态图像,也可以是某一时段的动态图像。其中,动态图像更利于监护人了解真实情况,以明确儿童表情异常的前因后果。
在本实施例中,终端设备可监控用户的操作过程,用户的操作过程可体现屏幕显示变化中,从而录制屏幕显示变化作为监控视频,同时采集人脸图像。一方面,录制的监控视频可用于随时查看,便于监护人了解儿童;另一方面,可在用户表情异常时,及时截取致使该异常产生的屏幕图像,以便于及时发送给监护人。可见,从两方面对儿童起到监护作用,以减少终端设备对儿童产生的不利影响。
在更多的实施例中,为了减少监控视频所占用的内存,还可不进行实时录制,而仅在需要时直接截取目标屏幕图像或者时刻之后预设时长内的目标屏幕图像。
在图1所示实施例的基础上,图3示出了本发明一个实施例的终端控制方法的流程图,步骤S4包括:
步骤S41:向目标终端发送通知消息。
优选地,可发送通知消息给目标终端。
一方面,通知消息为终端设备的常用功能,更利于引起监护人的注意,避免误看;另一方面,通知消息为终端设备的常用功能,容易实现。
其中,通知消息包括短信、推送等。
其中,通知消息至少与用户的人脸图像属于同时段内的目标屏幕图像,以及用于表示用户的表情信息的内容。
优选地,在用户的表情信息与预设表情类型匹配的情况下,可输出该时刻的用户的人脸图像,输出的人脸图像可以是视频形式或者图片形式。
进一步地,将输出的用户的人脸图像,以及与用户的人脸图像属于同时段内的目标屏幕图像都发送给目标终端。监护人可结合人脸图像和目标屏幕图像,对儿童提供帮助。
例如,若从人脸图像看到儿童受到惊吓,则监护人可进行安慰、提供心理治疗,并禁止儿童看与目标屏幕图像相关视频动画;若目标屏幕图像为黄暴内容,且从人脸图像看到儿童比较害怕,则禁止儿童看与目标屏幕图像相关视频动画;若从人脸图像看到儿童大笑,则可根据目标屏幕图像了解儿童的喜好,并根据其喜好进行良好沟通和教育培养。
优选地,在用户的表情信息与预设表情类型匹配的情况下,还可输出用于表示该时刻的用户的表情信息的其它内容,如关键字:开心、难过等。
进一步地,将用于表示该时刻的用户的表情信息的其它内容,以及与用户的人脸图像属于同时段内的目标屏幕图像都发送给目标终端。
优选地,用于表示用户的表情信息的内容形式不限于图像、文字、语音等。
在本实施例中,以通知消息的方式告知监护人,儿童出现表情异常时,同时将用于表示用户的表情信息的内容,以及致使产生该人脸图像的目标屏幕图像一并包含在通知消息内,从而监护人同时看到用户的表情信息相关内容和目标屏幕图像,为监护人提供更多参考信息,进而利于监护人对儿童做出正确指引,使儿童健康成长。
在图1所示实施例的基础上,图4示出了本发明一个实施例的终端控制方法的流程图,步骤S4包括:
步骤S42:获取预存的第一账号。
步骤S43:向与第一账号对应的目标终端发送目标屏幕图像。
优选地,预存的第一账号为提前绑定的目标终端的识别码。
目标终端的识别码包括电话号码、社交应用的账户等。
示例性地,在前述的儿童模式下,可绑定默认的联系人号码或微信账号,例如监护人的电话号码,当终端设备检测到异常情况,系统会立即发送通知消息给绑定的号码。
或者,系统会立即拨打绑定的号码,当对方接通后,可播放提前设定的语音,以起到告知异常的作用。
综上,本实施例为了解决儿童在使用终端设备时,没有监护人实时在旁边监护的问题,终端设备系统可起到实时监护的作用。其中,利用人脸识别功能,实时捕捉儿童的面部表情,并分析出表情的类型,根据儿童的表情类型推断儿童看到的画面较为异常,可能是血腥暴力画面,从而进行截屏,根据绑定的监护人联系号码,将录制的目标屏幕图像和儿童的表情图像发送给监护人,以通知监护人,从而监护人可以及时对儿童进行正确的指导,防止误入歧途或留下心理阴影。
在更多的实施例中,在步骤S3之后,还可包括:对与用户的人脸图像属于同时段内的目标屏幕图像进行分析,并在与用户的人脸图像属于同时段内的目标屏幕图像与预设图像匹配的情况下,向目标终端发送与用户的人脸图像属于同时段内的目标屏幕图像。
示例性地,利用人脸识别功能,实时捕捉儿童的面部表情,并分析出表情的类型,根据儿童的表情类型推断儿童看到的目标屏幕图像较为异常,则获取儿童观看的目标屏幕图像,并对目标屏幕图像进行分析,若目标屏幕图像与预设图像匹配,预设图像可以是血腥暴力图像,则发送目标屏幕图像。这样,增加一个对目标屏幕图像分析的步骤,还可避免因对儿童的面部表情错误判断,导致误发送现象发生,提高向目标终端发送目标屏幕图像这一事件的准确性。
图5示出了本发明另一个实施例的终端设备的框图,包括:
人脸图像采集模块10,用于采集用户的人脸图像;
表情信息获得模块20,用于基于用户的人脸图像中的人脸特征信息,获得用户的表情信息;
目标屏幕图像获取模块30,用于在表情信息与预设表情类型匹配的情况下,获取与用户的人脸图像属于同时段内的目标屏幕图像;
目标屏幕图像发送模块40,用于向目标终端发送目标屏幕图像。
在本实施例中,用户在使用终端设备的过程中,例如观看视频、玩游戏等,终端设备采集当前用户的人脸图像,并提取人脸图像中的人脸特征信息进行分析,并基于人脸图像中的人脸特征信息分析得到用户的表情信息。当用户的表情信息与预设表情类型匹配时,可以得到用户的表情信息满足特定的表情类型,例如不同于常态的表情类型等,则获取致使用户出现当前表情的目标屏幕图像,并发送至目标终端。特别是用户为儿童时,当儿童看到一些异常画面时,面部特征不同于常态下的面部特征,即儿童可能作出开心、难过、害怕等表情,从而获取致使儿童作出非常态表情的目标屏幕图像,发送给监护人所使用的目标终端,进而监护人第一时间看到目标屏幕图像,可对儿童进行相应的辅导,以帮助儿童合理利用终端设备,减少终端设备对儿童造成的不利影响。
优选地,还包括:
屏幕图像录制模块,用于基于终端设备对用户的输入响应,录制终端设备显示的屏幕图像;
目标屏幕图像获取模块30包括:
第一获取单元,用于在第一时刻表情信息与预设表情类型匹配的情况下,获取第一时刻所属时段内的第一屏幕图像;
其中,第一屏幕图像为动态图像,且第一屏幕图像的起始时刻早于第一时刻,第一屏幕图像的结束时刻晚于第一时刻。
优选地,目标屏幕图像发送模块40包括:
消息发送单元,用于向目标终端发送通知消息;
其中,通知消息至少包括与用户的人脸图像属于同时段内的目标屏幕图像,以及用于表示用户的表情信息的内容。
优选地,目标屏幕图像发送模块40包括:
第一账号获取单元,用于获取预存的第一账号;
第一发送单元,用于向与第一账号对应的目标终端发送目标屏幕图像。
本发明实施例提供的终端设备能够实现图1至图4的方法实施例中终端设备实现的各个过程,为避免重复,这里不再赘述。
图6为实现本发明各个实施例的一种终端设备的硬件结构示意图,该终端设备100包括但不限于:射频单元101、网络模块102、音频输出单元103、输入单元104、传感器105、显示单元106、用户输入单元107、接口单元108、存储器109、处理器110、以及电源111等部件。本领域技术人员可以理解,图6中示出的终端设备结构并不构成对终端设备的限定,终端设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。在本发明实施例中,终端设备包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端设备、可穿戴设备、以及计步器等。
其中,处理器110,用于采集用户的人脸图像;基于所述用户的人脸图像中的人脸特征信息,获得所述用户的表情信息;在所述表情信息与预设表情类型匹配的情况下,获取与所述用户的人脸图像属于同时段内的目标屏幕图像;向目标终端发送所述目标屏幕图像。
在本实施例中,用户在使用终端设备的过程中,例如观看视频、玩游戏等,终端设备采集当前用户的人脸图像,并提取人脸图像中的人脸特征信息进行分析,并基于人脸图像中的人脸特征信息分析得到用户的表情信息。当用户的表情信息与预设表情类型匹配时,可以得到用户的表情信息满足特定的表情类型,例如不同于常态的表情类型等,则获取致使用户出现当前表情的目标屏幕图像,并发送至目标终端。特别是用户为儿童时,当儿童看到一些异常画面时,面部特征不同于常态下的面部特征,即儿童可能作出开心、难过、害怕等表情,从而获取致使儿童作出非常态表情的目标屏幕图像,发送给监护人所使用的目标终端,进而监护人第一时间看到目标屏幕图像,可对儿童进行相应的辅导,以帮助儿童合理利用终端设备,减少终端设备对儿童造成的不利影响。
应理解的是,本发明实施例中,射频单元101可用于收发信息或通话过程中,信号的接收和发送,具体的,将来自基站的下行数据接收后,给处理器110处理;另外,将上行的数据发送给基站。通常,射频单元101包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元101还可以通过无线通信系统与网络和其他设备通信。
终端设备通过网络模块102为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元103可以将射频单元101或网络模块102接收的或者在存储器109中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元103还可以提供与终端设备100执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元103包括扬声器、蜂鸣器以及受话器等。
输入单元104用于接收音频或视频信号。输入单元104可以包括图形处理器(GraphicsProcessingUnit,GPU)1041和麦克风1042,图形处理器1041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元106上。经图形处理器1041处理后的图像帧可以存储在存储器109(或其它存储介质)中或者经由射频单元101或网络模块102进行发送。麦克风1042可以接收声音,并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元101发送到移动通信基站的格式输出。
终端设备100还包括至少一种传感器105,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板1061的亮度,接近传感器可在终端设备100移动到耳边时,关闭显示面板1061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别终端设备姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器105还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
显示单元106用于显示由用户输入的信息或提供给用户的信息。显示单元106可包括显示面板1061,可以采用液晶显示器(LiquidCrystalDisplay,LCD)、有机发光二极管(OrganicLight-EmittingDiode,OLED)等形式来配置显示面板1061。
用户输入单元107可用于接收输入的数字或字符信息,以及产生与终端设备的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元107包括触控面板1071以及其他输入设备1072。触控面板1071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板1071上或在触控面板1071附近的操作)。触控面板1071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器110,接收处理器110发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板1071。除了触控面板1071,用户输入单元107还可以包括其他输入设备1072。具体地,其他输入设备1072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
进一步的,触控面板1071可覆盖在显示面板1061上,当触控面板1071检测到在其上或附近的触摸操作后,传送给处理器110以确定触摸事件的类型,随后处理器110根据触摸事件的类型在显示面板1061上提供相应的视觉输出。虽然在图6中,触控面板1071与显示面板1061是作为两个独立的部件来实现终端设备的输入和输出功能,但是在某些实施例中,可以将触控面板1071与显示面板1061集成而实现终端设备的输入和输出功能,具体此处不做限定。
接口单元108为外部装置与终端设备100连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元108可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到终端设备100内的一个或多个元件或者可以用于在终端设备100和外部装置之间传输数据。
存储器109可用于存储软件程序以及各种数据。存储器109可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器109可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器110是终端设备的控制中心,利用各种接口和线路连接整个终端设备的各个部分,通过运行或执行存储在存储器109内的软件程序和/或模块,以及调用存储在存储器109内的数据,执行终端设备的各种功能和处理数据,从而对终端设备进行整体监控。处理器110可包括一个或多个处理单元;优选的,处理器110可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器110中。
终端设备100还可以包括给各个部件供电的电源111(比如电池),优选的,电源111可以通过电源管理系统与处理器110逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外,终端设备100包括一些未示出的功能模块,在此不再赘述。
优选的,本发明实施例还提供一种终端设备,包括处理器110,存储器109,存储在存储器109上并可在所述处理器110上运行的计算机程序,该计算机程序被处理器110执行时实现上述终端控制方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述终端控制方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-OnlyMemory,简称ROM)、随机存取存储器(RandomAccessMemory,简称RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。

Claims (8)

1.一种终端控制方法,应用于终端设备,其特征在于,包括:
采集用户的人脸图像;
基于所述用户的人脸图像中的人脸特征信息,获得所述用户的表情信息;
在所述表情信息与预设表情类型匹配的情况下,获取与所述用户的人脸图像属于同时段内的目标屏幕图像,其中,预设表情类型为愤怒、悲伤、恐惧、难过、开心、激动中的一种;
向目标终端发送所述目标屏幕图像;
所述向目标终端发送所述目标屏幕图像,包括:
向目标终端发送通知消息;
其中,所述通知消息至少包括与所述用户的人脸图像属于同时段内的目标屏幕图像,以及用于表示所述用户的表情信息的内容。
2.根据权利要求1所述的方法,其特征在于,所述在所述表情信息与预设表情类型匹配的情况下,获取与所述用户的人脸图像属于同时段内的目标屏幕图像之前,还包括:
基于所述终端设备对所述用户的输入响应,录制所述终端设备显示的屏幕图像;
所述在所述表情信息与预设表情类型匹配的情况下,获取与所述用户的人脸图像属于同时段内的目标屏幕图像,包括:
在第一时刻所述表情信息与预设表情类型匹配的情况下,获取所述第一时刻所属时段内的第一屏幕图像;
其中,所述第一屏幕图像为动态图像,且所述第一屏幕图像的起始时刻早于所述第一时刻,所述第一屏幕图像的结束时刻晚于所述第一时刻。
3.根据权利要求1所述的方法,其特征在于,所述目标终端发送所述目标屏幕图像,包括:
获取预存的第一账号;
向与所述第一账号对应的目标终端发送所述目标屏幕图像。
4.一种终端设备,其特征在于,包括:
人脸图像采集模块,用于采集用户的人脸图像;
表情信息获得模块,用于基于所述用户的人脸图像中的人脸特征信息,获得所述用户的表情信息;
目标屏幕图像获取模块,用于在所述表情信息与预设表情类型匹配的情况下,获取与所述用户的人脸图像属于同时段内的目标屏幕图像,其中,预设表情类型为愤怒、悲伤、恐惧、难过、开心、激动中的一种;
目标屏幕图像发送模块,用于向目标终端发送所述目标屏幕图像;
所述目标屏幕图像发送模块包括:
消息发送单元,用于向目标终端发送通知消息;
其中,所述通知消息至少包括与所述用户的人脸图像属于同时段内的目标屏幕图像,以及用于表示所述用户的表情信息的内容。
5.根据权利要求4所述的终端设备,其特征在于,还包括:
屏幕图像录制模块,用于基于所述终端设备对所述用户的输入响应,录制所述终端设备显示的屏幕图像;
所述目标屏幕图像获取模块包括:
第一获取单元,用于在第一时刻所述表情信息与预设表情类型匹配的情况下,获取所述第一时刻所属时段内的第一屏幕图像;
其中,所述第一屏幕图像为动态图像,且所述第一屏幕图像的起始时刻早于所述第一时刻,所述第一屏幕图像的结束时刻晚于所述第一时刻。
6.根据权利要求4所述的终端设备,其特征在于,所述目标屏幕图像发送模块包括:
第一账号获取单元,用于获取预存的第一账号;
第一发送单元,用于向与所述第一账号对应的目标终端发送所述目标屏幕图像。
7.一种终端设备,其特征在于,包括处理器,存储器,存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至3中任一项所述的终端控制方法的步骤。
8.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至3中任一项所述的终端控制方法的步骤。
CN201910464526.8A 2019-05-30 2019-05-30 终端控制方法及终端设备 Active CN110225196B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910464526.8A CN110225196B (zh) 2019-05-30 2019-05-30 终端控制方法及终端设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910464526.8A CN110225196B (zh) 2019-05-30 2019-05-30 终端控制方法及终端设备

Publications (2)

Publication Number Publication Date
CN110225196A CN110225196A (zh) 2019-09-10
CN110225196B true CN110225196B (zh) 2021-01-26

Family

ID=67818670

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910464526.8A Active CN110225196B (zh) 2019-05-30 2019-05-30 终端控制方法及终端设备

Country Status (1)

Country Link
CN (1) CN110225196B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110866465A (zh) * 2019-10-29 2020-03-06 维沃移动通信有限公司 电子设备的控制方法及电子设备
CN111445417B (zh) * 2020-03-31 2023-12-19 维沃移动通信有限公司 图像处理方法、装置、电子设备及介质
CN113709165A (zh) * 2021-08-31 2021-11-26 贵州东冠科技有限公司 用于微表情的信息安全过滤系统及方法

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101917674A (zh) * 2010-06-23 2010-12-15 中兴通讯股份有限公司 在通话中传输信息的方法及装置
CN102546905A (zh) * 2010-12-20 2012-07-04 康佳集团股份有限公司 在移动终端中屏幕截图的方法、系统及移动终端
CN102799868B (zh) * 2012-07-10 2014-09-10 吉林禹硕动漫游戏科技股份有限公司 人脸面部关键表情识别方法
KR102182398B1 (ko) * 2013-07-10 2020-11-24 엘지전자 주식회사 전자 기기 및 그 제어 방법
TW201512882A (zh) * 2013-09-30 2015-04-01 Hon Hai Prec Ind Co Ltd 身份認證系統及方法
CN106502712A (zh) * 2015-09-07 2017-03-15 北京三星通信技术研究有限公司 基于用户操作的app改进方法和系统
CN106897725A (zh) * 2015-12-18 2017-06-27 西安中兴新软件有限责任公司 一种判断用户视力疲劳的方法及装置
CN105938543A (zh) * 2016-03-30 2016-09-14 乐视控股(北京)有限公司 一种基于防沉迷的终端运行控制方法、设备及系统
CN109284221B (zh) * 2018-10-31 2022-06-03 中国农业银行股份有限公司 一种预警系统及方法
CN109257649B (zh) * 2018-11-28 2021-12-24 维沃移动通信有限公司 一种多媒体文件生成方法及终端设备
CN109640119B (zh) * 2019-02-21 2021-06-11 百度在线网络技术(北京)有限公司 用于推送信息的方法和装置

Also Published As

Publication number Publication date
CN110225196A (zh) 2019-09-10

Similar Documents

Publication Publication Date Title
CN109151180B (zh) 一种对象识别方法及移动终端
CN109381165B (zh) 一种皮肤检测方法及移动终端
CN107613131B (zh) 一种应用程序免打扰方法、移动终端及计算机可读存储介质
CN108632658B (zh) 一种弹幕显示方法、终端
CN108494665B (zh) 一种群消息显示方法及移动终端
CN108616448B (zh) 一种信息分享的路径推荐方法及移动终端
CN109960813A (zh) 一种翻译方法、移动终端及计算机可读存储介质
CN107742072B (zh) 人脸识别方法及移动终端
CN110225196B (zh) 终端控制方法及终端设备
CN110825226A (zh) 消息查看方法及终端
CN108683850B (zh) 一种拍摄提示方法及移动终端
CN111614544B (zh) 消息处理方法及电子设备
CN108962187B (zh) 屏幕亮度调节方法及移动终端
CN108334196B (zh) 一种文件处理方法及移动终端
CN107734170B (zh) 一种通知消息处理方法、移动终端及穿戴设备
CN107908705A (zh) 一种信息推送方法、信息推送装置及移动终端
CN108366221A (zh) 一种视频通话方法和终端
CN109166164B (zh) 一种表情图片的生成方法及终端
CN107809674A (zh) 一种基于视频的用户反应获取、处理方法、终端及服务器
CN108133708B (zh) 一种语音助手的控制方法、装置及移动终端
CN110062281B (zh) 一种播放进度调节方法及其终端设备
CN109164908B (zh) 一种界面控制方法及移动终端
CN110750198A (zh) 一种表情发送方法及移动终端
CN109819331B (zh) 一种视频通话方法、装置、移动终端
CN110213439B (zh) 一种消息处理方法和终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant