研讨提出长视频中多标准检测微脸色片断的卷积神经网络 |
![]() |
微脸色是一种长久巨大的面部脸色,通常呈现在个别试图暗藏真实感触的时辰。微脸色的阐发具备潜在的利用代价,如在医疗关心等畛域。与罕见的一般脸色相比,微脸色有三个显着特征,即继续光阴短( 500ms)、强度低和局部活动。人类用肉眼较难发现和辨认长久而强劲的脸色,因而必要借助盘算机视觉来展开相关阐发。
微脸色检测的目的是定位微脸色在中产生的时辰,这一研讨具备适用代价。若能在一段中精确地检测和定位到某个光阴点有微脸色呈现,那么就阐明这团体在这个时辰或有异常。然而,在真实场景中,从年夜量头部举措和人脸脸色中检测拆散出巨大长久的微脸色是极具挑战性的工作。是以,今朝微脸色检测的研讨绝对较少。同时,因为微脸色数据库的样本量较少,限定了深度培训技术与微脸色检测办法的联合。近年来,更得当用于微脸色检测研讨的长数据集CAS(ME)2和SAMM已宣布。研讨长中微脸色的检测办法将有助于完成微脸色阐发在真实场景的利用。
受立体人脸检测技术启迪,中国迷信院生理研讨所行动迷信重点试验室黄昌兵研讨组测验考试将响应技术扩大至三维时-空上的人脸微脸色检测,提出一个多标准的卷积神经网络(CNN):MESNet。MESNet包括一个两阶段的预测框架和几种针对微脸色检测工作设计的特别的架构和战略。研讨设计出一个基于微脸色辨认工作的轻量级的2+1D-时空卷积网络,通过火别提取空间和光阴上微脸色特征来区分固定长度的视频片断是否为微脸色或非微脸色样本(图1)。在MESNet中,2+1D-时空卷积网络被用于提供骨干网络和预先训练的参数。此外,为了更精确地检测微脸色片断,研讨添加了一个片断候选网络(Clip Proposal Network,CPN)和一个分类回归网络(CRNet)。CPN是一个全卷积网络,它被增加到2+1D-时空卷积网络预训练的卷积层中,并将在长视频中一切能够的微脸色区间列入候选(图2)。CRNet模块对候选视频片断进前进一步判断,并回归它们的光阴界限,从而得出终极的微脸色片断检测成果(图3)。同时,为了提升网络的检测性能,视频片断的光流特征作为高级特征被输出到MESNet中。
此外,研讨还改良了之前的微脸色检测成果的评价办法,从新界说了更顺应基于微脸色区间检测的指标。在比来宣布的长视频数据集CAS(ME)2和SAMM中进行试验,并使用留一穿插验证法来评价定位性能。比照成果标明,该MESNet算法的微脸色片断检测性能表示优异,特殊是在SAMM数据集上,其检测成果显明优于其它已颁发的办法。(100yiyao.com)
医药网新闻
- 相关报道
-
- 臭名昭著的“致癌物”竟摇身一变成为抗癌分子药物?!多项研究:常见于不新鲜坚果、谷物中的黄曲霉素,其天然产物或成为精准抗癌药物 (2025-07-11)
- Nature:古代欧亚大陆病原体时空分布研究有望揭示人类传染病的历史演变 (2025-07-11)
- 医药推销回款减速度:企业资金周转按下快进键 (2025-07-11)
- 《自然》:减重影响真的很大!科学家分析近20万细胞,发现减重可逆转肥胖导致的细胞衰老,但促炎巨噬细胞持续存在,或为反弹原因 (2025-07-11)
- Nature头条:尼安德特人比我们想象的更聪明,比人类早10万年掌握“炼油”技术 (2025-07-11)
- 医保钱包开明地域再扩容,快来看看有您的他乡吗 (2025-07-10)
- STTT:上海九院李青峰/谢峰团队揭示巨痣/兽皮病致病新机制,并提出治疗新策略 (2025-07-10)
- Science重磅发现:人类成年后乃至老年时,大脑海马体中仍在持续产生新的神经元,有助于记忆和学习 (2025-07-10)
- 体脂率多少的男/女性最具吸引力?三项科学研究揭露“完美身材”:男性体脂率13-14%+肩腰比1.57;女性完美身材则更为严格 (2025-07-10)
- STTT:中科院/南开团队发现,膜蛋白TfR1可入核“劫持”p53,增强癌细胞DNA损伤修复功能,对抗化疗 (2025-07-10)
- 视频新闻
-
- 图片新闻
-
医药网免责声明:
- 本公司对医药网上刊登之所有信息不声明或保证其内容之正确性或可靠性;您于此接受并承认信赖任何信息所生之风险应自行承担。本公司,有权但无此义务,改善或更正所刊登信息任何部分之错误或疏失。
- 凡本网注明"来源:XXX(非医药网)"的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责。本网转载其他媒体之稿件,意在为公众提供免费服务。如稿件版权单位或个人不想在本网发布,可与本网联系,本网视情况可立即将其撤除。联系QQ:896150040