- android - 多次调用 OnPrimaryClipChangedListener
- android - 无法更新 RecyclerView 中的 TextView 字段
- android.database.CursorIndexOutOfBoundsException : Index 0 requested, 光标大小为 0
- android - 使用 AppCompat 时,我们是否需要明确指定其 UI 组件(Spinner、EditText)颜色
我对面部表情识别领域还很陌生,目前我正在通过深度学习特别是 CNN 对此进行研究。我对准备和/或预处理我的数据有一些疑问。
我已经分割了正面面部表情的视频(例如,一个人根据他/她的注释表达快乐情绪的 2-3 秒视频)。
注意:我的参与者表现出的表情强度很低(不是夸张的表情/微表情)
一般问题:现在,我应该如何准备我的数据以使用 CNN 进行训练(我有点倾向于使用深度学习库 TensorFlow)?
问题 1:我读过一些基于深度学习的面部表情识别 (FER) 论文,这些论文建议采用该表情的峰值(很可能是单个图像)并将该图像用作一部分你的训练数据。我怎么知道表达式的峰值?我的依据是什么?如果我只拍一张图片,参与者表现出的细微表情的一些重要画面会不会丢失?
问题 2:或者在 OpenCV 中执行分段视频以检测(例如 Viola-Jones)、裁剪和保存每帧的人脸,并将这些图像用作我的训练数据的一部分带有适当的标签?我猜某些人脸帧是多余的。然而,由于我们知道数据中的参与者表现出低强度的表情(微表情),因此面部的一些 Action 也可能很重要。
非常感谢任何能回答的人,非常感谢!
最佳答案
正如@unique monkey 已经指出的,这通常是一项监督学习任务。如果你想提取一个独立的“峰值”点,我建议你扫描输入图像并在每个序列中找到引用点与主体静止状态偏离最大的那个。
如果您没有获得静止状态,那么视频剪辑是如何裁剪的?例如,是否要求受试者做出表情并保持住?剪辑涵盖了整个表达的哪一部分(之前、表达、之后)?取视频剪辑的一个或两个端点;从每一端绘制引用点的运动图,并寻找差异最大的帧,然后转向另一端点。
关于opencv - CNN面部表情识别数据准备,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/37452073/
中同一行中未对齐的
-
javascript - Handlebars 表情
我遇到了 Handlebars 表达式 {{!< default}}我不明白。在问这个问题之前,我曾尝试在谷歌上搜索答案。但是,我找不到任何答案。谁能解释一下这个表达式是什么意思? 最佳答案 在 Ha
-
IM聊天教程之发送图片/视频/语音/表情
经常有朋友问起,如何在im即时通讯中实现发送图片、视频、语音和表情?
为此,小编特意写了一个vue版本的demo,实现了图片视频文件和表情的的发送,参考这个demo源代码,相信你就可以轻松的用un
-
json - 如何使用 twitch 表情 API
这里是一个网站 ( https://twitchemotes.com/apidocs ),它展示了一个用于获取 twitch 表情的 API(基本上是描述属于不同用户的一组图像的 json)。 API
-
Python 3 正则表达式和 Unicode 表情
使用 Python 3,像下面这样的简单脚本应该按预期运行,但似乎会因 unicode 表情字符串而窒息: import re phrase = "(╯°□°)╯ ︵ ┻━┻" pattern = r
-
android - 表情符号(表情) View /键盘布局的实现
我试图弄清楚表情符号(表情)选择是如何在 Facebook 应用和 Google Hangouts 应用上实现的。我查看了 Android API 示例中的 SoftKeyboard 演示应用程序,但
-
android - 是否可以在 android 通知文本中显示笑脸/表情/图像跨度?
我正在尝试在 android 通知文本中显示笑脸(或图像范围)。它不起作用。有人知道怎么做吗?谢谢。 代码如下: SpannableStringBuilder builder = new Spanna
作者热门文章
- android - 多次调用 OnPrimaryClipChangedListener
- android - 无法更新 RecyclerView 中的 TextView 字段
- android.database.CursorIndexOutOfBoundsException : Index 0 requested, 光标大小为 0
- android - 使用 AppCompat 时,我们是否需要明确指定其 UI 组件(Spinner、EditText)颜色
滴滴打车优惠券免费领取
我是一名优秀的程序员,十分优秀!