基于网络摄像头的情绪状态检测

基于网络摄像头的情绪状态检测(中文7000字,英文PDF)
摘要  游戏设计者必须要处理监控游戏玩家的情绪状态这个复杂的任务。游戏中有许多不同的影响玩家情绪的因素。由于游戏的体验经历几乎发生在无意识下，例如有声思维等传统方法可能会干扰游戏体验，从而使获得的结果产生偏差。其他方法包括将电缆和电极装配到播放器监测生物信息。尽管这些设备可以提供非常准确的结果，但它们并不常见，并且可能导致游戏时产生不适感。因此我们提出了一种基于网络摄像头的心率监测方法，它可以用来预测运动员的情绪状态。我们首先分析关于情绪状态的心率变化。这让我们能够找到情绪状态之间的相关性，例如沮丧，感兴趣，挑战和无聊。第二步是用创建一个基于网络摄像头的方法来监控心率。这是通过从面部区域提取RGB通道然后使用降维方法检索底层组件来执行的。从基于网络摄像头的方法获得的结果远非完美，但这是预期的，因为我们在实际条件下进行了测试。最后一个目标是使用从基于网络摄像头的方法获得的心率来预测玩家的情绪状态。预测的准确性高达76%，超出了我们的预期目标。该系统将在Unity 3D中实现，以使其集成和采用更容易。