首页> 美国卫生研究院文献>Journal of Eye Movement Research >MAGiC: A Multimodal Framework for Analysing Gaze in Dyadic Communication
【2h】

MAGiC: A Multimodal Framework for Analysing Gaze in Dyadic Communication

机译:魔法:用于分析二元通信凝视的多模态框架

代理获取
本网站仅为用户提供外文OA文献查询和代理获取服务,本网站没有原文。下单后我们将采用程序或人工为您竭诚获取高质量的原文,但由于OA文献来源多样且变更频繁,仍可能出现获取不到、文献不完整或与标题不符等情况,如果获取不到我们将提供退款服务。请知悉。

摘要

The analysis of dynamic scenes has been a challenging domain in eye tracking research.This study presents a framework, named MAGiC, for analyzing gaze contact and gaze aversionin face-to-face communication. MAGiC provides an environment that is able to detectand track the conversation partner’s face automatically, overlay gaze data on top of the facevideo, and incorporate speech by means of speech-act annotation. Specifically, MAGiC integrateseye tracking data for gaze, audio data for speech segmentation, and video data forface tracking. MAGiC is an open source framework and its usage is demonstrated via publiclyavailable video content and wiki pages. We explored the capabilities of MAGiCthrough a pilot study and showed that it facilitates the analysis of dynamic gaze data byreducing the annotation effort and the time spent for manual analysis of video data.
机译:动态场景分析是眼睛跟踪研究中有挑战性的领域。本研究提出了一个名为魔法的框架,用于分析凝视接触和凝视厌恶在面对面的沟通中。魔术提供了能够检测的环境并自动跟踪对话伙伴的脸部,覆盖凝视数据在脸部顶部视频,并通过演讲ACT注释并入演讲。具体来说,魔法集成了凝视的眼睛跟踪数据,语音分割的音频数据和视频数据面部跟踪。魔术是一个开源框架,它的用法是通过公开展示的可用的视频内容和维基页面。我们探索了魔法的能力通过试点研究并显示它促进了动态凝视数据的分析减少注释工作和用于手动分析视频数据的时间。

著录项

相似文献

  • 外文文献
  • 中文文献
  • 专利
代理获取

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号