基于自注意力机制的电子商务视频高光检测方法及系统

摘要

本发明公开了一种基于自注意力机制的电子商务视频高光检测方法及系统，属于视频高光检测领域。整个检测过程分为两个阶段，在第一阶段将视频分成待检测片段和上下文片段，分别通过绝对时序编码和相对时序编码将其位置关系编码到整个视频中，通过加性注意力机制和自注意力机制将得出候选分数较高的若干候选片段；在第二阶段，从生成的若干候选片段中选择最好的得分最高的片段作为最后的高光片段输出。本发明基于自注意机制，利用绝对位置编码和相对位置编码，能够综合考虑片段与上下文以及片段和整体的关系，在高光检测中所取得的效果相比于传统的方法更好，精度更高。