互联网视频资源的快速发现与热点追踪技术

摘要

随着信息技术的迅猛发展，Internet的视频资源急剧增加，人们急切希望能如同网页搜索一样方便的找到想要的视频，并且能够知道最近的热点视频。传统的搜索引擎已经不能满足人们的需要，应运而生的视频搜索引擎迅猛发展起来，但想要完全贴合用户需求还有很长的路要走。它不仅要能够快速、全面的搜集视频资源信息，还要能够在众多的视频资源中分析出热点内容。
　　本文围绕着能够在实际环境中找出热点视频的需求,在深入研究了爬虫的工作原理的基础上，提出了先发现所有最新的节目，再用追踪技术判断热点程度变化的策略来实现找出热点视频的功能。然后经过不断进行优化和改进，从而较大幅度的提升了系统的运行效率，最终达到可实际运行的性能。
　　本文的主要成果可以归纳为以下几个方面：
　　首先，在对爬虫技术深入研究的基础上，基于重爬策略的思想，并结合了信息生存周期的概念，论证了基于信息生存周期预测的快速发现策略在实际环境中的可行性。这就有效满足视频搜索的及时性和全面性。
　　其次，通过对热点视频资源的研究，提出了热点视频资源的识别算法，通过基于热度变化预测的优化方法有效地控制了需要追踪资源的规模，进一步提高了系统性能，最终达到能够在实际环境中追踪候选热点资源的性能，为寻找热点视频资源的依据和保证。
　　然后，通过对实际性能的考察和调优，提出了热点发现与追踪系统的模型，提供了大量可以控制的配置参数，并通过实验对比，给出了实际操作中可以使用的参数范围。
　　最后，基于上述的理论研究成果，本文介绍了一个高性能的热点发现与追踪系统的设计开发。

目录

互联网视频资源的快速发现 与热点追踪技术

FAST DISCOVERY AND HOTSPOT TRACKING OF INTERNET VEDIO RESOURCES

摘 要

Abstract

目 录

第1章 绪 论

1.1 课题背景及研究的目的和意义

1.2 国内外相关技术发展现状

1.3 本文的主要内容

1.4 本文的结构安排

第2章 热点视频发现与追踪的基础概念

2.1 引言

2.2 热点视频的定义

2.3 关键技术概述

2.4互联网视频资源特征分析

2.5 本章小结

第3章 基于信息生存周期预测的最新视频资源 快速发现技术

3.1 引言

3.2 最新视频资源的通用发现方法

3.3 最新视频资源的快速发现方法

3.4实验分析

3.5本章小节

第4章 基于热度变化预测的热点视频资源 高效追踪技术

4.1 引言

4.2 热点视频资源的判别标准

4.4 实验分析

4.5 本章小节

第5章 系统设计与实现

5.1 引言

5.2 爬行系统的结构设计

5.3 主要功能模块的设计实现

5.4 主要性能指标

5.5本章小节

结 论

参考文献

哈尔滨工业大学硕士学位论文原创性声明

致 谢