全文索引

摘要： 为了整合企业内网中各业务系统模块的检索入口,消除数据孤岛,该系统基于一套爬取业务数据源的方法,使用分布式任务调度中心定时或手动执行爬取任务,建立缓存和全文索引库,并提供简洁且功能强大的数据库检索入口,直观、高效地将有价值的企业信息整合展示给企业用户,帮助用户快速完成对企业内各异构业务数据库的信息检索,并可以从搜索结果访问到相应的业务模块,有效提高了企业用户访问不同业务系统信息的效率和能力。

摘要： 本文为了解决用倒排表索引XML节点而导致的查询效率低下,以及现有结构连接算法对值约束考虑不够的问题,本文给出运用原生XML数据库索引框架的结构索引合并PC子路径,运用XML值索引及全文索引处理比较运算符,产生查询优化树。实验表明,本文提出的算法极大的减少了查询树节点的个数,缩短了CPU时间开销和磁盘I/O开销。

摘要： 数据库系统随着其数据量的增加，响应时间与吞吐率会受到影响，从而给整个信息化系统的性能与用户体验带来阻碍，所以，就需要对查询过程进行优化。本文以标准化服务平台系统的应用开发为依托，对不同业务需要情况下的三种Oracle查询优化策略进行详细立阐述，即：基于ORACLE平台的全文索引技术，可以有效提高数据库管理中的题录查询速度；基于ORACLE平台的快速刷新物化视图技术，可以有效提高整个数据库系统的年检查询速度；基于ORACLE平台中的Job定时任务，可以对标准状态进行有效的自动修改。

摘要： 系统数据量的增加,使得系统响应时间和系统吞吐率达不到要求,直接关系到系统性能和用户体验,因此对查询进行优化显得至关重要.以标准化服务平台系统应用开发为例,详细阐述了针对特定业务需求背景下的三种Oracle查询优化策略:基于Oracle全文索引,提高题录查询速度;基于Oracle快速刷新物化视图技术,提高年检查询速度;基于Oracle的Job定时任务,自动修改标准状态.

摘要： 在社会快速的发展过程,所产生的数据信息量越来越大,由于信息基数的数量较大,使得人们在数据检索应用中难度较大,需要花费大量的时间,才能完成查找。桌面搜索引擎的应用,能够保证用户在较短的时间内从大量的数据中获取自己所需要的数据信息;在桌面搜索引擎应用中,其主要采用的是全文检索的方式,因此,所需要索引数据也较多,能够节省储存空间,提高运行效率。倒排索引压缩的应用,能够有效提高索引效率,文章主要针对倒排索引压缩在桌面搜索引擎中的应用进行研究分析,明确了各项内容,希望可以促进倒排索引压缩技术的应用。

摘要： 在社会快速的发展过程,所产生的数据信息量越来越大,由于信息基数的数量较大,使得人们在数据检索应用中难度较大,需要花费大量的时间,才能完成查找.桌面搜索引擎的应用,能够保证用尸在较短的时间内从大量的数据中获取自己所需要的数据信息;在桌面搜索引擎应用中,其主要采用的是全文检索的方式,因此,所需要索引数据也较多,能够节省储存空间,提高运行效率.倒排索引压缩的应用,能够有效提高索引效率,文章主要针对倒排索引压缩在桌面搜索引擎中的应用进行研究分析,明确了各项内容,希望可以促进倒排索引压缩技术的应用.

摘要： 针对P-BWT精确匹配算法存在只支持短串查询并且只能工作在单处理器上的问题,提出了一个多核并行的支持任意查询长度的精确查询算法.改进了P-BWT索引上的查询过程,当一个查询串跨越了多个数据分片时,首先在其匹配的最后一个分片上查询,然后依次在前面分片上进行验证.进一步提出了一个多核并行查询算法来减少搜索和验证过程的迭代次数.实验结果表明,所述算法可以高效并行地完成子串匹配任务.

摘要： 超市的货架摆放、商品陈列,在一定程度上影响了商品的销售.通过对销售数据的分析,挖掘出商品之间的关联程度,进而确定商品在货架上的摆放位置,便于购物者就近选择,有利于提高超市的销售额.虽然,在分析数据过程中可以通过精确查询得到某两种或几种商品之间的关系,但同类型商品和某种其它商品之间的关系就不能通过精确查询得到.全文索引技术是目前搜索引擎的关键技术,由于商品种类繁多,在分析过程中使用全文索引技术可以减少系统开销,提高检索效率和精准度.

摘要： 本文从地理空间情报查询出发，重点对情报文档管理、全文索引构建进行研究探讨。最后，利用SQL Server，建立地理军情数据库。实现地理军情数据的快速检索。

摘要： 介绍了数据清洗中的SNM算法和全文索引技术,通过引入全文索引技术对SNM算法进行了改进,以此提高了重复记录查找的速度和准确率,从而较好地提升了SNM算法的性能.%Data cleaning algorithm SNM and full-text indexing technology are introduced,the enhanced SNM algorithm are proposed by the introduction of full-text indexing technology.In order to improve the duplicate records to compare several degrees and accuracy,so improve SNM algorithm performance.

摘要： FinteX是一个功能强大、高性能、灵活的全文索引和检索平台。FinteX的主要目标是作为一个开放式的实验平台研究信息检索的各种数据结构、算法和模型,并可快速搭建实验系统。高性能和灵活的架构也使FinteX可以应甩在各种垂直搜索以及大规模搜索引擎等领域中。本文详细描述了FinteX的系统架构、相关算法、索引结构和系统实现。在426GB的GOV2数据集和271GB的搜狗互联网语料上的实验表明,FinteX是一个高性能、规模可扩展的全文索引和检索平台。

摘要： 以美国专利数据库为后台数据库，综合利用全文索引、海量数据输入输出、远程登录和异地存储等多项技术，设计与实现了美国专利关键技术检索系统。该系统成功实现了对美国专利数据库的摘要和标题字段中的专利关键技术词及短语的简单检索、任意条件组合的复杂检索、本地和远程的实时查询、本地和异地的多格式输出等目标。实验结果表明。其检索速度比普通索引快100倍以上，且能够满足各种复杂的检索和输出要求。

摘要： 本文对搜索产业中新兴的垂直搜索的情况进行了概括阐述,指出了垂直搜索的网页采集技术、网页解析技术、全文索引和联合检索技术、文本挖掘技术等技术,并对整合行业资源、集成行业产业链的搜索门户、结构化搜索和非结构化搜索有机结合的搜索引擎、具有高粘性、社区化特性的行业深度搜索引擎的特点进行了论述,还对垂直搜索的未来发展方向进行了展望。

摘要： 本文阐述了核电文档信息化建设背景，介绍了核电企业文档信息特点及其存储管理现状，并分析了这些非结构化的文档信息存储的需求要点。

摘要： 本文阐述了核电文档信息化建设背景，介绍了核电企业文档信息特点及其存储管理现状，并分析了这些非结构化的文档信息存储的需求要点。

摘要： 本文阐述了核电文档信息化建设背景，介绍了核电企业文档信息特点及其存储管理现状，并分析了这些非结构化的文档信息存储的需求要点。

摘要： 为了方便研究者分析领域的研究动态，了解领域内研究的重要研究者和重要文献，并对科技文献和科技工作者的工作进行准确的评价，我们借助国家科技图书文献中心(NSTL)雄厚的资源优势，联合清华大学等有关优势单位，共同开发了面向西文资源的科技信息资源内容监测与分析服务平台，该平台具有专家、期刊／会议和

摘要： 为了方便研究者分析领域的研究动态，了解领域内研究的重要研究者和重要文献，并对科技文献和科技工作者的工作进行准确的评价，我们借助国家科技图书文献中心(NSTL)雄厚的资源优势，联合清华大学等有关优势单位，共同开发了面向西文资源的科技信息资源内容监测与分析服务平台，该平台具有专家、期刊／会议和

摘要： 为了方便研究者分析领域的研究动态，了解领域内研究的重要研究者和重要文献，并对科技文献和科技工作者的工作进行准确的评价，我们借助国家科技图书文献中心(NSTL)雄厚的资源优势，联合清华大学等有关优势单位，共同开发了面向西文资源的科技信息资源内容监测与分析服务平台，该平台具有专家、期刊／会议和

摘要： 为了方便研究者分析领域的研究动态，了解领域内研究的重要研究者和重要文献，并对科技文献和科技工作者的工作进行准确的评价，我们借助国家科技图书文献中心(NSTL)雄厚的资源优势，联合清华大学等有关优势单位，共同开发了面向西文资源的科技信息资源内容监测与分析服务平台，该平台具有专家、期刊／会议和

摘要： 本发明涉及一种采用全文索引的网络攻击入侵检测方法，包括以下步骤：1)建立模拟网络环境E，并生成正常网络流量和已知攻击异常流量；2)分别获取正常网络流量和已知攻击异常流量中各数据包的字面值；3)根据获取的字面值构建广义后缀数组SA和广义最长公共前缀数组LCPA；4)利用广义后缀数组SA和广义最长公共前缀数组LCPA，搜寻已知攻击异常流量中所有的公共字面值，作为潜在攻击特征；5)将潜在攻击特征作为训练集，训练二分类判决模型；6)利用训练完成的二分类判决模型判断被检测流量是否为异常流量，与现有技术相比，本发明具有检出率高且执行效率高等优点。

摘要： 本发明提出基于phoenix的Hbase二级全文索引方法及系统，包括步骤：对Hbase原始数据表建立二级全文索引表，并存储在Elasticsearch存储引擎中，建立二级全文索引表与Hbase原始数据表的关联外键，使得全文检索条件下推到Elasticsearch存储引擎后Elasticsearch存储引擎全文索引表的查询结果为Hbase原始数据表的rowkey；在进行全文索引时，phoenix查询服务器将客户端查询语句转换为Elasticsearch存储引擎可执行的查询表达式，并下推Elasticsearch存储引擎查询；phoenix查询服务器将Elasticsearch存储引擎返回的查询结果作为Hbase原始数据表的RowKey集合去Hbase存储引擎中查询，并将查询的最终结果返回给客户端。本发明将二级索引功能转换成了一次基于ElasticSearch的全文索引和一次基于HBase的RowKey查询，扩充了原有的Phoenix的功能，满足用户全文检索的需求。

摘要： 本申请涉及一种基于图数据库的全文索引方法和系统，通过在全文索引引擎中创建索引模板，将图数据库中字段类型为字符串的数据同步到全文索引引擎中，全文索引引擎根据索引模板为每一条字符串数据创建索引，得到全文索引；图数据库获取查询请求信息，将查询请求信息发送至全文索引引擎，全文索引引擎根据全文索引获取查询语句的第一结果集，图数据库对第一结果集进行基于键值对的数据扫描，得到第二结果集，其中，查询请求信息包括查询语句，全文索引引擎支持字符串类型的条件过滤，先在全文索引引擎快速查找到字符串数据，图数据库再对字符串数据进行基于键值对的数据扫描，得到字符串数据对应的多个属性值，提高数据检索的效率。

摘要： 本发明提供一种异步构建HBase全文索引的方法，属于计算机软件应用领域，本发明对大数据场景下的HBase数据进行异步实时构建全文索引；通过对HBase的WAL日志的读取和分析，根据用户的配置，对数据构建全文索引。避免了额外的数据处理带来的存储和计算开销。

摘要： 本发明提供一种构建HBase集群全文索引方法，数据读取方法以及数据写入方法，在HBase集群中配置Zookeeper，建立全文索引Table_Index表；HBase集群基于Zookeeper将集群的所有节点配置成一队列，在所述队列中存放每个节点的读取WAL日志；在Table_Index表中对应的每个节点位开启单独线程，按照队列的次序，将每个节点的WAL日志对应到Table_Index表的节点位，每个节点位上设有一HBase集群节点的读取WAL日志以及节点的开启线程。对HBase集群数据建立全文索引的方法，具有很好的时效性，并且避免了额外的数据处理带来的存储和计算开销。

摘要： 本发明公开基于MPP与全文索引构建分布式OLAP数据分析的方法及装置，其中，该方法包括：在搜索引擎建立索引，包含主键字段和至少一个全文查询字段；将全量数据写入MPP数据库的表，同时将主键字段的数据和全文查询字段的数据写入搜索引擎；在搜索引擎使用全文查询字段进行检索，并返回命中记录的主键列表；根据返回的主键列表，在MPP数据库使用主键列表进行数据查询，并对查询后的数据进行分析。该方法及装置在MPP数据库执行大数据量的查询，可以极大节约CPU、内存资源，查询性能高，没有过度的资源消耗，提升查询的稳定性。

摘要： 本发明涉及数据库存储计算技术领域，具体提供了一种库外全文索引方法，用户指定创建全文索引后,系统自动在rocksdb中创建kv索引同时将索引列得数据同步到Elasticsearch中创建数据的全文索引，Elasticsearch中只存储数据行的标识和索引列的索引数据，实际数据还存储到rocksdb的kv行中；使用全文语法Contains将全文过滤内容发送给系统，系统自动转接给Elasticsearch获取全文的命中结果标识组，得到结果后，重新拼装成实际的Key获取整行kv数据。与现有技术相比，本发明去除了数据的全量读取按行过滤的耗时方式，通过引入异构系统Elasticsearch，两套引擎库外少量交互，库内一次读取方式，方便快捷。

摘要： 本申请涉及一种基于图数据库的全文索引方法和系统，通过在全文索引引擎中创建索引模板，将图数据库中字段类型为字符串的数据同步到全文索引引擎中，全文索引引擎根据索引模板为每一条字符串数据创建索引，得到全文索引；图数据库获取查询请求信息，将查询请求信息发送至全文索引引擎，全文索引引擎根据全文索引获取查询语句的第一结果集，图数据库对第一结果集进行基于键值对的数据扫描，得到第二结果集，其中，查询请求信息包括查询语句，全文索引引擎支持字符串类型的条件过滤，先在全文索引引擎快速查找到字符串数据，图数据库再对字符串数据进行基于键值对的数据扫描，得到字符串数据对应的多个属性值，提高数据检索的效率。

摘要： 本发明提出基于phoenix的Hbase二级全文索引方法及系统，包括步骤：对Hbase原始数据表建立二级全文索引表，并存储在Elasticsearch存储引擎中，建立二级全文索引表与Hbase原始数据表的关联外键，使得全文检索条件下推到Elasticsearch存储引擎后Elasticsearch存储引擎全文索引表的查询结果为Hbase原始数据表的rowkey；在进行全文索引时，phoenix查询服务器将客户端查询语句转换为Elasticsearch存储引擎可执行的查询表达式，并下推Elasticsearch存储引擎查询；phoenix查询服务器将Elasticsearch存储引擎返回的查询结果作为Hbase原始数据表的RowKey集合去Hbase存储引擎中查询，并将查询的最终结果返回给客户端。本发明将二级索引功能转换成了一次基于ElasticSearch的全文索引和一次基于HBase的RowKey查询，扩充了原有的Phoenix的功能，满足用户全文检索的需求。

摘要： 本发明涉及一种采用全文索引的网络攻击入侵检测方法，包括以下步骤：1)建立模拟网络环境E，并生成正常网络流量和已知攻击异常流量；2)分别获取正常网络流量和已知攻击异常流量中各数据包的字面值；3)根据获取的字面值构建广义后缀数组SA和广义最长公共前缀数组LCPA；4)利用广义后缀数组SA和广义最长公共前缀数组LCPA，搜寻已知攻击异常流量中所有的公共字面值，作为潜在攻击特征；5)将潜在攻击特征作为训练集，训练二分类判决模型；6)利用训练完成的二分类判决模型判断被检测流量是否为异常流量，与现有技术相比，本发明具有检出率高且执行效率高等优点。