首页>中文会议>其他>2016第七届中国数据库技术大会

2016第七届中国数据库技术大会

召开年：2016
召开地：北京
出版时间： 2016-05-12

主办单位：ITPUB企业社区平台

会议文集：2016第七届中国数据库技术大会论文集

会议论文

热门论文

全部论文

全选（0）

1.自助BI在银行电信行业的应用实践
- 杨礼显
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：银行电信行业行业有很大的相似性:信息化建设起步早,系统建设完备.数据大集中、建设了数据仓库.数据分析的特点:数据量大;分支机构、分析用户多;需求覆盖面广;反集中:数据开放;从量大、面广、人多角度看,非其它传统行业客户可比.
2.大数据下的——RDBMS与Nosql
- 孙增辉
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：Oracle NoSQL数据库和Oracle数据库做了深度集成。通过Oracle的外部表功能，可以对NoSQL数据库编写S QL查询，甚至可以连接关系表。同时它还文兰Hadoop以及Apache的map-reduce技术。Oracle NoSQL数据库除了提供最终一致性之外，还提供了绝对一致性。注意，这个结构使用Oracle级(Oracle-grade)的严肃性存储数据。如果你不想使用由许多其他的NoSQL存储所提供的懒鬼级(slacker-grade)的最终一致性，可以通过Oracle NoSQL在所有复制节点的机器上使用绝对一致性。为此将会牺牲写入性能，当然这取决于你的选择。
3.从传统银行到互联网金融——Oracle数据库架构设计实践
- 杨廷琨
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：数据库架构设计：明确业务增长预期并转换为数据库指标，深入分析发现当前系统瓶颈，综合考虑可用性、性能和扩展性，根据业务预期和瓶颈进行容量预测。
4.基于大数据的查询意图识别其应用
- 叶祺
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：本文挖掘海量细粒度查询意图，建立查询与意图间映射关系，处理高频与长尾查询，高精确性与较高覆盖率，查询间的意图会有细微差别、误点情况，聚类算法要具有一定抗噪性，图挖掘中的社团发现算法。
5.美团点评数据仓库开发模式演进
- 宋洪鑫
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：本文阐述了美团点评数据仓库开发模式演进，包括ETL任务分组、资源隔离、权限控制、开放ETL-Review。
6.IoT通用数据分析平台研究
- 陈鹏
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：IoT通用数据分析平台，内嵌多种分析模型，灵活多维度分析，为IoT做特定支持，可随意做数据探索，形成数据闭环，海量数据存储，十亿记录实时分析。
7.PostgreSQL索引优化案例分析
- 窦贤明
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：根据表的status和timestamp字段取一天或几天范围内记录的查询旧较高、性能较差，这种属于本身返回的结果集就比较多的情况，如果不是时间范围特别长(如很长的时间里取其中少数几天)，普通索引的价值不是特别大。那么其实可以考虑采用分区表和块索引的方式来做尝试，或者改写业务SQL。
8.天工自动化运维平台介绍
- 张强
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：本文介绍了天工自动化运维平台整体架构、资源管理、数据平台、配置管理、智能调度。承接所有运维操作，流程可灵活配置。
9.华泰证券构建分布式高可用数据库架构的实践
- 管文琦
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：分布式数据库中间件的引入，通过分库分表，解决MySQL的SQL效率相对不足的问题，利用分布式中间件实现数据库水平扩展的能力，通过读写分离:解决负载问题。
10.平安数据库SQL审核平台
- 金海锋
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：平安数据库SQL审核平台，SQ LAud it工具核心模块为解析引擎和规则引擎，解析引擎用于识别并解析各类的SQL语句，输出SQL树形角酬开结果，规则引擎用于SQL语句的必改项违规扫描。
11.自动驾驶,驭势未来
- 周鑫
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：无人驾驶车规划行为的可预测性比智能更重要，强化视觉在定位与导航中的作用，弱化规划重要性，自身安全通过速度规控实现，将避障频率降到最低，减少对其他交通元素的影响，通过学习驾驶员行为提高无人驾驶行为的舒适性。
12.数据之大,云动未来——爱可生弹性云数据库PaaS平台,促进“互联网+”企业转型
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：数据库云PaaS平台的优势，部署简单，运维方便，极端情况不丢任何数据，切换时间短，多套灵活高可用分组，同城灾备，异地灾备一体化，贴近MySQL设计，自动处理上百种MySQL故障。
13.阿里海量数据迁移同步核心架构及最佳实践
- 付大超
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：数据传输服务(Data Transmission Service，简称DTS)支持以数据库为核心的结构化存储产品之间的数据传输，它是一种集数据迁移、数据订阅及实时同步于一体的数据传输服务。可以使用DTS轻松构建安全、可扩展、高可用的数据架构。
14.开源的虚拟大数据存储系统Alluxio(前Tachyon)的功能与使用案例介绍
- 顾荣
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：AIIuxio是世界上第一个以内存为中心(memory-centric)的虚拟的分布式存储系统，AIIuxio介于计算框架和现有的存储系统之间，为大数据软件栈带来了显著的性能提升。
15.大数据驱动的人力资源管理革新
- 单艺
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：本文介绍大数据驱动的人力资源管理，包括人才规划:行业人才报告；人才招聘:人才报告、能力测评、算法匹配；员工培训:个性化培训；工作绩效:People Analytics；薪资激励:薪酬报告、竞争力分析；员工关系:流失风险预测。
16.新一代数据分析利器——助力业务创新
- 陈赟
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：为了更好的在自助分析和IT管控之间获得平衡，IBM对商业智能做了重新定义，智能数据探索具有内置智能，可以提供种慧的自助服务，带来引导式体验，从而在日常行动中充分利用洞察，并根据洞察采取行动，实现企业需要的安全性和信任度。
17.Rapids Stream流数据库与物联网应用
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：流数据是一组顺序、大量、快速、连续到达的数据序列，一般情况下，数据流可被视为一个随时间延续而无限增长的动态数据集合。广泛应用于传感器网络、生产制造、金融服务、航空航天、气象测控和网络监控等领域。流式数据库系统就是其数据可以是连续的无界的加入时间概念的数据流，对数据的处理具有时间限制的数据库系统。系统的正确性不仅依赖于逻辑结果，还依赖于逻辑结果产生的时间。
18.内存计算与深度学习
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：基于内存计算RapidsDB特点：全内存分布式数据库，高性能，高吞吐量，高扩展性，满足ACID数据库基本要求，支持标准SQL语句，实时数据加载，动态数据导出，高性能存储过程，高可用性，异地灾备，动态迁移。
19.Transwarp StreamSQL:A SQL/PLSQL Stream engine on Spark
- 季钱飞
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：StreamSQL支持DBlink语法，对非Hadoop数据源进行查询，聚合，以及同Hadoop数据源或者流数据进行关联等操作，支持输出到非Hadoop存储系统。
20.游戏云存储-TRedis高性能缓存及持久化
- 康中良
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：游戏云存储-TRedis高性能缓存及持久化，高性能，协议兼容，省内存，数据安全，大量存储，增量复制，分片管理，数据过期，启动快，物理备份。
21.魅族互联网进程之数据库篇
- 左兴宇
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：本文介绍了魅族互联网进程的数据库建设，LVS拆分，DB独立，规范上线下线流程，IP段规划，每个C段预留50个IP，加大监测时长到10秒，从多个节点ping master多点校验。
22.搜索实时更新架构实践
- 周航
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：本文研究搜索实时更新架构，根据定义，找到使用这个数据的Processor，根据DAG，构建Processor Pipeline，更新Pipeline中所有的输出数据。
23.城市移动数据知微探秘
- 陆旻
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：本文探讨北京市出租车行驶轨迹的可视化，预测大数据发展趋势：大数据分析与可视化；可视分析与可视化呈现；可视化推动大数据平民化。
24.爱奇艺实时采集计算平台——Venus
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：Flume极度灵活，Source,Sink的插件化，可以自行开发Source/Sink去解决实际业务中遇到的各种疑难杂症。Spark Streaming直接推广的最难点是开发学习的时间成本很大，将流式计算逻辑封装成傻瓜式，计算架构全部对用户黑盒，用户无需了解任何Spark相关知识架构即可定制自己的实时计算任务。
25.利用SAP分析与预测推进企业创新
- 尹海宁
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：智能预测分析平台针对业务用户，不用编程数据挖掘工作可以轻松完成，针对专业用户，可以通过R语言创建定制的算法(支持R语言加密)，完全库内运算，无需传输数据支持50万以上的变量，在数字化核心的基础上将整个，价值链数字化作为业务创新与最佳化平台。
26.300年前…
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：本文主要介绍了大数据技术，探究如何建立大数据平台和如何支持数字业务，研究了大数据与云计算、移动网络、物联网的整合。
27.十年风雨数据路从Oracle DBA到ACE总监的成长之路
- 侯圣文
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：本文阐述作者十年风雨数据路从Oracle DBA到ACE总监的成长之路，包括D BA成长篇和创业维艰篇，包括团队、资源借力、激发潜能、做Leader不做Boss、选人用人的艺术、愿景、团队、人脉、执行力、创业者独白。
28.MongoDB在58同城的应用实践
- 孙玄
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：本文介绍MongoDB在58同城的使用情况，分析MongoDB在58同城的架构设计与实践，研究针对业务场景在MongoDB中如何设计库和表，介绍数据量增大和业务并发，遇到典型问题及其解决方案。
29.基于云的系统性能诊断和优化
- 鲍倚天
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：针对目前性能管理及优化服务现存的众多问题，必须采取相应且有效的措施予以解决。目前采用的方案为充分利用云服务、发挥工具的作用、采用基于中心化的服务模式等，经过实践具有不错效果。
30.风云再起:Oracle Database12c新特性和最佳实践
- 盖国强
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：通过全面的数据采样与分析，进行数据整合规划，容量评估，安全和高可用评估；结合业务现状、数据库现状、软硬件资源现状，为用户制定数据整合方案;指导用户实施数据整合和集中。通过整合模型，进行科学的容量规划和性能推演，制定了科学的整合方案;将客户现有的数十套数据库，整合为1,2,3套数据库环境;降低了70%-80%的总体成本，大大改善了用户的运维管理。
31.云是未来12C RAC私有云架构探析
- 魏兴华
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：按照ServerPool的Importance顺序，依次填充每个ServerPool，填充至Min个服务器。如果还有剩余机器，则进入到下一步。再按照ServerPool的Importace顺序，依次填充每个ServerPool，填充至Max个服务器，如果还有剩余的机器，则进入到下一步。再剩下来的机器进入到Free Pool中。
32.预测分析:技术、模型与应用
- 尹海宁
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：智能预测分析平台，针对业务用户，不用编程数据挖掘工作可以轻松完成，针对专业用户，可以通过R语言创建定制的算法(支持R语言加密)，完全库内运算，无需传输数据支持50万以上的变量。
33.腾讯个性化精准推荐
- 张磊
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：TDProcess流式处理核心需求：基于消息的流式处理，分布式(方便线性扩展，应对数据的爆炸那曾长计算)，实时(数据消费计算延时毫秒级)。特色功能：服务级功能抽象、统一的资源管理、多种编程接口。
34.百度分布式Redis平台
- 张东阳
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：本文阐述了百度分布式Redis平台挑战与方案：近地域多机房解决方案、1分钟整机房切主、基于服务混部的Auto Scaling、MySQL&Redis融合方案。
35.数据库一致性架构设计实践
- 沈剑
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：本文主要介绍了并发写一致性、数据冗余一致性、主从库一致性、数据库与缓存一致性实践，保证数据的可用性。
36.友盟+数据服务平台介绍
- 张金
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：重点介绍：数据-基础数据体系构建；接口-统一查询服务；服务-DMP。建立数据流转通路，统一研发标准与命名规则，确立标准，消除二义性，随时了解数据状况。
37.基于Zookeeper+MHA的mysql高可用架构设计
- 刘世勇
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：MHA集中管理mysql集群，负责mysql切换，向name service注册mysql服务信息，切换时发布mysql服务信息变更。MZAgent部署在app server，订阅在name service注册的mysql服务信息，并持久化到本地/etc/hosts，订阅变更，实时修改本地/etc/hosts，基于zkclient实现。
38.深入浅出大数据分析
- 桑文锋
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：大数据分析三个指标：易理解、分析能力、扩展性，数据分析常用方案：第三方统计服务、业务数据库写SQL、基于日志写统计脚本。
39.VITESSEDATA
- 田丰
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：VITESSEDATA利用Protocol扩展数据源，独立可扩展的构架，包括HDFS/Ceph/NFS容量的扩展、LOFTD带宽的扩展、DeepGreen查询的扩展，性能优于原生Heap,ColumnStore。
40.MySQL时间序列存储引擎的设计与实现
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：时间序列数据库主要用于指处理带时间标签(按照时间的顺序变化，即时间序列化)的数据。应用各类型实时监测，如服务器状态信息。依托mysql框架，开发mysql存储引擎，以表的方式组织数据，使用已有概念，通过SQL标准接口进行数据操作，降低开发门槛利用己有mysql框架，如复制框架/HA框架。
41.推荐系统架构演进典型套路
- 张相於
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：推荐系统架构是水到渠成，不是祀人忧天，避免拿来主义，探索自身特点，不要怕混乱，混乱代表空间，快速生长，逐步重构。
42.京东广告和推荐的机器学习系统实践
- 包勇军
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：本文介绍了京东广告和推荐的机器学习系统，主要解决机器学习在排序算法中的应用，特点是实时、在线、广告和推荐的混合系统。
43.Optimize Slow Query in PostgreSQL
- 李海龙
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：SQL(Structured Query Language)，是用于DBMS中的标准数据查询语言。传统来讲，SQL语言分为三个部分:DDL:Data Definition Language，用于定义SQL模式、基本表、视图和索引的创建和撤消操作。DML:Data Manipulation Language，数据操纵分成数据查询和数据更新两类。数据更新又分成插入、删除和修改三种操作。DCL:Data Control Language，包括对基本表和视图的授权，完整性规则的描述，事务控制等内容。
44.亿级大数据实时分析之旅
- 欧阳辰
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：介绍从MySQL平滑迁移到HBASE流程：双写HBase和mysal，迁移历史数据(使用用老老的时间戳)，双读HBase和mysal，验证数据一致性，灰度返回HBase结果。比较几种开源MOLAP分析工具。
45.DBA进阶之路
- 白鳝
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：本文主要阐述DBA快速提升自己，提升能力无捷径，勤奋是必要条件，多参与项目，敢于挑战自己能力之外的项目，参与各种论坛和线上线下讨论组的活动，用好MOS网站和官方文档。
46.内存计算引领新一轮数据技术
- 刘伟
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：SAP HANA Vora内置于Apache Spark执行架构之中，是一款内存计算查询引擎，能够基于Hadoop提供丰富的交互式分析体验。SAP HANA-Apache Spark Adapter可用于提高分布式系统连接的性能，编译查询可以提高应用和数据分析在各节点的运行效率，基于Hadoop的OLAP体验非常常见，可用于从大数据中挖掘业务洞察，比如向下钻取日DFS数据。
47.360云盘底层Cassandra+Storm介绍
- 郭东东;倪传雷
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：本文阐述Cassandra系统改进，包括数据可靠性、数据分配策略、EraserCode。Storm系统改进，包括大文件缓存、应用Jar包P2P分发。
48.携程实时大数据平台实践分享
- 张翼
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：Stream CQL(Stream Continuous Query Language)是华为开源的实时流处理的SQL引擎，它的做法是把StreamCQL->Storm Topology，Stream CQL的语法和标准的SQL或是HQL很类似，它支持实时处理的窗口函数。JStorm是阿里开源的实时计算引擎，API上兼容Storm，内核使用Java编写，平台整体应向Jstorm迁移，关注Spark2.0在实时处理上的进展，调研Flink。
49.在线学习在广告中的应用
- 王兴星
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：本文阐述了在线学习在广告中的应用技术，包括CTR预估、批量学习、在线稀疏模型、在线模型:贝叶斯派、大规模学习解决方案等。
50.Oracle数据库性能优化之道——分分合合
- 周亮
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：本文介绍Oracle数据库性能优化，减少延时，增加CPU计算能力，减少网络请求延迟，减少I/O请求延迟，减少资源需求，增加资源，分散资源请求。
51.IT运维分析与海量日志搜索
- 陈军
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：大数据技术应用于IT运维，通过数据分析提升IT运维效率，对日志实时搜索、分析，日志从产生到搜索分析出结果只有几秒的延时，每天处理TB级的日志量，Google for IT，可搜索、分析任何日志。
52.揭开SQL优化的盖头来——数据库查询优化器实现技术解密
- 李海翔
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：本文介绍数据库查询优化器实现技术解密，包括查询优化器的构造、从拆卸到重新组装、优化计算、主流数据库对比。
53.利用Docker构建自动化运维平台
- 黄智凯
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：介绍利用Docker构建自动化运维平台，包括平台生态圈、基础容器、容器的编排和调度、Ansible、测试环境与线上环境、Web网站的代码同步、监控体系、服务自愈等。
54.基于Pacemaker+MHA的MySQL高可用实践
- 陈华军
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：本文介绍曾经的MySQL HA方案，提出如何防止脑裂和数据丢失的方法，实现方式的选择，介绍基于Pacemaker实现MySQL HA，双节点零数据丢失HA方案。
55.选择的悖论——十年DBA成长路反思
- 肖鹏
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：本文探讨选择的悖论—十年DBA成长路反思，包括职业规划、跳槽还是坚守、技术还是管理、专还是广、工作还是生活。
56.打造全方位的数据库自动化、自助化平台
- 李京生
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：本文介绍打造全方位的数据库自动化、自助化平台，进一步提升自助化在数据库管理中的比例，进一步完善、细化功能，更好的精细化管理，基于云上的自动化、智能化、平台化、可视化。
57.使用KUDU搭建OLAP服务
- 常冰琳
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：介绍使用KUDU搭建OLAP服务，支持随机读写，接近HBase的吞吐性能，高性能的顺序读，接近HDFS的读性能，高可用性，应用Raft一致性协议。
58.MongoDB服务化及在网易游戏应用
- 黄文宇
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：MongoDB服务化目标：减轻项目DBA/SA的学习及配置成本，为每个使用MongoDB的项目提供标准化的服务，统一调配及资源整合降低人力及硬件成本。Ocean资源采用LXC半虚拟化解决方案，自己开发的Paas调度平台，确保每个shard的3个node来自不同机柜，资源通过cgroups划分，虚拟化资源消耗小，灵活扩展，理论上可以极端情况下可在线动态增加虚拟机的CPU、内存、硬盘、带宽资源。
59.Elasticsearch技术应用
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：Elasticsearch是构建在Lucene上的搜索引擎，分布式的架构具有多副本高可靠性，Index类似于database，是数据的物理管理方式一个Index被划分为多个shard，每个shard可以有多个副本，通过REST API来访问。
60.深度学习在新闻推荐中应用
- 鞠奇
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：TextRank算法基于PageRank，用于为文本生成关键字，PageRank最开始用来计算网页的重要性。整个~可以看作一张有向图图，节点是网页。如果网页A存在到网页B的链接，那么有一条从网页A指向网页B的有向边。在web图模型中，如果一个页面节点接收到的其他网页指向的入链数量越多，那么这个页面越重要。指向页面A的入链质量不同，质量高的页面会通过链接向其他页面传递更多的权重。所以越是质量高的页面指向页面A，则页面A越重要。
61.在mongoDB中实现强事务
- 唐建法
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：mongoDB具有丰富的结构JSON文档结构可以直接表达复杂对象结构非常接近In Memory数据模型，可以随时增加、修改结构，无需数据迁移，无需建模，程序接口自然无需ORM。
62.移动广告中的实时计算
- 汪巍
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：本文介绍移动广告中的实时计算，包括Mini batch、Hive Join，小时级统计延迟2小时，Logtailer，耦合严重/难以维护。
63.阿里数据库团队服务产品化之路的持续探索
- 叶正盛
- 《2016第七届中国数据库技术大会》 | 2016年
摘要：本文探索阿里数据库团队服务产品化之路，提升资源利用率，完善服务体验，技术输出到云计算，云计算安全与信任。