看DTCC2015:阿里、360、京东 NoSQL实践

[摘要]一年一度的数据库和大数据领域技术盛宴——2015中国数据库技术大会(简称 DTCC 2015)将于4月16日至4月18日在北京新云南皇冠假日酒店隆重召开。最新消息,大会NoSQL专场演讲嘉宾已经全部确认完毕,嘉宾议题已经发布。

一年一度的数据库和大数据领域技术盛宴——2015中国数据库技术大会(简称 DTCC 2015)将于4月16日至4月18日在北京新云南皇冠假日酒店隆重召开。最新消息,大会NoSQL专场演讲嘉宾已经全部确认完毕,嘉宾议题已经发布。

“大数据技术交流和价值发现”是大会的核心主题,DTCC 2015大会规模将达到2500人,分3天21个专场,近百场精彩演讲,大会将云集了国内外最顶尖的数据专家,共同探讨MySQL、NoSQL、Oracle、缓存技术、闪存技术、国产数据库、Hadoop、数据挖掘、推荐系统、机器学习等领域的前瞻性热点技术。

日前由IT168编译并发布的(2014年12月世界数据库流行度排行榜)中我们可以看到,排行榜前十名中,NoSQL数据库已经占了三席,分别是MongoDB、Cassandra和Redis。这说明NoSQL正在变得越来越流行。对传统的关系型数据库巨头而言,单纯靠SQL数据库,在面对超大型Web应用上显然捉襟见肘了。

天猫双十一对阿里搜索事业部来说,就是一场高强度的数字化战争。早在2010年,Hadoop/Hbase技术就被引入到里的搜索体系中,用于存储相关的网页、价格和图片信息等。不光如此,连小米、奇虎360也都在使用Hbase,Hbase究竟有哪些神奇之处?

京东每天的库房记录在十亿个数量级,商品图片总共有几十亿张。这些文件基本上都是KB 级别的,关系型数据库不太擅长处理这些海量小文件。京东最早使用的内存键值存储是Redis,而现在转而使用了JimDB,您觉得为何会有这么大的转变?JimDB与Redis又能否兼容?

和京东一样,360也在尝试自主研发NoSQL,360为何要自主研发?如何选择从开源软件过渡到自主研发的时机?在设计时,360参考中心化和去中心架构的特点,根据自身业务场景进行了融合,从延迟、一致性、集群伸缩方面做了权衡;面对新的混合架构,360遇到了一些前所未有的挑战,又是如何一一解决和优化的?

DTCC2015 NoSQL 专场看点揭秘

想真正了解京东和阿里的NoSQL数据库吗?想了解360自主研发过程与挑战吗?想了数据库存储引擎技术发展趋势吗? 2015第六届中国数据库技术大会(DTCC)上,来自京东高级架构师袁航即将为大家发表主题为《京东内存存储技术演进》的精彩演讲,同时,一淘及搜索事业部离线系统团队搜索研发专家雨田将为大家讲述《Hbase在阿里搜索的应用与扩展》,360高级技术专家王超会为大家分享《Bada-构建主从/去中心混合架构的NoSQL》,而华为企业中间件首席架构师彭渊也会给我们分享《高性能原创数据库引擎Coolhash》。

欢迎大家报名参会!大会官网链接:http://dtcc.it168.com/

附NOSQL专场演讲嘉宾与主题:

华为企业中间件首席架构师 彭渊

演讲主题:高性能原创数据库引擎Coolhash分享

内容简介:Coolhash是一个java实现的k/v数据库引擎,采用并行计算引擎设计,单server能达到百万吞吐量tps,同时改进了传统hash算法,能够支持千万规模数据的秒级范围查询和任意模糊查询,Coolhash实现高性能的同时提供的是持久化存储,可以超出内存大小限制,同时Coolhash的key指针提供1对1,1对多,多对多的关联join查询的新思路,Coolhash是一个nosql数据库,但是提供了大部分sql的函数功能,还包括简单的事务处理(ACID)。CoolHash整体只有200k大小,不到1万行java代码,没有任何依赖,高度产品化和易用性强,采用apache2.0开源协议,同时支持windows和linux(unix-like),非常适合您做新型数据引擎技术的研究参考和应用。

本课题会分享数据库存储引擎技术的业界发展趋势,从裸设备存储到SSD结合内存、从缓存到持久化存储的靠近,从aerospike到Couchbase的分析,Coolhash的树型key设计思想和架构,Coolhash跟redis、leveldb的详细比较,应用场景和技术探讨等。

一淘及搜索事业部离线系统团队搜索研发专家 徐斌(花名雨田)

演讲主题:Hbase在阿里搜索的应用与扩展

内容简介:阿里集团搜索系统后台的Hadoop/Hbase混合集群已经达到1000+的规模,计算+存储一体化的解决方案支撑了淘宝、天猫、B2B、Etao、云搜索等阿里全部搜索业务线。本次主题除了介绍Hbase在阿里搜索技术领域的应用、优化和运维经验以外,还将介绍我们基于Hbase自主研发的HQueue(消息队列)和HTunnel(Hbase增量订阅服务),以及基于它们的实时计算解决方案。

京东高级架构师袁航

演讲主题:深入解读JIMDB—京东分布式缓存与高速NoSQL服务

内容介绍:主要涉及Jimdb从无到有, 从1.0得到3.0, 基于规模驱动和痛点驱动的研发历程; 包含:监控和报警, 故障检测和自动切换, 迁移和扩容, 基于内存和磁盘的2级存储 , 基于ssd的新一代NoSQL数据库等各方面的内容.

360高级技术专家 王超

演讲主题:Bada-构建主从/去中心混合架构的NoSQL

内容目录:在分布式NoSQL遍地开花的今天,我们为何要自主研发?如何选择从开源软件过渡到自主研发的时机?在设计时,我们参考中心化和去中心架构的特点,根据自身业务场景进行了融合,从延迟、一致性、集群伸缩方面做了权衡;面对新的混合架构,我们遇到了一些前所未有的挑战,又是如何一一解决和优化的?历经三个月的研发,一年多的线上改进,成功解决了当时面对的问题且得到了广泛认可,架构的优劣和可借鉴性由各位思考。





免责声明:

本站系本网编辑转载,会尽可能注明出处,但不排除无法注明来源的情况,转载目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责。如涉及作品内容、版权和其它问题,请在30日内与本网联系, 来信: liujun@soft6.com 我们将在收到邮件后第一时间删除内容!

[声明]本站文章版权归原作者所有,内容为作者个人观点,不代表本网站的观点和对其真实性负责,本站拥有对此声明的最终解释权。