天天看点

风向标:数据库技术趋势解读

目录:

db-engines数据库排行榜解读

sql、nosql及newsql的发展历程

感谢名单

以下取自2016年12月的数据,具体信息可参考http://db-engines.com/en/ranking/

db-engines排名主要根据五个因素来进行:google以及bing搜索引擎的关键字搜索数量、google trends的搜索数量、indeed网站中的职位搜索量、linkedin中提到关键字的个人资料数以及stackoverflow上相关的问题和关注者数量,数据仅供参考。

风向标:数据库技术趋势解读

从最新一期榜单来看,数据库产品前三甲非常稳固,与后面差距依然很大。传统商业数据库的代表oracle,依旧独占鳌头,但也受到了其他数据库的逐步蚕食。

很多人预计在明年q1,mysql将超过oracle占领首位。mysql作为开源数据库的代表,持续在增长,但随着市场稳定已逐步趋于饱和,增长趋缓。

sql server作为另类代表,增长喜人。其不久前宣布的未来将支持linux版本的消息,应该起到了不少提振作用,我们也很期待它在未来的表现。

前十名中以postgresql、mongodb、cassandra、redis为代表的开源数据库,各自有其独家绝技,长期来看仍然持续上涨。

其中值得重点关注的postgresql、mongodb。postgresql曾是关系型数据库的学院派代表,近些年更是演化为“全面手”,社区活跃,发展十分迅猛。mongodb作为nosql阵营里最为接近关系型数据库的代表,发展也很不错。未来不排除这两者出现可挑战前三甲的可能。

前十名中其余产品如db2、access等老牌产品,不可避免地出现下滑,未来堪忧。

十到二十名范围内,则是百花齐放,排名变化频繁。值得关注的是elasticsearch,发展不错,已接近第十名,很有希望冲入十名之内。

从产品类别角度来看,关系型数据库仍然占绝对主导(前二十名中占了十三位)。其他领域各有优秀代表进入其中,文档型数据库的mongodb、kv型数据库的redis、搜索引擎的elasticsearch、列式存储的hbase等。

上世纪70年代提出了关系型数据库的概念,后来在关系型数据库上设计了一套相应的结构化查询语言称之为sql,在之后的发展中又引入了事务也就是acid的概念,sql类或者说传统的关系型数据库最典型的一些产品有db2、oracle、sqlserver以及开源的mysql、postgresql等,这一代数据库的产品的特点可以理解为强acid、且支持sql接口。但这一代数据往往是单机版本,即使有的支持集群其扩展能力也很有限。

随着互联网的发展,很多应用的数据量也越来越大,传统的数据库在数据量越来越大的情况下性能等各方面往往也会出现明显的下降,所以后来又有了nosql的概念。这个概念其实很早就有,但在2009年左右开始变得比较火,nosql的概念主要是指非关系型的、不提供acid的一种数据库设计理念。这个理念基础之上,很容易提供分布式解决方案,从而比较容易解决原来传统的sql产品面临的一些问题。nosql类产品比较典型的有像redis、memchachedb、hbase、cassandra、bigtable、leveldb等,这类产品一般是根据key来操作相应的value,有些产品的value会比较简单,有些会稍微复杂一些。

nosql类产品发展非常迅速,以至于曾经有一段时间大家觉得可能sql类产品会很快退出历史舞台。随着nosql广泛使用以后,大家也发现nosql类的产品虽然操作简单,但在使用的时候应用层面要考虑的事情比较多,因为sql改nosql很多东西都需要在应用层做拆分及汇总,开发人员心智负担比较重,主要体现在开发的代价会大一点,所以在这同一时期甚至更早一些的时候,大家也有在研究分布式的sql解决方案。

分布式的sql解决方案简单的说就是像使用传统的sql产品一样来使用分布式的数据库产品,最典型的就是一些分库分表的解决方案。这些方案有的是在应用层面,按照一定的规则将数据进行拆分;也有的是通过引入兼容相关sql传输协议的中间层透明的完成这种拆分工作,比如典型的一些开源产品有cobar、vitess等。

这种方案有些人也会将其归属到newsql的范畴,其实分库分表的分布式sql解决方案已经可以满足绝大多数的业务需求,但是有一个不足点是从整体来看这种方式拆分以后的sql解决方案在一个事务上下文中如果涉及到多个分片时候往往不能保证严格的事务的acid属性。

后来,google在2012、2013年分别发表了spanner和f1的论文,告诉业界自己实现了一套既满足sql,又满足事务的acid属性;同时又将nosql的分布式特性集合到一起的一种实现方式,这也是大家比较认同的一种全新架构的newsql。当前比较典型的一些newsql产品,比如像google的f1/spanner、阿里的oceanbase以及开源的cockroachdb、tidb等。newsql还需要更多生产环境的检验。

以上就是大体的一个sql、nosql及newsql的发展历程。

下面,我们会分别将rdbms、nosql、newsql、大数据生态圈、docker、国产数据库这六大范畴的最新技术发展内容细分到不同版块中呈现,请点击相应版块进行阅读。

感谢本期提供宝贵信息和建议的专家朋友,排名不分先后。

风向标:数据库技术趋势解读

 原文发布时间为:2016-12-23

本文来自云栖社区合作伙伴dbaplus