天天看点

分析型数据库实时写入功能全面开放

阿里云分析型数据库为客户提供了百亿级海量数据下的毫秒级olap查询与分析能力。除了可以通过内建api、阿里云数据集成等途径方便的批量导入大量数据外,分析型数据库目前开放了通过insert/delete sql直接写入或删除数据的功能。

通过insert/delete提交的数据变更,一般可以在30s-60s之间就可以查询到。在最佳实践上,如果想达到最高的写入性能,在网络带宽允许的情况下(参考带宽:一个c1 ecu 2mb/s,一个c8 ecu 8mb/s),可以每个insert中进行批量提交30-100条记录,同时启用10-30个线程进行写入。

2个c8 ecu的写入参考速度一般是5000-7000条/秒(每条20列,50字节计算),若需要更高的写入速率,可以购买更多的ecu进行水平扩展。

实时写入相关详情,可以查看文档 。

在实践中,很多用户的业务系统数据会使用云数据库rds进行存放,并且同时希望能够低延迟的分析海量的历史数据。为了方便用户实时同步云数据库rds(mysql)中的数据变化到分析型数据库中,阿里云数据传输 联合分析型数据库推出了rds数据订阅并实时同步到分析型数据库的插件,用户可以开通阿里云数据传输后,参考 文档 https://help.aliyun.com/document_detail/ads/user-manual/8/8.5.html 使用dts-ads-writer插件完成这项工作。

另外,三月十日前,分析型数据库正在开展按量付费六五折活动,欢迎各位用户试用。详见:https://www.aliyun.com/product/ads/

继续阅读