1079 天前 / -江边城外-
背景其实早在去年我们就已经开始接触并研究clickhouse了,因为当时进行多表关联测试性能并不是特别优秀,所以并没有在线上大范围使用,当时研究的是分布式部署 (感觉分布式会比单机好一些)最后发现性能并不怎么样 而且分布式的sql也有很多限制,不支持单条删除和更新操作、不支持in和join(当时的版本,18.12.14之前),直到前几天看了携程一篇关于clickhouse的文章,将clickhouse的性能描述的神乎其神,再次勾起了我研究的欲望,附携程公众号文章 每天十亿级数据更新,秒出查询结果...
1097 天前 / 携程技术中心
作者简介 蔡岳毅,携程酒店大数据高级研发经理,负责酒店数据智能平台研发,大数据技术创新工作。喜欢探索研究大数据的开源技术框架。 一、背景 1)携程酒店每天有上千表,累计十多亿数据更新,如何保证数据更新过程中生产应用高可用; 2)每天有将近百万次数据查询请求,用户可以从粗粒度国家省份城市汇总不断下钻到酒店,房型粒度的数据,我们往往无法对海量的明细数据做进一步层次的预聚合,大量的关键业务数据都是好几亿数据关联权限,关联基础信息...
1514 天前 / realXuJiang
JDP是企业级Core Data & Core AI 流分析平台, JDP全称JDataFlow Platfrom JDP平台强大的Data Pipline和Visualization Data功能,可以支持实时数据分析。接下来,我们通过一个简单的示例,帮助你入门JDP流分析平台。
1536 天前 / 张松然
安海雄 作者 京东系统架构师,从事架构设计与开发工作,熟悉各种开源软件架构。在Web开发、架构优化上有较丰富实战经历。一、背景提到大数据不得不提 Hadoop,当下的 Hadoop 已不仅仅是当初的HDFS + MR(MapReduce) 这么简单。基于 Hadoop 而衍生的 Hive、Pig、Spark、Presto、Impala 等一系列组件共同构...
1565 天前 / realXuJiang
初识ClickHouse,大概是在去年12月份,Clickhouse受邀来中国开第一次Meetup. 那天我去参加了,很多小伙伴都是被官方那页Benchmark吸引而来,我猜测。让我前往参加的一个很大原因,我朋友说clickhouse挺牛的,他从深圳过来参加Meetup。ClickHouse 一个来自俄罗斯的凶猛彪悍的分析数据库。
1889 天前 / 小学木毕业 ?微信超級會員
今天介绍一个来自俄罗斯的凶猛彪悍的分析数据库:ClickHouse,它是今年6月开源,俄语社区为主,好酒不怕巷子深。本文内容较长,分为三个部分:走马观花,死而后生,遥指杏花村;第一章,走马观花,初步了解一下基本特性;第二章,死而后生,介绍ClickHouse的技术架构演化的今生前世;第三章,遥指杏花村,介绍一些参考资料,包括一些俄文资料。