1998年，Bill Inmon提出了新的BI架构CIF(Corporation information factory)，CIF的核心是将数仓架构划分为不同的层次以满足不同场景的需求，比如常见的ODS、DW、DM等，每层根据实际场景采用不同的建设方案，现在CIF
2022-03-22 10:27
上海2023年6月8日 /美通社/ -- 6月7日，以"智领睿变，共建绿色数智金融"为主题的华为全球智慧金融峰会2023在上海开幕。会上，华为常务董事、华为云CEO张平安面向全球发布华为云数仓3.0
2023-06-08 21:58
ByteHouse 是火山引擎在 ClickHouse 的基础上自研并大规模实践的一款高性能、高可用企业级分析性数据库，支持用户交互式分析 PB 级别数据。其自研的表引擎，灵活支持各类数据分析和保证实时数据高效落盘，实现了热数据按生命周自动冷存，缓解存储空间压力；
2022-12-16 11:16
整体的架构如上图所示。在Binlog实时采集方面，我们采用了阿里巴巴的开源项目Canal，负责从MySQL实时拉取Binlog并完成适当解析。Binlog采集后会暂存到Kafka上供下游消费。整体实时采集部分如图中红色箭头所示。
2018-12-12 13:50
如此之高，更何况是企业，更加需要拓展储存空间，毕竟企业在不断的业务发展之中数据也只增不减。华为DWS智能云数仓就能急企业之所急，忧企业之所忧，全面而详细的解决企业的烦恼。 数字化转型时代的来临，各行各业的平台数据爆炸式增长
2022-10-18 14:16
摘要： 对于阿里云大数据数仓建设性能优化而言，主要可以从调度优化、模型优化、同步优化以及任务优化这四个方面着手。其实，对于性能优化而言，最终还是会归结到“资源”之上，所以资源是否足够，分配是否合理
2018-08-03 17:34
都知道大数据在每日剧增，那你知道它增长的速度有多骇人吗？根据摩尔定理，数据总量会以每24个月翻倍的速度累积增长，而企业数据从以前的GB到TB，一直到PB、百PB甚至更高的单位。这是在我们思想还停留在一首歌的内存才几MB的人想都不敢想的。在很多发展迅速的企业中，也许前几年才刚建设完成的数据分析平台，已经不堪重负了，即使是可运行的数据分析平台也在面临低性能、低扩展性、高成本的难题。 如此巨大的数据，我们为什么要通过平台去
2022-10-18 14:16
对于MPPDB集群的容灾而言，目前业界的常见方案要么是部署两套规格配置同等的集群，要么通过逻辑双加载方式去实现，这两个方案缺点比较明显，存在架构复杂、建设成本高等问题，不仅使得灾备部署难度增大，还导致资源浪费。
2024-02-22 11:19
一首歌的内存大概是4MB，十部电影的数据内存约1GB，一款3D游戏连带用户数据大约要1TB……互联网大数据平均在每24个月就会翻倍，于是就有了更大的数据内存单位——PB、百PB。如此巨大的企业数据，无论是存储、分拣还是备份都是一项极为艰巨的任务。现如今各大企业自行组建的数据服务器早已不堪重负，更因为数据、系统和业务的多样性，使得企业自行组建的服务器难以支撑对大数据的集中储存，企业也不得不面对接入难、使用难、分析难的困扰。
2022-10-18 19:50
2022年12月，在拉斯维加斯举办的2022亚马逊云科技re:Invent全球大会完美落幕，这一标志性的技术盛宴再一次给人们留下了无限的想象空间，等待大家在新的一年去持续探索和发掘。近日，亚马逊云科技中国巡演——广州、深圳站也如期举行，其间对re:Invent全球大会的很多项目进行解读，为中国企业提供更多的可能。 简化数据摄入工作 最好是没有 要想数据分析到位，首先要保证有稳定、可靠的数据摄入通道，来实现端到端的第一环（其实还有第零环，是业
2023-01-13 09:49
