首页 > TAG信息列表 > 湖仓

巨杉湖仓一体技术解读|多模数据的融合管理

SequoiaDB从「多模数据湖」、「实时数据湖」发展到「湖仓一体」架构,为客户提供「数据核心」所需的全量数据存储,实时对客服务,及基于统一数据源的分析能力,充分激活客户的离线数据。当中,多模数据的融合管理,以及非结构化数据的管理能力是个关键。   IDC研究报告显示,到2024年,全球数

从离线到实时对客,湖仓一体释放全量数据价值

近期,巨杉数据库举行线上发布会,发布基于「湖仓一体」架构的v5.2版本,提升多项「实时」能力,诠释公司「释放全量数据价值」的价值主张。深度解析在数字化时代下,SequoiaDB如何围绕金融银行业的实时需求,全面提升结构化查询分析、非结构化存取、性能监控故障诊断及数据生命周期管理的四大

阿里云云原生一体化数仓 — 湖仓一体新能力解读

简介: 本文主要介绍如何通过湖仓一体,打通 MaxCompute 与 Hadoop、DLF/OSS 数据湖,以及 Hologres、MySQL 等数据平台,并通过 DataWorks 做统一数据开发和治理。 分享人:阿里云智能 产品专家 孟硕   没来得及看直播的同学,可以观看直播回放。直播回放:https://developer.aliyun

李呈祥:bilibili在湖仓一体查询加速上的实践与探索

导读: 本文主要介绍哔哩哔哩在数据湖与数据仓库一体架构下,探索查询加速以及索引增强的一些实践。主要内容包括: 什么是湖仓一体架构 哔哩哔哩目前的湖仓一体架构 湖仓一体架构下,数据的排序组织优化 湖仓一体架构下,索引增强与优化的实践探索 -- 01 什么是湖仓一体 当我们讲湖仓一

给王心凌打Call的,原来是神奇的智能湖仓

图文原创:谭婧(王❤凌老粉) “爷青回”  “我们只是老了,并没有死。” 谭老师作为老粉,热烈庆祝“甜心教主”王❤凌成为现象级翻红顶流。 只要地球不爆炸,她的数据就一个都不能丢,还得用好了。  那为王❤凌从头开发一套大数据与智能系统吧? 答案,没必要。 不能把精力花在和IT基础设施

MaxCompute湖仓一体介绍

​简介:本篇内容分享了MaxCompute湖仓一体介绍。 分享人:孟硕 阿里云 MaxCompute产品专家  视频链接:数据智能实战营-北京站 专题回顾 正文: 本篇内容将通过两个部分来介绍MaxCompute湖仓一体。 一、什么是 MaxCompute 湖仓一体 二、湖仓一体成功案例介绍 ​ 一、什么是 MaxCompute

Hudi初始

一、Hudi是什么 Hudi(Hadoop Upserts anD Incrementals):用于管理分布式文件系统DFS上大型分析数据集存储。 Hudi是一种针对分析型业务的、扫描优化的数据存储抽象,它能够使DFS数据集在分钟级的时延内支持变更,也支持下游系统对这个数据集的增量处理。   二、Hudi功能 Hudi是在大数据

网易数帆实时数据湖 Arctic 的探索和实践

作者 | 蔡芳芳 采访嘉宾 | 马进 网易数帆平台开发专家   数据中台也要从离线为主走向实时化,湖仓一体是第一步。   数据从离线到实时是当前一个很大的趋势,但要建设实时数据、应用实时数据还面临两个难题。首先是实时和离线的技术栈不统一,导致系统和研发重复投入,在这之上的数据

基于Delta lake、Hudi格式的湖仓一体方案

​简介: Delta Lake 和 Hudi 是流行的开放格式的存储层,为数据湖同时提供流式和批处理的操作,这允许我们在数据湖上直接运行 BI 等应用,让数据分析师可以即时查询新的实时数据,从而对您的业务产生即时的洞察。MaxCompute 在湖仓一体架构中,通过支持 Delta Lake 和 Hudi 在数据湖中提供

汽车之家:基于 Flink + Iceberg 的湖仓一体架构实践

摘要:由汽车之家实时计算平台负责人邸星星在 4 月 17 日上海站 Meetup 分享的,基于 Flink + Iceberg 的湖仓一体架构实践,内容包括:   数据仓库架构升级的背景 基于 Iceberg 的湖仓一体架构实践 总结与收益 后续规划     一、数据仓库架构升级的背景   1. 基于 Hive 的数据

傻傻分不清?数据仓库、数据湖、智能湖仓究竟有什么区别?

傻傻分不清?数据仓库、数据湖、智能湖仓究竟有什么区别? 今天,就来和大家分享一下,数据仓库、数据湖、智能湖仓是什么? 学习大数据相关知识中 作为程序员写的大多数商业项目,往往都需要用到大量的数据。计算机的内存可以实现数据的快速存储和访问。但内存的空间是有限的也无法长期

数据库领域顶会SIGMOD背后的故事,这篇文章全部告诉你~

SIGMOD数据管理国际会议(Special Interest Group on Management Of Data.)是由美国计算机协会(ACM)数据管理专业委员会(SIGMOD)发起、在数据库领域具有最高学术地位的国际性学术会议,所收录的论文代表了行业内的最高水平。会议的目的是在全球范围内为数据库领域的研究者、开发者以及用