Apache Hudi基于华米科技应用湖仓一体化改造
目录1. 应用背景及痛点介绍2. 技术方案选型3. 问题与解决方案3.1.增量数据字段对齐问题3.2 全球存储兼容性问题3.3 云主机时区统一问题3.4 升级新版本问题3.5 多分…
Apache Hudi数据布局黑科技降低一半查询时间
目录1. 背景2. Clustering架构2.1 调度Clustering2.2 运行Clustering2.3 Clustering配置3. 表查询性能3.1 进行Cluste…
深入解析Apache Hudi内核文件标记机制
目录1. 摘要2. 为何引入Markers机制3. 现有的直接标记机制及其局限性4. 基于时间线服务器的标记机制提高写入性能5. 标记相关的写入选项6. 性能7. 总结1. 摘要 …
Z-Order加速Hudi大规模数据集方案分析
目录1. 背景2. Z-Order介绍3. 具体实现3.1 z-value的生成和排序3.1.1 基于映射策略的z值生成方法3.1.2 基于RangeBounds的z-value生…
Apache Hudi的多版本清理服务彻底讲解
目录1. 回收空间以控制存储成本2. 问题描述3. 深入了解 Hudi清理服务4. 清理服务5. 例子6. 配置7. 运行命令8. 未来计划Apache Hudi提供了MVCC并发…
Apache Pulsar结合Hudi构建Lakehouse方案分析
目录1. 动机2. 分析3. 当前方案4. 新的Lakehouse存储方案4.1 新的存储布局4.2 支持高效Upserts4.3 将Hudi表当做Pulsar Topic4.4 …
iSCSI服务器CHAP双向认证配置及创建步骤
目录一 iSCSI和CHAP介绍1.1 iSCSI 磁盘1.2 CHAP介绍1.2.1 initiator authentication认证1.2.2 target authent…
HDFS免重启挂载新磁盘
在生产环境中，集群节点磁盘大小不同，其使用率也会不同，HDFS虽有均衡策略，但也会有数据不平衡的情况，有些节点磁盘就会被打满，然后这个节点就不健康了（Unhealthy Nodes…
忘记Grafana不要紧2种Grafana重置admin密码方法详细步骤
忘记admin密码不叫事，按照本文方法可以重置admin用户密码为admin。 一、基于命令修改 1）修改密码 grafana-cli admin reset-admin-pass…
阿里云日志服务日志过滤器配置
日志收集流程 对于日志收集的客户端，其work pipeline通常包括三个过程：Input，Process，Output。 Input： 适配各类日志接入源，目前Logtail支…
-
如遇问题，请联系客服联系客服请注明来意 高端主题开发
