大数据

Elasticsearch 8.10 同义词管理新篇章:引入同义词 API

Elasticsearch 的同义词功能是一个重要的文本分析工具,特别是在全文搜索应用中。同义词机制使得用户能够建立一个同义词库,以处理一词多义、多词同义等情况,从而增强搜索的准确性和丰富性。

大数据技术前线
数据分析
2023-10-09 14:04

Tableau的国产化替换实践案例

在数据开发侧,数据开发人员已经习惯Tableau的设计、开发特点,对可视化工具来说,也需要具备操作简单、设计便捷、类Tableau操作、数据处理等能力,以便适应大量报告的迁移工作。

danny_2018
数据分析
2023-09-28 14:34

Amoro Mixed Format 在上海钢联的构建实时湖仓实践

通过借助 Amoro 开箱即用的能力,以及 Amoro Mixed Iceberg 在 upsert 和 MOR 等方面的功能特性和优化,我们成功解决了在生产场景中流批一体、数据实效性等方面的需求。

danny_2018
数据分析
2023-09-28 14:28

Kafka:介绍和内部工作原理

展示Kafka工作方式的简单架构。

大数据技术前线
数据分析
2023-09-28 11:13

MySQL到TiDB:Hive Metastore横向扩展之路

本文介绍了vivo在大数据元数据服务横向扩展道路上的探索历程,由实际面临的问题出发,对当前主流的横向扩展方案进行了调研及对比测试,通过多方面对比数据择优选择TiDB方案。其次分享了整个扩展方案流程、实施遇到的问题及解决方案,对于在大数据元数据性能上面临同样困境的开发者本篇文章具有非常高的参考借鉴价值。

vivo互联网技术
数据挖掘
2023-09-28 11:00

理解Kafka offset

日常开发中,相信大家都对 Kafka 有所耳闻,Kafka 作为一个分布式的流处理平台,一般用来存储和传输大量的消息数据。在 Kafka 中有三个重要概念,分别是 topic、partition 和 offset。

大数据技术前线
数据分析
2023-09-25 13:50

Elasticsearch 8.X:这个复杂的检索需求如何实现?

如果排序逻辑变得太复杂或影响性能,可能需要考虑在应用层进行后处理,而不是依赖 Elasticsearch 的内部排序。

大数据技术前线
数据分析
2023-09-25 11:05

同一份数据全域共享,HashData UnionStore实时性背后的故事

存算分离已经成为云数仓的主流技术趋势。HashData正通过一份数据全域共享的方式,满足核心业务的实时性需求,为企业业务决策提速带来了强大助力。

danny_2018
数据分析
2023-09-22 16:19

Flink Batch SQL Improvements on Lakehouse

1. Flink Batch on Paimon 挑战 2. Flink Batch 核心优化 3. 后续规划

大数据技术前线
数据分析
2023-09-22 09:27

货拉拉大数据离线混合引擎服务建设实践

支持ETL场景。引入Spark引擎,将离线链路的ETL任务无感迁移到Spark,并且保证任务的稳定性。

danny_2018
数据分析
2023-09-21 10:24

进步神速,Pandas 2.1来了!

本文将介绍Pandas 2.1中的新功能,探讨关于这个新版本中最有趣的事情。

编程学研
数据分析
2023-09-19 16:44

招商信诺人寿基于 Apache Doris 统一 OLAP 技术栈实践

招商信诺人寿基于 Apache Doris 实现 OLAP 技术栈统一,赋能 70 + 一线业务场景实时化

SelectDB
数据分析
2023-09-19 12:07

ClickHouse 存算分离改造:小红书自研云原生数据仓库实践

在保持 ClickHouse 原有超高性能的基础上,我们对其进行深度的云原生改造,实现了计算和存储层的弹性扩缩容能力,从而有效减轻运维负担并降低成本。

danny_2018
数据分析
2023-09-18 14:38

B站大数据系统诊断实践-SQLSCAN篇

在本篇文章中,我们主要介绍了B站大数据系统诊断在SQLScan所做的改造和阶段性成果,主要关注任务的事前治理,对于事中和事后的治理诊断,请关注后续文章《BMR大数据元仓》以及《大数据任务诊断系统-数据智囊》

大数据技术前线
数据分析
2023-09-18 13:49

幸福里基于 Flink & Paimon 的流式数仓实践

本文整理自字节跳动基础架构工程师李国君,在 Streaming Lakehouse Meetup 的分享。幸福里业务是一种典型的交易、事务类型的业务场景,这种业务场景在实时数仓建模中遇到了诸多挑战。本次分享主要介绍幸福里业务基于 Flink & Paimon 构建流式数仓的实践经验,从业务背景、流批一体数仓架构、实践中遇到的问题和解决方案,借助 Paimon 最终能拿到的收益,以及未来规划方面进行介绍。

大数据技术前线
数据分析
2023-09-15 09:44