ITPUB技术论坛_专业的IT技术社区

大数据计算引擎 EasyMR 如何简单高效管理 Yarn 资源队列

在Yarn框架中，资源调度是十分重要的内容，EasyMR出于简单高效原则，开放了资源队列管理功能。本文就为大家详细介绍大数据计算引擎 EasyMR 是如何简单高效管理 Yarn 资源队列的。

数栈DTinsight

Hadoop

2023-09-01 10:24

如何应对大数据时代下的多样化数据流通难题

数据交换平台，作为数据管理工具的重要组成部分，已经深入到企业和组织的数字化转型与升级过程中。这种平台弥合了各种应用与数据之间的鸿沟，使得应用能够更轻松地获取和利用数据。

danny_2018

数据分析

2023-08-31 22:15

数据交换在现代企业管理中的应用价值

未来数据交换将朝着更多元化的数据源发展，采用更强大的安全与隐私技术，通过构建更灵活、可扩展的数据架构，以进一步增强企业的数据管理能力。这也将成为企业数字化战略中不可或缺的一部分，助力企业在不断变化的商业环境中持续成功。

danny_2018

数据分析

2023-08-31 22:13

解码湖仓一体技术架构的发展历程及技术实现路径

对湖仓一体技术的深入理解和分析，让我们有机会更全面地审视其发展历程和技术路径。当我们回顾并分析这些重要环节时，湖仓一体的核心价值和未来方向变得越来越明朗。无论对于技术从业者，还是企业决策者，都有着非常重要的参考价值。

danny_2018

数据分析

2023-08-31 22:10

Paimon+StarRocks 湖仓一体数据分析方案

本文整理自阿里云高级开发工程师曾庆栋（曦乐）在 Streaming Lakehouse Meetup 的分享。

大数据技术前线

数据分析

2023-08-31 14:06

大数据SQL数据倾斜与数据膨胀的优化与经验总结

本文主要涉及业务SQL执行层面的优化，暂不涉及参数优化。若设置参数，首先确定执行层面哪个阶段（Map/Reduce/Join）任务执行时间较长，从而设置对应参数。本文主要分为以下三个部分：第一部分，会引入数据倾斜与数据膨胀问题；第二部分，介绍当数据倾斜与数据膨胀发生时，如何排查与定位；第三部分，会从系统层面给出常见优化思路。

大数据技术前线

数据分析

2023-08-31 09:39