ITPUB技术论坛_专业的IT技术社区

AI 写 SQL 真的靠谱吗？腾讯游戏在 AI + 湖仓一体的实践

腾讯游戏数据团队每年需要处理超过 3 万个数据提取需求，SQL 编写需要耗费大量时间和精力，如何提升效率成为了一个关键问题。

danny_2018

数据分析

2024-06-11 15:21

Kafka如何实现每秒百万级高并发写入?

Kafka可以做到每秒百万级的超高并发写入，为什么"Kafka可以做到如此快"，下面我就重点讲解Kafka高性能背后的4大核心原因

大数据技术前线

数据分析

2024-06-11 10:48

Spark 的这两个算子，值得你深入研究一下

估计现在大部分同学在用 Spark 的时候，都用的是它的 SQL API，其中的算子应该就用的很少了。

大数据技术前线

数据分析

2024-06-11 10:48

“大模型+数据治理”的应用场景与实践

数据的采集方式、使用环境以及组织之间存在的语义差异导致数据碎片化现象严重，大模型的出现将对企业数据治理产生深远影响，自然语言有望成为数据语言，使企业能够更加容易地访问数据，而不需要解决以上导致数据碎片化的难题。

danny_2018

数据分析

2024-06-06 14:45

阿里云 EMR Serverless StarRocks3.x，极速统一的湖仓新范式

EMR StarRocks 线上公开课第1期，直播主题：EMR Serverless StarRocks3.x，极速统一的湖仓新范式。

阿里云大数据AI技术

可视化

2024-06-06 09:59

6 幅图，通透理解 Elasticsearch 的六大顶级核心应用场景

Elasticsearch 以其强大且多功能的搜索能力而广受欢迎。但在介绍 Elasticsearch 应用场景的时候，之前我也写过几篇，总感觉字多图少，对于初学者或者数据库、技术栈选型的企业用户并不直观、友好。 Elasticsearch Top5典型应用场景 Elasticsearch，你值得拥有！—— 云栖大会 Elasticsearch 场景化应用全景回顾有没有一个场景一幅图生动的介绍 Elasticsearch 最核心、最顶级的场景呢？费尽周折，我们终于看到了这幅图。

大数据技术前线

数据分析

2024-06-05 10:12

[WWW2024]轻量数据依赖的异常检测重训练方法LARA

开篇近日，由阿里云计算平台大数据基础工程技术团队主导，与浙江大学合作的论文《LARA: ALight and Anti-overfitting Retraining Approach for Unsupervised Time Series Anomaly Detection 》被WWW2024收录，该方法解决了云服务正常模式随时间不断变化，且在变化初期观测数据数量不足以支撑模型训练的问题。目前L

阿里云大数据AI技术

数据分析

2024-06-05 09:54

流批一体技术简介

本文由阿里云 Flink 团队苏轩楠老师撰写，旨在向 Flink 用户整体介绍 Flink 流批一体的技术和挑战。内容主要分为以下三个部分：流批一体技术简介面临的挑战总结

大数据技术前线

数据分析

2024-06-04 15:31

面对2千万的json，Clickhouse的表现有点扑街

与此同时呢，好奇心驱使，我又基于同样的需求，在 Clickhouse(下称CK) 身上做了同样的测试，这不测不知道，一测才发现，CK 在外部数据源导入这块的表现，跟 Doris 相比，着实有点让人失望。那么这篇文章，咱就来看看，一个2千万的 json 数据，是怎么经历“九九八十一难”，给倒腾到 CK 库里面的。

大数据技术前线

数据分析

2024-06-04 15:28