最新文章

压箱底薅羊毛教程!用 GitHub Actions + S3 实现零成本运行 Serverless MySQL 数据库

通过 GitHub Actions 提供临时计算能力,并搭配 S3 持久存储,您可以拥有按需运行、零成本且随时可用的 Serverless 数据库,非常适合快速测试或演示。

小猿姐聊技术
MySQL
2024-12-17 14:54

云原生数仓 Databend 为什么使用 Rust 开发?

Databend 是一个使用 Rust 研发,基于对象存储设计的新一代的云原生数据仓库产品。它实现了真正的存储与计算分离架构,能够提供高性能、低成本、按需按量使用等能力,兼容 MySQL、ClickHouse 协议,提供了极速弹性扩展能力+强分布式,致力于解决大数据分析成本和复杂问题。Databend 在设计之初就全面拥抱云原生理念,将存储和计算完全解耦,将对象存储作为存储层,使用云对象存储来持久

Databend
数据库开发技术
2024-12-17 11:54

为什么某些 batch size 会突然导致性能下降?

编者按:你是否曾在优化深度学习模型时感到困惑,明明增加了 batch size,GPU 利用率却没有如预期提升?在实际项目中,这个问题可能导致资源浪费、训练效率低下,甚至影响整个 AI 产品的交付周期。本文作者深入剖析了现代 GPU 批处理的工作原理,揭示了内存带宽与计算能力之间的微妙关系。通过建立理论模型并结合实际实验,作者不仅解释了为什么某些 batch size 会突然导致性能下降,还提供了

Baihai_IDP
人工智能
2024-12-16 14:51

redis也可以是成本优化利器?

Redis Stream是Redis 5.0版本新增加的数据结构,主要用于消息队列。关于Redis Stream的具体细节,可以参照官网,阅读本篇文章中只需要理解以下概念即可。

danny_2018
数据挖掘
2024-12-16 10:53

锐捷网络:不仅是追光者,更是以太全光网的造光者

随着信息技术的飞速发展和数字化进程的不断深入,企业园区网络建设正面临着前所未有的挑战。一方面,日益增长的数据流量和复杂的应用场景对网络带宽、时延、可靠性、灵活性提出了更高要求;另一方面,传统网络由于架构臃肿难以快速扩容、维护成本高等原因,在应对这些需求时显得力不从心,难以有效支撑业务发展。基于这样的背景,尤其在数字化转型与“碳中和”目标的双重驱动下,“光进铜退”逐渐成为网络基础设施升级的必然趋势。

网络通信频道
网络通信/物联网
2024-12-16 10:04

2024年度IT168技术卓越奖名单:存储类

人工智能的大规模应用带来了数据量的爆炸式增长以及对数据处理速度、精准度的极致诉求,这无疑对存储的容量、性能与架构都提出了全新的挑战与机遇。那么,在2024年,数据存储领域于人工智能浪潮的席卷之下,究竟呈现出了哪些令人瞩目的新趋势呢?

陶然陶然
服务器/存储
2024-12-13 19:36

2024年度IT168技术卓越奖名单:NoSQL数据库类

又是一年技术卓越奖揭幕时,为了更好地呈现数据库创新发展面貌,2024年我们将数据库细分为关系型数据库和NoSQL两大类。接下来,一起具体来看看2024年NoSQL数据库领域有哪些新发展趋势吧。

qing_yun
数据库开发技术
2024-12-13 17:47

2024年度IT168技术卓越奖名单:关系型数据库类

又是一年技术卓越奖揭幕时,为了更好地呈现数据库创新发展面貌,2024年我们将数据库细分为关系型数据库和NoSQL两大类。接下来,一起具体来看看2024年关系型数据库领域有哪些新发展趋势吧。

qing_yun
数据库开发技术
2024-12-13 17:45

LLM 分布式训练六大关键技术介绍

编者按: 本文聚焦于分布式去中心化神经网络训练技术,作者系统阐述了在大规模模型训练中提高硬件使用效率的创新方法。文章重点阐述了六种关键的分布式训练技术:数据并行训练:通过将数据 mini-batches 分散到多个 workers,实现并行梯度计算和高效训练。Butterfly All-Reduce:通过创新的数据分割和汇总方法,有效降低通信成本。Gossip-Based Averagi

Baihai_IDP
人工智能
2024-12-13 10:33

【YashanDB知识库】如何将mysql含有group by的SQL转换成崖山支持的SQL

本文内容来自YashanDB官网,原文内容请见如何将mysql含有group by的SQL转换成崖山支持的SQL-YashanDB问题现象以下SQL在MYSQL下均能执行成功,在崖山下执行报错。SELECT Sname,Ssex, min(Sage) FROM Student group by Ssex; SELECT Sname,count(0) AS counts FROM Stud

崖山数据库系统YashanDB
国内数据库
2024-12-13 10:15

与时俱进,京东云高性能计算平台

作者:京东科技 林顺利持续演进的高性能计算高性能计算是利用超级计算机实现并行计算的一门技术。通过使用大量通用型计算节点搭建阵列式计算集群,替代单体超级计算机的方式,来实现并行计算加速,已成为高性能计算的通用方案。经过多年发展,高性能计算已成为各个领域解决复杂计算和进行大规模数据分析的技术底座,如 汽车和航天行业通过空气动力模拟来提升燃油效率、能源行业通过分析地震和地质数据来实现石油勘探、医药行

京东技术
IT综合
2024-12-13 10:07

150套RAC实施达成!我把共存储存配置刷通过了

那么希望本次的Oracle共享存储配置帮助到大家,下次继续分享!

wddwr7307914
Oracle
2024-12-13 08:13

成为oceanbase贡献者第三天:内存管理使用小技巧

大家好,这是成为oceanbase贡献者的第三篇文章,本文主要讲述内存管理使用技巧,这里并没有直接从ob代码说起,而是从一个普通人学习c++语法,了解其他平台小细节开始,同时 如果句子不通顺地方,说明理解可能有偏差,请指教阅读本文章你将受益如下重载运算符new 与malloc在返回值上区别?在ceph 双向链表新用法,一个类定义时候 成员变量就是包含了 双向链表节点,可以通过该节点反推 类其他变量

数据库频道
国内数据库
2024-12-12 14:05

瀚高 HGHAC高可用集群配置逻辑复制槽方法

本文档用于指导使用hghactl集群命令配置逻辑复制槽; 若用数据库命令创建逻辑复制槽,在集群主备切换新主节点不会自动创建逻辑复制槽; 意外情况出现的逻辑复制断开,集群会识别该逻辑复制槽为unkown,删除逻辑复制槽。

瀚高PG实验室
国内数据库
2024-12-12 13:50

TiDB 优化器 | 执行计划管理及实践

在 TiDB 中,优化器的作用至关重要,它决定了 SQL 查询的执行计划,从而直接影响查询性能。尽管 TiDB 优化器采用了代价模型来选择最优执行计划,但由于统计信息、估算误差等因素,优化器并不能保证每次都选中最佳计划。本文深入解析了 TiDB 优化器的执行计划生成过程及其局限性,介绍了如何通过 Hint、SQL Binding、执行计划缓存等技术手段进行执行计划管理,确保查询性能的稳定性和高效性。

PingCAP
MySQL
2024-12-12 13:47