最新文章

演讲干货整理:泛能网能碳产业智能平台基于 TDengine 的升级之路

在 7 月 26 日的 TDengine 用户大会上,新奥数能 / 物联和数据技术召集人袁文科进行了题为《基于新一代时序数据库 TDengine 助力泛能网能碳产业智能平台底座升级》的主题演讲。他从泛能网能碳产业智能平台的业务及架构痛点出发,详细分享了在数据库选型、平台架构改造、新旧底座替换以及数据迁移等多个维度的经验,为与会者提供了宝贵的参考。本文据此演讲内容整理而成。平台痛点及架构痛点新奥数能

TDengine
国内数据库
2024-09-30 15:18

崖山数据库的共享集群机制初探

本文作者:YashanDB高级服务工程师周国超YashanDB共享集群是崖⼭数据库系统(YashanDB)的⼀个关键特性,它是⼀个单库多实例的多活数据库系统。⽤⼾可以连接到任意实例访问同⼀个数据库,多个数据库实例能够并发读写同⼀份数据,同时保证实例之间读写的强⼀致性。这种设计赋予了系统⾼可⽤性、⾼扩展性和⾼性能的特点。共享集群基于YashanDB内核持续演进,硬件上依赖共享存储实现shared-D

崖山数据库系统YashanDB
国内数据库
2024-09-30 14:56

纳尼?自建K8s集群日志收集还能通过JMQ保存到JES

作者:京东科技 刘恩浩一、背景基于K8s集群的私有化交付方案中,日志收集采用了ilogtail+logstash+kafka+es方案,其中ilogtail负责日志收集,logstash负责对数据转换,kafka负责对日志传递中的消峰进而减少es的写入压力,es用来保存日志数据。在私有化交付中本方案中涉及的中间件一般需要单独部署,但是在京东内网环境的部署考虑到kafka和es的高可用,则不推荐采用

京东技术
IT综合
2024-09-30 14:46

【PGCCC】从 PostgreSQL 表恢复已删除的数据

PostgreSQL 非常擅长保护您的数据安全,因此它不会自行消失。不幸的是,反之亦然——如果数据已被删除,它将无法恢复。在本文中,我们将探讨从 PostgreSQL 表中恢复已删除数据的选项。01 谨慎的人使用事务如果在处理数据时从不犯错误,就不会需要紧急程序。但由于我们都是人,像这样的事情偶尔会发生:-- remove an entry from&nbs

pgccc
PostgreSQL
2024-09-30 11:01

基于openGauss的中国移动磐维数据库创新实践之路

随着中国数字经济的快速发展,各行各业对高性能数据库产品的需求越来越迫切,运营商对数据库提出了更高的要求,三大运营商之一的中国移动对数据库这一数字底座高度重视。

qing_yun
数据库开发技术
2024-09-29 19:14

数仓分层是什么,数仓分层分哪几层以及作用是什么?

数仓分层(DataWarehouseLayering)是数据仓库架构设计中的一个核心概念,它指的是将数据仓库中的数据按照不同的逻辑层次进行组织和划分,以便更好地管理和利用数据。这种分层设计有助于实现数据的清晰化、标准化和规范化,提高数据处理的效率和灵活性,同时支持复杂的数据分析和决策制定。 一、数仓的分层结构 数据仓库的分层设计旨在将数据按照不同的处理阶段和用途进行划分,以提高

SelectDB
国内数据库
2024-09-29 16:41

从具体实践出发,手把手教你 TDengine 最佳建模方式

作为一款高效便捷的大数据平台,TDengine 的使用体验极为极为流畅,用户可以轻松实现数据的实时采集、存储与分析,快速获取所需的信息和洞察。但在追求最佳实践的过程中,我们仍需关注一些关键问题。例如,多个设备是否应该向同一个子表写入数据?在数据列过滤查询与基于标签的过滤查询之间,效率的差异有多大?此外,如何实现数据的高效压缩也是值得探讨的话题。本篇文章将通过具体的案例分析,详细讲解这些问题,以期帮

TDengine
国内数据库
2024-09-29 14:30

【PGCCC】PostgreSQL 17 发布!

PostgreSQL全球开发小组 9.26日发布PostgreSQL 17,这是世界上先进的开源数据库的最新版本。PostgreSQL 17 以数十年的开源开发为基础,在适应新兴数据访问和存储模式的同时,提高了性能和可扩展性。PostgreSQL 的此版本显著提高了整体性能,包括彻底改进的真空内存管理实现、存储访问优化和高并发工作负载改进、批量加载和导出加速以及索引查询执行改进。PostgreSQ

pgccc
PostgreSQL
2024-09-29 14:06

数据库管理-第245期 主流国产数据库RAC架构概览(20240929)

本期对主流国产数据库RAC架构进行了简单介绍

yhw1809
国内数据库
2024-09-29 10:34

AI Agent带来哪些安全风险?如何应对?

AI Agent是一种具有自主性或半自主性的智能实体,能够利用人工智能技术在数字或物理环境中感知、决策、采取行动并实现目标,这种能力使得AI Agent有可能彻底改变各行各业和各种环境。

danny_2018
人工智能
2024-09-29 09:57

GBASE数据库基于英特尔的向量数据库方案

“大模型技术的创新与应用扩展了向量数据库的应用场景,也凸显了向量数据库部署的必要性。通过携手英特尔,我们为用户提供了软硬件协同优化的向量数据库方案,能够帮助用户有效应对海量向量数据处理带来的性能压力,为大模型时代构建高性能的数据库基础设施。”— 关连坡南大通用GBase 8a产品经营部总经理“向量数据库和多模态数据处理等创新技术意味着,数据库领域正在发生更多的变革,带来更高的复杂性,以及对于多元算

GBASE南大通用
国内数据库
2024-09-27 17:24

快手:从 Clickhouse 到 Apache Doris,实现湖仓分离向湖仓一体架构升级

导读:快手 OLAP 系统为内外多个场景提供数据服务,每天承载近 10 亿的查询请求。原有湖仓分离架构,由离线数据湖和实时数仓组成,面临存储冗余、资源抢占、治理复杂、查询调优难等问题。通过引入 Apache Doris 湖仓一体能力,替换了 Clickhouse ,升级为湖仓一体架构,并结合 Doris 的物化视图改写能力和自动物化服务,实现高性能的数据查询以及灵活的数据治理。作者|快手大数据架构

SelectDB
国内数据库
2024-09-27 15:10

给Java同仁单点的AI"开胃菜"--搭建一个自己的本地问答系统

这是我参与创作者计划的第1篇文章   大家好,因为对AI大模型很感兴趣,相信很多兄弟们跟我一样,所以最近花时间了解了一些,有一些总结 分享给大家,希望对各位有所帮助;   本文主要是目标是 讲解如何在本地 搭建一个简易的AI问答系统,主要用java来实现,也有一些简单的python知识;网上很多例子都是以 ChatGPT来讲解的,但因为它对国内访问有限制,O

京东技术
IT综合
2024-09-27 14:42

【YashanDB知识库】hist_head$中analyze time小于tab$中analyze time导致sql执行慢

本文内容来自YashanDB官网,具体内容请见https://www.yashandb.com/newsinfo/7459465.html?templateId=1718516问题现象某局点yashandb cpu使用率100%,经线上分析是由于几个sql执行慢,其中一个sql为简单的单行等值绑定变量过滤+排序。经分析执行计划,相对以前有所变化,走了另外一个索引(效率低)。问题的风险及影响sql语

崖山数据库系统YashanDB
国内数据库
2024-09-27 14:18

PostgreSQL 17 发布了,这个版本值得期待

PostgreSQL 17已与2024年9月26日正式发布了

wddwr7307914
PostgreSQL
2024-09-27 10:13