OceanBase中没有像ORACLE或MySQL那样独立的参数文件，因此在进行数据库迁移的这种场景下，如何保持新老数据库的参数的一致成了OceanBase中的一个问题。这个问题其实也可以转化为如何查询OceanBase数据库中修改过的参数，我们需要找到那些和默认值不一致的参数，并以此在新数据库环境 ...

文|作业帮大数据团队（阮文俊、孙建业） 背 景 基于 Apache DolphinScheduler （以下简称DolphinScheduler）搭建的 UDA 任务调度平台有效支撑了公司的业务数据开发需求，处理着日均百万级别的任务量。 整个 UDA 的架构如下图所示，其中我们的引擎层主要基于 Do ...

从 $PGDATA 到文件组：深入解析 PostgreSQL 与 SQL Server 的存储策略 在数据库领域，数据存储和管理的效率与可靠性是决定系统性能、可扩展性和易于管理的关键因素。PostgreSQL 和 SQL Server 在数据存储方面采取了略有不同的方式。PostgreSQL 中一个 ...

[20241222]关于日期输出格式问题.txt--//https://connor-mcdonald.com/ 网站写了一系列相关blog，命名为Kris Kringle系列。--//其中链接提到的例子https://connor-mcdonald.com/2024/12/21/kris-krin ...

音乐网站与分享平台依靠网络技术的支持得到了快速的发展，首先要从用户的实际需求出发，通过了解用户的需求开发出具有针对性的首页、音乐资讯、音乐翻唱、在线听歌、留言反馈、个人中心、后台管理、客服功能，利用目前网络给用户带来的方便快捷这一特点对系统进行调整，设计的系统让用户的使用起来更加方便，本系统的主要目... ...

大家好，我是 V 哥，上周跟一个哥们吃饭，技术人在一起，你知道的，没聊上一会儿，就转到技术问题探讨上了，其中聊到数据库子查询的问题印象深刻，回来整理了以下10个案例说明不使用子查询的问题，分享给大家。 首先，来说一下在MySQL中，不推荐使用子查询和JOIN的原因，主要有以下几点： 性能问题：子查询 ...

背景 最近碰到一个 case，通过可传输表空间的方式导入一个 4GB 大小的表，耗时 13 分钟。 通过PROFILE定位，发现大部分耗时竟然是在System lock阶段。 mysql> set profiling=1;Query OK, 0 rows affected, 1 warning (0 ...

1. 基本信息 图数据库实战 [ [美] 戴夫·贝克伯杰(Dave Bechberger) (美) 乔希·佩里曼著 人民邮电出版社,2021年10月出版 1.1. 读薄率 书籍总字数413千字，笔记总字数30938字。 读薄率30938÷413000≈7.49% 1.2. 读厚方向 Data Mes ...

1、下载安装包 如果没安装wget，先安装一下wget yum install wget -y wget 获取网络资源 wget http://download.redis.io/releases/redis-6.2.6.tar.gz 2、解压到指定目录 tar -zxvf redis-6.2.6. ...

1. 图分析 1.1. 图分析和机器学习（ML）是进一步探索图时要探索的两个最常见领域 1.2. 寻路 1.2.1. 每一个特定的寻路算法的工作原理都略有不同，并且各有优缺点 1.2.2. 测向 1.2.2.1. 地理制图工具使用寻路算法的一些变体来提供方向 1.2.3. 优化问题 1.2.3.1. ...

背景 某IP为44.2的服务器挂载的硬盘 服务器磁盘空间占满突然故障排查过程查看docker容器磁盘SIZE查看docker容器 使用磁盘大小此目前单独挂载路劲/data/docker使用 du -sh * 查看， 发现kafka容器消耗91G空间查看具体容器，判断是kafkakafka容器状态是客 ...

1. 熵 1.1. 熵是物理学上的一个术语，本质上是一个系统“内在的混乱程度”​ 1.2. 是我们的敌人 2. 执行缓慢的遍历 2.1. 和关系数据库一样，图数据库对于执行缓慢的操作并不陌生 2.2. 图也有帮助诊断问题的工具 2.2.1. 解释一个遍历会做什么 2.2.2. 分析一个遍历做了什么 ...

1、准备安装包 2、解压到指定目录 tar -zxvf mongodb-linux-x86_64-4.0.10.tgz -C /opt/ 3、改名 cd /opt/ mv mongodb-linux-x86_64-4.0.10/ mongodb-4.0.10/ 4、新建目录 分别用来存储数据和日志 ...

使用 gt-checksum 迁移表结构到 GreatSQL 背景 本文以从 ORACLE 迁移到 GreatSQL 为例讲述如何使用 gt-checksum 迁移表结构。 关于gt-checksum gt-checksum是GreatSQL社区开源的一款静态数据库校验修复工具，支持MySQL、Or ...

1. 使用熟路构建遍历 1.1. 为了避免把开发遍历和构建应用程序混淆 1.1.1. 把遍历的编写和测试与应用程序的开发拆分成了两个独立的操作 1.1.2. 在Java代码之外独立开发遍历，然后把它们加入应用程序中 1.1.3. 现实情况是，大多数开发人员会同时完成两者，不管使用的是哪种数据库引擎 ...

“只有决策快、公司运营快之后，公司才能实现降本增效”。 从北京到新疆、从中国到南非，从奥运会场馆的水泥混凝土到钱塘江畔拔地而起的高楼房产，无不存在着某大型国有集团的身影。 历经60多年沧桑巨变，该集团已发展成为以“新型绿色环保建材制造、贸易及服务，房地产开发经营、物业管理”为主业的市属大型国有控股产 ...

复杂事件处理（CEP）是一种对事件流进行分析的技术，它能够识别出数据流中的事件序列是否符合特定的模式，并允许用户对这些模式进行处理。Flink CEP 是 CEP 在 Apache Flink 中的具体实现，是 Apache Flink 的一个库，使用户可以在 Flink 的流处理引擎上进行复杂事件 ...

视频及PPT等相关资料：点击查看 讲师介绍 陶超权，博世智驾（中国）后端工程师，负责数据处理和数据调度方面工作，在智能驾驶数据处理领域具有丰富的实践经验。在2024年12月Apache DolphinScheduler社区线上交流会上上，他分享了Apache DolphinScheduler在智能驾 ...

如果你需要使用Apache SeaTunnel将MongoDB数据库的数据同步到Doris，你可以按照以下步骤进行操作。这些步骤基于Apache SeaTunnel的官方文档和社区提供的最佳实践： 一、环境准备 下载并安装SeaTunnel： 访问SeaTunnel的官方GitHub页面，下载最新稳 ...

1. 高级数据建模技术 1.1. 大多数现实生活中的应用程序（如推荐引擎或个性化应用程序）所需的模型比社交网络示例的单顶点、单边数据模型复杂得多 1.2. 三种高级数据建模技术 1.2.1. 使用通用标签提高性能 1.2.2. 将属性移动到边，以简化遍历 1.2.3. 对数据进行反规范化处理，以实现 ...