向量检索服务相关人物
本文介绍如何为向量检索服务开通服务关联角色，用于授权向量检索服务访问专有网络资源。 背景信息 向量检索服务关联角色（AliyunServiceRoleForDashVector）是访问控制提供的一种服务关联角色，用于授权向量检索服务访问专有网络资源的权限，使用该权限查询专有网络、安全组和可用区信息，...
经过延时从库+binlog仿制，康复误操作数据
通过延时从库+binlog复制，恢复误操作数据 一、介绍环境 数据库版本 实例角色 ip地址 端口 GreatSQL 8.0.32-26 master 192.168.134.199 5725 GreatSQL 8.0.32-26 slave 192.168.134.199 5726 二、主库配置...
Redis探秘Sentinel（岗兵形式）
概述 Redis的高可用机制有持久化、复制、哨兵和集群。其主要的作用和解决的问题分别是： 持久化：持久化是最简单的高可用方法(有时甚至不被归为高可用的手段)，主要作用是数据备份，即将数据存储在硬盘，保证数据不会因进程退出而丢失。 复制：复制是高可用Redis的基础，哨兵和集群都是在复制基础上实现高可...
读数据维护：作业负载的可恢复性04备份与档案
1. 区分备份与档案 1.1. 两个完全不同的操作 1.1.1. 要实现的是两个完全不同的目标 1.1.2. 备份(backup) 1.1.3. 档案(archive) 1.2. 有些产品既能制作备份，又能制作档案 1.3. 某些产品或服务明明是专门用来制作备份的，但有人却偏偏想顺便用它来制作档案...
离线数据同步变迁
本文介绍了从第一代基于Hadoop体系的离线数据同步，到第二代基于DolphinScheduler和StarRocks的改进方案，再到第三代基于Python自定义的离线数据同步的演变过程。每一代方案都在不断优化，以适应日益增长的数据量和复杂的业务需求。...
Dolphinscheduler DAG中心源码分析
背景描述 注意 : 在 Dolphinscheduler 中，离线任务是有完整的声明周期的，比如说停止、暂停、暂停恢复、重跑等等，都是以DAG(有向无环图的形式进行任务组织)T+1离线任务的。 Dolphinscheduler DAG实现 org.apache.dolphinscheduler.co...
11月 | Apache SeaTunnel月度发展总结
各位热爱 Apache SeaTunnel 的小伙伴们，社区10月份月报更新啦！这里将记录 SeaTunnel 社区每月的重要更新，欢迎关注！ 月度Merge之星 感谢以下小伙伴 11 月份为 Apache SeaTunnel 所做的精彩贡献（排名不分先后）： 用户名 用户名 用户名 用户名 用户名...
【GreatSQL优化器-05】条件过滤condition_fanout_filter
【GreatSQL优化器-05】条件过滤condition_fanout_filter 一、condition_fanout_filter介绍 GreatSQL 的优化器对于 join 的表需要根据行数和 cost 来确定最后哪张表先执行哪张表后执行，这里面就涉及到预估满足条件的表数据，condit...
MySql 9 in Docker 使用克隆插件建立主从
环境说明 Docker Windows 11 MySql 9.1.0 搭建步骤 1. 准备主库 准备一个主库的配置文件 master.cnf [mysqld] server-id=1 log-bin=mysql-bin binlog-format=ROW gtid_mode=ON enforce-g...
【技巧帖】 DolphinScheduler 使命数据整理与备份战略，保证页面不卡顿
问题描述 由于 Apache DolphinScheduler 长期运行，任务数量不断增加，相关任务数据主要存储在数据库中的 t_ds_task_instance 和 t_ds_process_instance 两张表中。 随着这两张表数据量的持续增长，导致系统页面出现卡顿现象。 解决方案 为解决上...
