1. 需求
业务上对业务表就行重构，重新设计了新表，需要原有的数据准实时同步到新表（目标表）
字段类型和数据值等做了修改需要处理映射
例如
1是，2否需要映射为 1是，0否
varchar存储的时间转换为datetime
int存储的时间戳要转换为datetime
新表设计了新状态码，[……]
作者： wwek
2022年了基于 Apache Doris 的数据仓库平台架构设计（力荐给中小公司）
1. 数据平台数仓平台架构设计大图
1.1 基于Apache Doris（以下简称Doris）的实时数仓架构大图
1.1 架构图说明
数据源
主要是业务数据库MySQL，当然也可以是其他的关系型数据库
数据集成和处理
实时，原封不动同步的数据使用CloudCanal；需要复杂的数据加工处[……]
阿里云ADB（MySQL）迁移Apache Doris或StarRocks SQL查询兼容性处理
1. 问题和解决办法
1.1 SELECT 字段中的非聚合函数包裹的字段，必须在 GROUP BY中申明
# SQLSTATE[HY000]: General error: 1064 '`u`.`name`' must be an aggregate expression or appear i[......]使用N8N工作流自动化解决三方API数据对接
title: 使用N8N工作流自动化解决三方API数据对接
0、n8n是什么？
n8n是免费的基于节点的工作流自动化工具，可以轻松实现跨不同服务的任务自动化。它可以自托管，易于扩展，因此也可以与内部工具一起使用。
1、安装
参见n8n官方文档^[1]，推荐docker安装
2、需[……]
基于FreeSWITCH自建呼叫中心中台.pdf
DolphinScheduler 调度 DataX 实现 MySQL To MySQL 增量数据同步实战
背景
MySQL库A 到 MySQL库B的增量数据同步需求
DolphinScheduler中配置DataX MySQL To MySQL工作流
工作流定义
工作流定义 > 创建工作流 > 拖入1个SHELL组件 > 拖入1个DATAX组件
SHELL组件(文章)
脚本
echo '文章同步[......]