文章目录一.基础逻辑二.DirtyManager1.初始化2.收集脏数据并check3.关闭资源三.DirtyDataCollector1.初始化2.收集脏数据并check3.run：消费脏数据4.释放资源四.LogDirtyDataCollector一.基础逻辑脏数据管理模块的基本逻辑是：当数据消费失败时，将脏数据

本文将从e2e的基本介绍，e2e的使用与扩展，session日志隔离三个维度为大家带来ChunJune2e&session日志隔离的分享。大量具体代码和演示请看视频教程⬇️视频课程：https://www.bilibili.com/video/BV1ru411P7oZ/?spm_id_from=333.999.0.0ChunJun为何选择e2e测试ChunJun项目是

@目录概述定义特性部署安装版本对应关系通用配置详解整体配置Content配置Setting配置Local提交Standalone提交Json方式使用SQL方式使用MySQLSinkKafkaSink概述定义Chunjun官网https://dtstack.github.io/chunjun-web/源码release最新版本1.12.8Chunjun文档地址http

本文将从FTPConnector的功能详解，自定义文件切割及自定义FileFormat三个方面为大家带来ChunJunFTPConnector的功能扩展分享。FTPConnector详解FTP是用于在网络上进行文件传输的一套标准协议，它工作在OSI模型的第七层，TCP模型的第四层，即应用层，提供一种在服务器和客户

本文将从FTPConnector的功能详解，自定义文件切割及自定义FileFormat三个方面为大家带来ChunJunFTPConnector的功能扩展分享。FTPConnector详解FTP是用于在网络上进行文件传输的一套标准协议，它工作在OSI模型的第七层，TCP模型的第四层，即应用层，提供一种在服务器和客户

本文将从FTPConnector的功能详解，自定义文件切割及自定义FileFormat三个方面为大家带来ChunJunFTPConnector的功能扩展分享。FTPConnector详解FTP是用于在网络上进行文件传输的一套标准协议，它工作在OSI模型的第七层，TCP模型的第四层，即应用层，提供一种在服务器和客

ChunJun是⼀款稳定、易⽤、⾼效、批流⼀体的数据集成框架，基于计算引擎Flink实现多种异构数据源之间的数据同步与计算。ChunJun可以把不同来源、格式、特点性质的数据在逻辑上或物理上有机地集中，从⽽为企业提供全⾯的数据共享，目前已在上千家公司部署且稳定运⾏。在之前，我们曾

实时同步是ChunJun的⼀个重要特性，指在数据同步过程中，数据源与⽬标系统之间的数据传输和更新⼏乎在同⼀时间进⾏。在实时同步场景中我们更加关注源端，当源系统中的数据发⽣变化时，这些变化会⽴即传输并应⽤到⽬标系统，以保证两个系统中的数据保持⼀致。这个特性需要作业运⾏过程中

基于chunjun纯钧的增量数据同步目前我司的大数据平台使用的是flink技术栈，底层的连接器插件使用的是国产的chunjun插件，在使用chunjun的过程中也遇到了很多问题，本次记录下在SQL模式的情况下怎么支持增量的数据同步chunjun的官网文档对增量同步已经做出了一定的说明纯钧官方根

我们知道Flink有Table（表）、View（视图）、Function（函数/算子）、Database（数据库）的概念，相对于这些耳熟能详的概念，Flink里还有一个Catalog（目录）的概念。本文将为大家带来FlinkCatalog的介绍以及FlinkCatalog在ChunJun中的实践之路。FlinkCatalog简介Catalog提供元数据，如数据

我们知道Flink有Table（表）、View（视图）、Function（函数/算子）、Database（数据库）的概念，相对于这些耳熟能详的概念，Flink里还有一个Catalog（目录）的概念。本文将为大家带来FlinkCatalog的介绍以及FlinkCatalog在ChunJun中的实践之路。FlinkCatalog简介Catalog提供元数据，如

ChunJun是一个开始于2018年的批流一体数据集成框架项目，原名FlinkX。2022年2月22日，在FlinkX进行初版开源的整整四年后，技术团队决定对FlinkX进行整体升级，并更名为ChunJun，希望

简介chunjun是一款基于flink的开源数据同步工具，官方文档，其提供了很多flink官方未提供的插件供大家来使用，特别是达梦插件在国产化环境中很方便！本次介绍的是chunjun中的一

Hi，我是ChunJun，一个有趣好用的开源项目-OSCHINA-中文开源技术交流社区https://www.oschina.net/news/206630ChunJun首页、文档和下载-基于Flink的数据集成工具-

    最近在项目中遇到同步两个CDH数据文件的需求，调研了一圈，发现datax不支持两个cdh同时进行kerberos认证，因此切换到chunjun，chunjun在kerberos认证的配

​​Kerberos​​，在古希腊神话故事中，指的是一只三头犬守护在地狱之门外，禁止任何人类闯入地狱之中。那么在现实中，Kerberos指的是什么呢？一、Kerberos介绍01Kerberos是什么

ChunJun（原FlinkX）是一个基于Flink提供易用、稳定、高效的批流统一的数据集成工具。2018年4月，秉承着开源共享的理念，数栈技术团队在github上开源了FlinkX，承蒙各位开发者的合

作为一个批流统一的数据集成框架，秉承着易用、稳定、高效的目标，ChunJun于2018年4月29日在Github上将内核源码正式开放。从还被叫作FlinkX，写下第一行代码开始，ChunJun已经走

Hadoop是Apache基金会旗下最知名的基础架构开源项目之一。自2006年诞生以来，逐步发展成为海量数据存储、处理最为重要的基础组件，形成了非常丰富的技术生态。作为国内顶

本期我们带大家回顾一下无倦同学的直播分享《ChunJun类加载器隔离》，ChunJun类加载器隔离的方案是我们近期探索的一个新方案，这个方案目前还不是非常成熟，希望能借由此次分享

本期我们带大家回顾一下无倦同学的直播分享《ChunJun类加载器隔离》，ChunJun类加载器隔离的方案是我们近期探索的一个新方案，这个方案目前还不是非常成熟，希望能借由此次分享

一、直播介绍前几期，我们为大家分享了ChunJun的数据还原、Hive事务表及传输模块的一些内容，本期我们为大家分享ChunJun类加载原理与实现。本次直播我们将从Java类加载器解

课件获取：关注公众号“ChunJun”，后台私信“课件”获得直播课件视频回放：点击这里ChengYing开源项目地址：github丨gitee喜欢我们的项目给我们点个__STAR！STAR！！STAR！！！（重要的

一、直播介绍之前的内容，我们为大家分享了ChunJun数据还原的DDL模块，以及ChunJun同步Hive事务表，本期我们为大家分享ChunJun数据传输模块介绍。本次直播我们将从ChunJun数据