資料介紹
軟件簡介
ChunJun是一個基于 Flink 提供易用、穩定、高效的批流統一的數據集成工具,既可以采集靜態的數據,比如MySQL,HDFS等,也可以采集實時變化的數據,比如binlog,Kafka等。同時ChunJun也是一個支持原生FlinkSql所有語法和特性的計算框架。目前ChunJun在實際應用過程中已服務了上百家客戶,經過多次迭代與沉淀,積累了大量的客戶案例。
ChunJun主要應用于大數據開發平臺的數據同步/數據集成模塊,通常采用將底層高效的同步插件和界面化的配置方式相結合的方式,使大數據開發人員可簡潔、快速的完成數據同步任務開發,實現將業務數據庫的數據同步至大數據存儲平臺,從而進行數據建模開發,以及數據開發完成后,將大數據處理好的結果數據同步至業務的應用數據庫,供企業數據業務使用。
Chunjun目前包含下面這些特性:
-
大部分插件支持并發讀寫數據,可以大幅度提高讀寫速度;
-
部分插件支持失敗恢復的功能,可以從失敗的位置恢復任務,節約運行時間;失敗恢復
-
關系數據庫的Source插件支持間隔輪詢功能,可以持續不斷的采集變化的數據;間隔輪詢
-
可以限制source的讀取速度,降低對業務數據庫的影響;
-
可以記錄sink插件寫數據時產生的臟數據;
-
可以限制臟數據的最大數量;
-
支持多種運行模式;
-
同步任務支持執行flinksql語法的transformer操作;
-
sql任務支持和flinkSql自帶connectors共用;
Chunjun目前支持下面這些數據庫:
? | Database Type | Source | Sink | Lookup |
---|---|---|---|---|
Batch Synchronization | MySQL | doc | doc | doc |
? | TiDB | ? | 參考mysql | 參考mysql |
? | Oracle | doc | doc | doc |
? | SqlServer | doc | doc | doc |
? | PostgreSQL | doc | doc | doc |
? | DB2 | doc | doc | doc |
? | ClickHouse | doc | doc | doc |
? | Greenplum | doc | doc | ? |
? | KingBase | doc | doc | ? |
? | MongoDB | doc | doc | doc |
? | SAP HANA | doc | doc | ? |
? | ElasticSearch7 | doc | doc | doc |
? | FTP | doc | doc | ? |
? | HDFS | doc | doc | ? |
? | Stream | doc | doc | ? |
? | Redis | ? | doc | doc |
? | Hive | ? | doc | ? |
? | Hbase | doc | doc | doc |
? | Solr | doc | doc | ? |
? | File | doc | ? | ? |
? | StarRocks | ? | doc | ? |
Stream Synchronization | Kafka | doc | doc | ? |
? | EMQX | doc | doc | ? |
? | MySQL Binlog | doc | ? | ? |
? | Oracle LogMiner | doc | ? | ? |
? | Sqlserver CDC | doc | ? | ? |
?
- Flink學習精要 0次下載
- 工具集成竄口網口MODBUS調試工具免費下載 25次下載
- 環保行業數據計算工具免費下載 4次下載
- 數據分析工具下載 5次下載
- STM8配置工具STM8CubeMX數據手冊 14次下載
- 拼版工具 0次下載
- pcb阻抗計算工具
- EDA工具CADENCE原理圖與PCB設計說明 58次下載
- 液晶電視升級工具mboot使用及強制升級方法 13次下載
- 藍牙調試工具BTool v1.40.5資源下載 27次下載
- 基于區塊鏈并行的以太坊數據快速導出工具 7次下載
- 16位CRC驗證碼生成VI工具下載 55次下載
- 軟件工具Altium Designer免費下載入口 83次下載
- 一種基于數據集成的隨機森林算法 12次下載
- 基于元數據的ETL工具集成研究
- 更強的無線(雙)串口數據記錄 調試工具 731次閱讀
- 小米電腦數據恢復的常用方法、工具和步驟 2359次閱讀
- POC管理和漏洞掃描小工具 879次閱讀
- 持續集成工具jenkins和相關工作機會介紹 536次閱讀
- 軟件離線工具的新規則是什么? 635次閱讀
- OST中提取郵箱數據和重置丟失的WindowsServer 密碼的工具 1261次閱讀
- Oracle:數據庫開發和管理的工具 693次閱讀
- 數據分析有哪些工具 8791次閱讀
- Rsync遠程數據同步工具介紹 1069次閱讀
- 使用集成的原理圖、布局和仿真工具消除DDR設計中的猜測 1307次閱讀
- 新規劃PCI核查工具的使用方法和應用事例 3142次閱讀
- 實時數據體系建設的總體方案的三部分 6771次閱讀
- 一套符合標準SQL語義的開發語言,link的最新特性 2460次閱讀
- 來看看Spark和Flink各自的優劣和主要區別 3.1w次閱讀
- 如何正確找到你想要的數據集成工具 1845次閱讀
下載排行
本周
- 1涂鴉各WiFi模塊原理圖加PCB封裝
- 11.75 MB | 76次下載 | 1 積分
- 2錦銳科技CA51F2 SDK開發包
- 24.06 MB | 29次下載 | 1 積分
- 3錦銳CA51F005 SDK開發包
- 19.47 MB | 3次下載 | 1 積分
- 4蘋果iphone 11電路原理圖
- 4.98 MB | 3次下載 | 2 積分
- 5基礎模擬電子電路
- 3.80 MB | 3次下載 | 1 積分
- 6RA-Eco-RA6M4-100PIN-V1.0開發板資料
- 34.89 MB | 1次下載 | 免費
- 7STM32F3系列、STM32F4系列、STM32L4系列和STM32L4+系列Cortex-M4編程手冊
- 3.32 MB | 1次下載 | 免費
- 8聯想A820t手機維修圖紙包括主板原理圖 尾板原理圖 點位圖
- 0.62 MB | 次下載 | 5 積分
本月
- 1AI智能眼鏡產業鏈分析
- 4.43 MB | 383次下載 | 免費
- 2蘇泊爾電磁爐線路的電路原理圖資料合集
- 2.02 MB | 296次下載 | 5 積分
- 3貼片三極管上的印字與真實名稱的對照表詳細說明
- 0.50 MB | 94次下載 | 1 積分
- 4長虹液晶電視R-HS310B-5HF01的電源板電路原理圖
- 0.46 MB | 91次下載 | 5 積分
- 5涂鴉各WiFi模塊原理圖加PCB封裝
- 11.75 MB | 76次下載 | 1 積分
- 6錦銳科技CA51F2 SDK開發包
- 24.06 MB | 29次下載 | 1 積分
- 7AO4803A雙P通道增強型場效應晶體管的數據手冊
- 0.11 MB | 28次下載 | 2 積分
- 8長虹液晶彩電LS29機芯的技術資料說明
- 3.42 MB | 16次下載 | 2 積分
總榜
- 1matlab軟件下載入口
- 未知 | 935127次下載 | 10 積分
- 2開源硬件-PMP21529.1-4 開關降壓/升壓雙向直流/直流轉換器 PCB layout 設計
- 1.48MB | 420064次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233089次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費下載
- 340992 | 191388次下載 | 10 積分
- 5十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183342次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81588次下載 | 10 積分
- 7Keil工具MDK-Arm免費下載
- 0.02 MB | 73815次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65988次下載 | 10 積分
評論