DataX-Web项目的Windows环境部署及基本使用

news/2024/9/23 3:12:44 标签: 大数据, 开源软件, windows

一,datax-web是什么?

       DataX Web 是一个在 DataX 基础上开发的分布式数据同步工具,它提供了一个简单易用的操作界面,旨在降低用户使用 DataX 的学习成本,缩短任务配置时间,并减少配置过程中的错误。DataX Web 支持多种数据源,包括 RDBMS、Hive、HBase、ClickHouse、MongoDB 等,并且可以批量创建数据同步任务。它还支持实时查看数据同步进度和日志,提供终止同步功能,并且集成了 XXL-JOB 进行定时任务调度。

二,拉取源码

源码地址:  datax-web源码地址

克隆地址:https://github.com/WeiYe-Jing/datax-web.git

1,本地克隆,选择一个文件夹,右键选择显示更多选项

2,克隆

git clone https://github.com/WeiYe-Jing/datax-web.git

三,环境准备

Datax本地环境准备

1,获取datax.rar包,网盘地址:

链接: https://pan.baidu.com/s/17A-8a3k_C0nqDZvfIxiurw 提取码: 9527

2,将压缩包解压

python环境准备

参考文章:


http://www.niftyadmin.cn/n/5671198.html

相关文章

张正友相机标定算法

1.标定算法 2.标定误差 2.1相关定义 A 设计外参: 车型设计中,规定的相机装配外参, 一般从车厂数据模型中得到 B 实际外参: 相机安装后的实际外参 C 标定输出的外参: 标定算法输出的外参, 需要非常接近实际外参 D 超差阈值:算法判定,标定输出的外参与设计外参之间的差超过…

MFC - 常用基础控件

前言 各位师傅大家好,我是qmx_07,今天给大家讲解MFC中的基础控件 基础控件 单选按钮 绘图准备: 调整窗口大小,设置 radio button 单选按钮button 按钮 设置单选按钮变量分别为 m_BN1、 m_BN2、m_BN3 void CMFCApplication3Dlg::OnBnC…

视觉距离与轴距离的转换方法

1.找一个明显的参照物,用上方固定的相机拍一下。保存好图片 2.轴用定长距离如1mm移动一下。 3.再用上相机再取一张图。 4.最后用halcon 将两图叠加 显示 效果如下 从图上可以明显的看出有两个图,红色标识的地方。 这时可以用halcon的工具画一个长方形…

TikTok流量不佳:是网络环境选择不当还是其他原因?

TikTok,作为全球短视频社交平台的佼佼者,每天都有海量的内容被上传和分享。然而,很多用户和内容创作者发现,他们的TikTok视频流量并不理想。这引发了一个问题:TikTok流量不佳,是因为网络环境选择不当&#…

expressjs 和 Router 配置 POST 请求

在Express.js中,你可以使用Router来组织你的路由,使其更加模块化和易于管理。当你需要配置POST请求时,你可以在你的Router文件中定义它,并指定相应的处理函数。下面是一个简单的例子,展示了如何在Express.js中配置Rout…

网络层协议 —— IP协议

目录 0.前言 1.IP协议的格式 2.IP地址 2.1IP地址的划分 国际间IP地址的划分 公有IP 私有IP 特殊的IP地址 国内IP地址的划分 2.2IP地址不足问题 2.3IP地址的功能 2.4如何使用IP地址 2.5IP地址的构成 3.网段划分 以前的方案 现在的方案 4.认识宏观网络 5.路由 …

周记-2024年第38周9.16~9.22:自己负责的任务,要尽量早点开始

现在是周日晚上21:21,我开始写周总结,22:26写完,用时66分钟。 上周计划 李沐clip论文看懂,多模态串讲视频看完**(clip没看,看了李沐精读经典论文,Alexnet,ResNet,Trans…