KETTLE集群搭建
KETTLE 集群搭建 说明: 本文档基于 kettle5.4 一、集群的原理与优缺点 1.1 集群的原理 Kettle 集群是由一个主 carte 服务器和多个从 carte 服务器组成的,类似于 master-slave 结构,不同的是 ’master’ 处理具体任务,只负责任务的分发和收集运行结果。 Master carte 结点收到请求后,把任务分成多个部分交给 slave carte 执行, slave 执行完毕后把结果交给 mater 进行汇总,再由 mster 返回结果。 1.2 集群的优点 和其它系统的集群一样,有以下优点: 1) 多服务器运行,加快处理速度,对于大数据量的操作更明显 2) 防单点失败,一台服务器故障后其它服务器还可以运行 1.3 集群的缺点 1) 采用主从结构,不具备自动切换主从的功能。所以一旦主节点宕机,整个系统不可用 2) 对网络要求高,节点之间需要不断的传输数据 3) 需要更多的服务器,而且主节点没有处理能力 1.4 适用场景 适合于: 1) 需求 kettle 能时刻保持正常运行的场景 2) 大批量处理数据的场景 二、集群搭建 2.1 配置子服务器 2.1.1 配置主服务器 打开 ketlle 目录 , 找到 pwd 目录,里面有 4 个 XML 文件,分别是子服务器的配置文件和密码文件: Carte-config-master-8080