KettlePack(调度监控软件)是一款优秀的kettle的web端调度监控工具,它的页面简洁,功能强大,可以帮助用户对Kettle创建的内容进行监控和调度,能够实时运行监控,使用起来十分便利,感兴趣的朋友快来下载吧。
基本简介
KettlePack是一个基于Kettle8的web端调度监控管理平台,专门用来调度和监控由Kettle客户端创建的Job和Transformation,安装使用简单方便,并拥有完善的帮助文档和在线支持,目前基本可以支持所有的组件,包括大数据组件(hbase、hive、hdfs等)。
Kettle作为一款老牌开源的ETL工具得到了非常广泛的使用,一般的使用的都是使用客户端操作管理,但问题是当投入生产环境之后,在同时管理成百上千个Job时,显得心有余而力不足。在使用过程中易用度非常低,于是我们开发了kettlepack这款调度监控工具。
软件背景
Kettle作为用户规模最多的开源ETL工具,强大简洁的功能深受广大ETL从业者的欢迎。但kettle本身的调度监控功能却非常弱。Pentaho官方都建议采用crontab(Unix平台)和计划任务(Windows平台)来完成调度功能。所以大家在实施kettle作业调度功能的时候,通常采用以下几种方式:使用spoon程序来启动Job,使用crontab或计划任务,自主开发java程序来调用kettle的类库。
项目介绍
Kettle调度监控平台(以下简称KS)是一个自主开发的javaweb程序,专门用来调度和监控由kettle客户端创建的job和transformation。KS整体的框架是由spring+sprin gmvc +beetlsql整合而成,通过调用kettle的API来执行转换和作业,并且使用quartz框架完成调度工作。
此版本基于kettle-8.0.0.0-28版本的API开发的,目前可以基本支持所有的组件,包括大数据组件(hbase、hive、hdfs等)。
软件特色
1、一体化资源管理
支持kettle数据库资源库和文件资源库的关联
增加文件管理功能,可以直接导入本地Job/Transformation文件进行管理,支持批量导入/导出
2、可视化任务调度
支持Job/Transformation的调度流程预览
灵活的调度定时控制,支持pron表达式配置任务的定时配置
3、实时运行监控
支持实时日志展示,可以实时查看正在运行的任务的日志内容
自定义预警功能,可自定义配置预警内容,触发后实时向对应邮件发送预警内容
支持异常预警,运行异常的任务也可以实时预警
4、多平台兼容
支持Windows、Linux、Docker等平台
支持其他操作系统的扩展兼容
5、Carte服务支持
KettlePack支持Carte服务