首页 > 其他分享 >Crony 一个基于Go语言实现的分布式定时任务管理平台

Crony 一个基于Go语言实现的分布式定时任务管理平台

时间:2022-11-22 14:45:05浏览次数:72  
标签:Crony node testing 支持 任务 Go 定时 节点 分布式

crony - 分布式定时任务管理平台

1. 基本介绍

1.1 项目背景

项目中存在许多定时任务,很多代码写法都是采取见缝插针式的写法或者直接丢到task服务里面写,存在以下问题

  1. 服务多实例时执行定时任务要考虑抢占锁来争夺定时任务执行权,未抢到锁的任务计算资源被浪费了
  2. 定时任务执行情况和执行时间没有统一管理,需要对应开发者结合代码和日志分析情况,带来很高的维护成本,任务没有按时执行,甚至失败了很久才发现,需要重试或排查

1.2 项目介绍

crony是一个基于etcd和mysql开发的分布式定时任务集中调度和管理平台,支持多节点部署,支持节点任务自动分配和故障转移,支持任务执行失败告警,部署简单,使用方便。

在线预览: http://www.tmnhs.top/

测试用户名:root

测试密码:123456

1.3 系统架构图

系统架构图

详情可见 设计文档

2.功能特性

  • 支持多节点部署,故障转移
  • 支持任务自动分配节点
  • Web界面后台管理定时任务,支持多语言
  • crontab表达式自动生成
  • 任务调度时间粒度支持到级别
  • 任务执行失败可重试
  • 用户权限控制
  • 支持shell任务和http回调
  • 查看任务执行日志
  • 任务执行失败告警, 支持邮件、WebHook(提供飞书模板告警)

3.使用说明

3.1 环境要求

  • 安装 etcd3mysql
  • golang版本 >= v1.16
  • node版本 >= v16.13.0
  • yarn

3.2 安装部署

  • 直接下载二进制可执行文件:release
  • 或者可以源码编译:
#克隆项目
git clone https://github.com/tmnhs/crony.git

#进入项目
cd crony

#编译前需要修改admin(admin/conf/testing/main.json)和node(node/conf/testing.json)的配置文件
#编译,编译后的可执行文件都在bin/目录下
#或者 ./build.sh
make  

#使用脚本运行
#脚本语法:./server.sh {start|stop|restart} {admin|node} {testing|production}
#运行后台,默认使用testing配置文件
./server.sh start admin 
#运行节点
./server.sh start node

运行后访问地址:http://localhost:8089

4. 技术选型

5. 截图

首页
首页

任务列表
任务管理

编辑任务
新增任务

cron表达式生成
cron表达式生成

用户管理
用户管理

日志列表
日志管理

节点管理
节点管理

服务器状态
服务器状态

邮件和飞书告警模板

6. TODOLIST

  • 解决shell任务自动分配和故障转移的问题,通过预设环境脚本的方法
  • 目前任务只支持单机运行,不支持多机运行

7. 问题

如有问题欢迎加qq:1685290935一起交流讨论

标签:Crony,node,testing,支持,任务,Go,定时,节点,分布式
From: https://www.cnblogs.com/tmnhs/p/16915057.html

相关文章

  • golang
    golang  TRANSLATEwithxEnglishArabicHebrewPolishBulgarianHindiPortugueseCatalanHmongDawRomanianChineseSimplifiedHungarian......
  • 笑死!Go语言侵犯人权!
    2022年6月,编程语言的七国集团会议在风景优美的Linux庄园如期召开。 病毒肆虐,各国首脑也都保持了良好的社交距离。  C语言作为会议召集人,在大屏幕上用一幅图总结了......
  • django内置分页
    一.普通分页参考:https://blog.csdn.net/qq_37605109/article/details/1245140371.views.py中fromdjango.core.paginatorimportPaginatordefauthor_list(request......
  • Dijkstra Algorithm
    与BFS不同的是每条路径多了权重1.步骤:找到最便宜的节点,即可在最短时间内前往的节点对于该节点的邻居,检查是否有前往它们的更短路径,如果有,就更新其开销。重复这个过程,直到对......
  • golang如何使用go test?
    ​​gotest-run=TestHelloworld​​​​gotest-bench=BenchmarkHelloworld​​​​gotest-timeout30scmap-run^(TestMap)$​​​​test-benchmem-run=^$cmap-......
  • Golang编译缓存与实际项目不一致时报错has no field or method
    go1.9不明确是不是只在这个版本有小bug,有时候对最新进度的项目编译,会报上一个版本的错误,甚至改动无法编译,报出类似下面的错误:util\common\tools.go:2217:19:dtp.ClearWhe......
  • golang获取补码,原码
    packagemainimport("encoding/binary""fmt""strconv")funcmain(){vara=[]byte{0x15,0x4B}varb=[]byte{0xE0,0x15}//fmt.Println(fmt.......
  • go module常见问题
    1.如何兼容GOPATH的旧项目,支持modulemodule名取github.com/****/projectNamegomodinitgithub.com/fwhezfwhez/errorxgomodtidy2.golang.org/x拉取不到怎么办使用r......
  • golang 分页
    //通过页码尺寸和当前页码以及总数据条数,获取limit,offset//20,2,34funcToLimitOffset(sizeInstring,indexInstring,countint)(limitint,offsetint){size,_......
  • golang如何导出csv格式的文件
    import("fmt""github.com/xormplus/xorm""golang.org/x/text/transform""golang.org/x/text/encoding/simplifiedchinese""io/ioutil""github.com/......