首页 > 其他分享 >使用PasteSpider实现类似Jenkins的功能,让你的2G服务器也可以飞起

使用PasteSpider实现类似Jenkins的功能,让你的2G服务器也可以飞起

时间:2024-08-04 11:28:06浏览次数:15  
标签:svn PasteSpider tool spider blog 2G Jenkins 源码

或许你接触过Jenkins,

在我理解就是拉取源码,然后构建成镜像,最后启动容器!

但是这个功能对于小内存的服务器来说就是奢望了!

今天介绍一个新版本,把你这个遗憾弥补下!

在PasteSpider中,也是支持拉取源码,然后编译发布的!!!

以下案例使用svn作为源码管理

如果你使用git作为源码管理,道理差不多

以我的代码为例

dotnet 6.0 + Linux AliBaba + PasteSpider v24.07.20.01

1.按照论坛的方式安装PasteSpider

一键安装PasteSpider

2.在服务器linux上安装dotnet

这个可以查看微软官方网站

https://learn.microsoft.com/zh-cn/dotnet/core/install/linux-scripted-manual#scripted-install

安装完成后执行命令监测下

dotnet --info
 

SVN/GIT的配置

3.打开PasteSpider的管理端,找到菜单

image.png
以我的为例,我为项目

image.png

如果你启用了docker registry的私人仓库,则上面的配置中仓储那边要对应的选择,选择哪个要看你所选的服务

上面中要注意的是 克隆编译命令

我的如下

#删除旧的源码
rm -rf /spider/source/blog/tool/
#创建文件夹,可能文件夹不存在
mkdir -p /spider/settings/blog/tool/
#删除旧的配置文件,这一步看实际情况,因为拉取源码会把所有代码都覆盖
rm -rf /spider/settings/blog/tool/appsettings.json
#复制配置文件,留着备用
cp -f /spider/publish/blog/tool/appsettings.json /spider/settings/blog/tool/appsettings.json
#从服务端拉取源码,这个第一次的时候一般会失败,所以要直接去服务端试着拉取代码
svn checkout svn://your_svn_ip:your_svn_port/PasteSoft/PasteSoft --username=your_svn_name --password=your_svn_password /spider/source/blog/tool/
#构建命令,不同语言不一样处理,目的就是发布到文件夹
dotnet publish /spider/source/blog/tool/ -c release -r linux-x64 --self-contained false -o /spider/publish/blog/tool/
#删除拉取的配置文件
rm -rf /spider/publish/blog/tool/appsettings.json
#从刚刚备份的配置文件复制到发布文件夹
cp -f /spider/settings/blog/tool/appsettings.json /spider/publish/blog/tool/appsettings.json
#后续的动作由系统接管,其实就是构建镜像和升级!

 

以上需要注意的地方有

 

目录说明

/spider/这个是工作目录,就是PasteSpider的工作目录,对于宿主服务器的路径而言的,默认是/spider/

这个目录下有几个功能文件夹

source 表示用于存放svn拉取的源码的

publish 表示用于存放服务编译后(发布)的文件的

settings 用于存放项目服务的特别文件的,这个看需求

克隆编译命令 的目的就是拉取源码到source文件夹,然后通过对应语言的发布命令,发布到publish文件夹

功能文件夹下还有几层 

/spider/source/blog/tool/为例

spider是PasteSpider的工作目录

source是功能文件夹 表示源码

blog表示这个项目的代码

tool表示这个服务的代码

 

命令说明

命令一行一条,每行之间没有上下关系,也就是没有相对路径的说法,你得写全路径

如果是#开头的,则这一行命令不会被执行,是注释

 

更新说明

在配置的下方有一个表示,其实是多少个环境就多少行,然后注意后面那个命令开头

意思是源码提交的备注是这个字母开头的,才会触发升级,比如我的配置是

update 的开头 就可以触发

验证密钥注意下,下面的步骤4要使用

 

4 post-commit

假设你一键有一个SVN代码管理器的服务端,则参考如下文章进行配置并设置post-commit的hook文件

https://soft.pastecode.cn/Article/1

精华部分其实就在

post-commit的内容上

#REPOS="$1"
#REV="$2"
export LANG=zh_CN
MESSAGE=$(svnlook log -r $2 $1)
curl -d "token=your_token&repos=$1&version=$2&info=$3&info=$MESSAGE" "https://spider.abc.com/api/spider/Code/svncommit"

假设访问https://spider.abc.com/page/index.html可以访问到我的PasteSpider管理端,则有如上配置

注意上面的your_token,和我们3步骤配置的验证密钥需要一致,一会有个地方要用

上面的文件保存好了后,注意修改post-commit的执行权限,需要能够执行,否则是不会生效的

 

 

5检查流程

以上按照要求配置后,特别注意的是命令相关的内容

服务器是否支持相关的命令

是否支持curl 这个用于推送信息到PasteSpider的接口上的

是否支持dotnet 这个要看你是啥语言,不同语言的编译发布命令是不一样的

是否支持svn 这个是拉取源码的,比如我这个服务器上找不到这个命令,就使用yum -y install svn 不同服务器要基于自己的去安装

一些登陆操作是否已经执行

比如svn这个拉取代码的操作,一般是要求第一次执行,会有一个提示,大致意思是登陆,授权啥的,你可以手动执行下

 

6.准备测试

以上信息保存后,我们来提交一下代码!

image.png

注意看我的备注是update打头的,这个和我的步骤3的相对应!

我的启动前的资源使用情况

image.png

提交后,到PasteSpider的管理端的任务列表查看

image.png

在接收到对应的post-commit的推送后,会先执行镜像的构建,然后会基于配置执行升级!

或者是等待通知,比如我的

image.png

当然,如果执行失败了,则需要到任务的详细中查看,具体哪个命令失败了,比如我以前的

image.png

打开后,查看这个任务里面的子任务,哪条执行失败!

image.png

点击详细,会看到具体执行的命令,你可以把这个命令自己复制到服务器上去执行,看看为啥错误!

基于任务详细的反馈,如果有错误的修正后重新提交尝试!

升级后

image.png
多的部分,就是克隆命令后的编译发布花费的,使用ps -aux 可以查看到对应多出来的

image.png

查过资料,一段时间后这个会自己退出!

所以资源占用是非常划算的!

多测试几次,发现时间还是有差的!

image.png

 

写在后面

其实克隆代码执行完成后,走的就是默认的服务的发布模式(就是开发者在开发机上发布项目到文件,然后把发布后的项目文件同步到服务器上,然后服务器基于发布的文件执行镜像的构建和对应服务的发布!)

也就是说克隆代码执行完成后,其他的步骤执行的逻辑就和发布模式一致了

比如会运行几个容器

端口配置

IP配置

nginx配置等

标签:svn,PasteSpider,tool,spider,blog,2G,Jenkins,源码
From: https://www.cnblogs.com/pastespider/p/18341574

相关文章

  • 19. rs、deploy和Jenkins集成K8S实现CICD实战
    1.rs控制器1.作用可以实现Pod的副本控制。相比rc资源,其功能性更强且更加轻量级。2.案例1-rs实现类似rc的功能[root@master231rs]#cat01-rs-xiuxian-matchLabels.yamlapiVersion:apps/v1kind:ReplicaSetmetadata:name:rs-xiuxianspec:#指定Pod的副本数量r......
  • docker安装Jenkins
    1、拉取jenkinsdockerpulljenkins/jenkins2、配置jenkins路径mkdir-p/data/jenkins_home3、启动jenkinsdockerrun-d-uroot-p8081:8080-p50000:50000--namejenkins--restart=always-v/data/jenkins_home:/var/jenkins_home-v/etc/localtime:/etc/local......
  • Jenkins 配置 docker 容器
    Jenkins配置docker容器 搭建时打开代理。  1. 搭建dockerpulljenkins/jenkinsdockerrun-d-p10004:8080-p10005:50000-vD:\DockerVolume\jenkins\jenkins_mount:/var/jenkins_home-v/etc/localtime:/etc/localtime--restart=always--namejenkinsj......
  • Jenkins+Jmeter部署性能测试平台
    安装部署Jenkins现在网上信息很多本次不再赘述安装Jmeter本次也不做赘述,另外搜资料吧Jmeter脚本设置Jenkins设置1.安装插件performance,buildwithparameter2.新建项目里配置勾建方式勾建步骤cd/home/jmeterWorkplace/performancetesting/script/home/app/apache......
  • 钢铁百科:A572Gr50成分解析、A572Gr50切割加工
    一、A572Gr50材质:A572Gr50钢板是一种高强度低合金铌-钒结构钢板,属于美标低合金高强度板。二、A572Gr50执行标准:A572Gr50钢板执行ASTMA572/A572M标准,该标准与ASME标准SA-572/SA-572M完全等同。三、A572Gr50化学成分:A572Gr50钢板的化学成分主要包括以下元素及其含量:*碳(C......
  • Jenkins 配置即代码(Configuration as Code)详解
    1、概述在《Centos7下安装配置最新版本Jenkins(2.452.3)》这篇博文中讲解了如何安装Jenkins,虽然在安装Jenkins时安装了一些必备的推荐插件,但在企业环境中使用Jenkins之前,我们仍需完成一系列手动配置工作,如配置SystemConfiguration、Security。SystemConfiguration是确保......
  • STM32G030F6P6TR_IAP
       bootloader程序 STM32FLASH读写1/**2******************************************************************************3*@filestmflash.c4*@brief读写STM32内部flash(STM32G030F6P6TR)5**************************************......
  • Jenkins 远程触发 403 No valid crumb was included in the request
    Jenkins远程触发403Novalidcrumbwasincludedintherequest Jenkins使用curl执行远程触发命令,会报403错误打开如下图  系统管理-》scriptConsole在下面脚本命令行中输入hudson.security.csrf.GlobalCrumbIssuerConfiguration.DISABLE_CSRF_PROTECTION=tr......
  • jenkins pipeline 发布 jar并运行
    废话不多说,上教程 一,配置publishssh 二,配置sshserver记住Name 三设置发布选项1设置模块多选(请安装多选插件:ActiveChoicesPlug-in)  四编写pipeline说明:1modules.split(',')中的modules就是上面多选框的Name2详细解说:execCommand:'cd/java;p......
  • 节点添加jenkins用户
    节点添加jenkins用户在Jenkins服务器上:切换到Jenkins用户的Home目录并查看Jenkins用户的SSH密钥:su-jenkinscat~/.ssh/id_rsa.pub复制Jenkins用户的SSH公钥(id_rsa.pub​文件内容)。在节点服务器上:新建jenkins用户adduserjenkins将jenkins用户添......