首页 > 数据库 >GaussDB云数据库SQL应用系列-定时任务管理

GaussDB云数据库SQL应用系列-定时任务管理

时间:2024-12-27 11:14:06浏览次数:2  
标签:sell goods GaussDB id 任务 SQL date 定时 数据库

​ 前言

GaussDB数据库定时任务主要可以用于实现定期的备份、统计信息采集、数据汇总、数据清理与优化等,它是指在指定的时间间隔内自动执行一次或多次SQL语句的程序。

一、GaussDB数据库定时任务介绍

GaussDB数据库兼容Oracle定时任务功能主要通过DBE_TASK高级功能包提供的二次封装接口实现(另可参见GaussDB提供的基础接口PKG_SERVICE,此接口也可实现定时任务创建),主要包括创建定时任务、任务到期自动执行、任务删除、修改任务属性(任务id、任务的关闭开启、任务的触发时间、触发时间间隔、任务内容)等。

创建(提交)一个定时任务:

CALL DBE_TASK.ID_SUBMIT (job_id,task_name,start_time,interval_time)

job_id:作业号,指定job_id创建任务,其中job_id可用范围为1~32767。
task_name:要执行的SQL语句。支持一个或多个‘DDL’(不支持DB相关操作),‘DML’,‘匿名块’,‘调用存储过程的语句’或4种混合的场景。
start_time:任务的开始时间,可以使用 sysdate 表示立即执行。
interval_time:任务的执行间隔,例如 'interval ''1 day''' 表示每天执行一次。
需要注意的是,该功能需要在具有相应权限的数据库会话中运行,并且需要替换相应的任务名称和其他参数。此外,该功能只是提交一个定时任务,并不会立即执行任务。任务的执行时间由start_time和interval_time参数控制。

二、创建GaussDB定时任务(场景+示例)

根据GaussDB数据库定时任务应用场景,创建测试表及定时任务。

1、设置应用场景
数据备份和恢复:例如,根据业务需要,按天备份数据库中的一张日销售信息表(累全量)。(Tips:以下是模拟一个简单的业务场景,实际生产环境时,对应的字段、更优的业务逻辑处理方式,请以真实场景为准。)

1)创建测试表

创建一张日销售信息表(sell_info)和一张销售信息全量表(sell_info_full),其中包含字段有:销售编号、销售日期、商品编号、商品名称、商品数量、商品售价。全量表sell_info_full比表sell_info多一个任务执行日期字段(etl_date)。

--日销售信息表(sell_info)

CREATE TABLE sell_info

(

sell_id int PRIMARY KEY

,sell_date date not null

,goods_id char(20) not null

,goods_name char(20) not null

,goods_number int not null

,sell_goods_amount int not null

);

--插入一条测试数据

INSERT INTO sell_info(sell_id,sell_date,goods_id,goods_name,goods_number,sell_goods_amount) VALUES (1001,date'2023-06-02','g_001','g_001',10,10);

--销售信息全量表(sell_info_full),

CREATE TABLE sell_info_full

(

sell_id int PRIMARY KEY

,sell_date date not null

,goods_id char(20) not null

,goods_name char(20) not null

,goods_number int not null

,sell_goods_amount int not null

,etl_date date not null

);

2)创建存储过程,用于定时任务调度

--创建存储过程 sell_info_full_pro

CREATE PROCEDURE sell_info_full_pro()

IS

BEGIN

--累加存放每日销售信息数据

INSERT INTO sell_info_full(

sell_id

,sell_date

,goods_id

,goods_name

,goods_number

,sell_goods_amount

,etl_date)

SELECT sell_id

,sell_date

,goods_id

,goods_name

,goods_number

,sell_goods_amount

,sell_date as etl_date

FROM sell_info;

--清空日销售信息表

TRUNCATE TABLE sell_info;

END;

/

3)创建定时任务

任务目标:通过创建定时任务, 每天在销售系统关闭后(22:00)进行累全操作,假设job启动日期是2023-06-02,则提交一个定时任务如下:

call dbe_task.id_submit(1,'call sell_info_full_pro();','2023-06-02 22:00:00','interval ''1 day''')

4)查看已创建的任务

select job,dbname,start_date,last_date,this_date,next_date,broken,status,interval,failures,what from my_jobs;

其中字段及其参数说明见下文第3节第1点。

5)查看执行结果

根据业务逻辑,查看相应的结果(此处略)。测试时可将定时“2023-06-02 22:00:00”改成立刻执行“sysdate”,然后查看执行结果。

2、更多适用场景
1)数据清理和优化:例如,定期归档(清理)数据库中的无用数据、过期数据和重复数据,并对数据库进行性能优化,以提高数据库的运行效率和稳定性。

2)数据统计和分析:例如,根据业务需求,定期从数据库中提取数据并进行统计和分析,以便为企业决策提供支持。

3)定时任务通知:例如,通过定时任务向用户发送邮件、短信或其他通知信息,提醒用户关注某些重要的业务活动或事件。

4)定时更新状态:例如,商品定时开售,活动到期自动修改为已结束状态,活动结束商品自动下架,超过三十分钟未支付自动取消订单,到期自动解冻账号。

……

三、管理GaussDB定时任务

1、查看已创建的任务
通过MY_JOBS视图查看当前用户所属的定时任务详情

--查看当前用户所属的定时任务详情

select job,dbname,start_date,last_date,this_date,next_date,broken,status,interval,failures,what from my_jobs;

MY_JOBS视图为当前用户所属定时任务的详细信息,其字段含义参见下表:

名称

类型

描述

job

bigint

作业ID。

log_user

name

创建者的UserName。

priv_user

name

作业执行者的UserName。

dbname

name

作业创建数据库名称。

schema_user

name

定时任务的默认模式。

start_date

timestamp without time zone

作业的开始时间。

start_suc

text

作业成功执行的开始时间。

last_date

timestamp without time zone

上次运行开始时间。

last_suc

text

上次成功运行的开始时间。

last_sec

text

上次成功运行的开始时间,提供兼容性支持。

this_date

timestamp without time zone

正在运行任务的开始时间。

this_suc

text

正在运行任务成功的开始时间。

this_sec

text

正在运行任务成功的开始时间,提供兼容性支持。

next_date

timestamp without time zone

任务下次执行时间。

next_suc

text

任务下次成功执行时间。

next_sec

text

任务下次成功执行时间,提供兼容性支持。

total_time

numeric

任务最近一次的执行时长。

broken

text

如果任务状态为破,则为'y',否则为'n'。

status

"char"

执行状态,取值范围:('r', 's', 'f', 'd'),默认为'r',取值含义:r=running、s=successfully finished、f= job failed、d=aborted

interval

text

用来计算下次运行时间的时间表达式,如果为null则表示定时任务只执行一次。

failures

smallint

失败计数,作业连续执行失败16次,不再继续执行。

what

text

可执行的作业。

2、停用/启用任务
语法格式:

call dbe_task.finish(id, broken, next_time);

1)停用任务, 是将对应任务挂起,不做任何操作。

call dbe_task.finish(1,true);

2)启用任务,则是将任务正常启动, 按任务设置执行相应的SQL语句或程序

call dbe_task.finish(1,false,'2023-06-02 22:00:00');

3、修改任务
1)DBE_TASK.UPDATE——修改定时任务的属性,包括任务内容、下次执行时间、执行间隔。

2)另,可分别且单独修改其参数内容:

DBE_TASK.CONTENT ——修改可执行的SQL语句块

DBE_TASK.NEXT_TIME——修改下次执行时间属性

DBE_TASK.INTERVAL——修改执行时间间隔

4、删除任务
DBE_TASK.CANCEL——删除指定的定时任务。

小结:以上所有管理过程,均以任务作业号为唯一键进行操作。

四、总结

GaussDB数据库提供了丰富的定时任务功能。需要注意的是,定时任务的设置和使用需要谨慎,避免误删重要数据或影响业务正常运行。同时,也需要保证定时任务的可靠性和稳定性,避免出现任务漏执行或执行重复的情况。

总之,在使用GaussDB数据库时,创建定时任务可以在很多场景中应用,同时可以帮助我们提高系统的运行效率和方便性等。

——结束

标签:sell,goods,GaussDB,id,任务,SQL,date,定时,数据库
From: https://www.cnblogs.com/xiaoxu0211/p/18635154

相关文章

  • GaussDB内存过载分析
    问题现象数据库进程内存占比较高长时间占比较高观察监控平台内存占用的变化曲线,无论当前数据库是否有业务在运行,数据库进程内存占总机器内存的比例长时间处于较高状态,且不下降。执行作业期间占比较高数据库进程在没有业务执行时,内存使用持续处于较低的状态,当有业务执行时,内......
  • GaussDB分区表查询性能异常分析
    问题现象使用分区表进行相关查询业务,SQL性能慢。原因分析导致分区表业务慢的常见原因有以下几种:分区索引失效,顺序扫描导致的SQL性能慢分区表无法进行分区剪枝导致的SQL性能慢SQL计划选择非最优导致的SQL性能慢处理方法判断是否存在索引异常的行为部分分区DDL如果不带UP......
  • GaussDB SQL调优:建立合适的索引
    ​背景GaussDB是华为公司倾力打造的自研企业级分布式关系型数据库,该产品具备企业级复杂事务混合负载能力,同时支持优异的分布式事务,同城跨AZ部署,数据0丢失,支持1000+扩展能力,PB级海量存储等企业级数据库特性。拥有云上高可用,高可靠,高安全,弹性伸缩,一键部署,快速备份恢复,监控告警等关......
  • 智能优化揭秘——GaussDB数据库查询重写的自动挖掘与生成
    ​在数据库世界里,查询重写是提升性能的关键环节。WeTune作为一款革命性工具,能自动发现新重写规则,打破现有系统依赖人工发现重写规则的局限,大幅提升数据库查询性能。上海交通大学软件学院副院长王肇国和高斯实验室GaussDB数据库优化器专家Ethan联手开展了一场以《智能优化揭秘—......
  • 为什么MySQL单表不能超过2000万行? (1)
    ​最近看到一篇《我说MySQL每张表最好不要超过2000万数据,面试官让我回去等通知》的文章,非常有趣。文中提到,他朋友在面试的过程中说,自己的工作就是把用户操作信息存到MySQL里,因为数据量超大(5000万条左右),需要每天定时生成3张表,然后将数据取模分别存到这三张表里。下面是两人的对......
  • 数据库技术解读之细粒度资源管控
    ​背景对数据库集群内资源管控与资源隔离一直是企业客户长久以来的诉求。华为云GaussDB作为一款企业级分布式数据库,一直致力于满足企业对大型数据库集群的管理需要。数据库可以管理的资源有计算资源与存储资源,计算资源包括CPU、内存、IO与网络,存储资源包括数据存储空间、日志存......
  • 利用GaussDB的可观测性能力构建故障模型
    ​D-SMART高斯专版已经开发了几个月了,目前主要技术问题都已经解决,也能够初步看到大概的面貌了。有朋友问我,GaussDB不已经有了TPOPS了,为什么你们还要开发D-SMART高斯专版呢?实际上TPOPS和D-SMART虽然都可以用于Gaussdb的运维监控,不过其分工还是十分明显的。TPOPS是华为GaussDB自带......
  • LLVM技术在GaussDB等数据库中的应用
    万物互联的态势下,数据量的激增使得“如何提升数据处理性能”成为各家数据库共同面临的挑战。作为编译优化技术的代表,基于LLVM的CodeGen技术,能为每个查询生成定制的机器码替代原本的通用函数,减少实际查询时冗余的条件逻辑判断、虚函数调用并提高数据局域性,从而达到提升查询整体性能......
  • GaussDB数据库事务管理
    ​一、引言事务管理是数据库系统中至关重要的一部分,它确保了数据库的一致性和可靠性。在GaussDB数据库中,事务管理不仅遵循传统的ACID特性,还提供了一些高级功能。本文将深入探讨GaussDB数据库事务管理的各个方面。二、事务的基本概念2.1事务的定义事务是数据库操作的基本单元......
  • GaussDB火焰图分析
    问题描述CPU利用率是衡量系统负载和健康度的重要指标之一,系统在运行过程中时常发生CPU利用率高的情况。在分析性能问题时,可通过火焰图查看CPU耗时,了解瓶颈在哪里。问题现象部分sql执行速度不符合预期。告警慢sql告警。cpu使用率高告警。数据库整体运行慢。业务影响业务......