• 2024-07-01clickhouse集群及单节点库表占用存储
    1、单节点查询库表存储占用‘system’:库名SELECT  databaseAS`库名`,  tableAS`表名`,  sum(rows)AS`总行数`,  formatReadableSize(sum(data_uncompressed_bytes))AS`原始大小`,  formatReadableSize(sum(data_compressed_bytes))AS`压
  • 2024-05-14如何通过ETL工具对数据进行去重
    在数据处理流程中,数据去重是一个至关重要的环节,它能够确保数据分析的准确性和效率。ETL(Extract, Transform, Load)工具作为数据集成的重要组成部分,提供了强大的功能来帮助用户实现数据的抽取、转换和加载,其中就包括数据去重。一、处理组件在ETLCloud中,想要实现数据去重,就可以直
  • 2024-04-11MySQL - [07] 查看库表数据所使用的空间大小
     1、切换数据库:useinformation_schema;2、查看数据库使用大小SELECTconcat(round(sum(data_length/1024/1024),2),'MB')asdataFROMinformation_schema.tablesWHEREtable_schema='DB_Name';3、查看表使用大小SELECTconcat(ROUND(SUM(data_length
  • 2024-03-11DataX批量增量同步pg库表数据
    批量pg2pg增量同步DataX.json配置文件:pg2pg_increment_sync.json{"job":{"setting":{"speed":{"channel":1}},"content":[{
  • 2024-03-08MYSQL学习笔记1: DDL的库表操作
    SQL语句分类DDL数据定义语言,用来定义数据库对象(数据库,表,字段)DML数据操作语言,用来对数据库中表的数据进行增删改DQL数据库查询语言,用于查询数据库中表的记录DCL数据控制语言,用来创建数据库用户、控制数据库的访问权限DDL数据定义语言,用来定义数据库对象(数据
  • 2023-09-09用来练习sql的库表创建sql文件
    1.创建work.sql文件,填写以下内容--MySQLdump10.13Distrib5.7.43,forLinux(x86_64)----Host:localhostDatabase:work----------------------------------------------------------Serverversion 5.7.43/*!40101SET@OLD_CHARACTER_SET_CLIENT=@@CHARACT
  • 2023-06-18mycat2配置文件
    1.用户配置xa:分布式事务 各个字段解释:2.数据源配置3.集群的配置 4.逻辑库表   
  • 2023-05-27aws athena创建库表读取s3数据并查询
    建表CREATEEXTERNALTABLEtestlogdb.testlog(`date`string,`log`string)PARTITIONEDBY(yearint,monthint,dayint)ROWFORMATSERDE'org.openx.data.jsonserde.JsonSerDe'WITHSERDEPROPERTIES('ignore.malformed.json'='true
  • 2023-02-06001.clickhouse-创建库表
    clickhouse登录-多行模式clickhouse-client--host=x.x.x.x--port=9000--user=xxxx--password=xxxx-mn clickhouse分普通表创建 CREATETABLEdefault.tmp_
  • 2022-12-29库表
    规约建立表的时候应该指定表空间和表索引,不然一般建立的表就是default,直接在默认的空间之下。boolen类型的column应该遵循1表示是,0表示否。精度丢失的问题,小数比较和运
  • 2022-12-05MySQL库表管理
    一、常用的数据类型:类型含义tinyint(n)1个字节,范围(-128~127)smallint(n)2个字节,范围(-32768~32767)mediumint(n)3个字节,范围(-8388608~8388607)int(n)
  • 2022-10-29MySQL库表操作小结(未完成)
    MySQL库表操作小结(以下cmd都是以管理员身份运行):一、启动MySQL1、配置好环境的情况下:(注意此处的myslq80需要看自己电脑上的MySQL服务名称:可通过cmd中输入serv