首页 > 其他分享 >schema与数据类型优化

schema与数据类型优化

时间:2022-10-10 00:33:42浏览次数:46  
标签:存储 数据类型 字符串 日期 使用 类型 优化 schema

schema与数据类型优化

1.数据类型优化

更小的通常更好

尽量使用可以正确存储数据的最小数据类型,能使用int就不使用bigint

应该尽量使用可以正确存储数据的最小数据类型,更小的数据类型通常更快,因为它们占用更少的磁盘、内存和CPU缓存,并且处理时需要的CPU周期更少,

但是要确保没有低估需要存储的值的范围,如果无法确认哪个数据类型,就选择你认为不会超过范围的最小类型

案例:
设计两张表,设计不同的数据类型,查看表的容量

简单就好

(该用什么类型就用什么类型)

简单数据类型的操作通常需要更少的CPU周期,例如,
1、整型比字符操作代价更低,因为字符集和校对规则是字符比较比整型比较更复杂,
2、使用mysql自建类型而不是字符串来存储日期和时间
3、用整型存储IP地址(mysql提供了函数来转换)

案例:
创建两张相同的表,改变日期的数据类型,查看SQL语句执行的速度

尽量避免null

如果查询中包含可为NULL的列,对mysql来说很难优化,因为可为null的列使得索引、索引统计和值比较都更加复杂,

坦白来说,通常情况下null的列改为not null带来的性能提升比较小,所有没有必要将所有的表的schema进行修改,但是应该尽量避免设计成可为null的列

实际场景(细则)

整数类型

可以使用的几种整数类型:TINYINT,SMALLINT,MEDIUMINT,INT,BIGINT分别使用8,16,24,32,64位存储空间。
尽量使用满足需求的最小数据类型

字符和字符串类型

varchar

根据实际内容长度保存数据、

  • 1、使用最小的符合需求的长度。
  • 2、varchar(n) n小于等于255使用额外一个字节保存长度,n>255使用额外两个字节保存长度。
  • 3、varchar(5)与varchar(255)保存同样的内容,硬盘存储空间相同,但内存空间占用不同,是指定的大小 。
  • 4、varchar在mysql5.6之前变更长度,或者从255一下变更到255以上时时,都会导致锁表。
  • 使用场景
    • 1、存储长度波动较大的数据,如:文章,有的会很短有的会很长
    • 2、字符串很少更新的场景,每次更新后都会重算并使用额外存储空间保存长度
    • 3、适合保存多字节字符,如:汉字,特殊字符等

char

固定长度的字符串

  • 1、最大长度:255
  • 2、会自动删除末尾的空格
  • 3、检索效率、写效率 会比varchar高,以空间换时间
  • 应用场景
    • 1、存储长度波动不大的数据,如:md5摘要
    • 2、存储短字符串、经常更新的字符串

BLOB和TEXT类型

MySQL 把每个 BLOB 和 TEXT 值当作一个独立的对象处理。
两者都是为了存储很大数据而设计的字符串类型,分别采用二进制和字符方式存储。

一般不用。。 内容太多的话就换成文件了,存储文件地址即可

datetime和timestamp

都可以存日期:datetime 用的最多

1、不要使用字符串类型来存储日期时间数据
2、日期时间类型通常比字符串占用的存储空间小
3、日期时间类型在进行查找过滤时可以利用日期来进行比对
4、日期时间类型还有着丰富的处理函数,可以方便的对时间类型进行日期计算
5、使用int存储日期时间不如使用timestamp类型

datetime (YYYY-MM-DD HH:mm:ss 最常用的时间格式

  • 占用8个字节
  • 与时区无关,数据库底层时区配置,对datetime无效
  • 可保存到毫秒
  • 可保存时间范围大
  • 不要使用字符串存储日期类型,占用空间大,损失日期类型函数的便捷性

timestamp (YYYY-MM-DD HH:mm:ss)

  • 占用4个字节
  • 时间范围:1970-01-01到2038-01-19 ,、。。。。。
  • 精确到秒
  • 采用整形存储
  • 依赖数据库设置的时区
  • 自动更新timestamp列的值

date (YYYY-MM-DD)

  • 占用的字节数比使用字符串、datetime、int存储要少,使用date类型只需要3个字节
  • 使用date类型还可以利用日期时间函数进行日期之间的计算
  • date类型用于保存1000-01-01到9999-12-31之间的日期

使用枚举代替字符串类型

数据库也有枚举类型

有时可以使用枚举类代替常用的字符串类型,mysql存储枚举类型会非常紧凑,会根据列表值的数据压缩到一个或两个字节中,

mysql在内部会将每个值在列表中的位置保存为整数,并且在表的.frm文件中保存“数字-字符串”映射关系的查找表

 -- 数字从0开始   0-fish  1-apple  2-dog
 create table enum_test(e enum('fish','apple','dog') not null);
 
 insert into enum_test(e) values('fish'),('dog'),('apple');
 
 select e+0 from enum_test;
  SELECT *FROM enum_test ORDER BY e ; -- 排序

特殊类型(ip地址存储)

人们经常使用varchar(15)来存储ip地址,然而,它的本质是32位无符号整数不是字符串,可以使用INET_ATON()和INET_NTOA函数在这两种表示方法之间转换

案例:
select inet_aton('1.1.1.1')
select inet_ntoa(16843009)

2.合理使用范式和反范式

在企业中很少能做到严格意义上的范式或者反范式,一般需要混合使用

范式

  • 优点

    范式化的更新通常比反范式要快
    当数据较好的范式化后,很少或者没有重复的数据(减少数据冗余)
    范式化的数据比较小,放在内存中,操作比较快
    
  • 缺点

    通常需要进行关联,有时影响查询效率
    

反范式

  • 优点

    所有的数据都在同一张表中,可以避免关联
    增加查询效率,可以设计有效的索引;
    
  • 缺点

    表格内的冗余较多,删除数据时候会造成表有些有用的信息丢失
    

标签:存储,数据类型,字符串,日期,使用,类型,优化,schema
From: https://www.cnblogs.com/cutesheep/p/16774224.html

相关文章

  • @linux虚拟机系统优化
    文章目录​​一.安装全新Centos7系统,配置网卡为eth0及eth1命名模式100​​​​二.优化方法及步骤​​​​三.对优化完成的虚拟机进行克隆​​​​四.克隆完成的新虚拟机......
  • 03@shell数据类型及变量值的操作总结
    文章目录​​基本数据类型与值操作​​​​一、数据类型介绍​​​​1、什么是数据​​​​2、编程语言划分(shell的划分)​​​​二、基本数据类型​​​​1、数字​​​​......
  • 5大步骤+10个案例,堪称SQL优化万能公式
      一、前言 在应用开发的早期,数据量少,开发人员开发功能时更重视功能上的实现,随着生产数据的增长,很多SQL语句开始暴露出性能问题,对生产的影响也越来越大,有时可能这......
  • 流程结构及基本数据类型常见内置方法
    本周内容总结概要垃圾回收机制if分支结构while循环for循环整型内置方法浮点型内置方法字符串常用操作列表常用操作字典常用操作集合常用操作元组常用操作字......
  • 【yishaadmin】yisha前端优化(持续更新)
    1、单页面字典调用问题处理yisha-data.js中修改,注意如果想要无权限也可以查看界面,当前请求接口权限标识去除,注意也把字典信息查询接口权限标识去除。functiongetDat......
  • 基本数据类型的sizeof()
    基本数据类型的sizeof基本类型包括:bool,char,short,int,long,longlong,float,double32位编译器指针都是4位数据类型大小bool1char1short2int4long......
  • @Redis数据类型及应用场景
    一、Redis与Memcached的区别1、Redis不仅仅支持简单的k/v类型的数据,同时还提供list,set,zset,hash等数据结构的存储。2、Redis支持数据的备份,即master-slave模式的数据......
  • C++数据类型
    目录 ​​1.数据类型概述​​​​2.基本的内置类型​​​​整型​​​​实型(浮点型)​​​​字符型​​​​转义字符​​​​字符串型​​​​c风格的字符串​​​​c++风......
  • Java基础001:数据类型及扩展
    Java的数据类型分为两大类基本类型(primitivetype)数值类型整数类型byte占1个字节范围:-128-127short占2个字节范围:-32768-32767int占4个字节范围:-2147483648-......
  • 7. JS数据类型(基本数据类型+引用类型)
    1.前言数据类型指的是可以在程序中存储和操作的值的类型,每种编程语言都有其支持的数据类型,不同的数据类型用来存储不同的数据,例如文本、数值、图像等。JavaScript是一种......