• 2024-07-02redis持久化
    redis持久化1.1介绍#redis持久化redis作为一个内存数据库,数据是以内存作为载体存储的,那么一单redis服务器进程退出,服务器中的数据也会消失。为例解决这个问题,redis提供了持久化机制。也就是把数据保存在磁盘中。有两种方式保存。#rdb快照持久化rdb快照的方式是指在一定的
  • 2024-07-02大数据面试题之Flink(1)
    目录Flink架构 Flink的窗口了解哪些,都有什么区别,有哪几种?如何定义? Flink窗口函数,时间语义相关的问题 介绍下Flink的watermark(水位线),watermark需要实现哪个实现类,在何处定义?有什么作用? Flink的窗口(实现)机制 说下Flink的CEP 说一说Flink的Checkpoint机制 
  • 2024-07-02存储断电导致虚拟机无法启动
    故障存储虚拟机环境:一台VMware虚拟机无法启动(虚拟机中存储了oracle数据库)。故障存储虚拟机检测分析:发生故障的存是由于机房意外断电导致,清空cache并尝试重新启动该虚拟机但失败。需要对该存储进行数据恢复。故障虚拟机数据恢复流程:1.合并虚拟机快照(因虚拟机中的文件一旦删除
  • 2024-07-01十、Redis持久化之RDB
    文章目录一、总体介绍二、RDB(RedisDataBase)2.1官网介绍2.2RDB是什么2.3备份是如何执行的2.4Fork2.5RDB持久化流程2.6dump.rdb文件2.7配置位置2.8如何触发RDB快照;保持策略2.8.1配置文件中默认的快照配置2.8.2命令saveVSbgsave2.8.3flushall命令2.8.4SNAPSHO
  • 2024-06-30KVM虚拟机快照:一步步教你管理和还原快照
    虚拟机快照管理详解虚拟机快照管理创建快照KVM快照是基于LVM快照实现的,具体操作方法如下:创建逻辑卷(LV)创建一个新的逻辑卷,例如命名为centos_disk:lvcreate-ncentos_disk-L10Gvg其中,vg为卷组名称,10G为分配的大小。安装虚拟机创建并安装虚拟机,使用新创建的逻
  • 2024-06-21SUSE linux的快照和恢复
    snapper用于创建和管理文件系统快照,并在需要时实现回滚,它还可以用于创建用户数据的磁盘备份。snapper使用btrfs文件系统或者精简配置的被格式化成XFS或EXT4的LVM卷。snapper可以通过命令行或YaST来进行管理。btrfs是一种copy-on-write文件系统,它原生支持subvolumes文件系统
  • 2024-06-20Redis的持久化机制和缓存预热
    Redis的持久化机制Redis是一个内存数据库,它的数据存放在内存中,但是如果关闭服务、机器关机或者断电的话,内存中的所有数据都会慢慢消失消失。内存数据消失的原因:因为内存中的数据是半导体晶体管开关,这种开关高度依赖电源,当电源断电后,无法再控制晶体管的开关状态。这时候电容发挥
  • 2024-06-17c/c++设计模式--备忘录模式
    #include<iostream>#include<vector>#ifdef_DEBUG//只在Debug(调试)模式下#ifndefDEBUG_NEW#defineDEBUG_NEWnew(_NORMAL_BLOCK,__FILE__,__LINE__)//重新定义new运算符#definenewDEBUG_NEW#endif#endif//#include<boost/type_index.hpp>usingna
  • 2024-06-16尚品汇-(一)
    (1)技术介绍(2)业务介绍 (3)虚拟机安装可以稍后配置镜像:选第二个 采用第二项NET模式: 安装完成:开启 不选择界面的,选择基础的  分配了ip:测试网络 为了防止出现问题:可以设置快照:保存虚拟机快照配置静态ip:
  • 2024-06-15Flink有状态流处理 未对齐barrier性能好
    有状态流处理#什么是状态?#虽然数据流中的许多操作只是查看一个个体一次事件(例如事件解析器),有些操作会记住多个事件的信息(例如窗口操作符)。这些操作被称为宏伟威严的.有状态操作的一些例子:当应用程序搜索某些事件模式时,状态将存储到目前为止遇到的事件序列。当聚合每分钟
  • 2024-06-15Flink快照容错处理
    通过状态快照实现容错处理#StateBackends#由Flink管理的keyedstate是一种分片的键/值存储,每个keyedstate的工作副本都保存在负责该键的taskmanager本地中。另外,Operatorstate也保存在机器节点本地。Flink定期获取所有状态的快照,并将这些快照复制到持久化的位置,
  • 2024-06-15区块链之快照
    定义区块链快照是区块链技术中一个非常重要的概念,它可以帮助区块链系统提高性能和数据管理效率。什么是区块链快照区块链快照是指在某个时间点对整个区块链的状态进行保存和备份的过程。快照会记录区块链上所有账户的余额、合约状态等信息,并将其序列化存储起来。这样
  • 2024-06-14TiKV 源码分析之 PointGet
    作者:来自vivo互联网存储研发团队-GuoXiang本文介绍了TiDB中最基本的PointGet算子在存储层TiKV中的执行流程。一、背景介绍TiDB是一款具有HTAP能力(同时支持在线事务处理与在线分析处理)的融合型分布式数据库产品,具备水平扩容或者缩容等重要特性。TiDB采用多副本+Multi-R
  • 2024-06-13数据中台建设方法论
    传统数据存储的缺点:生活中的数据来源可以是小程序APP网站日志物联网loT隐藏行为......1、存储方式比较单一。2、不方便统一管理。3、不方便同一分析。4、如果是关系型的数据,表比较单一和少。5、挖掘数据的假肢难度加大,无法充分挖掘数据价值。大致工作流程数据
  • 2024-06-13Redis的两种持久化RDB和AOF
    目录一、简介二、RDB详解三、AOF详解​四、RDB与AOF对比一、简介什么是持久化?利用永久性存储介质将数据进行保存,在特定的时间将保存的数据进行恢复的工作机制称为持久化。说白了Redis是基于内存的,快是快,但一关机数据就没了,这样肯定不行啊,所以就要把数据都存在磁盘上,这
  • 2024-06-12Linux下的lvm镜像与快照
    lvm镜像(mirror)(1)划分三个PV,其中2个PV大小要一模一样Disk/dev/sdb:21.5GB,21474836480bytes255heads,63sectors/track,2610cylindersUnits=cylindersof16065*512=8225280bytesSectorsize(logical/physical):512bytes/512bytesI/Osize(m
  • 2024-06-11[软件工具百科] 互联网资源历史快照归档站点与数字图书馆
    1archive.org官网https://archive.org网站简介https://archive.org由BrewsterKahle创办,是一个非营利性的数字图书馆。从1996年起,它每隔一会就会抓取各种各样的网页、视频、图片等资料,保存在“图书馆”。目前图书馆里存了8660亿个网页,1200万个视频,49
  • 2024-06-08Redis持久化机制:RDB与AOF的原理和最佳实践
    简介A.Redis持久化概念简介 Redis,作为一个高性能的内存键值数据库,其默认操作都是在内存中进行的,这意味着数据的读写速度非常快。然而,由于Redis是基于内存的,所以在服务器宕机或重启的情况下,未经特殊处理的数据将会丢失。为了解决这一问题,Redis提供了持久化功能,以允许数
  • 2024-06-06Unity Memory Profiler 内存分析
    参考:UnityMemoryProfiler从入门到精通-CSDN博客 UnityMemoryProfiler是一个用于分析和调试Unity游戏或应用程序内存使用情况的工具。它帮助开发者了解应用程序的内存分配和使用情况,从而识别和解决潜在的内存问题,如内存泄漏、过度的内存分配和不必要的内存消耗。Unity
  • 2024-06-05Redis-4-持久化
    Redis持久化1.1为什么Redis是基于内存的,不保存的话,应用停止了后数据就不在了。持久化的诉求,主要是解决以下问题:防止数据丢失Redis是一个内存数据库,数据主要存储在内存中。如果没有持久化机制,一旦服务器宕机或重启,内存中的所有数据都会丢失。通过持久化,Redis可以在磁盘上保
  • 2024-06-04手把手教你用VM搭建Linux系统
    一、安装vm查看是否安装成功,打开网络适配器(win+R+ncpa.cpl)确保有VMnet1和VMnet8二、创建虚拟机step01step02step03密码123456(我怕我忘了),全名是对你的虚拟机的别称没什么太大作用,用户名代表你说什么用户会涉及到权限step04,位置有个20GBstep05step06
  • 2024-06-03龙哥量化:期货软件中红红绿绿的"多开,空开,空平,多平,多换,空换,双开,双平,换手"是什么意思?(转载的)
    期货投资者在看盘时,会看到红红绿绿的"多开,空开,空平,多平,多换,空换,双开,双平,换手",以快期专业版为例,如下图1所示:图1.红绿开平数据(快期专业版)这些数据里面的红色和绿色是什么意思呢?红色表示主动买,绿色表示主动卖吗?多开,空开,多平,双开这些又是什么意思呢?多开表示多头开仓,多平表示多头平
  • 2024-06-03MySQL——事务补充
    十一、RR和RC的本质区别select*from表名(lockinsharemode)#当不加共享锁时,说明此时进行的是快照读,加了共享锁则进行的是当前读;​当进行快照读的时候才会形成readview结构;​readview形成的时机不同,会影响事务的可见性,会造成RR和RC级别下事务可见性的不同;当RR
  • 2024-06-03LVM-快照大法
    LVM机制还提供了对LV做快照的功能,也就是说可以给文件系统做一个备份,这也是设计LVM快照的主要目的。LVM的快照功能采用写时复制技术(Copy-On-Write,COW),这比传统的备份技术的效率要高很多。创建快照时不用停止服务,就可以对数据进行备份。说明:LVM还支持thin类型的快照,但是本
  • 2024-05-31postgressql——数据库快照(5)
    事物快照一个数据页包含了每一行的多个版本,每一行的可见版本一起构成一个快照。快照只包含在创建快照时当前已提交的数据,在这个特定的时刻提供了一个一致性的视图,这个视图我们就可以叫做快照。为了确保数据的隔离性,每一个事物都有自己的快照,这就意味着不同的事物在不同的