- HDFS分布式文件系统
目录1️⃣、HDFS的概述1.1、HDFS产出背景及定义1.2、HDFS优缺点1.3、HDFS组成架构1.4、HDFS文件块大小（面试重点）2️⃣、HDFS的Shell操作2.1、基本语法2.2、命令大全2.3、常用命......
- 【FastDFS分布式文件系统】2.FastDFS架构概述
上一篇我们讲解了文件的存储机制，有单机存储、共享存储和分布式存储，那么我们的主角---FastDFS就是一个分布式存储机制的文件系统，本篇为大家介绍一下Fast......
- 分布式搜索-elasticsearch
学习黑马-SpringCloud微服务技术栈项目的分布式搜索章节自行整理的笔记，方便日后的重构。项目涉及技术知识点是按照集数依次整理，方便日后回来查找。考虑到不是固定的联......
- 分布式协议与算法实战 - 分布式算法 paxos raft
paxos算法用于分布式共识，分成2部分BasicPaxos算法，描述多节点间如何就某个值达成共识Multi-Paxos算法，执行多个BasicPaxos实例，就一系列值达成共识BasicPaxos三种角......
- Redis 快速实现分布式锁
完备的分布式锁，需要支持哪些特性？ 互斥性，互斥是锁的基本特征，同一时刻只能有一个线程持有锁，执行临界操作；超时释放，超时释放是锁的另一个必备特性，可以对比MySQLInn......
- 【分布式技术专题】「分布式技术架构」一文带你厘清分布式事务协议及分布式一致性协议
概念简介Paxos是一种基于消息传递具有高度容错特性的一致性算法，是目前公认的解决分布式一致性问题最有效的算法之一。发展历史Paxos算法的发展历史追溯到古希腊，当时有......
- 分布式数据库DDBS
一、什么是分布式数据库分布式数据库系统(DDBS:Distributed Database System)是在集中式数据库系统的基础上发展来的。是数据库技术与网络技术结合的产物。分布式数据......
- 深度学习模型训练和关键参数调优详解
本文将通过针对特定场景任务从模型选择、模型训练、超参优化、效果展示这四个方面与各位读者分享模型开发的一些心得。参考资料：最实用的项目开发全流程!从自建数据集到......
- 大规模分布式训练经验
一、单机单卡训练1.基本概念芯片的内存模型训练时的内存主要消耗在：神经元的中间值参数值（包括权重、梯度值和优化器的状态值）2.优化方法单卡速度主要由单块AI加速......
- 分布式架构-可观测性-聚合度量
系列目录分布式架构-可观测性(一)-原理概览分布式架构-可观测性(二)-事件日志分布式架构-可观测性(三)-链路追踪分布式架构-可观测性(四)-聚合度量引子分布式架......