文章目录 一、HDFS简介1.1、为什么需要HDFS1.2、核心数据和行为数据 二、核心架构和读写流程2.1、核心架构组件NameNodeSecondary NameNodeDataNodeBlock 2.2、读数据逻辑2.3、写数据逻辑 三、基本命令使用四、分布式可靠性保障3.1、副本冗余3.2、机架策略3.3、心跳机制3.4、安全校验3.5、数据恢复 附：HDFS环境配置 一、HDFS简介 HDFS全称为Hadoop Distributed File S 继续阅读

1. DASDAS存储是亲们最常见的一种存储方式，尤其是在中小企业应用中。PC中的硬盘或只有一个外部SCSI接口的JBOD都属于DAS架构。是指存储设备直接连接到服务器总线上，存储设备只与一台独立的主机连接，其他主机不能使用这个存储设备哦(^_^)∠※DAS存储设备与服务器主机之间的连接通道通常采用SCSI连接，DAS存储设备主要是磁盘阵列（RAID: Redundant Arrays of Independent Disks 继续阅读

上周末参加了冬瓜哥的存储和服务器底层原理架构培训课程，又重拾了存储和服务器的部分知识。个人言论不代表冬瓜哥及所在公司观点。 从底层原理实现角度来看，存储和服务器的物理硬件本质都是三大件：CPU、内存和I/O的组合运用。 一、三大件的主流趋势 在CPU芯片方面，CPU芯片从工艺设计到流程制造均是高精尖的科技硬实力体现，而我国在这一方面一直在投入重金进行技术研发、生态圈建设和技术追赶。现目前，我国在AI芯片的工艺 继续阅读

云计算 是什么: 云计算即分布式计算 通过使用更高性能的机器 更多的机器 来达到相关服务的计算 云计算产品分类: 如建立一个网站：要搞服务器 安装服务器软件 以及编写程序 Iaas（架构即服务） 不用自己搞服务器 计算基础设施的利用，包括CPU、内存、存储、网络和其它基本的计算资源，用户能够在之上部署和运行任意软件:操作系统和应用程序 如 云服务器 云硬盘 Paas（软件即服务） 不用自己搞 继续阅读

服务器存储 前言一、开放系统的存储简介1.DAS2.NAS3.SAN4.直连式存储（DAS）和网络存储（NAS、SAN）的区别NAS和SAN的区别 二、存储接口简介 前言 存储架构根据服务器类型分为 开放系统存储又分为 封闭存储的系统开放存储的系统-内置存储-外挂存储 一、开放系统的存储简介 名称介绍DAS直连式存储(Direct-AttachedStorage)NAS网络附属存储(Ne 继续阅读

心跳( heartbeat )是分布式系统中常用的技术。顾名思义，心跳就是以固定的频率向其他节点汇报当前节点状态的方式。收到心跳，一般可以认为发送心跳的这个节点在当前的网络中状态是良好的。 同时分布式存储系统中经常会采用master-slave架构（也即主从架构），从节点通常会使用心跳技术向主节点汇报自身的健康状况，或者其他请求，主节点处理接收到的心跳信息，并响应给从节点一些操作指令，从节点收到这些操作指令后，会进行相应的操作。今天这篇文章就来分析总结一下这个实现方案。 一、 概述 先总结 继续阅读

目录 前言： 1、服务器是什么？ 2、服务器的构成？ 3、服务器的分类？ 4、X86/ARM之争？ 一、服务器是什么？ 二、 服务器的构成？ 2.1 服务器的逻辑架构 2.2 服务器的硬件 2.3 服务器的固件和OS 三、服务器的分类？ 3.1 按产品形态 3.2 按指令集架构 3.3 按处理器数量 3.4 按应用类型 四、 X86/ARM之争？ 继续阅读

云技术为公共云，私有云和混合云开辟了新的可能性。许多组织正在迁移到混合云以充分利用云计算。什么是混合云？混合云基础架构是一种IT体系结构，在两个或多个环境中融合了一定程度的管理和工作负载可移植性。混合云环境将私有云和第三方公共云服务与内部部署结合在一起，并在所有平台之间进行编排。混合云是一种将公共云服务与私有云集成在一起的云计算解决方案，使数据，存储和应用程序可以在每种服务之间共享。混合云技术结合了公共云和私有云 继续阅读

文章目录 四、存储服务存储服务1、存储定义2、存储方式3、4、存储方式 一、EVS云硬盘特点性能指标 二、对象存储服务（OBS）：三、SFS弹性文件服务（Scalable File Service，SFS）文件按类型1、SFS2、SFS Turbo 弹性文件服务SFS与对象存储服务OBS、云硬盘EVS之间的对比四、云备份（Cloud Backup adn Recovery，CB 继续阅读

云服务器存储扩容详解 2020-01-20阅读 6640 环境说明 Linux操作系统：CentOS Linux release 7.6.1810 (Core) 平台环境：腾讯云CVM，CBS 本教程相关视频教程：腾讯云大学-云服务器存储扩容 1. 存储扩容概述 随着业务的发展，业务数据不停的增长，原有的磁盘空间可能会出现磁盘空间不够用的情况，因此，需要对磁盘空间进行 继续阅读

1 OSS 1.1 什么是OSS   阿里云对象存储服务（Object Storage Service，简称OSS），是阿里云提供的海量、安全、低成本、高可靠的云存储服务。它是一个分布式的对象存储服务，提供的是一个Key-Value对形式的对象存储服务。用户可以根据Object的名称（Key）唯一的获取该Object的内容。它具有与平台无关的RESTful API接口，能够提供99 继续阅读

一、背景 1. 分布式数据库架构 当前分布式数据库架构有不少，但是总体架构相差不大，主要组件都包含协调节点、数据分片、元数据节点、全局时钟。一种常见的分布式架构如下图： gtm ：全局事务管理器(全局时钟)，一主多备； catalog: 元数据管理，一主多备； group: 水平分片,每个group由一主多备数据存储节点组成； proxy : 协调节点，无状态，负责处理客户端的请求，把请求 继续阅读