首页 » 存储

纠删码技术分析(Erasure Coding)

 
menu.saveimg.savepath20180818200320

【摘要】:副本策略和纠删码是存储领域常见的两种数据冗余技术。相比于副本策略,纠删码具有更高的磁盘利用率。 Reed-Solomon码是一种常见的纠删码。 多副本策略即将数据存储多个副本(一般是三副本,比如HDFS),当某个副本丢失时,可以通过其他副本复制回来。 … 阅读全文

Minio搭建私有化对象存储服务

 
2fdd0d494f5d411abc24cfe8dee95f17

Minio是建立在云原生的基础上;有分布式和共享存储等功能;旨在多租户环境中以可持续的方式进行扩展的对象存储服务。它最适合存储非结构化数据,如:照片、视频、日志文件、容器/虚拟机/映像等,单次存储对象的大小最大可达5TB。 实现架构单节点 根据存储是否为远端, … 阅读全文

终于有人把云计算、大数据和人工智能讲明白了!

 
78d372b1e4a29c203c6efd0547a544c0.jpg-wh_651x-s_73131588

今天跟大家讲讲云计算、大数据和人工智能。这三个词现在非常火,并且它们之间好像互相有关系。 一般谈云计算的时候会提到大数据、谈人工智能的时候会提大数据、谈人工智能的时候会提云计算……感觉三者之间相辅相成又不可分割。 但如果是非技术的人员,就可能比较难理解这三者之 … 阅读全文

一张图带你看Linux内核运行原理

 
2

接触过Linux的都知道Kernel的含义,在我看来就是操作系统的核心或者最重要的部分。众所周知的是,几乎整个互联网都运行在 Linux上,从网络协议,到服务器,到你平常访问的绝大多数网站,都能看到它的身影,Linux 内核就是最复杂最流行的开源项目之一。如果 … 阅读全文

数据恢复技术大揭密

 
g89s2i1te9hs

数据恢复技术大揭密   计算机安全专家威廉·史密斯说:“创建这些数据也许只花了10万元,但当你在关键时刻打算把它们全部找回来时,你得准备100万元的支票。” 而如果你掌握了数据恢复技能,你就可以节省下这100万元,甚至还能从其他人那里赚取100万元! 现在,我 … 阅读全文

inode详解

 
14518381_1382450227Hw5H

一、inode是什么? 理解inode,要从文件储存说起。 文件储存在硬盘上,硬盘的最小存储单位叫做"扇区"(Sector)。每个扇区储存512字节(相当于0.5KB)。 操作系统读取硬盘的时候,不会一个个扇区地读取,这样效率太低,而是一次性连续读取多个扇区, … 阅读全文

HDFS简介

 
111

HDFS

特点

系统结构 Master和Slave结构。 分为三个角色:NameNode、SecondaryNameNode、D … 阅读全文