电子发烧友网 > 存储技术 > 技术文库

存储技术

如何正确处理废旧的数据中心存储硬件

一项调查显示,由于未能妥善处理存储硬件,很多数据中心运营商浪费大量费用,并面临数据泄露的风险。

2019-03-03 标签:数据中心 230

什么是Swap分区 NVMe上如何使用Swap分区

NVMe是固态存储时代的下一个阶段,它提高了SSD和网络上其他存储设备的性能。如今,越来越多的服务器开始支持NVMe,IT人员是时候考虑Swap分区(交换区)的使用问题,来最大限度地利用这些系统了。

2019-03-03 标签:SSD固态存储nvme 125

浅谈内存分配方式 避免内存浪费问题

说到内存的分配方式,就不得不提连续分配方式。这种方式是指为一个用户程序分配一个连续的内存空间,它曾被广泛的用于20世纪60~70年代的OS中,至今仍被使用。连续分配方式可以进一步分为单一连续分配、固定分配方式、动态分区分配以及动态重定位分配。

2019-03-03 标签:内存 84

闪存主控验证业务分析及流程策略

闪存主控和网络通信、图像处理等芯片不同,它不是单纯的输入输出数据流业务处理的模型。其系统由定制算法、数据调度、通用计算处理、总线仲裁、内外存储、数据接口以及外采三方等多功能单元构成。对于不同类型的功能单元,其验证流程及策略各有其特点。

2019-02-01 标签:闪存 96

论传统RAID技术的存在的几大问题

传统RAID在数据重建方面表现比较差,以前因为单块磁盘的容量较小,当磁盘发生故障之后,数据重建需要的时间大部分用户是可以接受的,但随着数据量的不断增大,在许多应用环境中单块的磁盘容量在4TB或者以上,数据重建可能需要十几个小时,甚至几十个小时才能将故障盘中的数据恢复。这样就有一个比较大的问题,重建时间越久发生二次损坏的概率就越大,一旦发生了二次损坏很有可能会造成数据全部丢失无法恢复。

2019-02-01 标签:RAID磁盘 97

在Hive中进行数据压缩实现高效存储

在HDFS上使用压缩并不像在ZFS等文件系统上那样透明,特别是在处理可拆分的压缩文件时(本章稍后将详细介绍)。使用Avro和SequenceFile等文件格式的优点是内置压缩支持,使压缩几乎对用户完全透明。但是在使用文本等格式时,就会失去这种支持。

2019-02-05 标签:hive 59

重装Linux操作系统为什么识别不了硬盘

硬盘的历史中,以往并行接口的 IDE 硬盘已经逐渐退出市场,而 SATA 串行机械硬盘,目前已是主流,特别是超大容量(T 级)的硬盘,因很好的性价比而普遍采用。而一种新兴的固态存储介质,也在悄然之中霸气出山。这其中以往的 USB 存储介质,随着 3.0 标准以及大容量 U 盘的普及,已经逐步取代了传统 CD 以及 DVD 介质。

2019-01-01 标签:Linux机械硬盘 292

禁用Linux USB存储设备的三大方法

为了保护数据不被泄漏,我们使用软件和硬件防火墙来限制外部未经授权的访问,但是数据泄露也可能发生在内部。 为了消除这种可能性,机构会限制和监测访问互联网,同时禁用 USB 存储设备。

2019-01-01 标签:usb存储Linux 260

如何衡量内存的性能

stream算法的原理从上图可以看出非常简单:某个内存块之间的数据读取出来,经过简单的运算放入另一个内存块。那所谓的内存带宽:内存带宽=搬运的内存大小/耗时。通过整机合理的测试,可以测出来内存控制器的带宽。下图是某云产品的内存带宽数据:

2019-01-01 标签:内存numa 143

新型的存储器技术有哪些 新型存储器能解决哪些问题

尽管ㄧ些新存储器技术已经研发出来,但在这竞争激烈的市场,只有极少数能够成功。 图1是ㄧ些新存储器技术的列表。然而,无论哪一个技术胜出,这些新型非易失性技术系统的功耗肯定会低于现有的嵌入式 NOR 闪存和 SRAM,或是,离散 的 DRAM 和 NAND 闪存的系统。

2018-12-24 标签:DRAMNAND嵌入式存储器 822

大数据存储的演变的过程 Hadoop Hdfs出现原因分析

存储大量数据有三个最重要的指标,那就是速度,容量,容错性。速度和容量的重要性毋庸置疑,如果容量不够大,或者读取的速度不够快,那么海量数据存储也就无从谈起了。而磁盘又是计算机中很容易损坏的零件,当磁盘损坏的时候怎么办?放任数据的丢失吗,那可不行,这就有了容错性的需求。

2019-01-01 标签:RAID磁盘Hadoop大数据 393

在公有云上配置部署IPv6的方法和步骤

在公有云上配置部署IPv6的方法和步骤...

2018-12-08 标签:ipv6公有云 589

SSD硬盘选购的技巧 经典7款SSD硬盘推荐

固态硬盘(SSD)在企业的业务中发挥着重要的作用,并在外形、容量、速度、功能和价格范围有着更多的发展和进步。

2018-11-14 标签:闪存三星SSD西部数据 500

什么是QoS? 去中心化存储QoS的作用是什么

无用协议率。在P2P传输系统中,只要不是实际传输文件内容的协议消耗,就是无用协议。无用协议率就是指无用协议的大小占所有协议大小的比。

2018-11-14 标签:存储技术QoS去中心化 355

云是怎么来的 云存储的优缺点分析

云本质是一种服务,而不是一种物质,正因为此,它必须基于物质才能显示功效,《易经》有云:“形而上者谓之道,形而下者谓之器”。所以下器者,谓之服务器+存储+部署管理软件;上道者,谓之“云”。所以云是一种道,是一种方式和方法,而不是某种设备,某个软件,当然云需要由硬件+软件来承载而已。

2018-11-14 标签:云计算存储技术云存储 329

如何看待传统存储复制存在的8大痛点

灾备技术涉及的领域很多,有很多厂商提供了多种技术解决方案,当前比较常见的数据复制技术有几大类,例如基于传统存储的复制技术,技术数据库的复制技术,基于存储虚拟化网关的复制技术,基于主机卷管理的复制技术,基于备份的复制技术等等。

2018-11-14 标签:存储技术灾难恢复 319

GD32330C-START开发板试用体验:MDK开发环境搭...

开发环境是玩的开始,那么如何快速搭建一个稳定的开发环境?GD的针对大多数工程师的开发习惯,已经给我们准备的针对IAR和MDK这两个IDE的支持包了。在说这个之前,先看下GD给我们CD的GD32330C-STARTFiles文件夹里面,包含了哪些东西。见图1,GD32330C-STARTFiles文件夹中包含了,我们初始开发的所有东西,我来给大家说道说道 这里我介绍搭建MDK的开发环境,个人使用MDK多一点。IAR的话期待论坛别的同学给大家介绍吧。首先,如果我们啥都不做,直接打开官方的

2018-11-12 标签:MDKDEMO 255

存储器的大端模式和小端模式

大端模式:数据的低位(就是权值较小的后面那几位)保存在内存的高地址中,而数据的高位保存在内存的低地址中,这样的存储模式有点儿类似于把数据当作字符串顺序处理:地址由小向大增加,而数据从高位往低位放;

2018-10-27 标签:存储器cpu编译器 310

Android的内部存储和外部存储

当内存不足时,系统会无警告的删除该文件夹的内容,尽可能自己规定文件大小,与何时删除

2018-10-27 标签:android存储 200

云存储管理的关键是什么

全球的数据存储量正在以不可预测并且加倍的速度在增长。随着企业在快速增长的情况下努力提升存储性能,一些企业开始寻找云存储服务作为一个解决方案。这显然对于云提供商是一个机遇,但是他们也同样要面对云存储管理上的问题和淹没在泛滥的数据中的风险。

2018-10-20 标签:云存储 705

编辑推荐厂商产品技术软件/工具OS/语言