你好,游客 登录
rss订阅 手机访问 
存储技术
大话存储系列之月光宝盒(块存储)
块存储设备
  互联网越来越发达,网速越来越快(管制也越来越严),很多事情都可以通过联网解决。很多存储行业商家也get到了这个点。下图是个极简的模型,商家存储设备(黑盒子),用户一个笔记本电脑,通过TCP/IP承载的iSCSI协议,对于Linux用户,可以看到一个块设备/dev/sdax,就像使用本地硬盘(如/dev/sda)一样,可以对其进行分区,格式化为文件系统,亦或直接...
日期:今 15:22 作者:
讲个“如何读懂开源软件定义存储”的故事
大多数企业的IT人员制定下一步存储计划是通过监测数据的增长曲线预测得出。管理的方式通常是替换企业资产管理生命周期中旧的阵列,然后将费用投入到新的特定的项目中。但是,随着软件定义存储在市场上激起涟漪,更多企业意识到,企业应该拥有: 一个存储池,一套完备的存储预算体系,无限扩展的能力- 同时您还可以与不同供应商进行对话,而不是被某一厂商所限定。因此,软...
日期:今 14:56 作者:
OpenStack使用Ceph存储,Ceph到底做了什么?
  1 背景知识
  1.1 Ceph简介
  Ceph是当前非常流行的开源分布式存储系统,具有高扩展性、高性能、高可靠性等优点,同时提供块存储服务(rbd)、对象存储服务(rgw)以及文件系统存储服务(cephfs)。目前也是OpenStack的主流后端存储,和OpenStack亲如兄弟,为OpenStack提供统一共享存储服务。使用Ceph作为OpenStack后端存储,具有如下优点:
  所有的计...
日期:今 09:44 作者:
Docker——我们的硬盘空间去哪了?
对于新手,我曾经说过,在玩docker的时候,尽量不要在自己电脑上(Mac或者windows)上直接安装docker和使用他,而是找一个虚拟机。Docker本身如果我们用的时间长了,会占用系统不少硬盘空间,特别是学习期间,今天拉一个image下来,明天又拉一个,今天建一个容器,明天建一个,久而久之,我们的电脑硬盘就吃紧了。如果是在虚拟机(vmware或者virtualbox),我们可以直接删除...
日期:昨 15:11 作者:
一个包含10节点的Redis集群实践案例
Redis 通常不会被用作主要的数据存储,但它在存储和访问可容忍丢失的临时数据(如度量指标、会话状态、缓存)方面却独有长处,并且速度非常快,不仅提供了最佳性能,还内置了一组非常有用的数据结构。它是现代技术栈中最常见的主要部件之一。
日期:昨 14:26 作者:
Linux内核地址映射模型与Linux内核高端内存详解
Linux 操作系统和驱动程序运行在内核空间,应用程序运行在用户空间,两者不能简单地使用指针传递数据,因为Linux使用的虚拟内存机制,用户空间的数据可能被换出,当内核空间使用用户空间指针时,对应的数据可能不在内存中。
日期:05月18日 作者:
聊聊数据治理的应用指南
数据治理(有时也称为IT治理)是存储管理的关键部分。显然,IT治理总体上与数据治理密切相关:IT是任何数据治理项目的组成部分。
日期:05月18日 作者:
SIZE算法:数据存储安全性的革命
什么是SIZE算法开发?
  该算法有助于以最大的可靠性和安全性存储数据,无论是防止未授权访问还是防止数据丢失。数据受到一次性密钥(OTP)级别的保护,具有前所未有的可靠性:例如,随着网络的扩展,可能会省去高达98%的存储数据并仍然可以恢复原始文件。
  为什么SIZE是具有这种数据恢复级别的独特算法?
  我们来看看SIZE算法的工作原理。它将...
日期:05月17日 作者:
存储Cache丢失导致数据库无法open的案例
当存储Cache由于丢失时,我们应该如何处理,让数据库重新能够open起来呢?让我们听听,专家分享的这篇案例。
日期:05月17日 作者:
Linux基础——ISCSI网络存储服务
Initiator:
  SCSI会话的发起方
  向Target请求LUN,并将数据的读写指令发送给Target。
  Target:
  接受SCSI回话的一方
  它接收来自Initiator的指令,为Initiator提供LUN,并实现对LUN的读写
  iscsi实现网络存储,提供存储端叫target,使用存储端叫initiator。target 上可以提供存储空间,initiator负责连接ISCSI设备,在...
日期:05月16日 作者:
聊一聊用户画像如何存储
  0x00 前言
  随便聊一下用户画像的存储。
  现在的用户画像,动不动就是几千几万个标签,标签一多就出现了一些需要克服的难题,比如下面两个:
  如何解决频繁新增和删除标签的场景
  如何解决不同标签更新时间和频率不同的问题
  0x01 数据模型设计
  从个人角度来讲,在大数据领域接触比较多的的存储引擎有这几个:Hive(H...
日期:05月16日 作者:
TensorFlow和Keras解决大数据量内存溢出问题
以前做的练手小项目导致新手产生一个惯性思维——读取训练集图片的时候把所有图读到内存中,然后分批训练。
日期:05月15日 作者:
MySQL数据库存储IP地址的方法
为什么要问如何存储IP?
  首先就来阐明一下部分人得反问:为什么要问IP得怎样存,直接varchar类型不就得了吗?
  其实做任何程序设计都要在功能实现的基础上最大限度的优化性能。而数据库设计是程序设计中不可忽略的一个重要部分,所以巧存IP地址可以一定程度获得很大提升。
  利用函数算法处理
  在MySQL中没有直接提供IP类型字段,但如果...
日期:05月14日 作者:
学会这15点,让你分分钟拿下Redis数据库
1、Redis简介
  REmote DIctionary Server(Redis) 是一个由Salvatore Sanfilippo写的key-value存储系统。Redis是一个开源的使用ANSI C语言编写、遵守BSD协议、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库,并提供多种语言的API。它通常被称为数据结构服务器,因为值(value)可以是 字符串(String), 哈希(Map), 列表(list), 集合(sets) 和 有序集...
日期:05月14日 作者:
关于NAND闪存损耗均衡算法的优化
0. 引 言
  现在越来越多的笔记本电脑、智能手机、固态硬盘等新型电子设备开始装备NAND闪存,凭借特有的存储方式和超高的稳定性、可靠性,NAND闪存得到越来越多厂商的青睐.配备NAND闪存的固态硬盘也凭借诸多优势逐渐取代传统机械硬盘[1].
  采用NAND闪存作为存储装置的固态硬盘没有采用像机械硬盘那样的复杂精密结构,读取数据不需要寻道时间,并且也有独...
日期:05月11日 作者:
  • 1/63
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • ...
  • 63
  • »