传统存储难以适应大数据时代
随着计算机和互联网的发展,信息量和服务量呈爆炸性增长,各行各业因为大幅爆发的数据而正变得蒸蒸日上。
据国际数据公司(IDC)统计,从2017年,结构化数据增长应趋于平缓,而在2016年开始,非结构化数据的增长将是爆发式的、火箭式的。而在2020年,全球的数据量将会突破44ZB(1ZB=1024EB),而其中80%的数据将是非结构化数据。
随着数据规模的不断扩大与数据结构的日益复杂,传统的文件存储技术已经无法满足人们对存储容量、扩展性、便利性、对海量数据支持高并发和高可用的访问、安全的数据共享等方面增长的需求。在新时代背景下面对非结构化数据量的暴增以及需求带来的问题,该如何有效解决呢?答案是对象存储。
对象存储势不可挡
这里的对象存储是一种存储形态,从存储形态上划分,存储包括块存储、文件存储、对象存储。对于前面两种存储,这里就不详细赘述了。
对象存储作为一种云计算环境下新型的存储形态,相比文件存储,具有以下优势:
更低的成本
更高的扩展性
更简易的管理操作
高可用性
尤其适合用来存储和管理海量的非结构化数据,包括备份归档数据,海量图片数据,GIS影像数据以及行业数据医疗影像数据,日志数据,视频监控数据等。
对象存储是亚马逊2006年提出的,推出了对象存储s3平台。在对象存储系统里,你不能直接打开/修改文件,但可以像ftp一样上传文件,下载文件等。另外对象存储没有像文件系统那样有一个很多层级的文件结构,而是只有一个“桶”的概念(也就是存储空间,bucket),“桶”里面全部都是对象,是一种非常扁平化的存储方式。
基于分布式对象存储的GIS应用场景
GIS场景中,应用和需求成为数据增长的两大驱动力,随着高分辨率的遥感卫星影像数据以及无人机航拍图像越来越多,这些数据都属于非结构化的,而且大规模的。
传统影像数据存储构建过程中,将业务资源池相互隔离,如果需要扩容时,必须扩展单独的存储资源池,以确保业务的连续性。由此可见,传统方式带来的问题显而易见,增加了设备的投入成本同时不可避免的造成资源浪费。其次,海量的影像数据实时读写和在线访问也是应用中的重要环节,因此,这些海量的遥感数据的高效存储与管理、分发与共享、访问与使用是传统存储中亟待解决的首要的问题。
那么,利用对象存储是如何解决这些问题的呢?首先,对象存储的高扩展性足以支撑影像数据的巨大增量,对象存储能够扩展数十至数百EB的可用容量,并且也没有更大容量的扩展限制。它能够充分利用高密度的存储,无论是机械硬盘还是固态存储,而且不会造成资源浪费的问题,成本低,可用性高。对象存储的元数据检索机制,大大提升了检索效率,而且,效率与分布式服务器数量成正比。
此外,GIS中的业务数据,包括农业行业的农村土地确权数据,数百亿计的空间相关档案文件的集中存储与管理等等,这些场景都适用于对象存储。
睿图云GIS平台存储系统横空出世
睿图云GIS平台存储系统(简称GIStack for Storage)为海量非结构化GIS数据而生,基于分布式对象存储,打造海量、高性价比、高弹性、高可用的存储系统。
仅需使用极低的成本,即可获得高效可靠的非结构化数据集中存储能力。GIStack for Storage提供地理大数据存储、管理、以及数据的共享交换服务。帮助用户实现部门内部、跨部门的数据之间的互通共享服务,为整合跨部门应用和数据共享提供支持。
GIStack for Storage核心价值包括以下几个方面:
低成本,强安全
GIStack for Storage提供安全数据的存储能力,用户之间资源独立且隔离。支持生命周期管理,可以自定义生命周期规则实现数据的自动冷热沉降删除,从而进一步降低存储成本。
高效检索,快速定位
无需担忧海量的数据中如何快速得到你想要的那份数据,首先,GIStack for Storage利用具备分布式多用户能力的全文搜索引擎ElasticSearch技术,以提升搜索效率。其次,利用对象存储简洁的数据读写接口,以提高用户访问与数据读写的效率。实现支持海量非结构化GIS数据的高效属性与空间检索查询,资源的快速定位。
多平台适配,总有一款适合你
在IDC不久前发布的《2017年第二季度中国软件定义存储及超融合市场跟踪报告》中,前三名SDS也就是软件定义存储的提供商分别是华为、曙光、XSKY,三家对象存储在市场中占有举足轻重的地位,成为企业级对象存储的领头羊。GIStack for Storage除了支持三种主流平台外,还包括Amazon S3、阿里 OSS、Openstack Swift。
轻松共享,便捷交换
构建可自定义的资源目录结构体系,实现目录的灵活分配。为用户提供资源的一键分享,实现资源部门内部以及跨部门之间的共享交换。
开放接口,易集成,易开发
开放存储相关API接口,用户可根据自己的需求,开发各种应用,也可与已有系统集成。此外,GIStack for Storage支持统一认证接口,轻松对接认证系统,实现统一管理用户。
衡阳市县一体化项目成功上线云存储
目前,衡阳市县一体化项目的运维管理系统和门户系统中已成功集成睿图云GIS平台存储系统,为衡阳国土局提供180TB数据量的数据管理与部门内部以及部门之间共享。建立管理员维护空间信息资源共享目录机制,为资源共享交换提供目录标准基础;建立存储空间审核机制,保证系统存储空间的有效利用;建立用户共享机制,用户除了具备云存储资源的管理外,还可以对外提供相关资源共享,实现空间数据的标准化建设。
新闻热点
新闻爆料
图片精选