咨询热线:13771545628                               
当前位置:首页 > 技术专题值得关注的大数据存储管理技术
    

值得关注的大数据存储管理技术

发表日期:2016-05-26文章编辑:海润软件编辑浏览次数:22 标签: 数据存储    

目前电信、金融、零售等行业希望通过大数据的分析手段来帮助自己做出理性的决策。特别是电信和金融行业表现尤为突出,市场数据没有办法与用户消费数据打通。而它们面临的第一个问题就是海量数据存储的问题。多数企业正在试图建设自己的数据中心,来满足大规模的数据量的产生,或选择大数据相关工具来应对,如大数据魔镜等。但是随着数据的进一步增多,很多数据的查询和分析性能急剧下降,有的数据中心甚至出现了无法响应的状况,为企业的业务带来了很大损失。
        企业的CIO们有着这样的疑虑,怎样的数据管理策略能够对数据进行有效的保护,而且在需要时,让数据随时转变成价值的问题。只有数据与适合的存储系统相匹配,制定出管理数据的战略,才能高成本,高可靠,高效益的应对大量数据。对于企业来说,面临大数据首先解决的问题就是成本和时间效应问题。商机不容错过,而存储数据管理,可以通过自动化,磁盘和重复数据删除,备份和归档的软件,让企业的关键数据分存在不同的区域,然后按照特定的业务需求,对数据进行提取,操作和分析,并形成企业所需要的目标数据。大数据面临的存储难题迎刃而解。
        大数据的关注度在不断升温,而大数据管理的技术也层出不穷。在众多技术中,有6种数据管理技术普遍被关注,即分布式存储与计算、内存数据库技术、列式数据库技术、云数据库、NoSQL、移动数据库技术。其中分布式存储与计算受关注度最高。
        分布式存储与计算架构可以让大量数据以一种可靠、高效、可伸缩的方式进行处理。因为以并行的方式工作,所以数据处理速度相对较快,且成本较低,Hadoop和NoSQL都属于分布式存储技术的范畴。
        内存数据库技术可以作为单独的数据库使用,还能为应用程序提供即时的响应和高吞吐量,SAP的HANA是该技术的典型代表。
        列式数据库的特点是可以更好的应对海量关系数据中列的查询,占用更少的存储空间,这也是构建数据仓库的理想架构之一。
        云数据库可以不受任何部署环境的优势,随意的进行拓展,进而为客户提供适宜其需求的虚拟容量,并实现自助式资源调配和自助式使用计量。目前微软的SQL Server可以提供类似的服务。
        NoSQL数据库适合于以下场景,即庞大的数据量、极端的查询量和模式演化。企业可以NoSQL得到高可扩展性、高可用性、低成本、可预见的弹性和架构灵活性的优势,甲骨文在2011年推出Oracle NoSQL数据库。
        移动数据库技术是适应移动计算产物。随着智能移动终端的普及,人们对移动数据实时处理和管理要求的不断提高,移动数据库具有平台的移动性、频繁断接性、网络条件的多样性、网络通讯的非对称性、系统的高伸缩性和低可靠性以及电源能力的有限性等,也正是因为这些特性被业界所重视。