掘金大数据存储市场,供应商还需解决哪些难题?

“这由客户和社会的实际需求，及使用数据的具体目的来决定。‘更快地处理更多数据’是存储设备供应商的重要使命。随着CPU运算速度的提升，其对AI分析速度的要求也越来越高，铠侠正在开发高速固态硬盘，以避免将数据传输到主机时出现瓶颈问题。”岡本成之说。据了解，铠侠正在开发固态硬盘兼容PCIe®/NVMe™和SAS的最新标准，为提高能源效率还计划开发新的Form Factor，也在与主机端软件等进行合作，为数据中心客户提供系统级的解决方案。zhlesmc

zhlesmc

慧荣科技市场营销暨研发资深副总裁段喜亭zhlesmc

“大量的非结构化数据，除了要有可随需扩充容量的存储设备之外，还需要有很好的数据管理能力。热数据需要高性能的SSD存取服务，配合高性能计算服务器执行视频数据的关键信息攫取,以进行数据的再制作及数据的‘减肥’，并将原始海量资料回存至适合海量数据的对象存储。”段喜亭认为存储性能及稳定度至关重要,主控芯片是影响该问题的最关键一环。慧荣科技在5G、自动驾驶、大数据、人工智能方面早有布局。zhlesmc

针对非结构化数据，英韧科技在SSD中引入了ZNS（Zone Name Space）技术。据吴子宁博士介绍，ZNS把碎数据块聚集成一条长数据带，再集中写在NAND颗粒上，提升了流数据在NAND上的使用效率。使用ZNS技术可减少Over-Provisioning（预留空间）、提高存储器吞吐量，尤其是对IOPS指标有大幅提升，并增强NVM耐用性。zhlesmc

有些数据在当时无法判断是否有价值，但是在未来可能会产生价值。比如，开普勒分析第谷留下的20年的行星观测记录发现了开普勒三大定律，保存下来的交通数据将来可能成为重大事件、案情的关键节点。叶毓睿解释说，数字宇宙膨胀得太快，需要提高存储效能来积极应对。浪潮存储通过去重、压缩、精简配置、自动分级、提高机柜密度、采用云网关等方式，来满足数据对存储的要求。zhlesmc

因无法确定数据在未来是否会产生价值，存储厂商需要在“存储更多数据”方面下苦心，由此基于云技术的存储服务显得非常重要。zhlesmc

如何区别大数据与云计算？

提及大数据，一般也会涉及到云计算，两者之间可谓是相辅相成。对非专业人士而言，很难辨别两者的差异。借此次机会，我们针对这两个概念做了讨论。zhlesmc

zhlesmc

Arm存储方案高级经理黄晏祥zhlesmc

黄晏祥称，云计算是大数据应用价值的实现方式之一，两者的结合可以从底层架构助力数据挖掘透析洞见的实现。zhlesmc

吴子宁博士同意大数据与云计算“相辅相成”的说法：“云计算是硬件资源的虚拟化，大数据是海量数据的高效处理。数据越大越适合云计算，越大的算力也需要越大的存储能力，更大的存储单位需要更便捷的存储管理模式。云计算对低延时、数据吞吐量有较高要求，这些存储效能是影响大数据和云计算两者互动、良性发展的重要因素。”zhlesmc

“大数据只涉及处理海量数据，而云计算则涉及到运算、存储、虚拟化与容器化等服务。大数据只是个素材，必须有好AI/ML运算模型, 搭配好的存储架构与高性能闪存设备，才能将大数据转换成大资产。企业的数据中心不再只满足存储容量需求，还必须担负数据转换成资产的重任。”段喜亭强调说。zhlesmc

他还表示，大量数据的产生给存储行业带来巨大的机会，而边缘运算概念是将运算工作由云端转移至终端或近端，边缘端含括PC、ADAS、安防监控、5G行动网络，它强调高性能，云端则有资料中心、云服务、大数据与AI，着重易管理性，但不论在哪一端存储，都需要大量的NAND闪存做存储，好带来更快的I/O速度、更短的读写延迟。zhlesmc

岡本成之认为，对“任务关键型”核心系统以及采用云端技术的数据中心客户而言，它们所使用的企业级固态硬盘与消费级固态硬盘有很大的区别，前者要求更高的性能、可靠性、即时响应能力等。云计算领域通过网络并行整合大量存储设备，不损害QoS（服务质量）的低延迟固态硬盘以及具有低功耗和高密度安装、更低总成本的固态硬盘越来越受市场的追捧。zhlesmc

叶毓睿称，大数据是算据，云计算是算力。云计算有公有云和私有云。私有云中有一类是政务云，相当于大型私有云，其集群节点数多，可以达到300、500甚至上千台。大多数政府和企业基于自建数据中心发展起来的是私有云，它对存储有较高的要求。zhlesmc

如何看待集中式与分布式存储？

近年来，业内有很多关于集中式存储和分布式存储的探讨。在数据处理需求急剧增长的情况下，传统的存储方式是否适应业务发展的需求？zhlesmc

“传统机柜的集中式存储发展是有瓶颈的，性能提升和存储容量增加均有限。随着互联网技术的不断迭代，Google最先提出的GFS（Google file system），即一个可扩展的分布式文件系统，用于大型的、分布式的、对大量数据进行访问的应用。随后又出现了开源的HDFS（Hadoop distributed file system），采用便宜的服务器，可无限扩展，加快了分布式存储的应用。”吴子宁博士说。