本帖最后由 7200770 于 2018-9-30 10:36 编辑
问题1:您公司存储设施是否常出现难以满足业务需求的情况?其中的挑战一般是什么?
我公司参与了多个省份智慧城市的建设工作,所建设的系统出现了存储设施难以满足业务需求的情况。其中的挑战主要有如下几点: a. 系统数据爆发式地增长,超出预期,需要更多的设备来存储和处理数据。 b. 按照目前数据增长的趋势,公司今后仍然需要在存储上投入大量预算,公司迫切需要一种创新且高效的方式来存储和使用数据,单靠批量购买同样的存储设备来扩充自己的SAN和NAS架构远远不够。 c. 从经济上来讲,对于经常访问的数据进行分层存放是非常划算的,但这增加了系统设计的复杂性。系统通常只需要将数据的一部分存储在高性能存储介质如固态硬盘中,针对长期保留的数据则可以存放在便宜的介质如机械硬盘、磁带库中。 d. 随着数据体量变得越来越大,其中蕴含的价值也越来越多,为了避免数据丢失或存储设施损坏,公司必须对数据实施完善的保护策略。 e. 闪存供应商还没有建立企业需要管理其数据的文件服务。包括数据管理服务,如数据保护和备份,数据移动及数据检索等。这意味着高性能闪存存储需要一个互补的辅助存储解决方案,企业需要管理大量数据的文件服务,可以让企业能够轻松地保护和备份数PB的数据,并且将数据从其所在的位置移动到所需位置,快速搜索并加以利用。 f. 使用闪存进行非结构化文件数据存储需要兼容的辅助存储解决方案,但遗憾的是,传统备份和归档解决方案无法跟上闪存存储的速度。一个补充高性能存储的现代存储解决方案需要能够处理并行数据流以尽可能快地读取数据。
问题2:您一般以哪种方式解决存储挑战?资源堆叠、架构更新升级还是其他?您怎么看待不断出现新型存储介质,是否考虑或尝试过使用全新类型的存储设备? 对于很多存储工程师来讲,解决存储挑战的主要途径是简单的增加硬盘驱动器。结果,随着硬盘的增加,存储性能将继续按比例增加。在这种情况下,在某一个时间点,大多服务器应用最后成为了他们自己的存储瓶颈,多用户负载应用的挑战使他们产生的简单请求比传统存储系统支持的更多。 3D XPoint是介于内存DRAM与闪存NAND Flash之间的一种全新介质,比DRAM要慢,但它比DRAM要便宜,比NAND要快,但是比NAND要贵,最重要的是它是非易失性的。所以,断电之后数据不丢失。3D XPoint将会比DRAM慢五到八倍。这意味着它不可能改变内存计算那种应用场景,也就是说无法取代内存DRAM,更加针对的是当前的NAND闪存市场。3D XPoint跟常规的2D平面NAND的容量差不多,但比DRAM的密度高出十倍。 虽然我公司还没有尝试使用傲腾存储,但我由衷的希望intel的3D Xpoint技术不是纸上谈兵。一来当前的存储市场,传统硬盘进入饱和期,闪存市场也有着颇多的变数,需要新的介质加入来中和这样的局势,二来,在数据时代,人们对于存储的需求,对性能的要求一定是大于容量的,闪存逐步取代传统硬盘的步伐节奏已经确定,但面对成本市场而言,这一道瓶颈不知道仍然需要多少年才能真正迈过去。
问题3:3D Xpoint技术一经发布就在业界引起了广泛讨论,如今英特尔已基于该技术推出了全新的傲腾存储产品,意味着这种全新的存储技术已经走向市场。您认为该系列产品更适合应对哪些工作负载的需求?为什么? 傲腾存储既能跟普通的3D NAND站在一个队伍,组成快存储和Cache方案。也能跟DRAM站在一块组成内存池,作为扩展内存。如下图所示:
当用作快存储的时候,简单说就是加速。作为数据库,对性能最直接的要求就是TPM更高,多用户多线程下的高TPM是数据库的最基础的要求。有了傲腾之后的数据库查询速度明显提升。高稳定性、低延迟是基于3D Xpoint的Optane相对于普通3D NAND的绝对优势,那么对于所有关注稳定性、关注性能的关键业务领域,都应该考虑这种Optane创新存储方案,它适用于各种OLTP场景。 用作扩展内存,英特尔通过IMDT技术将Optane与DRAM组成内存池,而且不用系统做什么改变,更不需要应用做出多大改变,只需要安装操作系统之前安装一个底层软件即可,在IMDT的帮助下,Optane能突破系统识别的DRAM的空间限制,提供与DRAM相近的性能表现。 这一技术实现是一种突破,操作起来很难,但应用场景非常清楚,Optane用作内存目的就是为了部分替代昂贵的DRAM内存,花同样的钱能拥有更多内存。 大内存的好处毋庸置疑,操作系统运行加载程序需要大内存,一些内存型的应用也需要大内存,压缩解压缩也需要大内存,数据分析也需要大内存,机器学习也是内存越大越好,而且,Optane是非易失性的,掉电也不丢数据。 对于广大的超大规模数据中心用户,比如许多云厂商来说,Optane内存能显著降低这些企业在内存上的投入成本,这是广大云计算服务商所喜闻乐见的。在高性能计算领域,大的内存能提升科研和科学计算输出结果的速度,能更快地得到仿真结果。 3D XPoint并不是改变当前的内存DRAM市场,它的目标是当前的移动存储设备以及大型数据中心市场。在数据量和效率需求日益倍增的当前,这种技术带来的容量和性能倍增将会为PC、移动电脑、手机和穿戴设备带来更多的可能性。 除了便携设备,目前的数据中心以及大型服务器机房对于性能需求更高,但同时对于成本的控制也十分严格,3D XPoint更像是一个折中的方案,或者是一个全新的数据中心存储构架的方向,如果实现大规模量产,对于当前的数据中心采用DRAM来进行高性能计算,运行一些IO密集型的应用程序,还有一些怕因为断电丢失数据的应用场景。有了XPoint存储后,一些高性能处理不必完全依靠DRAM了,同时他的高容量也解放了许多NAND闪存。
问题4:在存储产品的成本、容量、性能、能耗、耐久性等方面,您最看重哪些?如何选择?为什么? 我最看重成本、性能和能耗。目前,存储产品的采购预算越来越高,大多数企业难以承受不断增加的开支。其次,随着数据中心的扩大,存储管理成本、占用空间、制冷能力、能耗等也都变得越来越严重,其中能耗尤为突出。在美国,数据中心大约消耗掉2%总电量,每年电费开销高达40亿美元。再者,大量的异构物理存储资源大大增加了存储管理的复杂性,容易造成存储资源浪费和利用效率不高。
时间就是金钱,如今传统的机械硬盘的读写速度已经很难跟上时代的脚步了,不少存储系统也已经将机械硬盘升级到了固态硬盘。尽管固态硬盘的成本更高,但是其功耗有所降低,因此产生的热能也小了,机房的冷却成本也就随之降低了,并且固态硬盘普遍的占用空间也要更小。
节省成本不代表不再购买新的设备,企业硬盘的更新换代会不断提升容量,并且性能会更强,能耗也会得到更好的控制。权衡利弊来看,更换容量更高的新一代产品反而可以提高能效。
傲腾内存(傲腾技术)可以将主流机械硬盘的读取速度从200MB/S水平提升到1200到1400MB/S的高速M.2PCI-E通道固态硬盘水平,在4K小文件随机读写方面更是有着爆炸性的提升,对于用户的日常程序开启、小文件加载等主流任务场景能够带来极高的体验加成。其让机械硬盘拥有了更大的缓存,在日常使用场景中,频繁关闭、打开多类型的软件应用、游戏的过程也会更加流畅,显著提升了PC整体的运行与计算速度,这就是其最大的作用。 |