楼主: 丸喵喵

【有奖讨论】解决存储挑战?是时候了解一下

[复制链接]
论坛徽章:
220
状元
日期:2015-08-13 09:42:33榜眼
日期:2015-08-03 13:57:54探花
日期:2015-07-31 13:44:02举人
日期:2015-07-01 15:00:51秀才
日期:2015-07-27 09:45:52进士
日期:2015-07-27 11:26:492015年中国系统架构师大会纪念徽章
日期:2015-07-23 09:58:092014系统架构师大会纪念章
日期:2015-07-23 09:58:092013系统架构师大会纪念章
日期:2015-07-23 09:58:092012系统架构师大会纪念章
日期:2015-07-23 09:58:09
41#
发表于 2018-10-10 12:47 | 只看该作者
问题1:您公司存储设施是否常出现难以满足业务需求的情况?其中的挑战一般是什么?
我们的存储设备主要集中体现在DailyBuild服务器上,经常的提示空间不足,就需要将之前的数据删除以保证足够的存储空间。但关键是是否有必要保留每天的DailyBuild输出。
问题2:您一般以哪种方式解决存储挑战?资源堆叠、架构更新升级还是其他?您怎么看待不断出现新型存储介质,是否考虑或尝试过使用全新类型的存储设备?
我所在的公司遇到存储不够用时,由于有不少异构系统,往往采取资源堆叠的方式,继续使用传统的存储设施进行存储扩容。但是对于问题1中提到的那些问题,无法通过简单的资源堆叠来解决,也许以后的某一天,机房的机柜将会容纳不了新增的存储设备。      对于不断出现的新型存储介质,公司里确实在考虑,但还没有购买,仍处于观望之中。我觉得像英特尔傲腾存储这类的产品是今后的技术趋势,必须去努力学习和适应,否则就会落伍。
问题3:3D Xpoint技术一经发布就在业界引起了广泛讨论,如今英特尔已基于该技术推出了全新的傲腾存储产品,意味着这种全新的存储技术已经走向市场。您认为该系列产品更适合应对哪些工作负载的需求?为什么?
更适合rp、物联网等应用,因为这些应用数据l量大、而实时性要求很高,比如报表要求秒出,看起来傲腾存储正好能满足这些要求,不过我还没有接触过。
问题4:在存储产品的成本、容量、性能、能耗、耐久性等方面,您最看重哪些?如何选择?为什么?
我最看重的是性能,其次容量。在选择存储产品时,首先要考虑的是性价比,只选对的,不选贵的。但不能光看硬件指标,像硬盘的容量和个数这样的硬件指标并不是决定性能高低的唯一因素、必要因素。如果在不配置闪存的情况下,硬盘数量可能是一个比较重要的考量因素,但是闪存技术的出现,使得系统即使在不配置很多块磁盘的情况下,就能够达到较高的性能。更不用说在闪存硬件与闪存软件的双重加载下,不仅性能比以前有显著的提升,而且数据存储效率的重要性就更为突出。此外还需要考虑品牌因素。要看品牌的售后服务、产品质量和销售规范性,以及该品牌所代表的企业的可成长性。具体一点就是要看这个品牌的存储产品线是否能够高中低端全覆盖,企业未来可能的有关数据存储的需求比如大数据分析、容灾备份、高性能等在该品牌厂家是否已经有对应的产品和解决方案。另外还要小心绕过销售陷阱。一般情况,存储厂商是把存储控制器(俗称机头)和硬盘分开销售的。所以价格比较的时候不仅要看存储控制器的初始购入价格,还要看未来存储扩容的硬盘价格以及特殊软件功能的价格。在购买过程中一定要多问,否则后面容易吃哑巴亏。如果碰上了价格特别低的产品要特别注意其产品的可扩展性,而可扩展性实际意味着该款存储设备的生命长度,最大盘位数、最大主机连接数以及最大快照数量和最大LUN数量都是需要重点比较的内容,相信没有人希望发生因为设备的可扩展性受限导致要提前向老板打报告额外采购设备的事情。这里还要特别提醒一下,要注意厂家宣称的最大规格是不是一次全部授权给客户,还是说要在后面使用的时候再收费的,比如最大规格大家差不多,但是要按照使用数量来收费将来也是一个比较大的支出,这方面一定要小心算账。最后还需要了解企业业务需求,根据情况来选择不同的设备,这样才能够因地制宜,满足了企业的业务需求。

使用道具 举报

回复
论坛徽章:
0
42#
发表于 2018-10-10 15:21 | 只看该作者
问题1:您公司存储设施是否常出现难以满足业务需求的情况?其中的挑战一般是什么?
数据库数量越来越大,存储越来越难。

问题2:您一般以哪种方式解决存储挑战?资源堆叠、架构更新升级还是其他?您怎么看待不断出现新型存储介质,是否考虑或尝试过使用全新类型的存储设备?
增加新的存储呗,花钱买更多的设备。

问题3:3D Xpoint技术一经发布就在业界引起了广泛讨论,如今英特尔已基于该技术推出了全新的傲腾存储产品,意味着这种全新的存储技术已经走向市场。您认为该系列产品更适合应对哪些工作负载的需求?为什么?
目前还没有怎么接触过,正在了解过程中。

问题4:在存储产品的成本、容量、性能、能耗、耐久性等方面,您最看重哪些?如何选择?为什么?

看重耐久性更多一些吧,不然用着用着无法存储出问题了,那就麻烦了。当然成本和性能也是要考虑的,不过这个就是一分钱一分货了,看你多少预算购买了。

使用道具 举报

回复
论坛徽章:
5
2013年新春福章
日期:2013-02-25 14:51:24ITPUB18周年纪念章
日期:2018-11-13 15:40:4520周年集字徽章-20	
日期:2020-10-28 14:31:2120周年集字徽章-周
日期:2020-10-28 14:36:4120周年集字徽章-年	
日期:2020-10-28 15:00:35
43#
发表于 2018-10-10 16:07 | 只看该作者
问题1:您公司存储设施是否常出现难以满足业务需求的情况?其中的挑战一般是什么?
      公司为客户开发了许多公共事业系统,并负责运行维护。随着运营时间的增加,这些系统的信息量呈现爆炸式增长趋势,使得存储已经成为急需提高的瓶颈。
      面对数据量的急剧膨胀,IT 管理人员的最大挑战之一,是大量数据如何高效、安全地长期保存,如何快速和简单地管理维护;公司也需要不断购置大量的存储设备来应对不断增长的存储需求。然而,这似乎并不能从根本上解决问题。
      首先,存储设备的采购预算越来越高,公司难以承受如此巨大的开支。
      其次,随着数据中心的扩大,存储管理成本、占用空间、制冷能力、能耗等也都变得越来越严重,其中能耗尤为突出。据估算,公司数据中心大约消耗掉35%总电量,每年电费开销高达几十万元。从世界范围来看,在美国,数据中心大约消耗掉2%总电量,每年电费开销高达40亿美元,美国许多企业的数据中心被迫迁至其它电力供应充足的地方。
      再者,大量的异构物理存储资源大大增加了存储管理的复杂性,容易造成存储资源浪费和利用效率不高。研究发现,企业的存储利用率往往不足50%,存储投资回报率水平较低。
      虽然公司继续使用现有存储基础设施,但这些基础设施可能会无法满足业务需求,也无法应对面临的挑战。许多情况下,此类存储设施购买得越多,造成的瓶颈就越多,从而更难以访问和使用数据。
      传统存储系统往往不能灵活地适应不断变化的要求,且不能轻松地扩展。因此,我们需要另辟蹊径来解决信息的急剧增长问题。

问题2:您一般以哪种方式解决存储挑战?资源堆叠、架构更新升级还是其他?您怎么看待不断出现新型存储介质,是否考虑或尝试过使用全新类型的存储设备?
      一般采用资源堆叠的方式,简单,容易实施。再就是考虑把服务器上的机械硬盘换成固态硬盘。
      SSD与传统磁盘不同,它是一种电子器件而非物理机械装置,它具有体积小、能耗小、搞干扰能力强、寻址时间极小(甚至可以忽略不计)、IOPS高、I/O性能高等特点。因此,SSD可以有效缩短内存与外存之间的存储鸿沟,计算机系统中原本为解决I/O性能瓶颈的诸多组件和技术的作用将变得越来越微不足道,甚至最终将被淘汰出局。试想,如果SSD性能达到内存甚至L1/L2 cache,后者的存在还有什么意义,数据预读和缓存技术也将不再需要,计算机体系结构也将会随之发生重大变革。
      对于存储系统来说,SSD最大突破是大幅提高了IOPS,摩尔定理的效力再次显现,通过简单地用SSD替换传统磁盘,就可能可以达到和超越综合运用缓存、预读、高并发、数据局部性、磁盘调度策略等软件技术的效用。SSD目前对IOPS要求高的存储应用最为有效,主要是大量随机读写应用,这类应用包括互联网行业和CDN行业的海量小文件存储与访问(图片、网页)、数据分析与挖掘领域的OLTP等。SSD已经开始被广泛接受并应用,当前主要的限制因素包括价格、使用寿命、写性能抖动等。从最近两年的发展情况来看,这些问题都在不断地改善和解决,SSD的发展和广泛应用将势不可挡。

问题3:3D Xpoint技术一经发布就在业界引起了广泛讨论,如今英特尔已基于该技术推出了全新的傲腾存储产品,意味着这种全新的存储技术已经走向市场。您认为该系列产品更适合应对哪些工作负载的需求?为什么?
      英特尔傲腾固态盘基于 3D XPoint? 技术,与基于 3D NAND 的技术相比,在耐久性和低 延迟方面有着几个数量级的优势。使用它们可将内存和存储的最佳特性相结合来实现基于服务器的存储架构。
      英特尔?傲腾固态盘可提供:
      更高的 I/O 性能和更低的延迟(相比基于 NAND 的固态盘),从而提供可预测、一致的快 速服务;
      出色的高耐久性,支持主内存所处理的相同类型的高写入流量;
      更高密度,且成本远低于 DRAM。

      英特尔傲腾固态盘支持与内存相同的实时访问,从而消除瓶颈,更快、更方便地访问大型 数据集。它们可提供更强的服务器扩展能力,降低对延迟敏感型工作负载的事务处理成本,同时加速算法执行来提高数据集处理效率。

                  建议系统架构
      英特尔傲腾固态盘可帮助IT 基础设施实现两个关键目标:1.创建更快的存储,2.扩展内存。
      创建更快的存储。英特尔傲腾固态盘可提供令人惊叹的快速存储,从而提升性能、降低延迟并提高在负载下(即使是 OLTP 和高性能系统)的响应能力。它们可使用直接连接的存储来加速严苛应用的运行,并能轻松扩展。
      这样,英特尔傲腾固态盘就变成一个更耐久、更快速的存储层,让服务器实现更高的工作效率 且不会产生数据孤岛。
      扩展内存。英特尔傲腾存储还可以扩展内存,因为它能够以固态盘价格提供近似于 DRAM 的速度,并通过聚合共享内存池来经济地提高容量。这种更大的容量池可以支持更大的内存中工作数据集。在某些情况下,它甚至可以替代 DRAM,进一步降低基础设施成本。有了更大的内存池为分析和机器学习过程提供数据,企业可以更快地挖掘出更多洞察信息。通过这种方式,英特尔傲腾存储变成了一个更易扩展、更加实用的内存层。
      兼具更快的存储和扩展内存。英特尔傲腾固态盘让 IT 机构能够在基础设施中引入新的存储和内存层, 对数据集的所在位置和访问速度实现更精确的控制。英特尔傲腾固态盘既 能增强(甚至替代)现有存储层以提高其容量并加快访问速度(尤其对于“较热”的数据存储),又能增强 DRAM 以经济高效地为热数据带来更多容量。
      模糊内存和存储的界限。英特尔傲腾固态盘与英特尔? 3D NAND 固态盘配合使用,可以打造更强大的存储基础设 施组合。英特尔傲腾固态盘可提供业界一流的吞吐量和低延迟,而英特尔3D NAND 技术可以低成本提供高密度。这两种技术配合使用,可加快存储缓存速度并提高批量存储的容量和处理能力,有助于弥合本地 CPU 数据和长期数据之间的差距。英特尔傲腾固态盘与英特尔3D NAND 固态盘和英特尔至强可扩展处理器相配合,可为整个基础设施带来极其出色的性能。

问题4:在存储产品的成本、容量、性能、能耗、耐久性等方面,您最看重哪些?如何选择?为什么?
      我最看重成本、容量、能耗。因为需要存储的数据量呈几何级数增长,这种增长不断持续,必须妥善地考虑数据存在的载体——存储介质的单位存储成本。因此,存储系统需要在带宽、延迟、功耗、容量和成本之间找到平衡点。专门为企业设计的存储系统注重更大的容量,更高的性能、更高的密度、更好的管理功能,以满足存储数据的需要。
      如果企业需要大量的性能和更少的容量,那么成本最低的方法就是使用SSD硬盘,其每秒输入/输出操作(IOPS)的成本远远低于磁盘或磁带。当然,每兆字节的容量要贵得多,而且事情开始变得有点复杂。
      数据中心采用固态硬盘进行存储,其费用将是非常昂贵的,同样,用机械硬盘以达到性能也不一定是最具成本效益的方法(尽管它可以完成,而这与客户性能和容量进行混合)。虽然存储完全依赖于系统上运行的应用程序以及可能暴露于存储系统的工作负载类型,但通常会建议将SSD硬盘(用于性能)和HDD硬盘(用于容量)混合使用。
      例如,在HPC存储系统中,人们经常使用SSD硬盘来获取元数据,但仍然使用HDD硬盘来提供容量。这有时也会与SSD层结合使用,用于非常小或最近使用的文件。另外,大多数存储区域网络(SAN)存储阵列用户都具有允许SSD和HDD自动添加到同一个磁盘池的技术,将“热块”数据移动到速度更快(但更昂贵)的SSD层,这对于更传统的企业存储需求非常有用。
      随着SSD硬盘的容量越来越大,其成本效益越来越高,价格会进一步下滑,可能会看到机械硬盘采用量将下降。现在已推出了12TB的SSD硬盘,在过去的三年中,SSD硬盘容量已经翻了一番,但是其存取速度还没有达到更快(基本上每分钟每TB的性能减半)。
      在多数情况下,人们仍然使用6TB的SSD硬盘来获得客户需求的容量和性能组合,但在不久的将来,人们看到客户在大型硬盘驱动器前使用SSD/闪存缓存设备,以获得最好的效果。
      目前有一些非常具体的应用程序,使用闪存和磁带是迄今为止最具成本效益的存储设置。根据调研机构IDC公司的预测,与磁盘驱动器相比,闪存的价格差将从目前的6.6倍下降到2.2倍,这可能意味着闪存+磁带组合对于传统的三层存储来说是一种可行的,具有成本效益的替代方案。
      现在当然还没有达到这样的临界点,这种解决方案对于每个企业都是适合的,但是企业和研究机构对这些解决方案的需求正在增长。
      许多组织都具有上述所有技术的性能和容量使用案例,挑战是以统一的方式将所有这些技术集成在一起,以免由于许多不同的存储系统利用率低下而造成效率低下。有许多文件系统,可视化技术,甚至是将许多这些技术结合在一起的设备,以帮助最大限度地降低当今使用多种技术的管理和效率成本。
      不幸的是,对于完美存储介质组合来说没有一个通用的答案,但是随着人们看到SSD硬盘的价格下降,HDD硬盘的容量上升以及磁带的成本效益,人们构建高性能的存储解决方案将不断发展。

使用道具 举报

回复
论坛徽章:
1
ITPUB18周年纪念章
日期:2018-11-13 15:40:45
44#
发表于 2018-10-10 16:42 | 只看该作者
占位 更新~~~~~~~~~~~~

使用道具 举报

回复
论坛徽章:
36
ITPUB社区12周年站庆徽章
日期:2013-11-06 17:30:062013年新春福章
日期:2013-02-27 17:56:022014年新春福章
日期:2014-02-18 16:43:092013年新春福章
日期:2013-02-27 17:56:02奔驰
日期:2013-10-11 10:16:19ITPUB 11周年纪念徽章
日期:2012-10-09 18:09:19马上加薪
日期:2014-02-20 15:51:19马上有钱
日期:2014-02-18 16:43:092014年新春福章
日期:2014-03-27 14:17:262015年新春福章
日期:2015-03-06 11:58:18
45#
发表于 2018-10-10 16:44 | 只看该作者
占位 继续~~~~~~~~~~~~~~~~~~~~~~

使用道具 举报

回复
论坛徽章:
4
ITPUB18周年纪念章
日期:2018-09-17 10:09:49ITPUB18周年纪念章
日期:2018-09-17 10:12:57ITPUB18周年纪念章
日期:2018-11-13 15:31:24ITPUB18周年纪念章
日期:2018-11-13 15:40:45
46#
发表于 2018-10-11 09:21 | 只看该作者
问题1:您公司存储设施是否常出现难以满足业务需求的情况?其中的挑战一般是什么?
在目前看来,尚未出现无法满足业务需求的情况,每年做好预算,预留足够的空间即可。因为本身业务需求也不大。

问题2:您一般以哪种方式解决存储挑战?资源堆叠、架构更新升级还是其他?您怎么看待不断出现新型存储介质,是否考虑或尝试过使用全新类型的存储设备?


架构升级是解决存储问题的主要途径。
如果新的存储介质,能够在软硬件兼容性、存储空间节省、运行效率等各方面有优势,服务和升级更好的话是可以考虑的,目前没有使用过新的存储。

问题3:3D Xpoint技术一经发布就在业界引起了广泛讨论,如今英特尔已基于该技术推出了全新的傲腾存储产品,意味着这种全新的存储技术已经走向市场。您认为该系列产品更适合应对哪些工作负载的需求?为什么?


3D Xpoint:简而言之,它是一种非易失性固态存储新形式,性能和耐久性比NAND闪存高得多。而价格方面,它处于DRAM和NAND之间。
英特尔傲腾(Optane)内存模块可用于加速任何安装在第七代(Kaby Lake)基于英特尔核心处理器的平台上的任意SATA连接存储设备,平台则指定为“Intel Optane内存就绪”。 该内存模块充当以缓存形式来提高笔记本和台式机的性能。

问题4:在存储产品的成本、容量、性能、能耗、耐久性等方面,您最看重哪些?如何选择?为什么?




性能、耐久性和后期升级维护,这些都是一些隐性的成本,往往比直接成本大多了

使用道具 举报

回复
论坛徽章:
24
IT宝贝
日期:2012-02-17 10:28:28itpub13周年纪念徽章
日期:2014-10-08 15:13:38itpub13周年纪念徽章
日期:2014-10-08 16:16:39技术图书徽章
日期:2014-11-11 13:14:17马上有车
日期:2014-12-17 17:32:54沸羊羊
日期:2015-03-04 14:51:522015年新春福章
日期:2015-03-06 11:57:31乌索普
日期:2018-06-15 13:46:25itpub13周年纪念徽章
日期:2014-09-28 10:55:55马上有车
日期:2014-06-16 15:54:57
47#
发表于 2018-10-11 12:44 | 只看该作者
问题1:您公司存储设施是否常出现难以满足业务需求的情况?其中的挑战一般是什么?
业务数据增长快于存储设施。花钱加设备
问题2:您一般以哪种方式解决存储挑战?资源堆叠、架构更新升级还是其他?您怎么看待不断出现新型存储介质,是否考虑或尝试过使用全新类型的存储设备?
一般都是优先资源堆叠。新型存储介质可以尝试,但是会很谨慎,毕竟是新的东西,万一出问题,就严重了。
问题3:3D Xpoint技术一经发布就在业界引起了广泛讨论,如今英特尔已基于该技术推出了全新的傲腾存储产品,意味着这种全新的存储技术已经走向市场。您认为该系列产品更适合应对哪些工作负载的需求?为什么?
适合物联网吧。大数据不是弄了 很多年了吗?贵州还建立了大数据库中心。以后大部分决策都可以通过数据分析得出,所以数据的积累沉淀显得更重要了。
问题4:在存储产品的成本、容量、性能、能耗、耐久性等方面,您最看重哪些?如何选择?为什么?
小公司,还是看重成本和耐久性。所谓的性价比嘛。财力有限嘛。

使用道具 举报

回复
论坛徽章:
2
ITPUB18周年纪念章
日期:2018-09-17 10:12:57ITPUB18周年纪念章
日期:2018-11-13 15:40:45
48#
发表于 2018-10-11 23:20 | 只看该作者
问题1:您公司存储设施是否常出现难以满足业务需求的情况?其中的挑战一般是什么?
答:肯定会有各种各样的问题,我总结了下,有以下几方面:
1)随着生产系统不断的上新和老系统长时间的运营,这些系统的信息量呈现爆炸式增长趋势,使得存储的数据量已经成为急需提高的瓶颈,我们需要不断采购才能解决数据量大的问题
2)性能要求越来越高,原有的响应时间要求一再提高,再系统复杂度越来越大的前提下,反而响应时间还要缩短,如同一个悖论给我们架构师提出难题
3)环保节能的要求,在部署讨论架构的时候就要考虑节能,环保的要求。

问题2:您一般以哪种方式解决存储挑战?资源堆叠、架构更新升级还是其他?您怎么看待不断出现新型存储介质,是否考虑或尝试过使用全新类型的存储设备?
答:当然咯,在传统生产环境的存储设备,还是偏向于采用资源堆叠的方式解决存储的难题和挑战,但是现在新型存储方式的出现,我们会逐步逐步地慢慢替换现有落后的存储架构和体系。但是真的非常新的,我们还是秉持着非常谨慎的态度,坚持测试,观察,反复POC进行架构讨论后,再尝试试水。


问题3:3D Xpoint技术一经发布就在业界引起了广泛讨论,如今英特尔已基于该技术推出了全新的傲腾存储产品,意味着这种全新的存储技术已经走向市场。您认为该系列产品更适合应对哪些工作负载的需求?为什么?
答:应该说,傲腾这个产品我是第一次在消费类电子杂志内了解到的,可知的是,比如像SSD这类内存对机械硬盘的读取速度提升应该是非常明显的。傲腾内存虽然名为内存,但其形态为 M.2固态硬盘的形态,占用一个M.2接口,通过 PCIe X2 与处理器连接,与普通的 DIMM 内存并存于系统当中,可以看作是硬盘的缓存盘。傲腾内存的特性一方面在于它是智能的自适应系统加速器,另一方面它是一种非易失性存储设备。傲腾内存为硬盘加速之后,可以自动识别用户的常用软件和非常用软件。这样既解决了数据断电丢失,又能加快存储访问速度。当然有些杂志或者文章也做过比较,说比3D NAND 要好,那我觉得只是使用的场景不同,不能混在一起谈。
但是这样的产品大规模放到生产环境,一方面是成本,有点介于两者之前,定位很模糊第二这样产品的寿命还未知,对于生产非常谨慎的环境,我还是存在疑问的,没有经过时间认证的,立即上生产,即使产品性能出色,还是给后期埋下了很多伏笔,所以我只能说,产品力不错,但是是否真的能在行业开花,还需要时间证明

问题4:在存储产品的成本、容量、性能、能耗、耐久性等方面,您最看重哪些?如何选择?为什么?
答:特别是看中存储的持久性和性能容量,这两个我觉得是特别值得说一说的,为什么?我们单位是金融机构,性能容量是非常关键的,比如交易系统,渠道系统,对交易的响应非常敏感,稍微慢点都会有投诉和抱怨,这昂的问题一定要严加控制,那么如何在现有的系统体系架构上去改进呢,有人说修改底层代码,这样是可以的,但是代价非常大,需要长时间的多轮迭代测试和开发,还要预防各种副作用,但是如果采用更好的存储,其实问题就解决了,比如从原来传统的硬盘变成固态SSD硬盘,那样瞬间IO吞吐和响应都得到了质的提升,这样看来,就能改善交易质量了,然后容量我们也一直很care,这因为直接关系到成本,现在在大环境还没有特别回升的前提下,注重开源节流中的节流,也是非常正确的,如何采用大容量高性能将是我们长期关注的问题。
还有就是持久性,这一方面也说明了问题,也就是稳定,金融机构,对于系统的稳定是最最最最看中的,可能没有其他能与这个相提并论的,那么持久性好的也代表了设备的稳定性强,不容易出现故障,出现故障的容错机制强,有很好的容灾高可用功能,再有好的持久性也将大大缩短设备的维保费用,这又切合了我刚刚说的。

使用道具 举报

回复
论坛徽章:
2
蓝色妖姬
日期:2014-08-28 15:17:25ITPUB18周年纪念章
日期:2018-11-13 15:40:45
49#
发表于 2018-10-12 12:14 | 只看该作者
大数据时代或AI人工智能大趋势下,数据存储非常重要!

使用道具 举报

回复
论坛徽章:
2
蓝色妖姬
日期:2014-08-28 15:17:25ITPUB18周年纪念章
日期:2018-11-13 15:40:45
50#
发表于 2018-10-12 17:36 | 只看该作者
本帖最后由 yanengineers 于 2018-10-12 18:01 编辑

使用道具 举报

回复

您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

TOP技术积分榜 社区积分榜 徽章 团队 统计 知识索引树 积分竞拍 文本模式 帮助
  ITPUB首页 | ITPUB论坛 | 数据库技术 | 企业信息化 | 开发技术 | 微软技术 | 软件工程与项目管理 | IBM技术园地 | 行业纵向讨论 | IT招聘 | IT文档
  ChinaUnix | ChinaUnix博客 | ChinaUnix论坛
CopyRight 1999-2011 itpub.net All Right Reserved. 北京盛拓优讯信息技术有限公司版权所有 联系我们 未成年人举报专区 
京ICP备16024965号-8  北京市公安局海淀分局网监中心备案编号:11010802021510 广播电视节目制作经营许可证:编号(京)字第1149号
  
快速回复 返回顶部 返回列表