个人中心
个人中心
添加客服WX
客服
添加客服WX
添加客服WX
关注微信公众号
公众号
关注微信公众号
关注微信公众号
升级会员
升级会员
返回顶部
少儿图馆存储系统项目可行性研究报告(54页)
少儿图馆存储系统项目可行性研究报告(54页).doc
下载文档 下载文档
其他可研
上传人:Le****97 编号:894495 2024-02-02 54页 1.03MB
1、xx市少儿图书馆存储系统项目建议书目 录1前言42项目背景52.1系统现状52.2项目需求53技术选型73.1选择EMC公司73.2选择开放的EMC CLARiiON磁盘阵列83.3值得称道的产品兼容性113.4SAN+NAS集成优势134解决方案154.1方案设计原则154.2系统拓补图174.3存储方案描述174.3.1方案简介174.3.2稳定安全的存储架构194.3.3高性能存储204.3.4数据迁移224.4备份系统存储方案224.4.1备份系统设计原则224.4.2磁带库的选择234.4.3备份软件的选择254.4.4备份策略的定制284.5技术方案优势总结284.5.1高可用性22、84.5.2高安全性284.5.3高性能294.5.4可扩展性294.6CX4-480C支持的软件及特性294.6.1Navisphere 管理套件304.6.2存储管理任务栏304.6.3NQM应用服务级别管理324.6.4MetaLUN324.6.5虚拟LUN技术334.6.6Access Logix334.6.7SnapView快照和克隆344.6.8MirrorView/A和MirrorView/S344.6.9SAN Copy354.6.10PowerPath354.6.11软件在线升级354.7EMC售后服务及承诺374.7.1服务承诺374.7.2技术支持和服务的联系方法384.3、7.3服务期限及服务内容415附件:产品介绍435.1EMC CX4-480C光纤磁盘阵列435.2NS40G网关501 前言承蒙少儿图书馆对EMC公司的信任和对我公司厚爱,提供我们参与少儿图书馆存储系统架构建设的机会,我们不胜感激及深表荣幸。我们将本着诚挚、科学的态度,充分考虑贵方的需求,利用EMC国际领先的科技和丰富的设计、项目经验,提供最佳的专业服务,以及高性价比的系统设计方案,为贵处存储系统项目提供一套优质的数据存储管理方案。 xx少儿图书馆为了适应迅猛发展的数字图书馆系统需求,要求实施新的IT构架,采用新的存储等设备,建立一个高性能的数据中心,来实现数据快速、安全读取。从而保证各个业4、务信息系统的高效、稳定、可靠,真正实现业务数据达到724的可用性。EMC公司提出建设基于SAN的存储构架,来满足少儿图书馆对存储的需求。该系统要求能够满足至少未来3年之内的数据存储能力和提供快速数据读取的能力。我们非常感谢少儿图书馆给予我们这次机会能够参与贵单位信息化建设,利用国际上先进的技术解决贵公司信息存储的实际问题。本建议书采用美国EMC公司推出的目前世界上最先进的光纤存储平台CLARiiON作为基础的数据集中存储平台,并结合少儿图书馆数据的现状和未来需求分析,提出一套完整的SAN+NAS存储解决方案。2 项目背景2.1 系统现状xx少年儿童图书馆是xx市少年儿童文献收藏及服务、少儿文献5、编目、少儿阅读辅导、少儿社会教育中心,是xx公共文化服务体系的重要组成部分。作为xx市市级少年儿童图书馆,它将承担着为全市各区少年儿童图书馆(室)和中小学图书馆进行业务辅导、资源共享的任务。同时,xx少年儿童图书馆是由中国数字图书馆授权的中国数字图书馆少年儿童中心馆(以下简称“中心馆”),在全国十六个省市建设有中国数字图书馆少年儿童分馆。中心馆和分馆运用高新技术与手段,采集、加工、存贮少年儿童信息资源,为广大读者提供数字信息资源服务。中心馆作为牵头单位承接了文化部重点科技项目:中国少年儿童信息大世界网上图书馆(以下简称“网上图书馆”),目前该项目已经结题,但建设工作仍在继续之中,服务亟待扩展。6、xx少年儿童图书馆计算机信息系统工程的建设既是xx少年儿童图书馆数字化建设,也是中国数字图书馆少年儿童中心馆的建设,两者是相辅相成、相互补充、相互融合的,是一体化建设。本项目既要充分考虑到xx少年儿童图书馆本馆和本地区的计算机信息系统建设的需求,也要全面考虑到xx少年儿童图书馆作为中国数字图书馆少年儿童中心馆的地位和任务,以便实现xx少年儿童图书馆“立足xx、服务全国、面向世界”的目标。2.2 项目需求随着数据性能要求的提高、数据量的增加、管理和维护的难度加大,针对少儿图书馆目前数据存储管理的现状,以及考虑到未来的发展,相应的需求如下:1. 建设更高性能的集中存储系统,以满足目前多个应用系统及7、数据库快速访问的要求,并在面临数据增长时,要实现无缝的扩容,而且不增加因扩容带来的管理开销;2. 为现有的数据建设一个完善的数据备份系统,保证数据在被破坏时,有数据可以恢复;3. 要求存储系统的使用总体成本较低,维护成本和扩容升级成本较低。 3 技术选型3.1 选择EMC公司信息技术(Information Technology)发展迅猛,信息技术的核心是信息,围绕着信息的处理,信息的传送,信息的管理,信息的共享,信息的保护等等,人类在信息技术的各个方面不断取得突破。人们越来越清楚地看到信息的载体存储系统在整个IT环境中成为基础架构,它是保证IT环境的其它部分(主机,网络,应用等)正常运转的关8、键。客观地讲,离开了存储系统的IT环境将成为无米之炊,什么也做不了。在今天的信息时代,以信息为中心的模式已成为潮流。图一、EMC公司成绩单EMC公司是全球领先的企业信息存储系统、软件、网络和服务供应商,致力于提供全球最强劲、最安全、最可托付的信息存储基础架构。公司主要客户囊括全球最大的银行和金融服务机构、电信供应商、互联网供应商、制造商、零售商、航空公司、运输公司、教育机构以及地区性和国家政府机构。2000年EMC公司入选商业周刊50强,被产业周刊评为全球管理最佳的公司。EMC公司是财富500强、财富e50强之一,同时被财富杂志列入100家发展最快的公司、100家最值得工作的地方,并被评为全球9、最受尊重的公司。EMC公司在全球范围内运用业界最先进的高级远程服务技术,并配备资深的服务队伍724的为客户提供全天候服务。EMC公司还利用最新诊断技术,通过电信通道持续监控每个安装的系统的工作状况并提出报告,这种内建维修服务方法的设计目的就是为了在数据失效或不可用情况出现之前侦获错误。EMC公司基于信息为核心提出的信息生命周期管理正是在存储平台上提供了完整的集中存储解决方案, 为新的产业模式提供了坚实的信息基础设施.提高了系统的处理能力、可靠性、业务连续性和可扩展性,使IT产业具有最佳的投入产出比。在了解到少儿图书馆系统数据存储需求以后,EMC公司人员经过详细研讨,依据EMC公司在数据存储系统10、领域的经验,特做此“存储方案建议书”供少儿图书馆专家参考。3.2 选择开放的EMC CLARiiON磁盘阵列我们在选择一个存储产品或解决方案时,应从如下五个方面进行综合评估: 存储的硬件平台 产品性能及兼容性 开放式的存储管理功能 服务水平 存储业界的领导地位CLARiiON是一种全光纤通道存储系统,其设计旨在提供中端存储市场最快的性能、最高的可用性和最低的采购成本。在已经取得巨大成功的CX3的基础上,EMC推出了新一代的CLARiiON产品-CX4 UltraFlex 系列网络存储系统。 最高的可用性CLARiiON结构提供最高的可用性。所有组件都实现全面冗余并可热交换。全光纤通道技术允许你11、的客户随时随地扩展其存储容量。他们可以在不关闭应用或者现有存储能力的情况下,添加其它驱动器或者驱动器架(DAE,磁盘阵列机壳)。CLARiiON系统拥有各种先进的数据保护功能全局热备用、全面冗余的组件、通向光纤通道磁盘驱动器的双重冗余路径、磁盘扇区嗅探校错技术、断电高速缓存数据写入硬盘、端-端数据奇偶校验以及一致性操作环境所提供的其它独特功能,所有这一切都是CLARiiON享有盛名的原因所在。这种层次的数据保护应该是所有客户的要求,也是任何其它供应商所无法满足的。中端存储配置发展很快,且变得日益复杂,这是因为较大的系统具有更多的驱动器,并且磁盘驱动器的密度越来越大。UltraFlex 是新一代12、的 CLARiiON 技术,随着客户将系统向新级别的扩展,它可确保CLARiiON继续提供最高级别的可靠性和可用性。UltraFlex 技术将新的点对点光纤通道 DAE 设计与 FLARE 操作环境中新的故障检测和隔离功能结合在一起。UltraFlex 将后端故障探测和隔离的精确度具体到了单个驱动器的级别。这一技术将使 CLARiiON CX 系列能够: 在单个磁盘驱动器级别执行故障检测和隔离操作,因此可以采取纠错措施。 在驱动器进入联机状态之前检验驱动器 在加电时,在更换驱动器时,以及在增加容量时。 最好的端到端 4 Gb/s 性能,最大的可扩展性功能强大的 EMC CLARiiON CX413、 UltraFlex 系列网络存储系统以更高级别的性能、可扩展性、灵活性和易用性实现了最大的业务好处,而价格都符合您的预算要求。您可以选择:经济划算的 EMC CLARiiON CX4 机型 120,中端巨无霸 CX4 机型 240,或 CX4 机型 480, CX4 机型 960- 世界上最大、处理能力最强的中端存储阵列。突破性的 UltraFlex 体系结构集 EMC 广泛、独有的知识资产于一身-包括 45 项正在申请专利的创新。此高度可扩展的设计采用了最先进的PCI Express系统总线技术,提供端到端的 4 Gb/s 带宽,实现了从 365 GB 到最高 951 TB 的无缝扩展能力14、,提供了任何其他中端存储系统无法企及的优异性能。 一体式分层存储使用 CX4 UltraFlex机型,您可以整合大量不同类型和业务价值级别的数据。选择满足您特定需要的驱动器选项 - 实现在一个系统中提供多种性能级别的灵活性。它支持用于需要最高性能要求的EFD闪存盘、或 4 Gb/s (15k RPM) 光纤通道驱动器;对于需要在性能和成本之间达到最佳平衡的应用,可选择 4 Gb/s 光纤通道 (10k RPM);对于要求高容量和低成本的第 2 层应用(如基于磁盘的备份),可选择低成本的 4 Gb/s 光纤通道驱动器 (7.2k RPM);并可以支持低转速的SATA驱动器。 使用 EMC CLA15、RiiON 软件简化管理,最大程度地提高生产效率,并保护您的信息使用 CLARiiON系列存储系统,客户还可以获得高级、业界领先的软件带来的好处,帮助最大程度地提高生产效率、简化管理,和满足最具挑战性的可用性、保护和迁移要求。可以从一系列功能中选择: 可供使用的软件: Navisphere Manager:提供全面的配置、管理和事件通知功能 Navisphere Analyzer:提供全面的性能、管理和趋势分析 CLARalert:提供持续的系统监控、呼叫总部和远程诊断功能 PowerPath:提供路径故障切换以实现连续数据存取,并提供动态负荷均衡功能 SnapView:提供信息的时间点视图以16、实现无中断备份和克隆 MirrorView:通过远程同步和异步镜像提供灾难防护 SAN Copy:允许在不同的阵列(如CLARiiON、Symmetrix、HP StorageWorks)之间进行本地或远距离数据移动 VisualSAN/VisualSRM:提供数据保护、共享存储存取、SAN 管理功能 Replication Manager 系列:管理复制过程(主机和复制软件)以集成SnapView 和SANCopy 操作 无中断升级(NDU): CLARiiON的设计还可以实现在线升级存储软件和FLARE 操作系统。这意味着客户在需要实现业务连续性或灾难恢复的软件功能时,可以在不中断业务运行17、的情况下为存储系统增添上述软件。 无与伦比的投资保护。CLARiiON提供了业界最好的投资保护 - 支持从上一代 CLARiiON CX 机型中以及在整个 CX4 系列中轻松地进行“数据就地”升级。EMC 通过跨代保持一致的软件功能、在线软件升级和不断提供可用于新的和现有系统的增强功能,进一步保护了客户的投资。 业界一流的服务和支持。依靠 EMC 世界一流的客户支持让您的信息保持可用并服务于您的业务。高级 CLARiiON CX4 系统功能优化了安装、管理和支持。而且 CLARiiON 支持选项为客户提供了前所未有的选择和灵活性 - 没有任何损失。使用 CLARiiON CX4支持选项,您可以18、使您的支持级别与业务需要相匹配。选择标准的增强支持(3 年,9x5)或顶级的特优支持(3 年,24x7)- 高级、主动预防性的 EMC 支持让您可以高枕无忧。只有 EMC 能够提供以遍布全球的远程和现场支持专业人员以及授权服务网络合作伙伴作为坚强后盾的专注于存储的专业技能。这一切都是为保持您的信息基础结构以最佳性能运行而专门设计的。3.3 值得称道的产品兼容性存储环境的配置和管理比以前任何时候都更具挑战性。 您需要一项具有广泛的互操作性和集成专业经验的资源,以及将这些知识直接应用到您自己的基础结构中的工具。EMC 电子实验室:提供您所需要的知识和专业经验。EMC 电子实验室覆盖每一种主要平台和19、操作系统,执行业界最严格的端到端互操作性测试。在此过程中,我们建立了一个关于整个环境和您可能使用到的每个组件的全面而深入的知识库。最重要的是,我们与您共享这些知识。因此,不管您在使用多少供应商的产品,您都可以保证您的环境安全而高效地运行。电子实验室通过三个关键途径提供了您所需要的信息: l 利用全面的多供应商专业经验。多数供应商执行的简单运行测试是很容易的,但不可能让您了解很多内容。因为电子实验室测试完整的端到端多供应商基础结构,所以我们能够准确地知道产品将如何工作不只是在理想的情况下,还能知道产品在真实环境(例如您的环境)中将如何工作。在开发和测试新的数据存储技术方面,电子实验室起着主导作用20、。我们还可以帮助您预测新产品在您的基础结构中将如何运行。l 将我们的知识直接集成到您的业务中的工具。 您可以通过智能发现、定制通知和自动更新等将电子实验室的互操作性知识直接应用到您自己的环境中。l 优化的更改管理。 获取用于安全地规划和实施技术过渡的解决方案。E-Lab Navigator 可以生成各个重要规划的详细信息 - 从启动设备配置到总体设计考虑事项。此外,EMC SAN Advisor 扩展了此能力,能够预测更改将如何影响特定的配置。 业界领先的多供应商环境支持。今天,问题的解决必须跨供应商界限。在 EMC,对于我们鉴定的任何产品(即使不是我们的产品),我们都是支持电话的第一接听者。21、此外,因为 EMC 支持服务有电子实验室广泛的多供应商专业经验作为后盾,所以您的问题将能够得到更快、更完善的解决。3.4 SAN+NAS集成优势SAN是存储域的网络,是网络存储技术的核心,业务系统中的核心部分需要高性能、高可靠的数据访问方式,这是SAN技术特长。采用SAN技术,在关键业务系统的主机和存储设备之间通过SAN交换机连接起来,构成网络存储,这就保证了核心业务业务系统的高性能、高可靠性数据访问及未来扩展的灵活性。但是客户业务系统除了核心的关键业务之外还有更多的非关键业务,这些业务系统也需要存储空间,将这些非关键业务系统的主机也接入SAN结构是不现实的。一方面,这样做造价太大,需要配置多22、个大型的SAN交换机,每个接入的主机都必须配置较昂贵的HBA卡,复杂庞大的SAN管理也将导致投资加大;另一方面,这些非主要业务系统主机对存储系统访问的性能需求一般较低,访问频率也较低,如果全部接入SAN对SAN网络的资源也是一种浪费。同时大部分非主要的边缘业务系统都是以文件形式访问数据的,是NAS技术的特长。但如果采用纯NAS技术,将导致客户有一个核心SAN网络存储平台及一个核心NAS网络存储平台,客户在NAS存储和SAN存储之间无法实现存储资源的动态调配、信息有效共享,实际上造成两个明显的信息孤岛,不符合信息系统整合的客观需求。因此能否将NAS技术和SAN技术集成起来成为满足广大客户需求的关23、键。如果能够实现NAS引擎和其它主要业务主机系统共享统一的磁盘阵列存储资源,那么就从根本上消除了两个信息孤岛各自为政的局面,从而使成熟的SAN技术和成熟的NAS技术完美集成,实现真正的信息整合。SAN+NAS集成解决方案就是在统一的SAN架构下,添加NAS引擎,NAS引擎和其他主要业务系统主机共享统一SAN架构下的存储资源,从而实现在满足主要业务系统的高性能、高可靠数据访问需求的同时,通过添加的NAS引擎兼顾大量边缘业务系统对存储资源的需求,实现真正的存储信息整合。EMC的SAN+NAS就是这样解决方案。4 解决方案少儿图书馆此次规划采用两台高性能稳定的小型机运行Oracle做为主数据库系统,24、通过Cluster保证数据库系统的高可用性;一台文件服务器存放教学需要使用的大量数据;大量的视频点播数据需要存储到磁盘阵列上,供学生及教师及时使用。馆际互借联合采编服务器、知识库服务器等需要的存储空间较大,需要连接到存储设备上,获取更多的存储空间。OA系统的服务器,也连接到存储系统中,获得稳定可靠的存储资源,保证办公系统的正常运行。此次规划的包括未来3年的存储系统,SAN存储容量约为22TB,NAS存储容量约为40TB。4.1 方案设计原则经过仔细分析选型内容及要求,结合我们多年的方案设计经验,在方案设计上本着以下原则来设计:1. 数据安全性和高可靠性业务的发展使少儿图书馆对数据的依赖性极高,25、因而数据的安全性显得尤为重要。关键数据存储系统是整个少儿图书馆的业务支撑,是整个信息管理重要的组成部分,是典型的关键性业务,所以对系统的高可靠性有着很高的要求。- 体系结构设计是安全的,在CLARiiON上数据全部在线保存,CLARiiON系统部件全为冗余设计, 没有单点故障,所以设备本身是安全的,符合安全的设备设计和使用规范;- 设备的应用是安全的,为了确保内容的完整可靠,CLARiiON采用先进的Access Logix技术,保证了每台服务器(或群集的每组服务器)只能查看和使用经过授权的存储空间,从而保证了数据的唯一性和安全性。2. 先进性:能适应未来的体系结构。计算机技术是一项十分活跃的26、技术,更新换代很快。因此系统设计时应考虑到产品的先进性,有利于保护投资。突破性的 UltraFlex 体系结构集 EMC 广泛、独有的知识资产于一身-包括 45 项专利的创新。此高度可扩展的设计采用了最先进的PCI Express系统总线技术,提供端到端的 4 Gb/s 带宽,提供了任何其他中端存储系统无法企及的优异性能3. 可扩展性产品的扩展性,直接影响整体项目的投资保护,良好的扩展性,是产品必不可少的- CLARiiON系统采用冗余阵列的设计,可在线扩容(Hot-Scalability),这一功能能充分保护用户的投资,在初始阶段,需要较少的磁盘容量,只需采购CLARiiON 基本单元,当需27、要较多的容量时通过增加扩展柜来扩容;在增加CLARiiON节点的过程中系统不用停机,应用系统仍然能够继续运行。CLARiiON实现了从 365 GB 到最高 951 TB(960块磁盘) 的无缝扩展能力。4. 易用性:管理简单,操作灵活简单,界面友好。- 管理简单,CLARiiON提供图形界面向导和命令行接口易于使用和管理,CLARiiON技术简化了对几百TB甚至PB的内容数据的管理工作。- CLARiiON具有自我治愈和自我管理的功能,可以使FRU自动离线,数据自动重建。通过和应用密切集成,用户几乎很少涉及管理和维护工作。大大减少维护成本。5. 兼容性:为以后数据中心多平台、多架构扩展做好准28、备。CLARiiON与现有的系统有很好的连接性,管理操作方面,能够满足使用性的原则, CLARiiON能够与现有系统兼容,保护原有投资,实现在线的系统升级不影响业务的正常。4.2 系统拓补图4.3 存储方案描述4.3.1 方案简介从少儿图书馆存储系统的建设需求分析,我们建议采用Veb服务器、教学服务器等大文件型的数据存储采用NAS结构;数字资源服务器、OA服务器、视频点播电子图书、数据库等服务器采用SAN结构光纤存储。建设一套完整的SANNAS整合存储网络,在提供高性能、高可用性存储的同时,为以后的扩展打好基础。EMC的集中存储方案是提供一台稳定性极高,高性能,并具有丰富的软件功能的全光纤存储29、阵列CLARIION CX4-480c做为核心存储设备,通过两台EMC DS5100B 40口光纤通道交换机构成SAN存储环境,以存储设备为中心,支持数据存储服务功能(见上页系统拓补图)。资源服务器、馆际互借联合采编服务器等,每台服务器配备两块4Gb光纤通道适配器(HBA卡),构成服务器与阵列之间的冗余通道连接,直接存取磁盘阵列上的数据,配合EMC PowerPath软件实现通道冗余和负载均衡,保障数据的高性能和高可用性。EMC CX4-480c除了提供高性能的FC光纤存储资源,还提供基于iSCSI的IP存储资源,成本较低,为以后存储系统的扩展,提供了极大方便,对性能要求不高的服务器直接通过网30、络连接到磁盘阵列,无需增加HBA卡和光纤交换机端口,成本低,扩展方便。NAS网关NS40g通过后端光纤口与两台交换机相连,共用磁盘阵列上的空间,为用户或服务器直接提供文件共享存取服务。NS40g支持Windows、UNIX、Linux、Mac等系统平台的文件共享。NAS网关前端提供4个1000Mbs以太网接口,与网络交换机相连,为VOD服务器、教学服务器提供存储空间。VOD服务器、教学服务器直接通过网络映射磁盘的方式,基于CIFS协议访问NAS设备,与传统的网络共享的访问方式相同。NAS提供NFS和CIFS协议的共享,NFS支持UNIX、Linux的数据共享,CIFS支持Windows的用户文31、件共享,此次推荐的EMC CLARiiON CX4-40C磁盘阵列,在硬件上采用完全冗余的架构,从控制器、Cache、光纤环路到电源、风扇、电池均有冗余,并通过全局热备盘、RAID保护、Cache断电保护等技术保护阵列数据的可用性。阵列管理软件(ACCESS LOGIX,包含在Navisphere Manager软件中)可根据具体应用的需求将磁盘阵列的卷组访问/使用权限进行划分,每一台主机只能使用各自的磁盘卷组,具备访问安全性的管理能力,同时EMC支持Cluster集群的卷组共享访问,并且可以动态地调整卷组的访问权适应业务变化的需要。特别指出的是,EMC公司与微软公司互开放针对微软双机系统MS32、CS的API,让微软MSCS更好的与EMC CLARiiON配合工作,以达到最佳应用保护效果。对于磁盘阵列最核心的部分CACHE缓存,EMC独有的先进的CACHE算法设计,使CLARiiON能达到80%95%的CACHE读命中率和100%的CACHE写命中率,同时提供顺序文件读应用的高效RAID3的CACHE技术。每个存储处理器的高速缓存均彼此构成镜像。换言之,每个存储处理器中的高速缓存既包含它所拥有的磁盘组的基本高速缓存数据,也包含其他存储处理器的基本数据的副本。如果发生存储处理器失效,则仍正常工作的存储处理器的高速缓存包括其基本高速缓存和与 其并列的存储处理器的镜像将立即被写入磁盘存储。因33、此,EMC CLARiiON磁盘阵列能永远确保写操作被安全地逐级传递给磁盘,即使在存储处理器失效的情况下亦如此。如果发生电源失效的情况,则备用电池装置可提供需要的电力,从而确保在电源关闭前将全局高速缓存安全地写入磁盘。镜像高速缓存的数目可极大地缩短响应时间, 并使客户动态扩大特定性能所要求的内存大小。CLARiiON系列存储处理器的内存是完全受ECC保护的;硬件可在所有总线上提供奇偶校验保护。阵列软件可在用户数据的每个部分提供CRC保护,最终确保数据的完整性和可用性。4.3.2 稳定安全的存储架构1. 主机层链接EMC存储的每台主机均安装两块HBA卡,分别连接到存储交换机上,无任何单路径故障。34、每台主机安装EMC PowerPath数据访问高可用软件,实现主机到存储路径的互相保护和工作量负载均衡。EMC PowerPath软件功能在处理故障时,能保证对整体系统影响最。EMC PowerPath可针对不同的数据访问类型选择操作模式,操作模式主要有如下表中四种:操作模式描述SYMM_OPT用户根据读写,动态优化或用户自定义优先级策略Round_RobinI/O请求路径分配无选择,随机方式,其他厂家只能实现这种策略Least_I/OsI/O请求被分配给I/O最少的路径Least_BlocksI/O请求被分配给Block最少的路径2. 存储层EMC本次技术建议将采用的是EMC CX4系列企业35、级存储系统,该存储系统平均无故障时间:99.999%, 杂志评价EMC产品质量全球第一。系统内部高度冗余,无任何单点故障,控制器、电源、风扇等硬件均为冗余,并有软件RAID、热备盘、不间断电源保护,可保证整个存储系统的高可用性。3.NAS层NS40G通过在磁盘驱动器和网络中创建多条数据访问路径来保证连续的数据可用性.除此之外, NS40g中的所有关键部件均为冗于配置,保证数据的高可用性.整个系统没有任何单点故障.l 数据移动器和控制工作站间的双路网络路径保证内部通信链路的冗于l 后端SPE存储处理器到每个数据移动器的双路FC连接支持故障切换l 热备的数据移动器可保证当工作的数据移动器出现故障时36、提供自动,快速,透明的故障切换(需升级后才可实现)l 文件系统的在线复制允许创建多份文件系统拷贝,满足多个应用需求.l 先进的卷管理功能提供了Hyper Volume,Meta Volume,Slicing,和Striping等功能.l 内部的双 网络通路保证控制和管理链路的冗于, 同时系统还带有双路交流电源,环境监控,远程自动报警和诊断等功能.4.3.3 高性能存储1.SAN存储系统:众所周知,SAN的建设是为了整合多种应用系统的资源,形成网络化的存储资源共享和使用,是结合了多重技术的实体,因此会有多种因素影响整体性能:先看一下CX4-480C的技术参数:l 采用PCI-Express 连接37、技术;l 全新光纤存储系统;l 2枚2.2 GHz 双核CPU处理器l 16GB的高速缓存,具有写缓存镜像及突发断电直写数据保护的功能l 8个4Gb前端主机光纤通道连接l 4个4Gb后端磁盘光纤通道连接l 支持多到256台HA主机l 单台控制器模块支持最多480个磁盘u 73GB、400GB EFDu 146GB、300GB、450GB 15Krpm 4Gb FCu 300GB、400GB 10Krpm 4Gb FCu 1000GB 7.2Krpm 4Gb/s SATA IIu 1000GB 5.4Krpm 3Gb/s SATA IIl 最大容量471TBl 支持多达4096个LUNl FC支38、持IBM AIX、HP UNIX、SUN Solaris、LINUX、Windows等操作系统EMC企业级存储系统CX4-480C提供端到端的光纤通道;16GB可划分读写的高速Cache,只有此大容量的Cache才可以满足此次数据库系统对存储系统的高性能需求;EMC Navisphere管理软件可以静态和动态调整存储系统中Cache资源, 提高CACHE HIT的命中率,减少读写的响应时间,大大提供了存储系统性能;相关主机PowerPath的操作模式设置可以为本次存储系统不同的数据访问类型提供不同的优化策略,实现主机到存储系统数据通路的负载分担;CX4-480C内部磁盘采用切片技术来划分LUN39、,结合相关子系统框架使关键应用I/O尽可能多的分散到不同物理磁盘上,保证存储系统后端磁盘的负载均衡。2NAS存储系统NS40G子系统的大容量Cache(4GB)设计对整个系统的吞吐量和响应时间的改进有巨大作用,在文件访问频繁时,可以轻松面对。另外相比其它NAS存储系统,在我们的方案里,前端设备NS40G上的I/O操作主要是通过直接与CX4-480C磁盘阵列交换Cache来进行的,大大避免了直接访问物理磁盘设备所导致的延迟对性能带来的不利影响。Celerra内部的智能Cache算法可对Cache的使用进行高效灵活的调度.智能算法可以快速有效的确定所请求的数据是否在Cache中,而且会根据应用对数40、据访问的模式进行自适应调整.复杂的予取算法可在大多数情况下保证很高的读命中率.数据移动器中的操作系统是专为高速文件I/O定制的实时优化操作系统.另外,数据移动器中的Cache也和后台存储子系统中的Cache互相配合,提供更好的整体性能改进.DART对写性能的改进作了专门设计,包括NFSV2下的集中写算法(Write Gathering)的和NFSV3下的同步写算法(Syncronous Writes). 后台存储子系统 中的非易失系统设计使得的Cache可作为NFSv2语法及NFSv3同步写所需要的稳定存储(stable storage)来使用,从而有大大改善了写操作的性能4.3.4 数据迁移41、存储系统的部署工作,只是整个项目中的前半步,关键的应用系统数据,才是此次项目的最终目的,因此数据的迁移工作是重中之重。EMC提供整套数据迁移解决方案和服务,减少了数据迁移的风险,更有效、专业的完成数据迁移工作,保证数据迁移的顺利完成,为整个项目的顺利实施提供了保障。4.4 备份系统存储方案为保证少儿图书馆业务数据的安全性和应用系统的稳定性,以及当应用系统出现异常情况后操作系统环境及数据的快速恢复,客户需要建立一套完善的数据集中保护和备份机制,来确保数据的安全和应用系统的正常运行。此次规划需要备份的服务器包括两台小型机上运行的Oracle数据库、NAS上的所有数据、办公系统所有数据等。根据少儿图42、书馆此次项目的要求,结合EMC 公司20多年的备份行业经验,我们提供了一套基于信息化生命周期管理的解决方案,针对少儿图书馆的业务发展形势需求,我们推荐的方案不仅能满足现有的基于SAN的数据快速备份,同时为日后相应各阶段的系统改造提供了一个可以发展的平台。4.4.1 备份系统设计原则本次备份系统的最终目标是对现有的和未来五年的业务系统发展提供可靠的、安全的数据备份机制,保证业务系统的连续性、安全性及恢复能力。在系统成功建设后,业务系统的连续性将大大加强、在出现软硬件故障或其他不可预知的灾难时,能在最短时间内恢复应用。本章主要是对系统的建设内容和建设目标加以详细的阐述说明。为了保障此次备份系统的成43、功建设,以及在系统投入生产后能够良好运行,对系统设计阶段除了遵守方案设计的一般原则与规范外,还提出了下列应遵守的原则:1、性价比:构建技术方案时必须对性能和价格之间进行权衡。在方案的制定、产品的选型、服务的选择方面都尽可能体现高性能价格比的原则。2、先进性原则:选择的产品既要考虑设备标准的先进性,同时也要兼顾技术的成熟性。 3、可用性:技术方案要求提供不间断的服务应用,提供方便、友好的图形化管理界面。4、开放性:提供的产品要求支持公开的国际、国内标准,可以利于各种系统平台之间集成和兼容使用。5、可扩充性:选用的设备、软件必须为今后的扩充、扩展留有足够余地,可以在不停机的情况下对系统进行扩展并对44、系统的关键部件进行更换同时应该保护原有设备的投资。4.4.2 磁带库的选择在整个存储系统中,备份设备有着举足轻重的做用,所有的应用数据及系统的备份,以及后期数据的归档等都依赖于备份设备,所以备份设备的安全性,可靠性以及性能,均需要满足本次系统的需求。磁带库作为备份系统的核心,其稳定性直接影响备份系统的稳定性。磁带库包含三部分即机械手、磁带机及磁带槽。机械手机械手是磁带库的核心部件,控制整个磁带库的运作,机械手故障将引起整个磁带库故障,无法进行备份作业,同时一般磁带库只有一个机械手,因此机械手的可用性成为我们选择磁带库的重要指标。磁带机磁带机直接执行数据的读写,其读写速率决定备份的速度。磁带机技45、术的发展和更新换代速度也在不断加快,平均18到24个月产品的主要性能指标就要翻番,更新的、更高性价格比能的产品就可能出现,并将老产品逐步淘汰出局。因此,选择一种适合此次应用环境、有良好发展前途、性能价格比高的产品。目前市场主流的磁带技术有发下几种:磁带机技术LTO-4LTO-3LTO-2SDLT-600SDLT-320磁带容量(非压缩状态)800GB400GB200GB300GB160GB备份速度120MB/s70MB/s30MB/s36MB/s16GB/s磁带槽磁带槽为磁带库中放置磁带的槽位,数量的多少决定磁带库的总体容量。在磁带库的选择中,除考虑机械手的稳定性,备份速度,容量外,还必须考虑46、其可扩展性及可连接性。由于目前数据量的快速度增长是很难估计的,而磁带库的容量一般是需备份数据量的3倍。目前市场主流的磁带库厂商,有昆腾、STK、ADIC和其他存储附属型厂商,如IBM,HP,DELL等 ,昆腾公司掌握着磁带库驱动器的核心技术,LTO是Quantum,IBM,HP三家共同制定的标准,目前业界最快的驱动器SDLT600是Quantum公司的专利技术,别的厂家使用都需要向Quantum支付技术使用费用。在中端及开放系统中,市场占有率最大。STK公司,专注于高端大型机的备份设施,对于中端模块化产品,少有建树。其他附属型的厂商,中端备份产品均为OEM产品,IBM 3583为OEM ADI47、C产品,HP 及DELL均为OEM产品。我们建议选择昆腾,根据目前的数据量及备份时间要求,建议选择昆腾I500。昆腾I500在满足上面的条件以后,还要以提供更多的优势:连接方式:昆腾I500配有多个4GB FC接口,可直接与客户的两台FC交换机相连,以获得更高性能和更快的备份恢复速度。其他类似的产品则只能提供一个FC接口;技术优势:概括来说,I500产品的好处如下:更多存储空间单个机柜可达38个槽位,最大可扩展至404个槽位更大的空间利用率提供最大的驱动器密度和磁带密度更好的投资保护具备升级能力,足以应付潜在的业务增长易于使用配置直观的GUI控制台,可以提供远程管理与监控选项易于定制性能与容量48、模块化设计,从而消除“过度购置”易于集成提供广泛认证和内部互操作测试企业级的可靠性和可用性借助热插拔驱动器和冗余组件避免业务中断灵活地利用机架可以在上方或下方添加单元。不必重新安装基本模块/控制器,因此不会增加停机时间和降低可用性易于扩展通过集成的 FlexLink 实现无痛伸缩,不仅避免了停机,而且不需要额外的硬件或连线模块相互独立借助 I500 和集成的 FlexLink,在对单元进行容量调整或重新部署时不会影响磁带库的操作可以选择多种对外连接:光纤通道、SCSI、iSCSI 和 NDMP 连接 4.4.3 备份软件的选择备份软件是整个备份系统的灵魂,备份Job、备份设备、备份介质、备份的49、数据均通过备份软件来管理,一款好的备份软件能让我们事半功倍。少儿图书馆此次生产系统包括AIX、Windows等多种操作系统,属于典型的异构平台结构,需要一套在异构备份平台有良好表现的备份软件来完成备份。EMC Legato NetWorker是一款市场领先、全球认可的解决方案,可保护关键业务信息,并为可靠的企业存储管理提供坚实基础。 NetWorker是企业级网络数据存储管理的领导者。 EMC相信用户要求既高效而又使用方便的解决方案。因此,为我们的用户提供在UNIX、Linux和Windows NT平台上的、全面的数据存储管理领域的优秀软件系列产品,使用户能实现跨平台、跨系统的网络数据存储功能50、,以其简化用户系统管理,实现网络数据自动化管理,是EMC一直以来的任务。EMC的目标是向客户提供真正价值的网络数据管理一体化产品,使基于网络的企业级数据管理更加简易,不管是桌面系统还是服务器,也不管是什么样的存储设备。NetWorker提供有效的数据保护和连贯不间断的管理,而这两种功能正是大多数企业异构存储环境迫切需要的,这些异构企业存储环境包括DAS(直接连接存储)、NAS(网络直连存储)和SAN/存储区域网(存储区域网)等等。先进的索引结构、磁带互操作的备份、高速并行流、磁带克隆、磁盘备份、NDMP(网络数据管理协议)支持、快照和无服务器备份,动态磁带驱动器共享等共同组成了一种关键技术。应51、用这种技术,管理员能够全面地保护存储资产并最大程度地降低停机时间。NetWorker利用厂商提供的API,提供各种应用和数据库的备份和存储解决方案,这种解决方案可适用于下列环境中的备份和恢复:Oralce、Sybase、Informix、SAP R/3 on Oracle、Microsoft SQLServer, Microsoft Exchange Server, IBM DB2、EMC2 Symmetrix for Oracle, EMC2 Symmetrix for SAP R/3 on Oracle、以及Lotus Notes/Domino。服务器集群、NAS文件服务器的本地、远程和三52、方备份功能以及脱离了局域网而在存储域网内的备份得到了全面的支持。NetWorker还能够非常紧密地与EMC其他的应用程序实现集成,这类应用程序包括文件级别的归档保存、分级存储管理、高级存储介质管理和基于策略的管理软件集合,利用这些软件集合,可在多个NetWorker服务器条件下,有效地实现报告、系统管理框架集成和集中式管理。NetWorker的特点和优点1.为各种类型的企业提供集中式的保护:有效地保护存储于UNIX、Windows、Linux和NetWare服务器上的数据,同时也包括在DAS、NAS和SAN环境中的办公桌面上的数据。可添加式模块为主流的数据库、信息传送和ERP应用程序提供可靠的53、在线保护和粒状恢复。为所有的本地和远程数据提供保护,包括安全数据、用户Profile、使用控制列表和Windows系统文件和事件日志。可执行全备份、增量备份和差分备份等不同级别。附加的归档和分级存储管理模块使数据能够实现手工和基于策略的归档、检索、迁移和调用。允许在应用了Windows、UNIX、LINUX和NetWare的Networker服务器之间实现磁带互换。2.超强性能:高度灵活的备份和恢复能力,全面均衡与LAN、SAN和WAN的连接。备份装置可以是单一磁带驱动器、磁带库(多个),也可以是海量磁带库(多个)或磁盘阵列(多个),而且在备份服务器和Nas设备之间可以动态共享驱动器。分级存储54、管理通过选项功能可以将数据按照等级存储至中高速磁盘来分别管理。数据压缩加速了吞吐量,同时使服务器的负荷和网络通信业务量降至最低程度。内置并行流和数据交叉技术。可升级到同时实现512个备份数据流操作。每个磁带驱动器最多可支持32个备份数据流,从而使备份的速度达到最大化。 3.先进的存储介质管理n 对高速和高容量的磁带驱动器支持范围广,包括全部的DLT、AIT和以LTO为基础的驱动器及光纤通道。n 支持磁带驱动器共享,这些驱动器由Networker服务器、Networker Storage Nodes或者是具有NDMP(网络数据管理协议)-兼容性且处于同一数据区的NAS服务器控制。n 自动交叉合并55、磁带克隆(包括从磁盘上克隆)。n 自动合并全量备份和增量备份所存储的数据组。n 先进的存储介质管理包括了自动化的介质管理、支持磁盘清洗、电子标签、条形码、磁盘存取端口和存储介质的校验。4.企业可调整性通过添加客户连接、存储装置和存储节点,能够动态化地扩大容量。Legato支持几乎所有开放平台和数据库。并且其模块化的结构与独特的软件授权机制使用户可以在不更新现有备份系统的情况下添加、升级主机或更改存储结构。备份系统的更新与扩展也同样简便易行。索引式体系结构经过优化,提供高效的运行性能和易调整性易消除死机风险。支持直接的跨平台浏览和同一平台的恢复。易于使用并且便于管理基于JAVA的Networke56、r服务器控制台,便于备份和恢复的配置和管理作业。在Networker GUI界面下内,或者在MAN页面输入命令,可以实现在线帮助。桌面用户能够进行临时备份,还可以从图形式在线索引中浏览和恢复自己的文件。支持Sun DiskSuite、AIX LVM、Tru64 AdvFS和Veritas卷管理器。通过pager、电子邮件或者SNMP使事件通知能够实现自动化。4.4.4 备份策略的定制我们将根据客户的应用程序的需要,结合用户要求,通过全备、增量、差异备份相结合的方式,为客户定制合理的备份策略,保证少儿图书馆的数据安全。4.5 技术方案优势总结4.5.1 高可用性采用完全冗余的SAN高可用架构提供57、简单,稳健的故障切换方式,对系统的正常运做影响很小,磁盘阵列所有模块均有冗余,当有部件故障时,自动切换故障设备,无需用户干预,且用户业务系统不会有任何影响。.磁盘阵列中的所有关键部件均为冗于配置,保证数据的高可用性.整个系统没有任何单点故障.。服务器配合磁盘阵列厂商的软件,可以做到链路的自动切换,并通过交换机连接到磁盘阵列,当任何一块HBA卡出现故障时,系统中的数据仍然连续可用,且无任何间断。NS40G通过在磁盘驱动器和网络中创建多条数据访问路径来保证连续的数据可用性.除此之外, NS501机柜中的所有关键部件均为冗于配置,保证数据的高可用性.整个系统没有任何单点故障。4.5.2 高安全性本次58、方案在多个层次上实现了系统的安全性.这包括:l 后端盘阵的高可用性l 数据移动器中运行专用的操作系统l 控制流和数据流分隔l 支持完善的NFS和CIFS锁(Lock)l 支持业界标准的安全认证方式l 事件审核l 同主流的反病毒方案有很好的集成数据移动器中运行专用的操作系统DART,它不受UNIX和Windows中常见的”后门”和”漏洞”的影响,而且只运行专用的应用程序,所以在系统安全性上远高于通用的UNIX和Windows系统.本次系统的设计,除了SAN架构带来的高可用性来保证整个系统的安全外,备份系统,还可以保证数据在意外情况下不被丢失。比如病毒袭击,意外删除等,均可从备份磁带中恢复回来。459、.5.3 高性能本次选择的磁盘阵列采用端到端的4Gb光纤架构,从主机接口,到内部连接,再到硬盘,均为4Gb光纤接口,内部多条光纤环路,大容量的缓存,在数据处理上,有着极高的处理能力;本次选择的NAS设备,采用专用的高效的操作系统,配合高频率的CPU和大容量的内存,效率极高,多个前端接口和后端接口,负载均衡的完美实现。这种设计对整个系统的吞吐量和响应时间的改进有巨大作用,在文件访问频繁时,可以轻松面对。数据移动器中的操作系统是专为高速文件I/O定制的实时优化操作系统.另外,数据移动器中的Cache也和后台存储子系统中的Cache互相配合,提供更好的整体性能改进。4.5.4 可扩展性采用开放的SA60、N架构的设计,已具有灵活的扩展性,当有新的应用服务器,需要使用存储资源时,配置好HBA卡,即可连接到SAN,获得高可用,高性能的存储资源。如果服务器对性能要求不高,但需要使用大容量块级存储设备时,EMC CX4-40c还提供iSCSI存储功能,将存储资源扩展到IP网络能到达的任意一个角落。NAS将文件级存储扩展到IP网络的任意一个角落。配合阵列的iSCSI功能,提供了一套完善的IP存储结构。另外磁盘阵列本身,也具有很高的扩展性,本次配置的CX4-40C,最大可达到239TB容量,能满足少儿图书馆未来几年我需求。4.6 CX4-480C支持的软件及特性EMC针对CX4-480C提供丰富的软件功能61、,详细的软件介绍如下:其中包含:Navisphere 管理套件、存储管理任务栏、MetaLUN、虚拟LUN技术、Access Logix 均为阵列自带软件,用户无需再付费;NQM应用服务级别管理、SnapView快照和克隆、MirrorView/A和MirrorView/S、SAN Copy、PowerPath均为付费功能软件。4.6.1 Navisphere 管理套件客户可以使用Navisphere Manager管理他们的CX4 UltraFlex存储系统。Navisphere Manager运行在存储系统上,您只要有网络可以连接存储处理器,就可以访问它。在Navisphere Manag62、er的帮助下,您不仅可以管理在相同的子网上的存储系统,也可以管理独立存储系统区域内的多个存储系统。同样也支持远程管理。4.6.2 存储管理任务栏EMC Navisphere管理软件新增了存储管理任务栏,进一步加强存储管理的直观性,简化操作的步骤。 提供容量利用的信息,提供磁盘扩展柜(DAE)、磁盘和RaidGroup之间关系的图形化界面。4.6.3 NQM应用服务级别管理Navisphere Quanlity of Service Management (NQM)是EMC Navisphere 管理套件上的针对应用服务质量级别进行管理的软件功能。实现如下功能:l 监控应用服务影响的前后关系l 63、通过策略完成性能目标n 限制低服务级别要求应用的性能n 为关键业务应用设置性能目标l 为应用建立下面三方面的性能要求n 响应时间n 带宽n 吞吐量l 根据I/O的大小/类型设置性能性能访问策略4.6.4 MetaLUN在Navisphere Manager帮助下,CX4 UltraFlex存储系统可以使用LUN扩展特征,即基本LUN可以扩展大小,创建一个metaLUN。metaLUN是通过分带化或串接将多个LUN组合而成。如需更多信息,请参考EMC PowerlinkTM上的白皮书EMC CLARiiON MetaLUNs, Concepts, Operations, and Manageme64、nt。4.6.5 虚拟LUN技术虚拟LUN技术(LUN移动)特征由Navisphere Manager或Navisphere CLI(命令行界面)管理。这个Navisphere软件允许存储管理者将数据从一个源LUN或metaLUN移动到存储系统中的另一个LUN或metaLUN,同时保持源LUN中数据在线。LUN移动在以下情况下有用:1. 更改驱动器类型l 从4-Gb/s 10K rpm光纤通道移动到4-Gb/s 15K rpm光纤通道l 从4-Gb/s光纤通道移动到SATA 通道2. 更改性能特征:l 移动到较少使用的磁盘l 更改RAID类型在LUN移动的过程中,存储系统将数据从源LUN复制到65、目标LUN。在完成移动之后,目标LUN采用源LUN的标识(World Wide Name和其他ID),并删除源LUN。EMC Powerlink上的白皮书EMC LUN Migration中有更详细的内容。4.6.6 Access LogixAccess Logix是一个易于使用的Navisphere工具,提供了存储处理器和主机光纤通道HBA之间的LUN掩码。通过Navisphere可以使能Access Logix。Access Logix提供了主机和CX4之间的不同主机连接,以及友好的用户界面来定义存储组。存储组控制了哪些主机有权限访问哪些LUN。最新Access Logix支持的平台列表,66、请见EMC Powerlink上的白皮书EMC Support Matrix。4.6.7 SnapView快照和克隆l SnapView快照SnapView允许用户在一个生产服务器上创建源LUN的快照,这个生产服务器可以通过辅助服务器查看。快照是一个包含源LUN时间点拷贝的虚拟LUN。在一个SnapView会话中,生产服务器可以继续写源LUN和修改数据。快照或虚拟LUN可以在决策支持应用中使用。另外,用户可以使用Navisphere CLI为用快照为LUN备份的第三方备份应用写脚本程序。当源遭到破坏时,快照内容可以恢复源LUN。l SnapView克隆SnapView克隆是源LUN一个完整拷贝67、,大小和源LUN一样。一旦创建,这个完整拷贝会与源LUN分离,加载到另一个主机,由备份应用程序进行处理,而不会影响源LUN上的生产数据。源LUN在一个克隆组中最多有8个克隆;一个克隆组由为某个源LUN创建的所有克隆组成。当源遭到破坏时,可以使用克隆组中任何克隆中的内容反向同步到源LUN,这样最小化了停机的时间。4.6.8 MirrorView/A和MirrorView/SMirrorView/A和MirrorView/S是在不同地点维护LUN拷贝(或镜像)的软件应用。生产映像(已被镜像)称为主映像;这个映像的拷贝称为辅助映像。MirrorView为灾难恢复提供了备份,也就是说,如果严重的事故或68、自然灾害破坏了一个映像,那么仍可以访问另一个映像。主LUN最多可以有2个MirrorView/S镜像(每个镜像必须位于独立的存储系统)和1个MirrorView/A镜像。另外,任何给定的存储系统可以参与同最多4个其他存储系统进行MirrorView连接。如果主LUN和它的一个或全部镜像之间连接丢失,那么会保存一个记录了写入LUN数据的日志,这样可以加快后面的同步。(即,当镜像无法访问时,如果有数据被更变了,一旦重新连接到镜像,就会立即传送这些数据。)表7和8是CX4 UltraFlex系列存储系统中可以使用的MirrorView特征。4.6.9 SAN CopySAN Copy是一种能在CX469、存储系统中,或CX4存储系统和其他存储系统之间进行快速复制LUN的软件应用。在移动存储系统之间的LUN时,CX4可以作为源服务器,也可以作为目标服务器,换句话说,SAN Copy可以从CX4复制LUN,也可以将LUN复制到CX4。SAN Copy可以在CX4和各种存储系统之间进行LUN复制,其他存储系统包括Symmetrix、CX4、CX200、CX400、CX400、CX500、CX600、CX700、AX100、AX150以及第三方存储系统。SAN Copy也提供增量会话,跟踪拷贝增量,这样只有发生改变的源LUN数据才会被复制到目标LUN。4.6.10 PowerPathEMC Power70、Path是一个主机常驻软件,同时应用在CLARiiON和Symmetrix存储系统,进行智能I/O路径管理。管理者可以使用PowerPath,通过不断智能地进行I/O平衡,改善服务器管理巨大存储负载的能力;PowerPath自动配置多条路径,随着工作负载的变化,动态调整性能。PowerPath也通过自动检测和恢复服务器到存储器之间路径故障,提升CLARiiON和Symmetrix存储系统的可用性。4.6.11 软件在线升级在线升级为CX4产品线提供了一种透明升级的机制。当这个特征与PowerPath故障切换软件结合,可以允许用户升级存储系统软件,包括核心软件,而不中断主机访问数据。在线升级过程71、中,当一个SP升级并重启,PowerPath或其他故障切换软件会将I/O重新导向到另一个SP。CLARiiON CX4 UltraFlex系列是CX系列第三代产品,当客户采用新技术时,通过保证已有资源和资金的最佳利用,继续了EMC对从CLARiiON技术上最大化客户可获取利益的承诺。CX4系列基于一种新的、突破性的结构和扩展的技术创新,提出了一种任何竞争对手都无法比拟的中端存储方案。CX4 UltraFlex系列具有业界领先的应用性能和新级别的扩展性、可靠性和经济性。它也引入了新级别的使用简便性,使得CX4易于安装、管理和扩展。CLARiiON CX4 UltraFlex系列是目前的不二选择,72、因为它提供了中端存储平台的最好性能。突破性结构设计和先进软件的独特组合使CX4系列能应对目前中型和大型企业所面临的日益增长的挑战扩展系统容量和性能,简化复杂环境中的管理,提高信息可用性级别和对关键应用和数据的保护能力。4.7 EMC售后服务及承诺4.7.1 服务承诺1. 技术支持等级EMC只向客户提供一种级别的服务,即24x7x365的全天候服务。因为EMC清楚地认识到用户的数据是最为重要的。必须得到全天候的保护。任何使客户得不到的服务,或使用户数据可能失去保护的做法都是不可接受的。2. 技术支持策略EMC 将通常出现的技术问题及要求分为两大类:服务请求(Service Call)及可计划事件73、(Scheduled Event).服务请求(Service Call)EMC 设备发生问题或故障时,自动报警或用户呼叫称为服务请求。服务请求具有最高的优先级。可以中断日常其他工作予以响应。可计划事件(Scheduled Event)除服务请求(Service Call)外,其它请求为可计划事件,这些工作可以事先进行计划和安排。例如:安装,升级,会议,Re-Configuration等等。对于这些请求,EMC不分用户大小,一律按照先请求先服务的原则进行响应。3. 技术支持方式电话指导电子邮件EMC Web 站点 (EMC PowerLink Web Support)远程拨入诊断现场修复现场响应74、时间地 域现场响应时间A. EMC办事处所在城市市区范围内4小时B. 航班可以直达的城市24小时C. 航班不可以直达的城市48小时以上响应时间均受交通条件的限制,如航班时刻,天气状况及节日高峰是否有票等。现场响应指:EMC已在响应时间内通过远程控制、电话指导、电子邮件或其它方式解决了或正在解决用户报告的问题或EMC或EMC授权的技术支持人员已到达用户报告出现问题的现场或EMC能够提供报告,证明EMC如何处理该问题;如何处理用户报告的问题完全由EMC做出判断并负责解决。为使问题得到快速有效的解决,用户应向EMC或EMC授权的支持人员提供并允许其利用及使用提供维护服务所需的条件、资源、设备及人员,75、与EMC支持人员合作,回答问题并按其指导提供必要的协助。4.7.2 技术支持和服务的联系方法一线支持如果在合同中说明由EMC授权的服务提供商负责维护,则由该服务提供商负责一线支持和服务。在EMC设备出现故障或异常时,请与服务提供商联系。如果由EMC负责维护,可直接与EMC 全球支持中心联系。当一线技术人员需要技术支持时,会同EMC 全球支持中心联系。由其提供远程诊断及支持。二线支持在遇到疑难故障,一线支持在现场未能修复时,可拨打EMC 全球支持中心的免费电话。EMC公司或其服务公司远程登录进行检查,确定问题后,如需要将由工程师携带所需备件赶赴用户现场直接进行现场服务或维修。EMC 全球支持中心76、的联系方式EMC 全球支持中心(中文服务):服务时间:周一至周五电话号码: 800-810 3777EMC 全球支持中心(英文服务):提供 24x7的不间断服务电话号码: 10800 712 0102 (中国网通,中国北方大部分省市)或10800 120 0102 (中国电信,中国南方大部份省市)另外,当您呼叫EMC全球支持中心遇到困难时,也可以通过拨打以下号码同EMC售后服务部门取得联系,值班工程师将协助您同EMC全球支持中心建立联系区域支持热线北方区(北京)1350 111 0555华东区(上海)1350 160 4846华南区(广州)1360 977 6574获得技术支持用户可以通过多种77、途径获得EMC的技术支持:自动报警使用自动报警功能,EMC可以对用户设备的任何异常做出7x24x365的快速响应。当设备出现异常情况时,如果此时设备设置为自动报警(Call Home Enabled),则通过MODEM及电话线自动将用户名称,设备序列号及异常信息传送至EMC 全球支持中心。为保证用户的数据安全,EMC强烈建议用户采用这种方式。支持中心的产品支持工程师(PSE)将通过远程拨入进行诊断,确定触发报警的原因。必要时,EMC本地工程师将直接携带所需备件赶赴用户现场,进行维修。维修完成后,EMC工程师将向用户解释故障原因及维修结果。用户直接呼叫当用户发现问题时,如果由服务提供商负责一线服78、务的,请直接打电话给服务提供商。如果由EMC提供服务,请致电EMC 全球支持中心,可以得到EMC公司的快速响应。EMC 全球支持中心每天24小时,每周7天向全世界EMC用户提供技术支持,可随时联系。在向EMC全球支持中心请求技术支持之前,请准备好以下信息:用户地址编号(Site ID);EMC 设备的序列号(Serial Number);远程拨入的电话号码 (MODEM Number);远程拨入的密码(Password);以及出现的问题,如错误码和异常显示等等。(以上远程支持均需通过直拨电话线进行远程拨入。)除以上两种方式外,用户还可以通过注册并访问EMC的网站获得以下支持:更新补丁和产品升级79、产品维护更新补丁和产品升级为您解决技术问题、提高系统性能和底层技术变化等方面的更新和升级提供服务。您可通过PowerLink 或您的EMC 客户代表得到产品维护更新和升级。关键问题预警您可以收到提供最新产品信息的电子邮件。这些预警会通告您一些最近发现的问题,这对您使用的EMC 产品的维护非常重要。产品文档您能够容易地访问庞大的EMC 产品文档库,主要内容包括版本说明、安装指南、案例和教程等。EMC知识库您也可以访问广泛的EMC 知识库,主要内容包括案例解决方案、版本说明、提示和技巧、常见问题和已归档的新闻组等。4.7.3 服务期限及服务内容硬件、软件的保修期硬件的保修期标准为36个月,软件的保80、修期标准为12个月。如果保修期另有约定,必须在销售合同及EMC Sales Order Worksheet (SOW)予以相同及明确的说明,否则以SOW为准。服务内容对于保修期内或维护服务合同有效期内的客户:免费微码升级;免费维护及远程健康检查;免费现场备件更换;免费对EMC设备进行24x7x365的监控(Call Home enabled);免费远程诊断及支持;免费解答客户有关EMC产品使用中出现的问题;24x7x365响应;经过注册获得EMC 网站支持 (EMC PowerLink Web Support)。EMC同时向用户提供以下收费服务:对现有系统的改造及重新配置 (Re-config81、uration);设备的迁移;脚本的调试与修改;现场待命(Standby);现场健康检查(On site health check);设备及软件的重新安装;性能分析及优化;拆卸及重新安装时对设备的认证;用户要求的其他的额外服务。5 附件:产品介绍5.1 EMC CX4-480C光纤磁盘阵列可升级,高性能,具有超凡软件功能的企业级存储设备由于富有经验的业务管理者们开始认识到制定一个经济、灵活的,能够满足整个企业范围内需求的网络存储架构策略是绝对必要的,EMC正在迎合这种需求,通过强劲的最新CLARiiON全光纤通道存储系统CX4-480C。利用其支持SAN存储网络,服务器集群,或直接连接的能力;82、和先进成熟的具有艺术特质的技术;并业界用户界面最为友好的和最易理解的管理工具组件;CX4-480C为构成一个先进的,最具成长能力的网络存储环境提供了坚如磐石的良好基础。它的任务使您的业务在当今不断变化的IT环境中保持连续的成功和在激烈的竞争环境中保持不败。特点概述 支持最先进的4Gb光纤通道连接能力并配置2个2.2 GHz的双核CPU处理器构成一个具有领先竞争能力的网络存储环境 通过部署高可用性的,全冗余架构的存储、无需中断应用的存储软件的升级能力、和在线容量扩展等特性来减少宕机时间 通过企业级的存储集中和多主机的连接能力来加快服务器的部署速度 在整个企业范围内通过集中化的存储管理方式来大幅度83、地提高IT生产效率并削减管理成本 通过使用SnapView智能化存储功能软件提供与主机无关的数据复制功能,从而释放服务器资源 通过使用PowerPath软件的自动故障切换,动态负载均衡,和优化数据信息访问能力来确保数据的高可用性和数据访问的高性能. 通过MirrorView软件,实现数据一致的容灾,保证数据终极的安全性。CX4-480C更大、更好、和更快,在一个更小的,更加经济的包装之下的存储系统作为CLARiiON最新的全光纤存储架构的代表,CX4-480C提供给用户的是一个经过验证极为成熟的设计,并采用端到端的4Gb光纤通道技术,从前端接口,到控制器,再到后端磁盘接口和磁盘,均采用4Gb光84、纤技术。4 Gb/sFibre Channel SAN-attach4 Gb/s Fibre Channeldisk drivesUltraScale4GBCX3 UltraScale Series2006CX4-480C支持最多480个磁盘数量,目前CX4-480C提供最大物理容量约471TB。CX4-480C结合业界用户界面最为友好的管理工具,提供给使用者超级的吞吐性能和更加强劲的连接能力。CLARiiON系列传统的模块化,稳定性,易于扩展的结构使用户能够构建一个非常理想的低初始化投资的存储架构,并且能够很容易地增加更多的容量和扩展更高的性能来应对不断增长变化的IT方面的需求。一个全冗余、85、高可用性,没有任何单一故障点的存储系统,CX4-480C保留了同样的所有历来被称道、口碑极佳的CLARiiON存储系统的数据一致性和高可用性的特点。这些特点包括全局热备份盘,冗余的电源模块和风扇冷却模块,在线RAID组磁盘数量和容量扩展,和整个阵列端到端的数据路径上的数据块一级的校验保护方式。而同时CX4-480C支持的容量更大,更好,并且比以往的CLARiiON存储系统性能表现更高,它的占地面积更小,提供给用户更经济的套件。这意味着所有它能提供给用户利益,包括其他的更强的处理能力和增强的连接能力都是建立在一个更低的总体拥有成本的基础之上。模块化的构件方式使您能够根据您业务增长的需求来增加存储86、容量CX4-480C是19英寸工业机架是式的框架结构,它可以配置的磁盘数量最少5个,通过增加易于安装配置的构建模块最大可扩展到480个。目前可支持73GB、146GB 15K转的4Gb光纤硬盘,36GB、73GB 、146GB 和300GB的10K转4Gb光纤磁盘,以及1000GB的7200转SATA磁盘。容量扩展可以在线进行,并且可以动态地、容易地重新部署配置来满足业务增长变化对存储容量增加或改变的需求。CLARIION CX4-480C标准配置为16GB的高速缓存,其中的一部分可以配置为写缓存并在两个存储处理器之间被镜像保护。立于不败之地的高可用性,高性能,和灵活性从OLTP和WEB服务器87、到数据仓库和高密度图形或视频数据流环境,CX4-480C都可以高速地传递数据信息。它充分利用了4Gb光纤通道的潜在能力提供无可匹敌的性能表现。CX4-480C前端配置8个主机连接接口(GBIC接口),每一个接口都提供4Gb/秒的光纤通道吞吐带宽。并且采用多通道I/O访问和动态负载均衡功能,您可以并行地对所有8条通道进行访问操作。可以说CX4-480C是可以被应用在广泛的应用类型里的理想的磁盘阵列。开放系统的存储集中和为多主机平台环境备份为了促进标准化和集中化,CX4-480C有多种连接方式的选择。它支持主机直连的方式:可以是单台主机直连也可以是多台异种平台的主机直连。支持集群主机和SAN存储网88、络方式。EMC Access LogixTM软件提供安全管理下的共享或在混合和同类环境下的有选择的阵列访问管理功能(集成在Navisphere Manager中)。CX4-480C是一种特别适合用在UNIX和Windows存储集中环境下的阵列,并且FLARETM,CLARiiON强劲的核心操作控制环境,支持经过广泛选择的主机操作系统,目前支持的操作系统包括Windows、Linux、Solaris、 HP-UNIX 、IBM AIX。CX4-480C同时可以和业界范围广泛的磁带库硬件和备份软件产品兼容配合为用户提供最大程度的信息保护。所有相关的磁带备份硬件和软件产品都列在EMC的支持矩阵中,可89、以在EMC的网站WWW.EMC.COM上找到。构建自动化信息存储基础设施架构的起始点EMC ControlCenterTM/Open Edition管理软件套件,EMC的自动化信息存储机制的中枢环节,将您的各个厂家的存储架构通过一个单一的,一致性的信息集中化策略简单自动地管理起来。ControlCenter Navisphere软件套件管理解决方案地基础来最大化利用您对CX4-40C的投资。这个套件包括Navisphere Manager,Navisphere Analyzer,和Agent/CLI。通过Navisphere Manager,您可以安全地发现,监控,和故障预警存储设备,在任何时90、间任何地点只要通过一个简单易用地WEB浏览器就可以完成对多台CLARiiON的操作。Navisphere Manager还可以通过提供对于CLARiiON的自动化的,预先动作的故障管理机制来延长系统运行时间,这些机制还可以与业界领先的网管软件如CA Unicenter, HP OpenView,和Tivoli NetView集成在一起使用。Navisphere Agent/CLI在Navisphere Manager的图形化GUI管理界面的基础之上通过提供一套运行在非图形化界面环境中的基于字符界面的命令集来增强管理能力。Navisphere Analyzer可以提供一套详尽的有关您的CLARi91、iON阵列的实时的性能方面的历史性的信息记录,可以使您研究出性能表现的状态和趋势,以便在问题发生前发现它。随着您的业务量的扩展和信息资源的膨胀,Navisphere可以逐步地增加附加配套的ControlCenter的应用模块,例如ESN Manager,ControlCenter Database Tuner,ControlCenter Resource Availability,和ControlCenter StorageScopeTM来为您的CLARiiON,Symmetrix或其他非EMC的阵列和存储网络,主机提供额外的管理功能。EMC SnapView软件帮助您最大化利用信息存储方面的92、投资EMC SnapViewTM是一个可以不中断业务的对某一时间点的数据进行备份和恢复的功能软件,是一个可以增加数据可用性的工具。SnapView提供的是一个存储在CX4-40C中的生产信息某一时间点的数据的影像,并且保持此时间点的影像的固定性为其他的应用提供支持。这种快照式的影像的生成只需要额外的原始生产卷的一小部分容量空间并且做到瞬间的建立和去处。生产主机可以在快照生成后正常地访问读写生产卷组,而快照卷保持与生产卷的独立状态允许其他的主机访问,进行读写操作从而完成备份,查询,或其他工作。每一台CX4-480C可同时支持最多1024个快照进程,并且每一个LUN可以同时生成8个快照卷。另外,E93、MC SnapViewTM还可以产生生产LUN的克隆卷(业务连接卷BCV),与上述指针式快照功能不同,BCV是生产卷LUN的实际物理快速复制,占用与生产卷LUN同样的磁盘物理空间。BCV的使用一般用于对数据安全性及系统性能要求特别高的环境。PowerPath提供高可用性,高性能,和灵活性PowerPath是一个安装在服务器之上,对性能和信息的可用性具有增强功能的数据通路管理软件,确保您的应用可以连续地运行。针对于开放系统平台它集成了故障通道自动切换,动态负载均衡和优化信息访问性能地能力。通过自动调整多条通道上的工作量达到自动负载均衡的功能,避免I/O的瓶颈。PowerPath的自动故障切换和动94、态恢复的特点可以使在服务器和CX4-40C的某条连接通道发生故障时将其原来所承担的I/O访问转移到另外的可用通道上。PowerPath还可以通常情况下的HBA驱动支持,无论是CLARiiON还是Symmetrix。因此,在一个混合存储阵列的环境中,运行PowerPath的服务器可以同时连接到两种存储系统之上。EMC MirrorView提供更佳的信息可用性和数据的安全保护措施在计划内和计划外的宕机情况下都能提供高度的数据可用性对业务的成功是至关重要的。通过保持两台CLARiiON存储系统之间的数据镜像同步,MirrorViewTM软件将数据以字节对字节的方式镜像到多个不同的地点确保数据的可用性95、和最大程度的安全保护。由于MirrorView的操作完全余兴在CLARiiON系统之中,因此对生产应用不会有影响,也不会占用宝贵的主机CPU资源。SnapView对一个LUN最多可以生成8个完全可读可写的,在某一时间点立即生成的逻辑指针卷组,基于一个“第一次写时复制保留”的算法。这种功能可以被用在非中断业务的备份,软件测试,数据分析,或只是简单的保留一些基本数据以备将来可能需要的恢复。MirrorView不但可以用在远程的数据镜像上也可以用在本地的两台阵列之间的镜像以保护您的最关键的业务信息。利用MirrorView的多重联系的能力,您可以将最多4台CLARiiON存储系统的信息集中地镜像到一96、台磁盘阵列中,以便整合一些远程的处理业务,例如备份,决策支持系统的查询,和基本的灾难恢复。MirrorView是双向的,使每一台CLARiiON在作为数据源的同时也可以作为其他CLARiiON系统的备份设备。MirrorView还可以提供并行的镜像功能,一台CLARiiON的数据源同时被两台CLARiiON系统镜像以提供最大程度的数据安全性保护和利用统一数据源在两地并行处理不同地业务。MirrorView和SnapView软件可以紧密地结合在一起以简化和整合一些日常地处理工作。对于SnapView和MirrorView运行的管理是集中在一个地点进行的,通过单一Navisphere管理界面。5.97、2 NS40G网关NS40G内部的智能Cache算法可对Cache的使用进行高效灵活的调度.智能算法可以快速有效的确定所请求的数据是否在Cache中,而且会根据应用对数据访问的模式进行自适应调整.复杂的予取算法可在大多数情况下保证很高的读命中率.数据移动器中的操作系统是专为高速文件I/O定制的实时优化操作系统.另外,数据移动器中的Cache也和后台存储子系统中的Cache互相配合,提供更好的整体性能改进.DART对写性能的改进作了专门设计,包括NFSV2下的集中写算法(Write Gathering)的和NFSV3下的同步写算法(Syncronous Writes). 后台存储子系统 中的非易98、失系统设计使得的Cache可作为NFSv2语法及NFSv3同步写所需要的稳定存储(stable storage)来使用,从而有大大改善了写操作的性能NS40G支持主流的网络接口:包括10/100BaseT Ethernet, Gigabit Ethernet.每个数据移动器配置有4个网络接口(10/100/1000M自适应).一个满配置的系统在网络连接方面的扩充能力为:8个10/100/1000M Ethernet的连接NS40G的系统升级和扩展是不用停机的.这种无缝而又经济的扩充扩展方式可充分适应用户业务的变化需要,同时又不会中断前端客户的访问,NS40G的群集系统结构可在不修改底层IT存储99、结构的情况下,按照用户的需要逐步增加处理节点来满足不断增长的业务需求.一旦系统安装完毕,NS40G的软件系统可以动态扩展文件系统,不需要对数据做卸载/加载的工作。l 后端磁盘阵列的高可用性l 数据移动器中运行专用的操作系统l 控制流和数据流分隔l 支持完善的NFS和CIFS锁(Lock)l 支持业界标准的安全认证方式l 事件审核l 同主流的反病毒方案有很好的集成数据移动器中运行专用的操作系统DART,它不受UNIX和Windows中常见的”后门”和”漏洞”的影响,而且只运行专用的应用程序,所以在系统安全性上远高于通用的UNIX和Windows系统.NS40G系统的控制流和数据流是分隔的, 既数100、据流是通过与数据移动器相连的网络接口提供, 而控制流则通过专用的控制工作站完成,从而从系统平台及网络通道两个方面将管理平台同数据平台分隔,极大的提高了系统的整体安全性.NS40G支持完善的锁(Lock)机制,全面考虑了共享环境下NFS和CIFS对锁的不同处理,在文件系统Mount时可根据需要制定不同的访问策略(Access Policy),通过不同的访问策略控制锁的处理,系统可按照需要灵活的在三种策略中选择对锁的处理,充分满足各种环境下的要求。 在安全认证方面,NS40G支持业界标准的认证协议,包括Windows2000 Kerberos, Windows NT PDC,和UNIX NIS,为101、了兼容多协议环境下异类客户机的共享需要,NS40G提供了三种安全认证方式,系统管理员可按照需要选择适合自己具体环境的方法. l UNIX安全认证l NT安全认证l 共享级安全认证 UNIX安全认证主要用于需要用户级安全认证的NFS用户,这一选项将利用/.etc/passwd文件或NIS来认证CIFS用户。 NT安全认证主要用于需要用户级安全认证的CIFS用户.它通过 NT域中的主域控制器来认证CIFS用户.在NT认证方式下,EMC提供了专门的工具可将CIFS用户的相关信息添加到数据移动器的/.etc/passwd和/.etc/group文件中。这包括用户名,UID,GID,并授予需要访问该文件102、的NFS用户适当的权限。 对安全性要求不高的配置可选择共享级安全认证.这一选项允许用户不用任何口令即可访问文件系统.或者,如果激活了口令保护,任何NFS或CIFS用户均可通过提供有效的口令来访问数据. 在反病毒方面NS40G和主流的反病毒解决方案有很好的集成,支持包括NAI, Symantec, Trend Micro, CA, Sophos在内的多个厂商的反病毒软件.在和NS40G集成的环境下反病毒服务器只检测文件的特征片段,不需要将文件全部传送到反病毒服务器;在文件修改和第一次读时均会做检测(Scan after Update/Scan on First Read);可以同时部署多个厂商的103、反病毒引擎.除此而外,NS40G还提供了自动化的工具帮助用户规划复杂环境下反病毒引擎数量的规划(Anti-virus sizing tool).除了支持标准的IP网络协议栈外, NS40G NS501G还支持许多先进的网络功能,保证网络接口方面的高可靠,高可用,高性能.这包括;l Link Aggregationl Ethernet Trunkingl FailSafe Networkingl Virtual LAN Link Aggregation支持将一个数据移动器(Datamover)上的多个网络链路(Link)聚合,从而提高网络接入的可用性,并能提供一定的负载均衡功能,Link Agg104、regation为标准的IEEE 802.3ad协议;Ethernet Trunking(Ethernet Channel)实现类似链路聚合的功能,主要为CISCO产品支持. FailSafe Networking(FSN)提供更高级别的端到端的网络可用性.通过FSN可以将连接到两个不同网络交换机的网络接口配置为主用/备用模式,当主用网络接口或所连接交换机出现故障时,连接在另一交换机上的备用网络接口可以接管主用网络接口的所有工作,从而提供更高级别的端到端的网络可用性.FSN也可以和Ethernet Trunking组合使用,即主用或备用网络接口本身既可以是单个物理网口,也可以是链路的聚合. NS40G支持VLAN(IEEE 802.1q),通过VLAN提供灵活的网络管理功能;网络节点的配置和修改可以通过管理终端快速完成,不用重新布线.通过VLAN可以更好的管理网络流量和保护网络,在VLAN的环境下同一个数据移动器可以同时为多个VLAN所访问,极大的方便系统网络管理.
会员尊享权益 会员尊享权益 会员尊享权益
500万份文档
500万份文档 免费下载
10万资源包
10万资源包 一键下载
4万份资料
4万份资料 打包下载
24小时客服
24小时客服 会员专属
开通 VIP
升级会员
  • 周热门排行

  • 月热门排行

  • 季热门排行

  1. 2022城区自来水提质改造智慧水务建设项目设计方案(199页).pdf
  2. 小区人员配置档案建立保洁绿化物业管理服务投标方案(593页).docx
  3. 陕西化学工业公司招聘管理与职业发展管理手册30页.doc
  4. 动火作业安全告知卡(1页).docx
  5. 高处作业安全告知卡(1页).docx
  6. 广场工程建设项目施工招标评标报告表格(24页).pdf
  7. 建筑工程外脚手架专项施工方案(悬挑式脚手架、落地式脚手架)(25页).doc
  8. 2020柏向堂房地产公司材料标准化手册3.0(143页).pdf
  9. 2021柏向堂房地产公司材料标准化手册4.0(108页).pdf
  10. 土建、装饰、维修改造等零星工程施工组织设计方案(187页).doc
  11. 深圳装饰公司施工图纸会审及设计交底管理制度【13页】.doc
  12. 工程变形测量之基坑监测培训课件(155页).ppt
  13. 房地产开发企业拿地操作指引方案.pdf
  14. 新规下的户型增值秘籍.ppt(22页)
  15. 房地产开发贷款实操指南(5页).pdf
  16. 鄂尔多斯空港物流园区总体规划方案(2017-2030)环境影响评价报告书(23页).doc
  17. 规划兰园西路道路工程环境方案环境影响评价报告书(89页).pdf
  18. 屋面圆弧形穹顶结构高支模施工方案(40米)(47页).doc
  19. 埋石混凝土挡土墙施工方案(23页).doc
  20. 重庆市五小水利工程建设规划报告(64页).doc
  21. 厂区至矿区管网蒸汽管道系统扩容改造工程施工组织设计方案(105页).doc
  22. 超高纯氦气厂建设项目办公楼、变电站、水泵房及消防水池、门卫、厂房、仓库、配套工程施工组织设计方案(140页).doc
  1. 房地产交易环节契税减征申报表(首套填写)(2页).doc
  2. 2024大楼室内精装修工程专业分包投标文件(393页).docx
  3. 苏州水秀天地商业项目购物中心100%室内设计方案(158页).pptx
  4. 2022城区自来水提质改造智慧水务建设项目设计方案(199页).pdf
  5. 小区人员配置档案建立保洁绿化物业管理服务投标方案(593页).docx
  6. 室内移动式操作平台工程施工方案(19页).doc
  7. 地铁6号线区间盾构下穿管线专项施工方案(30页).doc
  8. 矿山治理工程施工组织设计方案(240页).docx
  9. 老旧小区改造工程施工方案及技术措施(364页).doc
  10. 北京科技园公寓建设项目整体报告方案.ppt
  11. 川主寺城镇风貌整治景观规划设计方案(60页).pdf
  12. 建筑工程三级安全教育内容(24页).doc
  13. 新疆风电十三间房二期工程49.5mw风电项目可行性研究报告(附表)(239页).pdf
  14. 土建、装饰、维修改造等零星工程施工组织设计方案(187页).doc
  15. 四川凉山攀西灵山国际度假区小镇活力中心商业业态规划方案建议书(33页).pdf
  16. 埋石混凝土挡土墙施工方案(23页).doc
  17. 地下停车场环氧地坪漆施工方案(45页).doc
  18. 深圳装饰公司施工图纸会审及设计交底管理制度【13页】.doc
  19. 地铁深基坑及钢筋笼吊装安全专项施工方案【98页】.doc
  20. 住宅定价策略及价格表制定培训课件.ppt
  21. 西安名京九合院商业项目招商手册(28页).pdf
  22. 2010-2030年湖北咸宁市城市总体规划(32页).doc
  1. 建筑工程夜间施工专项施工方案(18页).doc
  2. 赣州无动力亲子乐园景观设计方案(111页).pdf
  3. 2016泰安乡村旅游规划建设示范案例(165页).pdf
  4. 房地产交易环节契税减征申报表(首套填写)(2页).doc
  5. 龙山县里耶文化生态景区里耶古城片区旅游修建性详细规划2015奇创.pdf
  6. 连云港市土地利用总体规划2006-2020年调整方案文本图集(78页).pdf
  7. 850亩项目塑钢门窗工程施工组织设计方案(34页).doc
  8. 老旧小区改造工程施工方案及技术措施(364页).doc
  9. 城市更新项目地价公式测算表.xlsx
  10. 房地产项目规划前期投资收益测算模板带公式.xls
  11. 存储器基地项目及配套设施建筑工程临时用水施工方案(40页).docx
  12. 铁路客运枢纽项目站前框构中桥工程路基注浆加固专项施工方案(19页).doc
  13. 室内移动式操作平台工程施工方案(19页).doc
  14. 装配式结构工业厂房基础、主体结构、门窗及装饰工程施工方案(83页).doc
  15. 地铁6号线区间盾构下穿管线专项施工方案(30页).doc
  16. 施工工程安全教育培训技术交底(13页).doc
  17. 老旧小区改造施工方案及技术措施(365页).doc
  18. 新建贵广铁路线下工程沉降变形观测及评估监理实施细则(126页).doc
  19. 消防火灾应急疏散演练预案(12页).doc
  20. 矿山治理工程施工组织设计方案(240页).docx
  21. 崖城站悬臂式挡墙施工方案(92页).doc
  22. 北京科技园公寓建设项目整体报告方案.ppt