大型钢结构工程安装专项施工方案(完整图文)_第1页
大型钢结构工程安装专项施工方案(完整图文)_第2页
大型钢结构工程安装专项施工方案(完整图文)_第3页
大型钢结构工程安装专项施工方案(完整图文)_第4页
大型钢结构工程安装专项施工方案(完整图文)_第5页
已阅读5页,还剩85页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

施工组织设计(方案)报审表致:XXX工程管理有限公司我方已根据施工合同的有关规定完成了XXXXXXXXX项目加压气化钢结构安装工程施工组织设计(方案)的编制,并经我单位上级技术负责人审核批准,请予以审查。附:施工组织设计(方案)承包单位(章):项目经理:日期:专业监理工程师审查意见:专业监理工程师:日期:总监理工程师审查意见:项目监理机构(章):总监理工程师:日期:工程名称:XXXXXXXXXXX项目XXXXXX项目——钢结构安装专项施工方案批准:审核:编制:XXXXXXX2017年4月25日目录第一章工程概况 1第二章编制依据 1第三章施工进度计划 1第四章施工准备 2第五章钢柱安装 6第六章钢梁安装 9第七章梁柱焊接 12第八章其余构件安装 15第九章检验及验收 15第十章确保质量的技术措施 16第十一章确保安全的技术组织措施 19第十二章文明施工和环境保护措施 23第十三章危险源辨识与防护措施 24PAGEPAGE87第一章工程概况XXXXXXXXXXX项目——加压气化高层及多层钢结构为钢框架-支撑结构,设计使用年限50年,结构安全等级为一级,抗震设防烈度7度(0.15g),设计地震分组为第三组,建筑场地类别二类。该结构抗震设防类别为重点设防(乙类),钢框架抗震等级为二级。该钢结构安装标高为-5m∽74m,共计14层,主要构件包括十字型钢柱、H型钢柱、H型钢梁、柱间支撑、钢格板、钢楼梯、栏杆、屋面构件等,其中第一节钢柱-5m~-1.95m采用混凝土钢包柱形式。第二章编制依据根据设计图纸,国家规范、规程等编制施工方案。1、《建筑工程施工质量验收统一标准》(GB/50300-2013)2、《钢结构工程施工质量验收规范》(GB/50205-2012)

3、《钢结构焊接规范》(GB50661-2011)4、《钢结构工程质量检验评定标准》(GB50221-2001)5、《钢结构焊接连接节点通用图》HUALU1X02-2014施工进度计划加压气化钢结构安装进度计划序号施工内容20天25天30天35天1-5m~5m结构25m~28m结构328m~43.5m结构443.5m~74m结构第四章施工准备1、技术准备1.1、技术资料:根据施工需要配备施工所需的规范、规程、标准、标准图集、定额及质量评定表格等。1.2、图纸自审会审:项目技术负责人组织技术、质检、预算、测量等相关人员对施工图纸进行自审,审查各专业之间、专业节点之间及说明与图纸之间是否矛盾,由专人负责将自审汇总形成自审记录。参加建设单位组织的图纸会审,明确设计意图和工艺要求,解决自审中提出的问题。2、现场准备2.1、按施工组织设计做好施工作业现场平整、电路畅通。2.2、施工机具及仪器准备齐全。2.3、现场施工安全防护装置准备齐全。3、劳动力准备及劳动力进场计划在工程施工过程中组建相应的专业操作班组,成立一个铆焊作业班组,其中包括:铆工、电焊工、火焊工、起重工、测量工、电工、普工等工种;本工程按项目法组织施工,严格按照ISO9002质量体系进行全面的质量管理,加强对工程质量的预控和检查力度;在微观上优化配置劳动力,引入“择优上岗”的竞争机制,全面推行“奖优罚劣”的管理办法,强化每一个操作人员的质量意识,从劳动力调配和劳动力管理方面保证工程各项目标的实现,具体劳动力安排见劳动力计划表。附:劳动力计划表铆工8测量工2电焊工8电工2火焊工4普工12起重工24、主要施工机具准备施工机械设备应根据工程需要配置,并经调试运转合格后投入使用。检测设备应根据各专业方面需要配置,并经校检合格后投入使用。附:主要施工机具计划表序号机具或设备名称型号规格数量1汽车吊260T12履带吊100T13CO2保护焊机OTC-XD-50044交流电焊机OTC-KC-50045焊条烘干箱ZYHC-4016水准仪17经纬仪28安全带209揽风绳200米10安全绳Φ8镀锌钢丝绳sisheng绳200米11灭火器35、吊装机械的选用

吊装机械的选型及布置为施工中的重点与难点,直接影响着施工方案的可行性、安全性与经济性。根据现场周围作业环境,吊车可在5轴东侧及1轴西侧吊装钢构件。1轴西侧回转半径约为18m,5轴东侧回转半径约为32m,根据各构件重量及安装标高综合考虑选择合适的吊装机械。选择的吊装机械为:260t汽车吊和100t履带吊。附:260吨汽车吊性能参数附:100吨履带吊性能参数第五章钢柱安装安装依据安装依据设计施工图及《钢结构工程施工质量验收规范》的要求进行。1、工作面的交接1.1钢结构系统在安装之前,需要与土建专业进行工作面的交接工作,为钢结构施工提供良好的安装作业面。1.2在进行安装作业面的交接之前需要与其他专业协调,留出充分的安装周期,保证施工的质量及工期目标。1.3钢柱基础地脚螺栓的埋设精度,直接影响到钢柱的安装质量与进度,所以在钢柱吊装前,必须对已完成施工的预埋螺栓的轴线,标高及螺栓的伸出长度进行认真的核查,验收。对超过规范不合格者,要提请监理和有关方会同解决。对弯曲变形的地脚螺栓,要进行校正;螺纹要清理干净,对已损伤的螺牙要进行修复,并应将所有埋设好的螺栓予以保护。

2、钢柱吊装

本工程第一节钢柱主要为十字柱、H型柱。根据钢构件的重量及吊点情况,准备足够的不同长度、不同规格的钢丝绳以及卡环。准备好爬梯、缆风绳、工具包以及扳手等小型工具。

安装前要对预埋件进行复测,并在基础上进行放线。根据钢柱的底标高调整好螺杆上的螺帽。然后钢柱直接安装就位。当由于螺杆长度影响,螺帽无法调整时,可以在基础上设置垫铁进行垫平,就是在钢柱四角地脚螺栓处设置垫铁,并由测量人员跟踪抄平后钢柱安装就位,每组垫铁宜不多于5块。垫铁与基础面和地脚板的接触应平整、紧密。钢柱吊升到位后,首先将钢柱底板穿入地脚螺栓,放置在调节好的螺帽上,并将柱的四面中心线与基础放线中心线对齐吻合,四面兼顾,中心线对准或已使偏差控制在规范许可的范围以内时,穿上压板,将螺栓拧紧。即为完成首层钢柱的就位工作。

当首层梁柱安装并焊接完成及柱脚二次灌浆完成后,可进行上节柱的吊装。钢柱吊装从中间向四周扩散的顺序进行安装。钢柱起吊前,在柱顶设置3到4根揽风绳,当钢柱吊装到位后,立即安装对接用连接板,并拧紧螺栓,同时拉紧并固定好揽风绳。通过揽风绳及吊车调整钢柱的标高及垂直度,调整好后,在钢柱对接缝电焊打底一遍,确保钢柱稳定可靠后,方可摘钩,进行下一根钢柱的吊装,待安装完2~3根钢柱后,及时安装钢梁,增强已安装构件的安全稳定性。后续钢柱安装后,及时安装钢梁,并可陆续拆除前面的揽风绳,避免影响其他梁柱的安装。上层钢结构可依次按照次方法施工。钢柱安装需做好安全措施,每一层钢梁安装完成后,及时安装平台钢格板及钢楼梯,并设置临边栏杆,便于上节构件安装。若吊装上节柱时,平台钢格板未及时安装,需在钢柱周围采用跳板搭设临时平台,并在安装层高面设置安全绳,施工人员在高空作业必须系挂好安全带。3、测量控制3.1高层钢结构对安装测量精度要求较高,需要根据具体的构件截面型式和就位需求来进行标识和测量。在钢柱梁形成整体稳定结构前,钢结构安装位置需要进行多次调整,我们采取提前预计偏差趋势,加强临时固定措施和跟踪测量校正等方法进行测量定位和调校。

3.2柱垂直度的测控

钢柱就位后马上进行单根钢柱的垂直度校正,倾斜控制在1/1000内,便于钢梁的连接。待主梁全部安装完毕,作整体的垂直度测量,将测量结果加下节钢柱的轴线偏差,换算出校正后的柱顶轴线偏差。其中要考虑焊接收缩,局部向外侧倾斜预翻变形。

在钢柱的两个不同方向上架设经纬仪或线坠,且通过旋转最少3次经纬仪水平度盘,若投测点都重合,表明钢柱垂直度无偏差。第六章钢梁安装本工程钢梁为焊接H型钢梁。钢梁吊装就位时必须用安装螺栓进行连接。钢梁的连接形式有焊接和栓焊连接。钢梁安装时可先将腹板的连接板用安装螺栓进行固定安装,待调校完毕后,再进行焊接。1、钢梁安装顺序

同平面钢构件吊装,采用从中心向四周扩散的顺序进行吊装,并根据钢柱的吊装顺序依次安装。

立面上钢构件吊装,采用由下至上,顺序安装的方法进行。

相临钢柱安装完毕后,及时连接之间的钢梁使安装的构件及时形成稳定的框架,并且每天安装完的钢柱必须用钢梁连接起来,不能及时连接的应拉设缆风绳进行临时稳固。先主梁后次梁,局部稳定单元柱梁吊装时为了保证结构稳定、便于校正和精确安装,应首先固定顶层梁,再固定下层梁,最后固定中间梁。

2、钢梁吊装的注意事项钢梁吊装前,应清理钢梁表面污物;对产生浮锈的连接板和摩擦面在吊装前进行除锈,待吊装的钢梁应装配好附带的连接板,并用工具包装好螺栓。钢梁吊装就位时要注意钢梁的方向,确保安装正确。钢梁安装就位时,及时夹好连接板,对孔洞有偏差的接头应用冲钉配合调整跨间距,然后再用螺栓连接后焊接。

3、钢梁吊点的设置

为提高钢梁吊装速度,由制作厂制作钢梁时预留吊装孔,作为吊点。钢梁安装采用两点平吊,如下图所示:

如单根钢梁重量不大,满足一机多吊的要求时,可通过吊装孔多件串吊,如下图:

4、钢梁吊装安全措施4.1、吊装前仔细检查钢丝绳、卡环及吊耳,确保吊装机具的牢固可靠性。4.2、钢梁吊装时,要保持水平起吊,行进过程中始终保持平稳,并使用揽风绳调整钢梁水平位置,避免撞击它物,直到钢梁到达安装位置。4.3、钢梁吊装前,在钢柱上悬挂直爬梯,待钢梁吊装到位后,施工人员通过直爬梯到达梁柱连接点,并及时系好安全带,方可进行螺栓安装等操作,待螺栓初拧紧固后,可在梁上安置吊笼,便于螺栓终拧及梁翼缘板的焊接作业。本次施工中共制作四个直爬梯和两个吊笼,示意图如下:直爬梯示意图吊笼示意图梁柱焊接1、梁柱焊接材料为J507Φ4.0焊条和二氧化碳气体保护焊焊丝ER50-6Φ1.2mm。2、焊接工作由经过考试并取得合格证的焊工承担。焊接时,焊工须遵守焊接工艺,不得自由施焊及在焊道外的母材上引弧,不得使用药皮脱落或焊芯生锈的焊条和受潮结块的焊剂以及已熔烧过的渣壳。3、焊条使用前按其说明书进行烘培,烘培后放入保温筒内,随用随取。焊丝在使用前清除油污、铁锈。保护气体纯度符合焊接工艺评定的要求。4、定位焊所采用的焊接材料与焊件材质相匹配,焊缝厚度不超过设计焊缝厚度的2/3,且不大于8mm,焊缝长度不小于25mm,定位焊位置布置在焊道以内,并由持合格证的焊工施焊。5、多层焊接连续施焊,每一层焊道焊接完毕后及时清理检查,清除缺陷后再进行下层焊道焊接。6、焊缝出现裂纹时,焊工不得擅自处理,须查清原因,订出修补工艺后方可处理。焊缝同一部分的返修次数不超过两次。对接焊缝余高:板厚大于20mm时,余高为0~4mm;板厚小于20mm时,余高为0~3mm。角焊缝余高:焊脚高度大于6mm时,余高为3mm;焊脚高度小于等于6mm时,余高为0~1.5mm。7、焊接检验:按标准GB50205-2001《钢结构工程施工质量验收规范》中的要求进行。焊接完毕,焊工清理焊缝表面的熔渣及两侧的飞溅物,检查焊缝外观质量须符合要求。二级焊缝合格率达到96%以上。附图:梁柱强轴刚接节点示意图钢柱对接节点示意图其余构件安装其余构件主要有钢楼梯、钢格板、栏杆、屋面彩板。钢楼梯安装时,需保证楼梯坡度符合图纸要求,上下节点焊接牢固,钢梯踏步板为G255/30/100镀锌钢格板。钢格栅板选用《YB/T4001.1-2007》,型号为G325/30/100WFG镀锌钢格板。安装需保证钢格板平台表面的平整度,承载扁钢的方向与承载钢梁垂直,且沿短向铺设,钢格板间距为10mm,钢格板调整完毕后,需在四个角点焊或焊钉的方式固定钢格板。栏杆选用图集《钢梯》(15J401)中的LG11-1200,所有平台临空处均设置栏杆,为避免栏杆与管道碰撞,栏杆在管道安装完成后施工。压型金属板50mm厚岩棉夹芯板,压型板应在支撑构件上可靠搭接,搭接长度为200mm,包角板及泛水板应固定牢固。压型金属板安装应平整、顺直,板面不应有残留物及污物,檐口应成直线。第九章检验及验收1、钢结构制作完毕必须对其几何尺寸进行检验,其质量评定按《钢结构工程质量检验评定标准》(GB50221-2001)的规定执行,竣工验收按《钢结构工程施工质量验收规范》(GB50505-2012)的标准执行。2、钢构件空间布置、中心、水平、标高必须符合设计要求。第十章确保质量的技术措施1、质量保证体系及组织机构建立由项目经理领导,项目技术负责人、专业施工员中间控制、专职质检员检查的三级管理系统,制定科学的组织保证体系,并明确各岗位职责。同时认真自觉的接受业主、监理单位、当地质量监督机构和社会各界对工程质量实施的监督检查。通过项目质量管理体系协调运作,使工程质量始终处于受控状态。全面、全方位控制工程施工全过程,严格控制每一个分项、分部工程的质量,以确保工程质量目标的实现。2、质量管理体系运行施工质量管理体系是整个施工质量得以控制的关键,工程质量的优劣是对项目班子质量管理能力的最直接的评价。依据国际性的质量管理和质量保证标准ISO9001建立程序化的质量管理体系,使项目施工的每一过程、每一环节都处于受控状态。钢结构安装质量保证体系运行流程图是是是是是否否否否执监理工程师核验序执行不合格品控制程序监理工程师核验监理工程师核验合格?进入下道工序施工执行不合格品控制程序填写自检记录交下道工序施工班组互检互检合格?填写交接检记录质检员根据自互检记录抽检抽检合格?填报检验批质量评定记录钢结构安装工程工序施工准备钢结构安装工程工序施工本工序施工完成后自检自检合格?不合格品控制执行不合格品控制程序3、质量保证程序4、施工质量控制体系质量控制体系是运用科学的管理模式,以质量为中心所制定的保证质量达到要求的循环系统,质量控制体系的设置可使施工过程中有法可依。4.1施工质量控制体系的设置施工质量控制体系是按科学的程序运转,其运转的基本方式是PDCA的循环管理活动,它是通过计划、实施、检查、处理四个阶段把生产过程的质量有机地联系起来,而形成一个高效的体系来保证施工质量目标的实现。4.1.1、以质量目标为依据,编制分部工程质量目标计划,这个目标计划应使在项目参与管理的全体人员均熟悉了解,做到心中有数。4.1.2、在目标计划制定后,施工现场管理人员应编制相应的工作标准,要求施工班组实施。在实施过程中进行方式、方法的调整,以使工作标准完善。3、在实施过程中,无论是施工员还是质检人员均要加强检查,在检查中发现的问题及时解决,以使所有质量问题解决于施工之中。并同时对这些问题进行汇总,形成书面材料,以确保在今后或下次施工时不出现类似问题。第十一章确保安全的技术组织措施1、安全生产管理措施项目经理:XXX1.1项目部安全保证体系图项目经理:XXX专职安全员:XXX专职安全员:XXX质量检查员:XXX质量检查员:XXX材料管理员:XXX技术负责人:XXX材料管理员:XXX技术负责人:XXX资料管理员:XXX设备管理员:XXX各施工班组各施工班组2、安全保证体系运行流程图3、职业健康安全措施3.1、认真执行国家相关的法律法规及顾客要求,建立健全职业健康安全管理体系,规范管理体系各要素的管理和控制,确保管理体系的符合性、适宜性和有效性。3.2、全面贯彻执行公司《质量、环境、职业健康安全一体化管理手册》、《程序文件》规定的要求,确定项目职业健康安全管理目标,以目标管理为核心,开展体系的管理和运行工作。3.3、按工程施工阶段进行危险源风险因素的识别和评价,对所有危险源风险因素进行广泛的宣传教育,使进入现场的所有人员都能准确了解现阶段施工现场的危险源风险因素,以提高自我保护意识。3.4、对已确定的重大危险源风险因素均进行明确标识,并制定和实施管理方案进行控制。3.5、对各种设施、设备和“四口”、“五临边”等安全危险部位均挂牌明确标志,并按规定采取安全防护和保护措施。3.6、各专业技术人员在编制施工方案的同时,详细编制安全技术措施,并协同专职安全员编制分项工程安全技术交底,以及各种机具的安全操作规程,发至各专业施工班组,并随时检查实施情况。3.7、施工负责人、生产调度员在安排每月计划的同时,必须对本月的施工做出安全交底。在安排生产的同时,优先安排职业健康安全管理活动。3.8、施工班组在每天安排施工任务的同时,组长及班组安全员认真详细做好当日安全交底,并进行记录。做到有据可查。3.9、所使用的安全防护用品,必须达到国家安全标准。项目部必须无条件地保证安全用品发放和使用。3.10、特殊工种必须持证上岗,坚决杜绝无证上岗。3.11、特种作业、高空作业必须划出禁区,并设置围栏,挂牌示警,并设专人看护以免无关人员误入。3.12、高空作业所用梯子、吊具、索具等,必须按规定搭设和安装,材料必须符合有关规定。小型工具,应随手放入工具袋中,以免坠落。3.13、所有施工机械及工机具在使用前必须进行认真检查,确保安全后方可使用。3.14、施工现场用电采用三相五线制,用电设备采用三级用电,两级漏电保护,所有机电设备要做好接地和防雷保护,传动部位要设安全保护罩。3.15、施工电缆要埋地或架空铺设,不准随地乱拖,以免车辆碾压破损后发生触电事故,地下埋设的电缆在周围建筑物上,要有警示标志,防止挖土时挖断。3.16、施工电缆和电线要架空布设时,不能绑在钢管或其它钢结构上,所有开关保险严禁用铝丝或铜丝代替。3.17、建立安全环保巡视制度,设置施工现场安全环保巡视员,随时进行巡视检查,对所发现的问题立即进行整改,以杜绝任何形式的职业健康安全事件发生。3.18、针对可能发生的紧急情况,按照管理体系规定的要求,制定应急预案,规定管理人员的应急职责,配备必要的设施,使突发事件得到有效控制。4、现场施工安全管理措施4.1、工人进场时,及时做好安全三级教育,组织安全知识学习并进行考核,对考核不合格的职工不能录用。组织工人进行安全技术培训和考核,做到持证上岗,对无证操作者一律不允许上岗作业。4.2、在施工生产前,施工技术人员应做好安全技术交底,交底内容应针对施工作业的实际情况,作详细、具体、明确的安全交底。4.3、施工现场所有工人必须严格执行《建筑安装工程安全技术规程》和《建筑安装工人安全技术操作规程》。施工人员应熟知本工种的安全技术操作规程,正确使用个人防护用品采取安全防护措施,进入现场必须遵守安全纪律和制度。4.4、安装用移动式梯子,梯脚底应坚实,并有防滑措施。立梯工作角度以75°±5°为宜,踏板上下间距以30CM为宜,不得缺档;人字梯两边支间夹角以60°为宜,并系好保险拉绳,禁止两人同在一个梯面上工作。4.5、施工现场按施工段、作业点划分区管理,每道工序做到“工完场清”,施工垃圾集中堆放,及时清运,不得在施工中从高空流放倾倒污水、垃圾。材料和工具及时回收、维修、保养、利用、归库,各工序成品保护好。4.6、施工现场机械设备整洁,安全保护装置齐全可靠,并按规定设置机具安全操作规程牌,电气开关箱应带锁。施工现场人员遵守国家有关法律法规,遵守社会公德、职业道德和职业纪律,妥善处理现场周围的公共关系,工地内治安秩序良好。第十二章文明施工和环境保护措施1、科学的布置施工平面图,按照施工平面图设置各项临时设施,布置各种材料堆放场地、机具堆放场地,并保持施工道路畅通。2、做到施工区、管理区、生活区布置合理,并各划分区域,各成一体。3、每一个分项工程施工完,应认真清理现场,做到工完料尽,现场整洁有序。4、施工现场的用电线路、用电设施的安装使用必须按规范、标准安装并符合安全操作规程。5、进入厂区作业人员必须遵守龙兴矿业有限公司的厂纪、厂规,各级人员要有良好的职业道德,树立企业形象。6、做好各工种、各专业之间的协调配合工作,避免野蛮施工。第十三章危险源辨识与防护措施加压气化第一节钢结构安装主要危险源有高空坠落(高空作业及吊装),现场临时用电触电、焊接作业火灾等。1、高空坠落(高空作业及吊装)防护措施1.1从事高空作业人员应进行体格检查,患有高血压、心脏病及不适宜高空作业人员,不得从事高空作业。1.2尚未安装栏杆的高空平台应设临时围栏,方准施工人员上高空作业。1.3超过两米以上高空作业人员,必须系好安全带,高空作业人员应将材料、机具、工具放置妥当,以免掉下伤人,严禁随意上下乱仍物件。1.4钢结构安装时有大量的高空作业,脚手架搭设要牢固,间距和高度要适当,跳板铺设要符合要求。1.5大风天(风速大于10.8m/s)、雷雨天气禁止高空作业。1.6吊装作业前,应对吊装人员进行安全技术教育和安全技术交底和培训,配备好安全防护用品,明确安全生产责任制和具体分工。1.7吊装作业执行交接班制度,交接班时应进行吊装作业有关安全注意事项等内容的交接工作,吊装工具应在交接班时进行安全检查,已磨损或有隐患的应及时更换。1.8吊装工作区应有明显标志,设专人警戒,与吊装无关人员严禁入内,起重臂下严禁站人。1.9构件安装后,应检查连接牢固和稳定情况,检查合格后,才可松钩、卸索。1.10起吊构件应使用交互捻制的钢丝绳,要求有一定的安全系数,钢丝绳有扭结、变形、断丝、锈蚀等现象时,应降低使用标准或报废。编结绳扣应使各股松紧一致,编结长度不小于钢丝绳直径的1、5倍,并不短于300mm,用卡子连成绳扣时,卡子不得少于3个。使用绳卡应将有压板的放在长头一面。使用两根以上绳扣吊装时,吊绳间夹角如大于100°,应采取防滑措施,用四根钢丝绳扣吊装时,应在绳扣间加铁扁担等调节松紧程度。1.11吊装作业过程中,重物下和受力绳索周围人员不得停留。吊至高空的构件,如遇停电应采取措施放下,不得使重物悬空过夜。2、现场临时用电防触电防护措施现场临时用电设置必须符合《施工现场临时用电安全技术规范》(JGJ46-2005)的要求。2.1进入施工现场,对现场勘查完毕后,编制用电组织设计,按“三级配电两级保护”和“一机、一闸、一漏、一箱”的要求进行临电布设,电缆采用埋地敷设。布设完毕后,经编制、审核、批准部门和使用单位共同验收,合格后方可投入使用。2.2电工和用电人员必须经国家现行标准考核合格后,持证上岗工作;其他用电人员必须通过相关安全教育和技术交底,考核合格后方可上岗工作。2.3线路设置:⑴电缆埋地时埋设深度不小于0.7m,并应在电缆上、下、左、右侧均匀敷设不小于50mm厚的细砂,然后覆盖砖或混凝土板等硬质保护层,埋地电缆路径设方位标志。⑵埋地电缆在穿越建筑物、构筑物、道路、易受机械损伤、介质腐蚀场所及引出地面2.0m高到地下0.2m处,必须加设防护套管,防护套管内径不小于电缆外径的1.5倍。⑶在建筑物内的电缆线路采用电缆埋地引入,严禁穿越脚手架引入。电缆水平辐设宜沿墙或门口刚性固定,最大弧垂距地不小于2.0m。⑷潮湿场所或埋地非电缆配线必须穿管敷设,管口和接头应密封;当采用金属管敷设时,金属管必须等电位连接,且必须与PE线相连接。⑸室内配线必须有短路保护和过载保护。对穿管敷设的绝缘导线线路,其短路保护熔断器的熔体额定电流不应大于穿管绝缘导线长期连续服荷允许载流量的2.5倍。2.4配电箱及开关项箱的设置:⑴总配电箱应设在靠近电源的区域,分配电箱应设在用电设备或负荷相对集中的区域,分配电箱与开关箱的距离不得超过30m,开关箱与其控制的固定式用电设备的水平距离不宜超过3m。⑵每台用电设备必须有各自专用的开关箱。严禁用同一个开关箱直接控制2台及2台以上用电设备。⑶配电箱、开关箱应装置在干燥、通风及常温场所。周围应有足够2人同时工作空间和通道,不得堆放任何妨碍操作、维修的物品,不得有灌木、杂草。⑷配电箱、开关箱内的电器(含插座)应按其规定位置紧固在电气安装板上,不得歪斜和松动。⑸配电箱的电器安装板上必须分设N线端子板和PE线端子板。N线端子板必须与金属电器安装板绝缘;PE线端子板必须与金属电器安装板做电气连接。进出线中的N线必须通过N线端子板连接;PE线必须通过PE线端子板连接。⑹配电箱、开关箱的金属箱体、金属电器安装板以及电器正常不带电的金属底座、外壳等必须通过PE线端子板与PE线做电器连接,金属箱门与金属箱体必须通过采用编织软铜线做电器连接。⑺配电箱、开关箱外形结构应能防雨、防尘。2.5电器装置设置:⑴配电箱、开关箱内的电器必须可靠、完好,严禁使用破损、不合格的电器。⑵总配电箱的电器应具备电源隔离,正常接通与分断电路,以及短路、过载、漏电保护功能。⑶分配电箱应装设总隔离开关、分路隔离开关以及总熔断短路器、分路断路器。⑷开关箱中漏电保护器的额定动作电流不应大于30mA,额定漏电动作时间不应大于0.1s。使用于潮湿或有腐蚀介质场所的漏电保护器应采用防溅产品,其额定漏电动作电流不应大于15mA,额定漏电动作时间不应大于0.1s。⑸总配电箱中漏电保护器的额定漏电动作电流应大于30mA,额定漏电动作时间应大于0.5s,但其额定漏电动作电流与额定漏电动作时间的乘积不应大于30mA。⑹总配电箱和开关箱中漏电保护器的极数和线数必须与其负荷侧负荷的相数和线数一致。⑺配电箱、开关箱中的漏电保护器宜选用辅助电源型(电磁式)产品,或选用辅助电源故障时能自动断开的辅助电源型(电子式)产品。当选用辅助电源故障时不能自动断开的辅助电源型(电子式)产品时,应同时设置缺相保护。⑻漏电保护器应按产品说明书安装、使用。对搁置已久重新使用或连接使用的漏电保护器应逐月检测其特性,发现问题应及时修理或更换。⑼配电箱、开关箱的电源时线端严禁采用插头和插座做活动连接。2.6使用与维护⑴配电箱、开关箱应有名称、用途、分路标记及系统接线图。⑵配电箱、开关箱箱门应配锁,并应由专人负责。⑶配电箱、开关箱应定期检查、维修。检查、维修人员必须是专业电工。检查、维修时必须按规定穿、戴绝缘鞋、手套,必须使用电工绝缘工具,并应做检查、维修工作记录。⑷对配电箱、开关箱进行定期维修、检查时。必须将其前一级相应的电源隔离开关分闸断电,并悬挂“禁止合闸、有人工作”停电标志牌,严禁带电作业。⑸配电箱、开关箱必须按照下列顺序操作:①送电操作顺序为:总配电箱一分配电箱一总配电箱;②停电操作顺序为:开关箱一分配电箱一总配电箱。但出现电气故障的紧急情况可除外。⑹施工现场停止作业1小时以上时,应将动力开关箱断电上锁。⑺配电箱、开关箱内不得放置任何杂物,并应保持整洁。⑻配电箱、开关箱内不得随意挂接其他用电设备。⑼配电箱、开关箱内的电器配置和接线严禁随意改动。⑽熔断器的熔体更换时,严禁采用不符合原规格的熔体代替。漏电保护器每天使用前应启动漏电试验按钮试跳一次,试跳不正常时严禁继续使用。⑾配电箱、开关箱的进线和出线严禁承受外力,严禁与金属类锐断口、强腐蚀介质和易燃易爆物接触。2.7施工机具⑴使用电动工具,操作人员应戴好绝缘手套,穿绝缘胶鞋。施工现场的电动工具不用时,必须断电,使用电动工具的工作完成后,由专业配电人员及时拆除线路,固定式电动工具和电动设备应在其旁边明显位置悬挂安全操作规程,使用金属外壳的电动工具有可靠接地。⑵使用电焊机和操作其它电动工具时,不能站在湿润地带,应采用相应的安全措施。电焊机的一、二次接线板,应有防护罩,并应有独立的电源控制装置,放置地点应选在防雨、防潮、防晒的地点。电焊在施焊前应检查周围,确认无易燃物方可施焊。动用明火前,应在安全部门开具动火证,并有专人看守。3、焊接作业火灾防护措施3.1电焊机外壳必须有良好接地,每台电焊机应单独设置电源开关。3.2电焊龙头线,地线禁止与钢丝绳接触,不得用钢丝绳和施工安装设备代替零线,所有线接头必须固紧。3.3多台电焊机集中焊接施工时,焊接件及设备必须接地良好,接地电阻须检测,应符合安全规程要求。3.4乙炔瓶使用时,须经常检查回火保护装置,不得与氧气瓶同放一处,气割或施焊位置应离开易燃易爆物距离大于10m。3.5氧气瓶不得在烈日下曝晒,并应防止油类污染,在临时场所施工时,氧气瓶上应设临时棚架遮盖之。3.6焊接作业时焊接周围及作业下面垃圾及材料,易燃物品清理干净。数据中心建设方案信息技术有限公司目录第1章 方案概述 31.1. 建设背景 31.2. 当前现状 41.3. 建设目标 6第2章 方案设计原则 72.1. 设计原则 72.2. 设计依据 9第3章数据中心方案架构 103.1数据中心架构设计 103.2大数据处理设计 163.3大数据存储设计 213.4安全设计 233.5平台搭建实施步骤 283.6物理架构设计 29第4章数据中心网络方案组成 324.1. 防火墙设计 324.2. 接入层设计 324.3. 网络拓扑 33第5章数据中心基础设施方案组成 345.1. 机柜系统设计 345.2. 制冷系统设计 365.3. 供配电系统设计 415.4. 模块监控系统设计 45第6章运维方案 516.1. 技术和售后服务 516.2. 售后服务项目 516.3. 售后服务项目内容 51方案概述“百年大计,教育为本”,教育行业是我国经济发展的关键命脉之一,伴随着数据集中在教育业信息化的逐渐展开,数据中心在企业和信息化的地位越来越重要。教育数据中心建设已成为教育机构信息化趋势下的必然产物。教育数据中心作为承载教育机构业务的重要IT基础设施,承担着教育机构稳定运行和业务创新的重任。在教育机构新型客户服务模式下,数据中心需要更高效地支持后台业务和信息共享需求,同时要24小时不间断的提供服务,支持多种服务手段。这对教育数据中心的资源整合,全面安全,高效管理和业务连续性提出更高的要求。此数据中心建设方案主要对数据中心的基础设施和网络规划部分提出整体建议,保证数据中心的高性能、安全、可靠,从而使数据中心能承载更多高品质的业务。建设背景自从出现数字化教育以来,数据中心作为数字化交易的核心,被各个教育系统广泛采用。目前随着教育电子化的推广,客户市场细分的深入,教育产品设计的专业化,以及对于教育系统安全性的要求。教育系统的数据中心需要更强大的运算能力,更多的存储空间,更安全可靠的规划和设计。不仅如此,教育系统相比其他行业的数据中心有其自身特有的特点和要求。教育行业数据中心的非常重要的一点就是安全和可靠。因为哪怕是短时间的网络瘫痪也会造成非常广泛和严重的后果。这对教育数据中心的资源整合,全面安全,高效管理和业务连续性提出更高的要求。所以教育行业数据中心产品和方案的应用必须采用更高等级的产品和整体设计方案,以满足对于系统安全性的要求。从数据大集中到多业务整合,教育行业的数据中心建设正围绕着业务发展的需要迅速展。教育基础设施的建设,很重要的一个环节就是教育数据中心的建设。教育数据中心工程不仅集建筑、电气、安装、网络等多个专业技术于一体,更需要丰富的工程实施和管理经验。教育数据中心设计与施工的优劣直接关系到数据中心内计算机系统是否能稳定可靠地运行,是否能保证各类信息通讯畅通无阻。由于教育数据中心的环境必须满足计算机等各种数据,以达到反馈信息和处理问题的功效。特别是要将需要解决电池放电状态和旁路运行状态的监控管理问题等重要信息发到主要负责人的手机上,以便能随时掌握信息,对一些天气灾害停电而有应急预案。当前现状随着业务的发展,数据中心的问题与日俱增,数据中心所面临的压力和挑战也越来越大:业务的不断调整和改变让数据中心总体架构面临极大的压力、有限的物理空间让数据中心扩展性和灵活性有所限制、虚拟化的欠缺让数据中心资源调配能力有限、复杂多变的异构环境让数据中心管理效率异常低下、高居不下的耗电量让数据中心能源成本迅速上升。这些问题与挑战让数据中心管理者迫切需要对数据中心进行整合和升级。通过有效的整合让传统数据中心升级成为一个智能化、自动化、高效化的数据中心。当前数据中心面临的问题:可靠性问题供电可靠性是数据中心安全性的重要保障,随着以信息技术为支撑的新业务的不断涌现,教育行业数据中心对供电可靠性的要求大大提升。在数据中心领域,动力平台的可用性指标分别高于数据中心的可用性指标和整个网络系统的可用性指标,因此,对动力平台的关注理应放到最核心的位置。比如服务器电源的冗余方式发生了变化,供电系统就应当做出相应改变。刀片服务器以及虚拟化的应用,使高热密度问题凸显,数据中心环境更加恶劣,制冷模式就也需要做出改变。节能降耗问题数据中心建设的加速,导致的最直接后果就是能源消耗量的急剧攀升。在当前全球能源紧张的大背景下,节能降耗是整个数据中心行业的大趋势。对于企业本身而言,能耗的急剧增长大大提升了数据中心的运行成本,数据中心的节能和能效改善已成为整个行业的迫切要求。管理与维护问题数据中心是一个庞大而复杂的系统,这些系统是一个有机的整体,牵一发而动全身,数据中心可靠性的发挥有赖于每个设备的正常运行,有赖于这些设备的协调一致,任何一个环节出现故障,都有可能造成巨大损失。因此,对整个系统的管理越来越重要,而难度也越来越大。扩容问题随着业务量的不断扩大,教育行业IT应用系统日益增长,服务器规模变得日益庞大,带来了高能耗、数据中心空间紧张、IT预算紧张等问题。同时,数据中心动力平台的匹配性却不够,要么利用率低,资源浪费严重;要么供电与制冷明显不足,影响数据中心可用性。简言之,动力系统对核心设备供电或者制冷需求的反映不够灵敏。针对上述问题,技术有限公司推出了创新型的数据中心解决方案。该解决方案具有高可用性、高节能性、高灵活性、高可维护性等四大特点,能够帮助教育行业客户解决数据中心建设与应用的难题,满足教育企业在信息化过程中对数据中心动力安全、节能环保等方面日益增长的应用需求。建设目标数据中心建设应达成以下目标:高可用数据中心的高可用直接影响到业务系统的可用性,高可用至少包括高可靠、高安全和先进性三个方面:高可靠:应采用高可靠的产品和技术,充分考虑系统的应变能力、容错能力和纠错能力,确保整个基础设施运行稳定、可靠。当今,关键业务应用的可用性与性能要求比任何时候都更为重要。高安全:基础设计的安全性,涉及到核心数据安全。应按照端到端访问安全、网络分层安全两个维度对安全体系进行设计规划,采用软硬件安全设备,从局部安全、全局安全到智能安全,将安全理念渗透到整个数据中心网络中。先进性:数据中心将长期支撑企业的业务发展,数据中心建设需要考虑后续的机会成本,采用主流的、先进的技术和产品,建立高性能,大容量存储的数据中心。易扩展随着信息化的发展,企业内通信网络的建立和全面覆盖,未来的业务范围会更多更广,业务系调整与扩展再所难免,因此数据中心必须能够适应业务系统的频繁调整,同时在性能上应至少能够满足未来5~10年的业务发展。对于设备的选择和协议的部署,应遵循业界标准,保证良好的互通性和互操作性,支持业务的快速部署。易管理数据中心是IT技术最为密集的地方,数据中心的设备繁多,各种协议和应用部署越来越复杂,对运维人员的要求也越来越高,单独依赖运维人员个人的技术能力和业务能力是无法保证业务运行的持续性的。因此数据中心需要提供完善的运维管理平台,对数据中心IT资源进行全局掌控,减少日常的运维的人为故障。同时一旦出现故障,能够借助工具直观、快速定位。方案设计原则设计原则根据“先进、实用、稳定、可靠”的总原则,对云数据中心软硬件系统进行科学合理的设计,保证中心建设的胜利完成。数据中心工程是智能弱电工程的重要组成部分。其基本要求可归纳为:保证系统运行的可靠性、保证系统的设计寿命、保证信息安全的要求、保证操作人员的工作环境。设计一个好的数据中心,要以兼顾人机并重之原则,一个合格的现代化计算机数据中心,应该是一个安全可靠、舒适实用、节能高效和具有可扩充性的数据中心,设计应以运行条件、安全可靠作为首要的考虑因素。因此对数据中心建设要求遵循以下设计原则:高安全可靠性为保证数据中心能为用户提供连续不间断的7×24小时服务,数据中心必须具有高可靠性。在系统设计时应注意尽量减少单点故障的存在,对存在单点故障的环节,在设计上必须减少其对整个系统的影响。由于该数据中心内部计算机系统涉及到机密信息,其泄密可能严重危害社会秩序,所以需要保证数据中心的安全性,必须具有安保系统以保证用户的设备和数据不受侵害。实现高安全性的措施包括:闭路电视监测、门禁系统、自动安全报警系统等。中心软硬件系统要高度可靠,虚拟机出现故障要能自动迁移,数据要有冗余备份,可以从故障中及时恢复。。可扩展性鉴于信息网络系统需求的不断发展与变化,技术也在不断提高,故在建设时应考虑这些变化对资源需求的改变,以使整个系统具有灵活的可扩展性,特别是精密空调、配电开关及配电柜、UPS及供电母线等。中心的服务器、存储、网络都可以不用停机就线性扩容服务器、存储、网络等设备。易于管理通过使用先进和可靠的管理工具来实现系统的高质量管理,以节约人力资源。由于数据中心内设备繁多,具有一定复杂性,随着业务的不断发展,管理的任务必定会日益繁重。所以在设计时,必须建立一套完善的数据中心管理和监控系统。实时监控、监测整个数据中心的运行状况、语音报警,实时事件记录,可以迅速确定故障,提高可靠性,简化数据中心管理人员的维护工作。中心的资源池支持方便灵活地管理维护和审计。高性能价格比数据中心所需设备的选型应该以适用为主,合理选择材料与设备;不要造成资源浪费;同时也要保证该数据中心的高可靠性。以较高的性能价格比设计数据中心,能以较低的成本、较少的人员投入来维持系统运转,提供高效能与高效益。中心的软硬件设施选择合理,具有高性价比。设计依据《电子计算机数据中心设计规范》GB50174-93《计算机场地技术条件》GB2287-89《计算机场地安全要求》GB9361-88《计算机机房活动地板技术条件》GB6650-86《建筑物防雷设计规范》GB50057-94《高层民用建筑设计防火规范》GBJ45《电子计算机机房施工及验收规范》SJ/T30003-93《建筑防火设计规范》GB5004-95《空调与通风工程施工及验收规范》GB50243-97《建筑与建筑群综合布线系统工程设计规范》GB/T50311-2000《建筑与建筑群综合布线系统工程验收规范》GB/T50312-2000《中华人民共和国通信行业标准》YD-T9261、2、3《国际综合布线标准》TIA/EIA568-B《供配电系统设计规范》GB50052-92《火灾自动报警系统设计规范》GBJ116-98《工业企业通信接地设计规范》GBJ79-85《高性能屏蔽室屏蔽效能的测量方法》GB12190第3章数据中心方案架构3.1数据中心架构设计云计算数据中心通过运行在单独的服务器上的云操作系统对服务器、存储、网络等资源进行虚拟化管理,提供可以自定义的虚拟机,在虚拟机上安装Hadoop、hbase等Nosql分布式数据库集群,对现有的数据ETL采集、清洗、转换、汇总进来,使用海量数据分布存储技术,用spark、storm等大数据处理软件对hbase中的数据进行分析处理,挖掘数据价值。还可以在虚拟机上运行业务应用系统,提供负载均衡和冗余备份,达到系统的稳定、高可用和方便的扩展性。通过安装SSR等安全软件和安全服务器,可以保证提升操作系统的安全级别,从而达到国家等级保护的三级要求,为客户构建真正的安全长城。云计算数据中心可以自动管理和动态分配、部署、配置、重新配置以及回收资源,也可以自动安装软件和应用,具有良好的弹性和灵活性,管理、使用方便。云中心可以向用户提供虚拟基础架构。用户可以自己定义虚拟基础架构的构成,如服务器配置、数量,存储类型和大小等等。用户通过自服务界面提交请求,每个请求的生命周期由平台维护。服务器虚拟化系统基于服务器,存储和网络设备构建资源池,在资源池上通过资源的管理、调度和镜像管理实现系统的各种高级功能,例如计算层面的系统负载均衡和虚拟机高可用,存储层面的镜像复制和冗余。系统支持以主机或者虚拟群集为单位管理资源,虚拟群集为一组共享存储资源的物理主机。云中心既是一个企业云,也可以对外提供服务,扩展成公有云。学校还可以使用别的公有云如阿里云,形成混合云。云中心包括iaas、paas、saas三层服务:1).SaaS:提供给客户的服务是运营商运行在云计算基础设施上的应用程序,用户可以在各种设备上通过客户端界面访问,如浏览器。消费者不需要管理或控制任何云计算基础设施,包括网络、服务器、操作系统、存储等等;2).PaaS:提供给消费者的服务是把客户采用提供的开发语言和工具(例如Java,python,.Net等)开发的或收购的应用程序部署到供应商的云计算基础设施上去。客户不需要管理或控制底层的云基础设施,包括网络、服务器、操作系统、存储等,但客户能控制部署的应用程序,也可能控制运行应用程序的托管环境配置;可以使用docker容器完成应用系统的部署和管理。3).IaaS:提供给消费者的服务是对所有计算基础设施的利用,包括处理CPU、内存、存储、网络和其它基本的计算资源,用户能够部署和运行任意软件,包括操作系统和应用程序。消费者不管理或控制任何云计算基础设施,但能控制操作系统的选择、存储空间、部署的应用,也有可能获得有限制的网络组件(例如路由器、,防火墙,、负载均衡器等)的控制。云中心采用xen、kvm、VMware进行虚拟化,LXC提供Linux容器,支持docker应用容器。一.服务器采用浪潮整机柜服务器SmartRack

,面向海量数据的存储和处理,适合云资源池如虚拟化、分布式存储,大数据处理如Hadoop集群等应用,目前在国内服务器中占主导地位,特点如下:定位多种应用,支持各类服务器节点。针对不同业务对存储、计算、IO吞吐量、功耗的不同要求,设计开发出不同种类的服务器节点,包括:1U全宽双路12盘位综合型节点、1U全宽单路18盘位冷存储节点、1U半宽双路计算型节点,满足不同需求。

整机柜集中供电、集中散热,相比其他架构服务器,运行功耗降低10%以上。整机柜由一组电源模块集中供电,最大输出功率高达22.5kw,直接支持交流或高压直流供电,各节点通过铜排从电源模块取电,结合电源负载动态调整技术,电源转换效率高达94%以上。机柜背部风扇墙集中散热,根据节点数量灵活调节风扇墙高度,采用140mm大尺寸风扇,相同功耗下可提供更大散热量。领先的架构设计,保障系统高可靠运行。服务器节点中无独立的电源和风扇,有效降低单点故障。根据整机柜实际负载情况,电源可实现N+N/N+2/N+1多种冗余方式。风扇可根据温度状况自动调节转速,支持2+1冗余。对整机柜节点、电源、风扇进行集中监控管理。实现管理中心RMC对整个机柜各模块的统一监控和管理,节点、电源、风扇的健康状况、温度、配置信息一目了然,还可进行批量开关机、重启,功耗控制,风扇转速自动/手动调节等功能,搭配专为SmartRack设计的可视化管理软件,轻松实现简易化智能管理。简易维护,无需繁琐拆装。独有节点前维护设计、各模组免工具热插拔设计、优化的线缆走线设计,使得系统运维难度大大降低。风扇等易损部件全部裸露在外,更加方便更换维护。二.云操作系统建议采用浪潮云海·云数据中心操作系统V3.0

,此系统秉承开放化、模块化、标准化的设计理念,基于虚拟化技术,实现了数据中心资源融合、资源管理及服务交付,简化了云数据中心运维,提高了云数据中心服务水平。云海·云数据中心操作系统有以下特点:自主可控、安全可靠的云数据中心操作系统:浪潮自主研发的国产云数据中心操作系统,加强了WEB安全、虚拟化安全、数据安全、访问控制、安全审计等方面的安全控制,可帮助用户构建安全可控的云数据中心。异构资源管理:云海OS支持对数据中心各类异构硬件设备及软件资源的统一管理;支持对VMWarevSphere、InspuriVirtual等异构虚拟化资源池的集中管理,已部署的虚拟化环境可被云海OS无缝接管;精细的软硬件资源监控:云海OS支持对数据中心主流厂商的服务器、网络设备、存储设备等物理资源,操作系统、数据库、WEB应用等软件资源,VMWarevSphere、InspuriVirtual等虚拟化环境的精细监控,提供界面、邮件、短信等多种告警方式,通过详尽清晰的报表分析数据,帮助数据中心的运维人员随时掌握数据中心的各类资源的运行状况,降低运维管理复杂度,提高运维效率。快速的服务交付:云海OS支持通过虚拟机模板、应用服务模板的方式,实现业务的快速交付,业务上线时间由原来的几周、几天,缩短为几分钟,大大提高数据中心的服务水平。资源使用按量计费:实时的资源使用情况统计,让用户精确掌控自身资源和费用使用情况,帮助IT部门实现由成本中心向价值中心的角色转变。资源按需服务:云海OS可实现将基础架构作为服务交付,用户可通过自助服务门户在线申请及访问自己的虚拟数据中心、应用服务、虚拟机等资源,实现资源的按需申请、便捷获取、自助使用。可定制的业务流程:云海OS支持用户创建与原工作流程吻合的资源申请的审批流程,实现业务流程的个性化、可定制化。灵活的服务交付方式:云海OS既支持从下到上的资源申请与审批,也支持从上到下的资源创建与分配的服务交付方式,可满足不同客户对资源获取方式的不同需要。多租户私有云:云海OS可创建多个组织,一个组织可代表某业务部门、分部或子公司。每个组织都有各自独立的虚拟数据中心、用户及独有的目录,可将组织资源分配给本组织的用户,每个组织如同拥有自己的数据中心。利用基于权限的用户控制机制和基于虚拟交换机的网络隔离技术,实现多租户环境下的安全性和可靠性,以此构建安全的多租户私有云。灵活可控的权限管理:云海OS支持用户自定义角色类型,不同的权限可自由组合,实现灵活可控的系统权限管理。服务全生命周期管理:云海OS涵盖服务提供所需的各个环节,包括服务的申请审批;服务的交付和回收;服务的使用统计和计费;服务的运行监控服务移动性:通过vApp封装多个虚拟机服务和相关的网络连接策略,遵循OVF等开放式标准,实现同一个云环境的终端用户彼此之间可以轻松共享服务,而不同的云环境的用户可以轻松的在云之间迁移服务。3.2大数据处理设计通过在虚拟机上安装Hadoop2.6、hbase1.0等Nosql数据库集群,用sqoop1.3把现有的数据汇总进来,要对现有数据做个总的分析,对字段统一定义规划,制定转换策略,做到正确性、唯一性、可用性,去除重复字段,通过ETL抽取、清洗数据,把数据导入hbase,这样就可以消除信息孤岛,用spark、storm等大数据处理软件对hbase中的数据进行分析处理,挖掘数据价值。云中心通过调度系统自动采集、加工、存储数据,为应用系统提供支持:在云中心的平台上,开发招生、创业、就业、数据实验室等应用系统,通过元数据库管理所有的数据数据经过采集、加工后进入hbase,消除信息孤岛,统一管理使用:一.hadoop2架构体系下图是hadoop2的架构图1.HDFS文件系统,Hadoop实现了一个分布式文件系统(HadoopDistributedFileSystem),简称HDFS。HDFS有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上;而且它提供高吞吐量(highthroughput)来访问应用程序的数据,适合那些有着超大数据集(largedataset)的应用程序。HDFS放宽了(relax)POSIX的要求,可以以流的形式访问(streamingaccess)文件系统中的数据。2、YARN是一套资源统一管理和调度平台,可管理各种计算框架,包括MapReduce,Spark,MPI等。包括以下内容:ResourceManager(RM):整个系统只有一个RM,它就只管调度方面的事情,并且为集群应用而优化,因而具有很好的性能。RM的一个核心是它的Scheduler。调度包含两个过程,一要搜集各节点的情况;二要根据某种调度策略,分配合适的节点。搜集节点情况是基于一个资源容器(resourcecontainer)的概念,该容器包括cpu,disk,network等(目前只用到cpu)NodeManager(NM):NM是每个节点一个实例,管理每个节点,它触发应用容器(applicationcontainer),监控节点的资源(cpu/disk等),并向RM报告资源的情况。ApplicationMaster(AM):AM是每个应用一个实例,它是一个特定的框架接口库,一方面与RM中的Scheduler协商得到resourcecontainer,另一方面与NM一起执行和监控各子任务部件,从系统的角度,AM本身也一种container(下图中将它与container画得一样)。Container:从逻辑上,container可认为是资源的分配容器,它包括hostname,cpu,memory等属性。AM发送ResourceRequest给RM,然后RM分配合适的Container给AM,AM再将此Container提交给它所在节点的NM,NM采用此资源容器运行任务。实际上,Container是一种使用资源的“授权”,AM得到此授权后,在NM的管理下,可以运行任何进程(包括非Java应用,这一点与1.0不同)。二、Hive是基于Hadoop的一个数据仓库工具,处理能力强而且成本低廉。主要特点:存储方式是将结构化的数据文件映射为一张数据库表。提供类SQL语言,实现完整的SQL查询功能。可以将SQL语句转换为MapReduce任务运行,十分适合数据仓库的统计分析。三、HBaseHBase是一个分布式的、面向列的开源数据库,它不同于一般的关系数据库,是一个适合于非结构化数据存储的数据库。另一个不同的是HBase基于列的而不是基于行的模式。HBase使用和BigTable非常相同的数据模型。用户存储数据行在一个表里。一个数据行拥有一个可选择的键和任意数量的列,一个或多个列组成一个ColumnFamily,一个Fmaily下的列位于一个HFile中,易于缓存数据。表是疏松的存储的,因此用户可以给行定义各种不同的列。在HBase中数据按主键排序,同时表按主键划分为多个HRegion,如下图所示(HBase数据表结构图):四.

Sqoop是一款开源的工具,主要用于在HADOOP(Hive)与传统的数据库(mysql、oracle...)间进行数据的传递,可以将一个关系型数据库(例如:MySQL,Oracle,Postgres等)中的数据导进到Hadoop的HDFS中,也可以将HDFS的数据导进到关系型数据库中。五.spark架构体系Spark与Hadoop的对比◆Spark的中间数据放到内存中,对于迭代运算效率更高。Spark更适合于迭代运算比较多的ML和DM运算。因为在Spark里面,有RDD的抽象概念。◆Spark比Hadoop更通用。Spark提供的数据集操作类型有很多种,不像Hadoop只提供了Map和Reduce两种操作。比如map,filter,flatMap,sample,groupByKey,reduceByKey,union,join,cogroup,mapValues,sort,partionBy等多种操作类型,Spark把这些操作称为Transformations。同时还提供Count,collect,reduce,lookup,save等多种actions操作。Spark的mllib支持机器学习。这些多种多样的数据集操作类型,给给开发上层应用的用户提供了方便。各个处理节点之间的通信模型不再像Hadoop那样就是唯一的DataShuffle一种模式。用户可以命名,物化,控制中间结果的存储、分区等。可以说编程模型比Hadoop更灵活。不过由于RDD的特性,Spark不适用那种异步细粒度更新状态的应用,例如web服务的存储或者是增量的web爬虫和索引。就是对于那种增量修改的应用模型不适合。◆容错性。在分布式数据集计算时通过checkpoint来实现容错,而checkpoint有两种方式,一个是checkpointdata,一个是loggingtheupdates。用户可以控制采用哪种方式来实现容错。◆可用性。Spark通过提供丰富的Scala,Java,PythonAPI及交互式Shell来提高可用性。Spark与Hadoop的结合◆Spark可以直接对HDFS进行数据的读写,同样支持SparkonYARN。Spark可以与MapReduce运行于同集群中,共享存储资源与计算,数据仓库Shark实现上借用Hive,几乎与Hive完全兼容。Spark的适用场景◆Spark是基于内存的迭代计算框架,适用于需要多次操作特定数据集的应用场合。需要反复操作的次数越多,所需读取的数据量越大,受益越大,数据量小但是计算密集度较大的场合,受益就相对较小◆由于RDD的特性,Spark不适用那种异步细粒度更新状态的应用,例如web服务的存储或者是增量的web爬虫和索引。就是对于那种增量修改的应用模型不适合。◆总的来说Spark的适用面比较广泛且比较通用。3.3大数据存储设计采用浪潮AS13000存储大数据

,支持容量、性能的在线无限扩展,提供软硬件故障情况下的数据重建、远程容灾功能,是适用于云计算、大数据业务并兼具高性能、高可靠、高可扩展、大容量特征的新一代存储系统平台,具有以下特点:。海量存储,在线横向扩展:1.控制器集群体系架构,所有控制器并行承担数据IO、保障系统整体负载均衡,数据分散存储,避免单控制器故障带来的风险和性能的瓶颈,支持控制器在线横向扩展,满足持续增长的容量和性能需求。2.支持NAS/Object/IP-SAN/IB-SAN存储接口,并且支持SAN、NAS、Object同时运行,满足客户在不同时间、不同地点、不同业务对存储的不同需求,支持Windows、Linux、Unix等多种操作系统并存的复杂网络环境中,轻松实现跨操作系统的数据存储与共享,另外支持NFS/CIFS/FTP等多种文件共享协议。3.支持丰富的主机连接接口,支持1Gb/10GbiSCSI、40Gb/56GbInfiniBand主机连接,无缝接入用户现有环境,满足客户对高带宽及高性能的差异化需求。4.全面支持Flash/SSD/SAS/SATA各类常见存储介质,模块化的容量扩展模式,支持数据分级存储,满足各类型应用。数据持续保护,业务运行无忧:1.支持数据卷隔离映射功能、数据快照功能、快照回滚、远程卷复制(同步/异步)、远程数据复制及恢复、逻辑分区动态扩容。2.支持数据副本、数据纠删码、自动分层等多种数据冗余保护和性能加速功能,为用户提供高级别的数据保护及容灾功能。3.支持全集群Active-Active、Active-Standby、全局热备等控制器工作模式,保障整体系统的高可用,确保数据存取及业务运行万无一失。4.支持软硬件故障时的数据自动修复,系统可用性达到99.999%。模块化设计,人性化管理1.AS13000各主要部件均采用模块化设计,客户按需选择,维护、升级、管理简单方便:2.支持数据副本、全局热备,以及自动构建RAID、各RAID级别间执行在线迁移不影响正常数据应用3.完备监控管理方式,当系统出现异常时,除了通过机器指示灯报警外,可通过邮件等方式将异常状况及时通知管理员4.集中部署,统一管理绿色节能:1).全系统选取节能降耗的处理器、芯片组、风扇和散热片等部件,提高系统的能效利用率。2).支持在线扩容/缩减时数据自动迁移,确保系统按需配置,同时支持Maid磁盘节能技术,降低磁盘能耗,节约开支。3).支持自动精简技术,大大提高存储资源利用率。3.4安全设计一.采用浪潮SSR主机安全增强系统,这是一款基于操作系统内核层开发的安全加固软件。与传统的防火墙、IDS/IPS不同,SSR工作在最贴近用户数据的操作系统层面,不仅可以避免外部的黑客攻击,同样可以预防来自内网攻击的风险。该产品弥补了传统信息安全解决方案在主机层安全的“短板”,与传统信息安全产品形成了良好的互补,提升操作系统的安全级别,从而达到国家等级保护的三级要求。为客户构建真正的安全长城。功能特性:1、强制访问控制在操作系统内核层实现文件、注册表、进程、服务、网络等对象的强制访问控制,可配置针对以上对象不同的访问策略来保护系统和应用资源,即使是系统管理员也不能破坏被保护的资源。2、完整性检测对文件和服务进行完整性检测,并可设置定期检测项目,当发现文件或者服务篡改时进行报警并发现哪些文件发生改变。3、防格式化保护功能开启时,可防止病毒和入侵者恶意格式化磁盘,同时降低管理员意外格式化磁盘的风险。系统资源监控与报警:对系统的CPU、内存、磁盘、网络资源进行监控,当这些资源的使用状况超过设置的阀值时将进行报警,以提前发现资源不足、滥用等问题。4、双因子认证和组合式密码认证不仅提供SSR安全管理员和SSR审计官员的USBKEY+密码的双因子认证功能,还可对系统用户配发USBKEY实现双因子认证。对于远程登陆和虚拟化

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论