加入收藏 | 设为首页 | 会员中心 | 我要投稿 温州站长网 (https://www.0577zz.com/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 云计算 > 正文

云计算大数据平台项目建设方案

发布时间:2022-11-19 14:47:22 所属栏目:云计算 来源:转载
导读: 本资源由会员分享,可在线阅读,更多相关《云计算大数据平台项目建设方案(36页珍藏版)》请在人人文库网上搜索。
1、云计算大数据平台项目建设方案1项目概况2对云计算大数据需求分析目 录

本资源由会员分享,可在线阅读,更多相关《云计算大数据平台项目建设方案(36页珍藏版)》请在人人文库网上搜索。

1、云计算大数据平台项目建设方案1项目概况2对云计算大数据需求分析目 录ONTENTSC 13云计算大数据建设及服务方案5成功案例4实施、运维管理3研究院云计算大数据需求的理解-业务需求电子公共服务平台智慧服务平台信息管理平台运营指挥中心院务类应用科技综合服务平台核课题管理服务平台智慧服务平台智慧生活服务平台智慧IT服务平台行业类应用中小企业云服务平台企业应用智慧企业人口基础库法人基础库科技库课题库科技人员库数据交换共享平台计算资源存储资源网络资源安全资源其他资源等基础平台资源标准规范安全体系运维体系人口基础信息汇集:公安局 人社局 教育局 法人基础信息汇集:工商局 环保局 国税局科技信息 中科院

2、 科技部 宏观经济信息汇集:统计局 商务局 地税局 院务数据汇集:住建局 民政局 管委会数据汇集数据支撑资源支撑社会公众企业组织管理人员管理统一:一套管理维护班子,集中维护力量,提高管理水平硬件统一:通过虚拟化等技术实现异构计算、存储等资源统一管理,按需分配平台统一:通过统一的中间件和数据库平台,实现共同的能力需求,统一的能力调配数据统一:通过数据统一管理,实现数据的全局视图及精工细作云计算大数据需求的理解-管理需求政府应用系统公众应用系统地方应用系统中间件1数据库1硬件平台1服务器1存储设备1容灾设备1中间件2数据库2硬件平台2服务器2存储设备2容灾设备2中间件2数据库2硬件平台2服务器2存

3、储设备2容灾设备2系统1维护系统2维护系统3维护传统分散管理模式 政府应用系统公众应用系统地方应用系统统一中间件统一数据库统一硬件平台统一管理维护统一管理模式5虚拟整合,自动管理,提高系统可用性、可靠性计算、存储资源集中、虚拟化管理,实现资源共享与灵活调度实时反馈系统运行状态,实时动态调整计算资源提供统一界面,管理各种不同的硬件和软件环境,降低管理、维护与升级的复杂度,降低事故率Image LibraryDeployCaptureWorkload绿色节能,低碳经济总处理能力提升,总功耗降低,单位能效倍增系统总重降低节约空间,新系统占用空间降低快速响应,提升服务把部署的时间从数个星期减少到数分钟

4、,极大缩减用户需求响应时间动态的资源自动按需调整,快速响应业务需求变化减少最终用户的技术支持成本待用资源在用资源资源池节省成本,增加效益打破传统烟囱格局,有效降低硬件系统的投资规模部署云平台云后,每年的操作成本将会极大降低可极大的增强IT中心满足公司战略变更需要的能力当前IT支出100%满足战略变更的需要折旧( - 91.6%)直接节省的资金或可投资于其它业务转型Without CloudWith Cloud部署 (一次性)折旧 (和分摊)劳动力成本 (操作和维护)新部署新部署 (满足新业务需求)软件和其它成本软件和其它成本劳动力成本( - 80.7%)云计算大数据需求的理解-经济需求6云计算

5、大数据需求分析1234基于开源OpenStack构建。通过虚拟化计算、存储、网络、安全资源,提供统一的资源管理与调度。以先进云操作系统架设云平台。充分利用计算与服务虚拟化的多主机并行,提升存储资源池的访问性能,降低数据安全风险和节约总体运维成本。提供物理机及虚拟机访问能力。同时满足等级保护安全三级的要求网络需求:提供互联网、专线网的接入能力。对于网络接入,有长期服务的能力。并且数据中心的网络有扩展的能力。其他需求:备份服务需求云平台运维和维保服务需求虚拟化平台需求计算存储安全资源需求网络需求其他需求搭建高性能的云计算中心基础设施服务平台(IaaS)。包括基础设施服务所含的云平台大数据的架构、基

6、础设施服务、服务交付、服务管理、安全方案、基础设施建设与迁移、运行保障等。目标云计算大数据需求的理解-平台需求“一朵云”,构建数据管理体系挖掘数据潜能,提升管理效率服务一体化 推动创新发展管理一体化实现强基固本数据一体化提升管理效率7IT集中化智慧应用一体化审批管理一体化开展智慧服务开辟新服务模式,一点接入 以云计算+大数据为基础,通过IT集中、数据集中实现“IT大管理,智慧大服务” 创新信息化新IT架构。目标大数据大管理大服务云计算以优化流程,提供管理效率的大管理体系服务企业、社会公众的大服务体系。云计算大数据需求的理解-建设目标1项目概况2对云计算大数据需求分析目 录ONTENTSC 13

7、云计算大数据建设及服务方案5成功案例4实施、运维管理9通过虚拟化技术将主机资源、网络资源和存储资源进行池化,按需分配相关资源,提供基础类和扩展类云服务;使用沃云云平台管理软件,建设独立的云管理平台供锡盟云计算大数据平台使用;建立完整的信息安全保障体系和运维服务体系,保障政府部门的各类系统在云计算大数据平台上稳定运行;遵照锡盟云计算大数据标准和规范体系进行建设。云计算大数据平台建设-系统架构10网络架构的总体规划遵循“分区+分层+分平面+安全”的设计理念。分区是指按照业务特点和安全要求划分不同的业务区域。分层是指采用核心层和接入层两层扁平结构。分平面是指采用业务平面、管理平面、存储平面分离的设计

8、方法,从而提高提高系统的可扩展性、安全性和可维护性云计算大数据平台建设-网络架构11基于云管理平台调度整个云计算大数据各项资源,构建一个完整区域;通过高可用的方式构建控制点和网络节点;每个机房区域按照不同的服务级别(SLA)形成多个高可用区(AZ,Availability Zone),AZ之间通过双活的技术来满足系统高可靠。云计算大数据平台建设-云资源服务设计租用联通数据中心云计算大数据平台建设-云管理平台服务设计虚拟机申请和开通流程(为例)故障申报与处理工作协同1、进入自服务门户2、选择虚拟机产品,提交服务请求7、后续挂载块存储配置弹性公网IP设置带宽4、审批通过5、拆分工单,实例开通交付6

9、、虚拟机操作及远程控制台3、申请审批云计算大数据平台建设-云管理平台服务设计(流程管理)14对资源池中各类资源的监控,包括运行状态、资源利用率等物理机Hypervisor主机系统存储设备设置告警阈值,一旦触发即告警。比如:CPU负载90%,内存负载85%,存储剩余可用空间30%资源池虚拟机网络设备通过IPMI获取服务器CPU的温度、风扇的转速等信息CPU利用率、CPU负载、内存使用率、网络I/O、磁盘I/O、系统状态、虚拟机创建、停用的数量等运行状态、总容量、使用情况等设备运行状态、CPU负载、内存使用率, 网络I/O等运行状态、 vCPU利用率、 vCPU负载、内存使用率、网络I/O等CPU

10、利用率、CPU负载、内存使用率、网络I/O、磁盘I/O、系统状态等云计算大数据平台建设-云管理平台服务设计(资源检测)云计算大数据平台建设- :数据库PaaS服务云实现数据分片和路由 、全局序列号管理、分布式事务处理、读写分离、库表虚拟、动态数据源、数据库自动化管理和监控。数据库硬件要求降低:从以IOE为代表的高端硬件,到以X86为代表的低端硬件数据库软件要求放宽:从必须使用昂贵的商业化大型数据库软件,到可以采用能力较弱的开源数据库软件扩展能力大大增强:从升级数据库服务器这种有限的垂直扩展,到增加新的数据库服务器这种近乎无限的水平扩展,从而可以持续扩展以支撑海量数据。不变的访问开发方式:对数据

11、库的访问,采用应用熟悉的JDBC+SQL方式,加快开发适应DaaSAPPDBDBDBDB2.x86+机内存储+局域网络3.水平扩展1.硬件要求降低APPDB1.机内总线+高速内存2.垂直扩展1.以IOE为代表的高端硬件3.JDBC+SQL4.JDBC+SQL云数据库实现了完整的XA协议,通过两阶段提交有效的保证了事务的实时完整性,这与通过消息队列进行数据异步集成达到数据最终一致性的做法有明显不同,能严格的保证数据实时一致性。同时,在具体的生产实践过程中,也深刻体会到云数据库只有结合良好合理的应用数据库设计,才能发挥最佳的使用效果,例如,对数据库分片划分粒度的把握,数据完整性的具体要求等云计算大

12、数据平台建设- :数据交换共享数据交换系统功能:前置交换子系统交换传输子系统中心交换子系统交换管理子系统资源目录管理系统功能:元数据管理目录管理目录服务统一管理系统功能:交换管理目录管理监控统计用户管理审计管理日志管理 数据共享交换系统可实现信息资源的统一管理、交换、共享,从而解决部门间信息资源共享困难、信息不一致、信息实时性不强的问题。云计算大数据平台建设- : 】应用上云云计算平台建设第一步是对分析并确定需求,为实现这一目标,首先要深入学习领会“河北电子政务云”总体规划,其次要进行较完善、全面的访谈,了解各区、委办局的需求项目,并据此进行总体规划和设计。业务迁移原则:数据安全性、业务连续性

13、、迁移效率、迁移成本、迁移优先级、兼容性业务迁移方式: P2P、 P2V、 V2V、 V2P迁移过程四个阶段:迁移计划制定、方案设计、迁移实施与后续管理。1项目概况2对云计算大数据需求分析目 录ONTENTSC 13云计算大数据建设及服务方案5实施、运维管理4大数据产业发展展望5成功案例4实施、运维管理19实施及运维管理-服务团队根据云计算大数据平台的定位和工作目标,可以划分为统一业务受理组、基础设施实施与运维团队、云平台实施与运维团队、实施与运维服务管理团队四个部分:统一业务受理组:统一受理日常云平台业务进行受理;基础设施实施与运维团队:分为机房组、传输线路组、网络组、基础安全组四个组;云平

14、台实施与运维团队:分为本地云平台团队、总部云平台团队和云平台安全运维团队;实施与运维服务管理团队:对各个团队日常工作及响应程度进行管理。20实施及运维管理-服务方案21实施及运维管理-服务制度实施及运维管理-规范体系的建设1. 服务流程规范2. 服务质量标准3. 服务评价办法4. 服务改进机制服务准备流程服务开通流程服务变更流程准确性有效性响应性安全性可靠性友好性月度、季度、年度考评服务能力、服务态度、响应时间各部门职责用户意见处理程序用户意见的延期处理用户意见处理情况反馈实施及运维管理-规范体系的成果标准规范框架规范适用对象云计算大数据平台标准规范体系一云计算大数据平台总体规范业务部门使用单

15、位、联通二云计算大数据平台运维规范联通三云计算大数据平台运营规范业务部门使用单位、联通四云计算大数据平台数据交换标准业务部门使用单位五云计算大数据平台应用部署规范业务部门使用单位、第三方六云计算大数据平台安全规范业务部门使用单位、联通示例24项目质量管理确定应该监督的工作、以及监督时间和监督频度、监督负责人确定用什么样的方法收集和处理项目进度信息;按时检查工作进展和采取相应的调整措施;在项目总计划中控制工作所需的时间和人员、技术、物资资源等内容。项目计划进度管理合同范围管理进度审核实施过程监管文档质量管理人员培训项目沟通管理会议制度1.项目周工作例会2.月工作例会3. 项目专题理会报告制度1.

16、 单项工程周报2. 项目周报3. 项目阶段报告项目风险管理风险识别定性风险分析、定量风险分析 风险应对风险监控项目保密管理加强保密人员数量提高保密人员意识针对项目制定保密措施及规定加强设备的运输及日常管理施工过程中的保密要求存储介质及网络安全实施及运维管理-项目组织制度保障1项目概况2对云计算大数据需求分析目 录ONTENTSC 13云计算大数据建设及服务方案5实施、运维管理4大数据产业发展展望5成功案例4实施、运维管理内蒙古自治区环保云内蒙古信用云保定智慧城市云平台河北省政务云鸡西政务云国家安监局云平台四川信访云辽宁政务云葫芦岛公安局警务云最高法云平台国家海事局云平台成功案例-汇总电子政务(

17、100+)智慧城市(100+)中国红十字会信息化云平台人体器官捐赠中心云平台锡盟浦东人口监测服务平台行业市场(500+)贵州旅游云 沃尔沃汽车云内蒙古水务云贵州工业云贵州电子口岸云内蒙电子商务产业云首汽租赁云平台 中国铁塔公司信息化云27项目背景:联通公司进行为某省环保厅提供了云资源租赁的解决方案,方案提出以租赁云资源平台的方式进行建设,虚拟私有云主要用来承载行政审批综合服务平台,专享私有云主要用来承载环境空气质量预报预警综合管理平台,既节省了自建机房所需投入的物理空间、运维工作的人员投入,又帮助某省环保厅节省大约584万元的资金投入。该方案得到某省环保厅领导的一致认可,并确定由联通公司进行该

18、项目的实施建设。 该项目按照等保三级建设,划分内外网安全域,实现数据访问,交互及存储的安全隔离。提供2条10M专线接入和2条10M互联网接入,硬件及软件实现冗余设计,避免单节点故障。内蒙古环保厅采用高性能计算服务,通过对气象数据和当地污染数据的采集,进行环境空气质量大数据分析,峰值计算能力达到81.6万亿次。高性能计算集群内部采用56Gb infiniband高速网络以及千兆管理网络,可快速扩展的高性能计算集群和高速并行存储及备份系统网络架构:成功案例-内蒙古环保云环境监测大数据项目背景:为建立健全社会信用体系,解决现有信用信息分散,无法有效共享的问题,内蒙古自治区发改委决定建设上联国家、覆盖

19、省级、市级及区县四级的全区统一社会信用信息云平台。 社会信用信息云平台直连政务外网,实现与国家电子政务外网及自治区各委办厅局数据源的互连; 信用数据实现同城和异地备份; 信用数据在内蒙信用网上公布,供企业和公众用户通过互联网访问查询; 通过划分不同安全域和安全子域,确保不同区域数据访问、传输、存储安全。网络架构:成功案例-内蒙信用云项目背景:保定市智慧城市云平台为智慧保定的应用系统提供基础设施支撑。采购的云服务商提供的云中心资源租用服务。主要服务内容包括:云计算平台、电子政务网上(虚拟)审批大厅系统、数据共享中心系统的需求分析,体系设计、平台搭建及平台整体运行维护管理服务等。项目特点:三网云化

20、:保定智慧城市项目将政务内网,政务外网和互联网均以沃云专享云建设模式,按照等保三级安全建设标准进行建设。政务内网和政务外网用网闸实现物理隔离,政务外网和互联网实现逻辑隔离。提供政务SaaS服务:包括数据交换共享平台,电子政务网上审批大厅系统、统一身份认证服务、智慧城市综合服务平台、智慧城市综合演示中心软件。初期规模:政务外网和互联网提供20个超融合节点能力,政务内网提供15个超融合接地那能力。政务外网和互联网出口带宽各1G带宽。成功案例-保定智慧城市项目项目背景:根据河北省人民政府关于促进云计算创新发展培育信息产业新业态的实施意见(冀政发【2015】20号)文件要求,在整合利用省内现有资源的基

21、础上,依托云计算技术,采用供应商投资建设,政府购买服务的方式,实现电子政务建设由分散型建设向集约型建设的转变,由自建模式向政府购买服务的模式转变,走低碳、低成本、高效建设的电子政务发展道路,提高政府服务效能。 项目特点:同城双活,统一管理:在石家庄数据中心以及鹿泉数据中心建设同等规模的2个云平服务节点。部署统一云管理平台(采用主备模式)对2个云服务节点进行统一管理。扩展能力:采用双活省级云计算大数据平台的建设方式,在具备省级政务应用部署能力的同时,也具备市级政务应用部署的扩展能力。提供政务SaaS服务:包括数据交换共享平台,OA系统,电子邮件系统,移动3A认证系统。四项应用均已SaaS服务形式

22、提供给河北省工信厅。成功案例-河北省云计算大数据项目背景: 国家安监总局建设全国安全培训考试系统,本项目的预期规模第一年度培训达到10万人次、考试达到20万人次,第二年度培训达到50万人次、考试达到100万人次,第三年度培训、考试达到各200万人次。为降低成本便于扩容,客户决定采用公有云平台租用模式。沃云平台部署,互联网访问,B/S架构;云主机包括包括数据库服务器和WEB服务器 ;500T文件存储、500M网络接入;提供负载均衡、数据备份和安全防护等服务。网络架构:成功案例-国家安监局云平台项目背景:信访云是根据国家信访局网上信访信息系统建设的总体思路,结合四川信访业务的实际需求,依托沃云平台

23、建设全省统一的网上信访信息系统“信访云”,实现接访、办信、网上投诉等信访事项网上流转,把网上信访打造成群众信访的主渠道。网络架构:云平台分为互联网云、电子政务网云;各级信访部门用户通过纵向业务虚拟专网接入内网云平台,公众用户通过互联网访问互联网云资源池,实现网上信访、信息查询、信访办理情况查询等功能。通过建设在政务外网和互联网云平台的数据交换系统,进行与国家、地市的数据交换。云平台分级分域提供全面的安全保障。成功案例-四川省信访局“信访云”项目项目背景:是中国红十字会打造的,集捐赠款物管理、捐赠项目管理、信息发布于一体的综合管理信息系统,以实现全国红十字会系统的信息管理一体化,实现募集和接受捐

24、赠信息的全程跟踪和动态监控。网络架构:云平台分为外部云、内部云部分;客户办公用户及各地分支机构用户通过VPN访问云平台网络资源,互联网用户和公网办公用户通过万维网访问云平台资源;提供基于专享云技术方案的云存储平台采用成熟的分布式存储架构; 基于云平台提供全面的安全、运维服务。 快速的在线扩容能力成功案例-中国红十字会信息化系统云平台项目34项目特点:支持VxLAN,SDN大二层网络:跨数据中心大二层网络,VxLAN网关配合SDN控制器通过最新的软件定义网络技术,灵活、敏捷的配置、调度大二层云数据中心网络。统一门户,统一管理:全网管理系统集中部署及管控,主要包括网络管理系统、云平台管理系统、日志

25、管理系统控制器。在分区部署上需考虑与业务区应用系统分离独立,避免管理区的日常的维护与管理影响业务区的业务使用。满足安全等保三级要求:整体系统建设满足等保三级安全要求,安全访问控制设备主要包括防DDOS攻击系统、防火墙、链路负载均衡、入侵防御系统、防病毒网关(统一威胁管理)、流控、WEB应用防火墙(WAF)、VPN网关及其他必要的安全设备等,并可以随需横向扩展。项目背景:为建设服务型政府提供支撑和保障,辽宁省政府计划建设新数据中心外网网络和云计算基础设施平台以及灾备和安全、运维保障体系建设,满足省政府外网核心应用系统安全、稳定、可靠的运行需求。主要建设内容为省政府数据中心外网网络基础设施平台建设

26、、省政府数据中心外网公共基础设施云平台建设、省政府数据中心外网数据备份系统建设、省政府数据中心外网远程数据灾备建设、省政府内外网运维服务体系建设、省政府数据中心外网安全防护平台建设等共六项内容。成功案例-辽宁政务云35项目背景:通过建设完善新一代信息中心,促进公安信息化基础设施提质升级,实现公安信息网上各类软硬件资源集约整合和信息资源高度共享,为促进公安大数据应用、战斗力生成模式转变和完善现代警务运行机制提供强有力的支撑保障,打造新形势下公安信息化建设模式。根据公安部公安云计算建设指导意见的相关要求,葫芦岛市公安局在信息化建设方面全面采用云计算、大数据的服务租用模式,进一步降低建设与运维成本,

27、提高资源利用率。项目特点:云计算、大数据中心构建在公安网内云计算建设方案,通过社会企事业单位接入平台、党政军机关单位接入平台、公安机关驻地外接入平台、视频专网接入平台、公网单向接入平台等五个安全接入平台与外部网联接。计算资源、存储资源、网络资源、基础服务、安全平台采用租用服务模式。设备租用大数据平台成功案例-葫芦岛公安局警务云36项目背景:根据人民法院信息化建设五年发展规划(2016-2020),最高人民法院(以下简称招标人)将围绕“三大主线”(服务人民群众、服务审判执行、服务司法管理),依托“五大网系”(法院专网、互联网、涉密专网、外部专网、移动专网),打造“三朵云”(法院专有云、开放云、涉密云)等,为全国人民群众和全国法官提供服务和支撑。项目特点:为主、备数据中心提供独享的自有机房空间,及其配套的电源、消防、制冷、承重、安保等设施和服务,机房空间所在数据中心至少达到5星级机房标准。计算资源、存储资源、网络资源、基础服务、安全平台采用租用服务模式。分布式架构和虚拟化架构的服务能力,满足数据增长带来的存储能力需求和安全运行需求成功案例-最高人民法院专享云

(编辑:温州站长网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!