广东采集云实施方案汇报.ppt
- 文档编号:17645114
- 上传时间:2023-07-27
- 格式:PPT
- 页数:35
- 大小:2.02MB
广东采集云实施方案汇报.ppt
《广东采集云实施方案汇报.ppt》由会员分享,可在线阅读,更多相关《广东采集云实施方案汇报.ppt(35页珍藏版)》请在冰点文库上搜索。
广东分公司云计算平台汇报,2011年3月,目录,1,广东公司云计算总体情况,2,IT基础设施云介绍,3,办公终端桌面云介绍,4,采集云介绍,2,集团公司云计算整体思路,集团公司企信部在8月份组织开发商以及广东,江苏,江西等省编写了中国电信IT支撑系统云计算应用指导意见,并在10月份进行了下发(中国电信2010815号)。
应用目标,降低IT系统总体拥有成本(TCO)更快、更好地满足业务需要提升云计算平台的管理和运营能力,实施原则,确保降低IT总体拥有成本(TCO)确保云平台有效运营管理,系统安全、可靠运行试点先行、统筹安排、积极稳妥推进,试点项目验证,关键技术研究,扩大应用范围,规范化规模推广,验证云计算平台及应用可以稳定可靠运行验证云计算能够降低IT系统总体拥有成本推动云计算价值链的共同发展关键技术研究,制定云计算应用有关规范,指导省公司云计算平台建设和应用部署对经验证经济和技术可行的应用,积极推广云计算部署积极实验,扩大云计算范围应用范围,第一阶段(2010-2011年),第二阶段(2012-2013年),3,集团公司对广东分公司的试点要求,广东作为集团公司云计算试点省份,在云计算应用的指导意见中有相应的试点任务。
验证重复性、标准化任务处理型应用的云计算部署。
以话单采集应用为试点,验证能够基于IaaS部署并能够可靠运行。
验证业务忙闲分布不均匀,业务峰值明显的应用的整合部署:
1.以测试环境整合为试点,进行Unix服务器的整合,验证资源池进行多套测试系统的共享部署;2.以终端桌面虚拟化为试点,验证桌面虚拟化部署的可用性。
以话单采集应用为试点,验证能够基于IaaS部署并能够可靠运行,以测试环境整合为试点,进行Unix服务器的整合,验证资源池进行多套测试系统的共享部署,以终端桌面虚拟化为试点,验证桌面虚拟化部署的可用性,【基本目标】对资源池,虚拟化等IaaS的基本特性进行验证;【增值目标】利用云服务平台来实现对IT系统硬件资源的统一管理;,基础设施云,【基本目标】对桌面的虚拟化进行验证;【增值目标】在电信广场大楼及部分营业厅,客服部门实施桌面云终端;,桌面云,【基本目标】验证任务处理型应用的云计算部署;【增值目标】验证分布式计算,云存储等PaaS的特性;,采集云,4,2011年广东分公司云计算重点工作,MBOSS集中后,面临着各地市旧硬件的再利用问题,采用云计算理念来盘活这些硬件,使之可管理,可利用。
在集团云计算试点的基础上,重点孵化IaaS云计算模式,用以提升MBOSS硬件资源管理能力和各地市旧硬件的利旧水平。
在日常办公,话单采集及分析领域,对云技术进行试点。
集团公司试点工作,测试云,桌面云,广东IT云计算行动计划,资源利旧要求,终端安全需求,1,IT基础设施云建设,在测试云试点的基础上,建设云计算管理平台,实现对资源的申请,使用,回收,监控。
对各地市MBOSS集中前的硬件资源进行统一梳理;将符合云化条件的利旧硬件纳入云计算资源池管理;,2,办公终端桌面云建设,广东公司内部办公采用桌面云终端设施,规划1500办公用户。
覆盖电信广场办公大楼,部分营业厅,10000号客服和运维终端。
3,计费采集云试点工作,在联机采集系统中引入PaaS云计算平台,提升话单采集效率;在采集的技术上,进行话单的实时分析和业务在线监测。
采集云,5,采集省集中需求,目录,2,IT基础设施云介绍,1,广东公司云计算总体情况,3,办公终端桌面云介绍,4,采集云介绍,6,IT基础设施云建设目标,目标1:
采用云技术实现硬件资源的全视图管理对于X86平台的PC服务器或刀片机,实现资源的监控,虚拟机动态创建和回收;对于IBM和HP小型机,实现资源的监控,虚拟机的纵向伸缩;对于Sun小型机,实现资源的监控。
目标2:
实现IT硬件资源的申请,分配,跟踪,回收的闭环管理流程,目标3:
建立测试环境的硬件私有资源池,为典型的测试应用建立模板,目标4:
实现应用服务器集群的动态横向伸缩(先在ITSM等服务器机群场景试点),7,8,IT基础设施云体系架构,云计算计划中最为关键的是如何建设一个云计算管理平台。
下面将针对广东电信具体应用提出IT基础设施云的体系架构。
用户层:
云计算平台主要面向三类应用:
桌面应用,小型系统的主机应用,服务集群应用;服务交付层:
根据不同的应用,定制不同的服务交付形式;虚拟资源层:
以虚拟机的方式提供IaaS模式的云服务;物理资源层:
支持多平台(X86,小型机)的Hypervisor服务云管理环境:
支持流程,服务,产品实例,产品,运维等管理功能,9,前期试点工作-测试云测试场景,利用IT基础设施云的应用,建立起测试资源池,并针对常见的测试需求场景建立模板。
基于云资源的测试过程,常见的测试场景包括:
数据库环境需求需求:
快速提供数据库硬件使用环境;方案:
将数据库的环境和数据一起打包在一个镜像文件中,每次测试时,从镜像文件中读取数据;场合:
适合数据量少或用于测试配置数据的场合;应用服务器环境需求需求:
快速提供已经预先安装了应用环境的硬件资源,用作应用服务测试;方案:
将应用环境打包在一个镜像文件中,每次测试时,仅需进行部分的版本更新场合:
适合修改了程序版本的需求测试,前期的试点工作-测试云部署方案,前期的测试云试点采用IBM公司的解决方案,云管理平台是基于IBMTivoli的TSAM平台,对云的系列特性进行了验证,为IT基础设施云的实施打下了基础。
硬件配置建立了2台小型机(IBMP5604C/32G)和2台刀片服务器的硬件资源池;2台刀片服务器作为云平台服务器;业务加载加载了1个网上营业厅的测试Web服务域;加载了MBOSS集中工程割接指挥平台;应用效果对快速部署,弹性伸缩,硬件生命周期管理等云特性进行了验证;分别对小型机分区管理器,KVM,VMWare作为Hypervisor进行了测试;,10,11,IT基础设施云技术要求,对于IT基础云中的各软件模块,提出下列技术要求和选型建议。
12,IT基础设施云的效益和风险,效益便于利旧硬件,盘活IT资产提供IT硬件资源的物理视图和逻辑视图,有利于日常运维管理服务器集群的应用将提升所应用系统中间层的健壮性对X86服务器的统一管理将显著减少每年PC服务器和刀片服务器的投资(例如2010年就采购了108台X86服务器,如果能充分利用资源,这个数字将大为减少)风险不同厂商在小型机虚拟化技术上水平不一样,最终选型的厂家可能无法满足所有的要求云计算平台的商务模式还不成熟,现在还无法精确估算费用,目录,3,办公终端桌面云介绍,2,IT基础设施云介绍,4,采集云介绍,1,广东公司云计算总体情况,13,办公终端桌面云建设目标,目标1:
在广东公司内部办公环境实现桌面云终端办公,约1200个终端,加上部分营业厅和10000号坐席终端,总共约1500-1700终端,系统设计容量为1800个终端。
目标2:
探索广东公司在办公、营业厅、10000号客服、后台维护等场景下采用桌面云解决方案对于网络环境、用户感知、应用部署等方面的支持度。
目标3:
测算广东公司实施桌面云解决方案的投资,为集团公司和广东公司全面实施桌面云方案提供投资估算依据。
14,办公终端桌面云体系结构,计算、存储资源集中化:
PC的处理能力(包括CPU和硬盘)集中到数据中心,办公个人终端变成TC,不需要强的处理能力和存储能力计算、存储资源共享化:
云数据中心给每个办公终端提供虚拟化的“计算机”,每个终端所使用的资源都是共享的,分配的虚拟资源在没有实际使用时是给其他终端使用的云数据中心统一调度和管理:
数据中心的调度和管理能力是关键,基于云计算的技术的统一管理平台,实现对资源的“按需分配”的管理,终端与信息分离,桌面和数据在后台集中存储和处理,传输到终端的仅是屏幕的刷新。
15,办公终端桌面云在IT上效益,一、解决终端信息安全问题,信息安全工作是一项系统工程,内容、应用与基础设施可通过技术手段进行解决,但终端复杂多样,终端安全已成为信息安全管理的重中之重桌面云实现了终端的统一,可真正解决终端的信息安全问题,二、个人办公“移动化”,数据和桌面都集中在数据中心,不同时间、不同地点、不同终端登陆时用户呈现一致,且各种终端可实现无缝切换终端丢失、损坏时,仍可保证重要文档、数据的安全可靠,低温无噪的TC部署到靠近人的工作环境,有效解决密集办公环境的温度和噪音问题,三、节能减排,16,办公终端桌面云面临的风险及应对措施建议
(一),一、实施初期员工使用感知下降,1:
用户使用习惯改变问题描述:
鼠标/键盘操作不如本地操作敏捷;屏幕画面质量与PC机存在差距;U盘无法使用、数据拷贝受限应对措施:
加强宣传沟通,推动用户习惯改变。
2:
组织结构与流程变化(如新员工进入公司领取机器的流程变化)问题描述:
新入职省公司员工只需要申请OA帐号,原则上不再配手提电脑,只配TC,出差时需走流程借用部门公用的手提电脑。
应对措施:
加强宣传沟通,推动用户习惯改变。
3:
初期实施内部投诉会增加问题描述:
桌面云部署初期,因技术与管理还在不断完善中,兼容性、使用习惯等问题会招致内部投诉增加。
应对措施:
增加桌面云平台故障处理专席,加强问题处理效率,提高满意度。
4:
网上教育视频质量问题、桌面协同视频会议质量问题问题描述:
语音可能存在延迟、视频可能会出现比较卡的情况。
应对措施:
(1)目前的测试结果是:
语音延迟在VoIP质量范围内;标清视频可以支持。
高清视频质量厂家正在攻关。
(2)充分利用各部门的公用计算机,桌面云部署需考虑上述问题,并进行针对性的技术调整和部署规划,17,二、技术方面的难点,1:
外设支持存在差距、软件存在兼容性问题问题描述:
外设(如打印机)存在一定兼容性问题,使用新外设或新软件时可能需要调测,甚至需要厂商提供支持。
应对措施:
要求云平台厂商支持对外设进行认证,并提供问题定位;同时淘汰小厂家的非标准外设。
2:
网络、机房需要进行配套改造问题描述:
每用户需提供2M以上带宽方能保证视频等应用;云计算机房在温度、湿度、电力供应、承载、网络出口等都有更高要求,可能需要进行机房改造。
应对措施:
项目初期需组织厂家对网络、机房进行评估,以确定必要的网络升级或机房改造。
3:
维护手段不足、图形化不够问题描述:
桌面云的管理维护对维护手段、图形化等方面提出更高要求,需要厂家支持。
应对措施:
部分厂家已支持图形化运维,还需推动厂家进一步加强。
4:
桌面云电信级可靠性不足问题描述:
桌面云平台是一种新出现的技术,大规模商业应用的可靠性有待验证。
如果出现问题将会让员工办公停摆,因此桌面云需具备电信级的可靠性,保证7X24小时不出故障。
应对措施:
与具有大规模实施和维护经验的厂商合作。
5:
需较大初期投资问题描述:
一次性投资较大,华为初步估算初期设备投资为1600万元;全员参与和培训,组织费用偏高。
应对措施:
早期进行试验性投入,成功后利用云平台规模加载办公系统和IT运营支撑服务,实现云平台的规模效益。
桌面云面临的风险及应对措施建议
(二),18,与华为合作的试点方案及投资估算,软件:
云管理平台:
云资源管理调度、虚拟化平台、运维管理系统桌面管理:
接入控制、桌面会话管理硬件:
X86服务器、存储设备、以太网交换机、接入网关设备,1800台传统PC和1800台桌面云终端建设模式的年均TCO(总体拥有成本)对比(单位:
万元),对比结果分析:
不考虑开发增值业务的情况下,在5-6年的使用期限内,1800台终端规模的桌面云平均每年TCO与传统PC模式基本持平。
如果试点范围选为10000号等365*24小时工作的终端,则服务器计算能力能得到充分地利用,TCO更有效率。
目前开展云计算试点主要社会效益:
根据集团要求,跟踪业界先进技术为对外提供桌面云服务打下基础能较为彻底解决用户终端信息安全的问题节能减排有一定作用,19,桌面云是切入点,通过迁移业务系统,开发虚拟主机托管、桌面出租等增值业务,提高云平台资源利用率,实现云计算真正价值!
项目实施需关注的问题,1、桌面云与现有TSM/DSM之间的关系桌面云无法解决文档安全管理问题,文件安全管理项目(DSM)将继续大力推进;桌面安全管理项目(TSM)则要根据桌面云的部署而逐步减少采购。
2、桌面云调研工作安排桌面云会涉及员工数据迁移,需调研网络、机房状况、应用软件使用情况、TC摄像头支持程度等,需安排华为尽快启动调研,给出详细的云改造方案。
3、项目实施节奏考虑桌面云成熟度还不够,项目推进需遵循单部门试用-多部门试用-全方位推广的过程。
试用过程中对维护制度、应急方案等都需考虑全面,保证项目顺利执行。
4、维护团队建立1800个用户的桌面云系统只需12个维护人员,但却需要更专业的云平台维护技能,需加强培训、建立相应的维护制度。
5、桌面云平台后续发展问题IT支撑系统逐步由小型机改造到x86平台,已运行在x86平台的系统要迁移到桌面云平台上来。
同时,桌面云平台未来要考虑支撑IDC虚拟机出租、PC下乡、网吧等业务。
20,目录,4,采集云介绍,2,IT基础设施云介绍,3,办公终端桌面云介绍,1,广东公司云计算总体情况,联机采集方案介绍,采集云的建设思路,采集云的效益分析,21,广东分公司联机采集现状,本次广东分公司联机采集方案针对长途局,关口局,本地NGN三种类型。
每天话单采集累计产生数据量约28GB。
话单采集源设备及数据统计,现状分析,22,广东分公司话单联机采集目前由各地分散管理,省集中统一管理是业务发展的趋势。
省集中后数据量大,对处理能力和存储都提出了更高要求。
广东分公司联机采集业务发展驱动力,23,能够满足同时采集全省45个长途局数据源的能力,并具备扩充至采集全省300个局点数据源的能力;要求省中心联采设备具备存放3个月原始采集数据的能力;支持采集频率从15分钟/次缩短到5分钟的能力。
对采集系统的要求,目前采集环节过多,影响话单的实时性;集中管控,集中维护要求采集系统进行集中;采集提速将是未来的方向;采集系统硬件老化。
驱动,24,广东分公司联机采集中的建设思路,广东分公司联机采集系统建设是采用云技术来实现采集任务的并发执行以及话单数据的分布式存储,适合大并发任务,海量处理数据的应用场景。
采集周期缩短,处理要求提高,1,15分钟提速到5分钟,单点采集能力需要提高300%,并要将单文件串行处理变成并行处理,采集进程性能要求更高。
全省集中采集,系统负荷大,2,全省集中一级架构,需要完成147个采集节点并行采集任务,系统负荷急剧升高,同时峰值符合将提高至数十倍。
多进程并发,负荷难均衡,3,采集进程/话单处理进程/分发进程需要同时并发,整个系统的并发进程数较多,系统资源均衡难度较大。
磁盘I/O瓶颈,4,全省集中采集模式,所有147个节点的数据需要集中存储,而且并发访问,将导致磁盘访问瓶颈。
联机采集中的技术问题,采用云平台,可以使用数十个CPU内核组成强大集群服务平台,可以将系统处理能力提升数百倍。
云平台采用Map-Reduce方式,可以将负荷压力分散到数百个独立节点,可将系统负荷峰值提升数百倍。
云平台通过Job均衡器方式,可以调度所有进程的资源使用情况,从而保证资源合理使用,各个进程平滑运行。
云平台利用HDFS技术,实现多节点分散存储模式,每块磁盘保证独立访问,从而避免了磁盘I/O瓶颈,同时整个系统的I/O带宽扩展到数十G。
目录,4,采集云介绍,2,IT基础设施云介绍,3,办公终端桌面云介绍,1,广东公司云计算总体情况,采集云的建设思路,联机采集方案介绍,采集云的效益分析,25,采集云平台厂家选择,广东联采平台由上海海高通信负责建设完成。
2010年海高公司基于Hadoop技术研发了新一代采集云平台.,海高采集云特点包括:
并行计算:
全部采用PC机,利用MR并行计算技术,构建数百核CPU的处理平台,分散存储:
利用HDFS分散存储技术,PC机可以提供3+的高可靠性存储方案,虚拟化技术:
利用Java虚拟机技术,业务模块可以跨平台自由加载,实现即插即用,Hadoop云计算MR处理引擎,26,Hadoop技术介绍,Hadoop总体架构,Hadoop主要特点,1,Hadoop是目前国际范围内应用最广泛,处理规模最大的云计算平台;2011年3月4日媒体报道,Yahoo已经建设了规模为45000个的Hadoop云平台国外主要用户包括Yahoo,Facebook,Fox,IBM,Joost,NewYorkTimes等国内主要应用包括淘宝,百度,网易,腾讯,金山,中国移动,中科院等,Hadoop符合GNU相关规范,属于完全开放的体系架构,便于平台定制和二次开发。
2,27,采集云的逻辑架构,长途及网关交换机联机采集云平台逻辑架构如下:
28,采集云的网络架构,名称节点:
3台采用热备份方式运行数据节点:
60台采用Map_Reduce架构并行采集采用HDFS方式实现数据分散存储备用数据节点:
6台,采集节点:
管理节点:
管理服务器:
1台用于采集业务及系统参数的配置管理。
话单服务器:
1台用于话单查询及在线业务监控。
分发节点:
分发服务器:
2台主备运行,分发数据给后台计费帐务磁盘阵列:
1台存储需要分发的计费数据,采用RAID5。
说明:
上述配置全省交换机的云采集的配置;部分硬件设备可以利旧,节省投资。
29,采集云硬件配置,30,采集云软件配置,第三方软件,采集业务,云平台引擎,管理监控,31,目录,4,采集云介绍,2,IT基础设施云介绍,3,办公终端桌面云介绍,1,广东公司云计算总体情况,联机采集方案介绍,采集云的效益分析,采集云的建设思路,32,采集云的效益分析,33,效益分析,并行处理提速,存储能力的到提升,降低维护成本,采集提速效果,业务应用亮点,采集云的实施将节省大量的采集设备,省集中模式为日常维护带来了便利,采集云为文件采集提速提供了条件,CDR数据采集实时性提高,“实时计费”系统将更加实时,在采集云的基础上所作的增值应用,例如客户聚类分析将是一个亮点,云平台通过Job均衡器方式,可以调度所有进程的资源使用情况,从而保证资源合理使用,各个进程平滑运行,采用数据块存储方式,通过统一索引表标识文件存储位置,有效提升文件检索速度,并提供数十T的存储空间,采集云的风险分析,维护流程调整,1,采集云的实施需要联机采集各部门在职责进行调整,同时维护流程上也需要作出变化,首次投资规模,2,云计算的特点是平台建设完成后,业务扩展能力强,但是整个平台的初期建设投入规模比较大,上下游配合,3,计费采集真正提速效果,需要上下游系统的配合才能真正体现,包括交换侧配合以及采集后续的批价模块作出相应的改造,采集云的风险分析,34,35,35,
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 广东 采集 实施方案 汇报