2015年3月24日,由中广格兰主办的“首届中国广电云计算大会”在北京广电国际酒店举办。大会邀请了国内知名专家学者、行业领袖参加会议,以更加国际化的视野,帮助与会者了解全球云计算技术的发展趋势;从广播电视应用出发,探讨云计算在行业领域的实践经验;深度剖析广播电视云计算应用的核心技术。
在24日下午专题演讲上,阿里云通用行业技术总监兼多媒体行业业务总监金戈做了题为《云计算和大数据如何支持全媒体业务》的演讲,他分享了在公有云计算上阿里云发展的现状以及在广电行业里的实践,广电行业云计算的展望。
图为:阿里云通用行业技术总监兼多媒体行业业务总监金戈
以下为演讲实录:
非常荣幸有机会介绍阿里云计算,阿里云计算是默默无闻的公司,因为我们深入行业里与客户交流的次数不是很多,但以后大家可能会更多看到我们的身影。今天的题目主要跟大家分享一下,在公有云计算上我们发展的现状以及在广电行业里的实践,广电行业云计算的展望。
在讲阿里云之前,先分享点我们小的历史。如果大家是计算机专业出身的话都知道,在60年代末曾经有一波浪潮,去做公有计算,当时就有很多人在美国的城市去搭建集中式的计算中心,通过计算机方式传到家庭、企业里,通过电传机、键盘、终端机进入到计算机里。要发现这些人的传记,比如比尔·盖茨的传记他小时候就是用这样的方式传东西到计算机理。还有Linux在60年代被作为公有计算基础被提出来的,但在60年代公有云的计算想法并不是真正的出现,而是80年代个人计算机的出现。现在我们通过这几年的实践活动,和国外公有云实践活动,可以看到公共云计算基础设施概念已经逐渐成为现实。后面通过我们的实践给大家讲讲为什么我们会有这样的观点。
任何公众设施都要通过一些非常有竞争力,非常有难度的话题,一些题目催生技术,催生它的商业模式。最早IBM在主机领域统治了将近60年,这60年的起头是帮助美国去构建环岛系统,在50年代初的时候,这是所有的主机,也是现代计算机的发源地。
阿里云,我们是依托阿里巴巴自己的需求,在过去五六年里也通过阿里巴巴需求催生阿里云,而且这种需求使得我们现在可以骄傲地说可以提供公共计算的基础设施。这几年,我们做了一个中国自己的商业化云计算平台——飞天平台,完全由中国人自主知识产权,自己完全第一行代码写的。这是阿里云目前管理的几十万台服务器的基础,单节点,单集群我们可以达到5000台服务器,这在全世界没有多少公司能达到的。像Facebook、Google能达到,其他没有公司能达到这个事情。
阿里云时代,我们和阿里巴巴的“双十一”有不可分割的历史。“双十一”在刚开始也是非常痛苦的过程,在第一次“双十一”之后我们发现一个很严重的问题,虽然网络流量给商家带来了大量的商机,但商机的处理是非常痛苦的。第一年“双十一”时,70%的订单是丢的,进不了客户的订单系统。后来是客服打电话,和客户联系,让客户提供购买截屏,我们上去发货。银行支付系统在当年也碰到同样的情况。所以,2011年、2012年、2013年起,我们启动了两个重要的系统,一是聚石塔,二是聚宝盆,对商家利用云计算的弹性提供高可靠,海量计算的系统。截至到2014年我们已经非常骄傲地知道,在“双十一”的流量当中支付和订单95%是通过阿里云的做的。
这个流量意味着什么?在“双十一”那一秒钟中国很多流量都会集中到阿里巴巴网站上,同时会产生大量支付,大部分银行为了让自己的系统能够承担起从网上传来支付的流量,他们会把全国支付系统暂时关闭几秒钟来分担网络流量。而所有计算中间的通道和支付计算都在阿里云上。如果我们这么计算,那一刻阿里云的计算是所有目前在线交易系统计算总和。通过这样的面向全国商业设施运营已经把我们磨炼成完全可以提供高可靠、海量计算、稳定的云计算厂商。所以,很多事情大家不见得很知道。
我们在阿里云上有个网站——药品监管码,中国任何一盒药,出厂到物流阶段,到药店,每个消费者手里,中间的物流数据前在阿里云上,通过一个扫描码可以知道每个药在什么地方,帮助药监部门追踪药品的安全,这也是非常海量的数据。
在媒体行业,去年我们也支撑了CCTV在世界杯的直播,也支持了新华社在世界杯的直播,经过“双十一”大量海量系统磨炼,我们做好了准备来承接各行业复杂的计算需求以及各行业复杂的网络存储需求。
我们究竟干了什么?能干什么?后面四张片子来做简单的总结和对比。线下我们有什么样的计算设施,阿里云上有什么样的计算设施?它们有什么不同?我们能做什么?
广电行业的同学们肯定非常关心我内容的应用,我放了视频、图片、音频,你们能给我提供什么?大家在云下可能都会用传统的IOE设备,比如买服务器、小型机、数据库服务、F5负载均衡。像这样最基本的计算基础设施在阿里云上都有。我们有两个特点,一是以服务的方式提供,你不需要发任何购置费用;二是我有很强的扩展性,我们的负载均衡是几十G的吞吐量,你不用担心哪一天我碰到海量需求怎么样应对。我们的计算能力、存储能力都是PB级以上的。在可扩展性、功能性上都能满足用户的需求。最原生的用户是长在云计算平台上的一些青年FM,虾米音乐,传统行业里电视台、视频监控行业的海康卫视、大华,还有在华南视频监控行业都在阿里云上,这都属于内容型应用,我们可以支撑得很好。
1、游戏、移动IPT,这一部分对广电行业也很重要,因为我们在向全媒体转型,需要看新媒体业务,也有自己的App,这方面更需要大量App,大量游戏在阿里云上。中国第一款最著名的手游大掌门也在阿里云上。我们有很多很先进的经验。
2、事务型应用,这是所有计算里最复杂的计算,最不好搞的计算。在过去计算机发展历史当中,大部分能力都在储备事务型应用,比如航空公司订票系统,银行核心系统。这里我们也很骄傲地说,我们可以完成关键性的一些事务。其中最典型的代表是余额宝,一秒钟有1.1万次交易额和1万次TPS,这个TPS在阿里云上,完全高可靠、交互式的。
3、分析型应用,大家谈的比较多的,现在火起来的基于Hadoop的存储,云计算,传统的是做报表、统计,还有百度大脑的机器挖掘。
在百度云上有我们自己一套大数据平台,包括几大类。
1、有类似Hadoop的离线计算平台;
2、有自己的流式计算平台。
3、有自己的适时计算平台。
4、有自己一套工具进行系统建模、数据集成和数据展现。
有一个大的支撑案例是阿里金融,有几个PB数据,每天新增TB的结构化处理,我们用它集成我们的小微贷。
大家集成各种形形色色类型的应用,阿里云在过去五六年里确实干了很多事情,我们已经形成了覆盖全行业,基本上中国大部分区域相应成熟的线路图。网络覆盖中心基本覆盖全球,现在扩展到国际业务,也是整个集团非常重要的一块业务,在计算、存储、网络、中间件,安全、监控很多方面都有可圈可点的地方。
安全性角度来讲,大部分客户也非常关心的,安全的话题也形形色色。其中在互联网上被攻击也是非常普遍的现象,阿里有个非常强大的安全团队,基本上国内一流的团队。我们一方面服务中小客户,中小客户当中有不少被攻击的需求。像刘总讲的KTV秀场也是被攻击的对象,我们有很强的服务能力帮助他们防攻击,也有很强的专业安全解决方案。这对广电也非常重要,广电行业在云计算,向全媒体转型,丰富互联网方面业面临同样的问题,我们阿里云可以提供同样的帮助。
现在的角度我们开始向各个行业深入推动云计算应用,包括广电行业,今年我们成立了多媒体事业部门,现在我在领导着阿里云多媒体事业部门,欢迎在座的客户、合作伙伴能在会议我们一起交流,大家可以有更多的合作。
云计算角度我们倡导公有云基础设施,在基础设施强调部署形式。每个城市三个数据中心,隔几公里,在异地还有灾备中心这样基本的框架,保证我们系统可用性、可靠性基础,也反映云计算厂商实力的地方。
同时,我们在网络、资源隔离本身提供不同种隔离方式,从完全的公有云大虚拟的公有云(虚拟私有云VPC)也有相应的专有云也有成熟的解决方案、案例,可以为用户提供不同种选择。
真正做云计算复杂的地方不在这里,是在背后的服务和背后的运维。这也是我们在过去几年里吃了很大的亏,趟了很多的坑摸索出来的一条道路。在阿里云上,大家如果有兴趣看阿里云的话,我们提供的服务是非常及时的,后台有个完善的流程和非常体系化的售后团队,您买任何虚拟机,出现任何问题,可以通过开空单的方式得到解决,我们15分钟之内为您提供服务。还有大的团队提供服务,今年春节期间,很多客户在帮助各个电视台做互动节目,过程当中都有专门团队帮助客户,保证他在春节期间这些节目都能什么渡过高峰期。这是我们对社会的贡献。
其次是保障体系,你的机房、网络、风火水电保障措施,数据中心防灾备份的设施,以及运维都是需要非常专业的团队来做的,阿里云的客户都可以享受阿里巴巴的淘宝、天猫所使用最基本的保障服务。阿里云有一套自己的理论和解决方案,有数据的安全、物理的安全、应用安全,从防加密、数据应用可靠性提供解决方案,保证客户系统和客户的数据。
这是我们从公有云整体产品服务角度让大家全面认识一下阿里云。在多媒体行业,目前我们到了一个什么样的状态?希望达到什么样的目标呢?后面我们给大家做一点介绍。过去五年,我们在多媒体广电、非广电领域积累了大量客户和大量合作伙伴。我们把自己不定义为提供基础设施服务提供商,我们的重点还是机房、存储、网络以及面向行业基本服务。把PaaS层和平台Server、内容Server等留给合作伙伴,所以阿里云上很多合作伙伴留给电视台内容制作的平台,非编平台、快编、转码、包装等系统,SaaS系统还有视频监控直播,在线视频直播/转播,在线会议、在线修场,图片制作、内容分享都有相应客户和相应的解决方案。我们正在面向广电和非广电自己的生态体系。
阿里云的使命和地位是什么?我们究竟能给合作伙伴、客户带来什么?我们就是要建设基础设施、服务、采编播阶段。采阶段,目前摄像头都非常普及,个人、手机、家里的摄像头,专业采购设备都可以采集图象,更多的未来会是类似于美国GoPro把图片、视频通过互联网的方式呈现出来,但这些通过基础设施会出现问题,我们有个类似于Zcam(音)的中国厂商,他们希望在中国运营这套系统,然后他们发现有一定的问题,为什么呢?把数据从家里的摄象头、通过Wi-Fi服务器传到云端时对于整个过程网络的稳定性、存储稳定性有很高的要求。一秒钟的切片切到存储里,因为网络或后台调度原因产生抖动,这个数据不能写进去的话,我们的客户看到的摄象头播出来的流就是非常不稳定的。为了应对这样的场景我们做了专门优化,把出错率降低了几十倍来应用这样的场景。
在播控领域而言,大家知道互联网有很多做直播、点播的厂商,有的在公有云和机房里,但所有厂商在互联网环境下都会面临很大的问题,他要应对流量的尖峰,如何积极有效应对流量颠峰是非常重要的经济学问题。我们可以提供弹性计算方式和自动伸缩技术来使我们客户可以应对几十倍的流量尖峰。
在中央电视台今年互动节目里有一个我们的厂商,也是我们的客户,他提供中央电视台的互动,他的流量大到什么程度呢?他的基础服务器在我们上面是16台,春节期间会弹出300或几百台的数据,这就是几十倍的流量。而那时候弹出的服务器就相当于一个月租几台的价格,这会一定程度上会节省有尖峰流量的互联网在线视频直播/点播的成本。大家可以想见,没有云计算的弹性,付出的成本是非常高昂的。由于这个特性,大型互联网厂商,或者我们有点竞争对手的厂商都会把他的尖峰流量切到阿里云上,来减少他自己为此付出的额外边际成本。这说明我们在技术层面,经济模式上会给行业带来更有经济价值的解决方案。另一个角度来说,广电行业有很多大数据方面的需求,尤其广电在向新媒体融合阶段,要学会在线视频厂商也玩玩视频推荐,视频基因,视频购物推荐。
阿里也有一套自己的大数据平台构建自己的三个计算引擎以及自身有的一些数据资源,用户的画像和透视图,相关的用户定向方面,在此基础上有数据的挖掘算法库,这些库、基础设施支持我们合作伙伴来进行视频基因的开发,电视购物的开发,这是在大数据方面,在广电行业我们也有一些骄人的成绩,去年在保障新华社在世界杯期间的直播,构建了巴西—美国—中国的支撑链路。同时和合作伙伴帮助江苏电视台做青奥会的内容制作,也在两会期间江苏电视台的节目制作。同时我们也有很大的渲染集群和相应的合作伙伴,也有一些电影在阿里云上做相应的渲染。
对广电行业云计算的看法。
最近我们接触一些厂商和客户,华东地区、华南地区、西南地区、北方地区,以及各个类型的集成解决方案提供商,技术提供商,我们发现有这么几个公共的需求。
1、对电视台而言,现在制作节目越来越多,以前都是一些固定的设备,而且这些设备比较高昂,随着高清视频发展,我们希望有个更经济,更节约,更有弹性的内容制作系统。
2、大家都想发展网络电视台和互联网业务,但互联网业务有个非常关键的问题,我们分发的成本很高。即使国内在线视频技术比较牛逼的公司也很难完全实现盈利,这和中国网络垄断有关系。
3、大家想往全媒体转型,拥抱互联网,国内很多电视台都在规划自己的云计算平台,其中会有个要求,我们应该有家互联网公司帮我们做互联网化。这是典型需求。
大部分运营商几年前开始了公有云的分布,包括锁贝、大洋、新奥特都在探索,但大家还建立在传统的私有云基础之上。有些尝试做公有云会碰到问题。我做一路节目,要把这个节目传到公有云上,中间有专线,如果跨成专线成本又会很高。这是碰到的一个壁垒。同时,它也要帮助他的客户做全媒体转型,中间要做业务咨询,客户的咨询。还有技术提供商,比如视频精英、计算方法、云识别等,这些厂商也想融入到产业里去,现在大家都在做,效率也不是很个。这些厂商也很迷惑我要不要开展公有云服务,开展公有云服务能不能短期内盈利,这是广电行业存在的一些需求。
我们认为,广电行业云计算需求,大家各有各的目标,我们可以一起来解决刚才谈到的这些问题。阿里云和集团本身,希望在公有云上形成生态,在这个生态当中我们的想法,是有基础的产品,存储计算和网络,同时联合运营商来解决两个重要的基础设施问题,另外有没有专的结构网络到电视台、网络上,节省大家公有云成本,能不能抓住分发层面上技术提高节省分发层面的成本。这是阿里云计算要解决的问题。
公有云上能不能把我们的内容、应用汇聚在上面,为客户提供更加经济有效,更有弹性,更可靠的媒体制作、编辑、控制、播放这样的行业解决方案,或者简单地说,让线下业务功能可以兼容云计算。当然,这不够,还最终解决不了问题。最终还是要在这方面做创新。我们要做一些构成,形成在公有云上的PaaS平台,比如推荐算法自己视频合作伙伴体系,面向广电行业深入跨屏互动的互联网资源,希望这些可以融入我的合作伙伴体系里,最后形成新的产业互动云计算服务平台,让大家真正享受到我们的云计算给大家带来的幸福。
这是我给大家带来的演讲。谢谢大家!
推荐阅读
经典栏目
精彩专题
关注我们
大视频行业颇具影响力的行业社群平台,重要新闻、热点观察、深度评论分析,推动电视行业与各行各业的连接。
集合电视台、网络视听、潮科技等各种好玩信息。
专注于报道广电行业新鲜5G资讯,致力于成为广电行业有权威、有深度的5G自媒体平台。
UHD、4K、8K的最新资讯和最深入的分析,都在这里。
视频产业的专业圈子,人脉、活动、社区,就等你来。
我们只沉淀有深度的信息和数据。
致力于卫星电视信息、卫星通信技术、天地一体网络应用案例、以及广电、通信等产业的市场动态、政策法规和技术资讯的传播。