技术平台

您现在的位置: 首页 > 技术平台 > 物联网/云计算

【长沙论道】思华科技陈林:云技术在大视频的实战

作者:流媒体网    来源:流媒体网   发布时间:2017-11-10 16:24:55

  【流媒体网】消息:对电视大屏市场来说,2017年无疑是个运营之年,规模已经具备,如何实现规模到价值的转变,成为产业当下共同面对的问题。

  一切应归真到运营、价值,以运营为手段从量变寻求质变,以价值为目标,推动业务创新,重组生态结构,这不仅是电视大屏产业可持续发展的动力,也是产业各方的职责。

  2017年11月9日—10日,以“新电视、新娱乐、新传媒、新生态”为主题的流媒体网第十四届电视新媒体高峰论坛在长沙举行。在10日下午的“电视运营价值高峰”分论坛上,上海思华科技股份有限公司市场部总监陈林做了主题为《云技术在大视频的实战》的演讲。

图片1.png

 

  以下是演讲全文:

  思华科技是平台的提供商,我们做事情,其实都是为了帮助客户,帮运营商,帮助我们这些合作伙伴来更好的拓展运营,今天讲的是运营过程当中看到的新机会,并且在机会过程当中怎么满足对原有的技术、原有的平台的新需求。

  传统我们做运营商家庭客户,大半年时间内思华科技踏足到跟现有不太一样的领域就是集团客户,参与了一些客户把电视屏幕和家庭安装结合在一起项目,这个是和政府安防体系参与当中的,如何让老百姓提升家庭幸福度,如何让家庭用户参与到社会公共安防当中去。除了有IPTV用户之外还有更大的一片市场。

  大视频的VPaaS平台

  在现有的业务当中,底层的用户一直到上层的运营平台,每层需要业务、功能、系统很清晰。但是对于另外一个安防领域的视频监控,大家都不是很熟悉,模型正好是相反的,IPTV是的方式是提供自上而下的服务,而视频是得到更多的业务模式,两种模式是否可以在一个平台上进行结合,这是需要考虑的。

  一方面,家庭业务当中是少量的内容或者说每天编排的节目,相对少量是指当天被业务使用的内容量比较少得,比如说用户电视机看到的内容只是几千和几万,但是真正的受众是几十万、上百万,服务放大的过程。另一方面的安防反过来的,摄象头有几十万上百万,真正同一时刻被使用的量可能只有几千,如何去满足业务系统的差异性,我们看了一下之后发现其实并不是完全两个相对的,可以整合在大的体系之下,这个体系就是大家介绍的,基于视频的VPaaS平台。

图片2.png

 

  他们都需要更广大的范围内,面向用户提供服务,面对大量的接入点介入数据,因此都需要分布式的互联,并且要满足云化所需要的弹性、互融性、集中管控的能力。

  现在在用的系统都是上图左边这个结构,业务流程当中实际上都是很愚蠢的用资源,需要资源就调用资源,需要资源互通就用中间的数据和资源进行吻合,这中间有多次的资源复用、资源调用。我们试图用更简单的方式来控制所有的资源,让它一步到位,现在构建大平台之间,用户的终端可接跟云端的应用发生交互,而不需要中间的云计算平台,或者是其他。

  另外要能够实现多厂家、多系统等更轻松的吻合,其中的复杂度绝对会影响到业务,因此如何继续下去,但是又不要受制于这样多的限制,现在在做的就是希望把所有厂家快速兼容进来,同时又不会因为业务流程的引入,导致原有流程的改动。

  在帮华硕构建新业务的时候,完全不同于之前模式的业务就可以在这个平台上线。另外是政企安防类的业务。把能力、流程、过程控制进行解耦最后就可以变成可控、有条理的逻辑。

  因此在这样的指导思想下,重新构建了现有的完整平台,整个软件平台进行了大规模的重构,就形成了VPaaS,VPaaS平台具体实现首先把厂家、功能计费点、异构互通梳理出来,变成可以挂钩进来的服务;通过协同机制和业务流程自定义后再重新搭建,后面要解决的是平台当中遇到的难题比如说海量的数据。

  虽然大家都在说大数据,大数据到底怎么组合,这么多的开源技术、大数据技术,怎么进行完整的使用?目前的情况是很少有人再去用了,甚至还有海量文件问题,现在的IPTV里面看不到的,目前是解决还没有完全解决的问题。

  当有千亿级别的数据进行海量运算的时候怎么保证速度;海量文件,原有视频文件相对简单,但是新型业务当中,除了视频还有图片和文件,构建融合性的存储,是为未来IPTV如何解决海量存储问题;最后是丰富智能,如何把人工智能、转基因、大数据上面的所谓AR技术能够引入进去,这就是完整的VPaaS。

  大视频VPaaS平台功能的具体实现

  VPaaS平台通过前面的服务能力抽象画之后,其实把整个IPTV联上电视台、运营端,以及运营商全部梳理之后大概就是这几个环节。另外在安防类的政企业务当中也是利用一样的方法,服务抽象之后,清晰知道每一个环节需要完成什么功能,需要具备什么外延和连接方式。

图片3.png

 

  基于整个承载过程,就要谈到计算方面的实践,大家都在谈虚拟机,现在可以做到同一个管理平台上同时管虚拟机、裸服器和容器资源池,目前没有看到任何一个好的虚拟机平台可以承载它。

  我们到底怎么用它?在跟中国电信正在做的事情,如何用微服务重构现在电信的IPTV内容中心,下面就是重构IPTV的CPD系统。把自己所有软件重新再梳理一遍,形成每一个框里面的微服务的点都可以去替换。所有的硬件资源是被实时复用的。而这些业务弹性诉求低层都可以做到,我们要做的就是给客户提供可运维、可管理的看的清楚的完整管理体系。这样体系的重新构建实际上打破了厂家的问题,软硬件完全分离了,在当中全分布、全架构,所有管理系统、业务需求都可以进行弹性伸缩的。在这个体系当中只要是最普通的交换机联上去,都可以实现。

  我们基于CPU、用户流量、基于里面的内存使用量以及可以采集到的任何信息作为弹性伸缩基础,如果业务可以扩展到50台,就不会因为海量的攻击造成系统溢出。

  目前可以做到比较好的一点,平台当中可以同步跑电信里面规定的IPTV1.0、2.0、3.0,三套可以在我的系统当中同时运行,而且可以局部的对某一些服务进行升级。

图片4.png

 

  用消息来做粘合,通过业务系统优先级的方式,可以保证那么多的怎么挂在一块,我的存储组建等服务是通过消息组建粘合在一起的。再一个很短时间内可以重构业务流程,把第三方业务系统组合进来,快速的提供新的业务上线。

  在在人工智能领域引入的合作伙伴,可以帮我们做识图,做视频分析,做很多的应用,这些组建要做的事情做一个适配器,把他们的协议、规范、接口和平台的消息串在一起。

  我们把整个大数据体系,端到端的实现,在整个系统当中包括实时业务分析,以及对于海量数据进行模块化、模式化碰撞,这些在底层到上层各种各样的流氏计算等等都可以在平台当中一次性到位。

  存储当中的问题和解决办法

  存储当中也遇到一些小问题,刚才说的图片类的和非视频类的业务,在帮公安去做取样工程的时候,他们其中就有交通的应用,开车的人有感觉,如果被逮到一次违章就是一张照片,意味着一张照片等于200块钱,这就是最直接的换算方式,我们系统当中要面向一个城市,或者面向若干个城市,海量的违章卡口数据入库,以前看的行业当中基本上很难做到不丢数据,就是因为以前做不好,后来改善才能实现。现在做到一台服务器,几千张照片几秒钟存进去,同时可以调出去,就意味这一张照片200块钱,很简单的换算模型。

  现在可以做到一体化,只要里面构建,就可以按照用户需求,也可以存视频或者是文档或者是照片。

  存储上面的优化,小文件的优化,这个技术已经申请专利,很快就会批下来,这样技术最核心的点我们通过SSD去把原来的真正写在磁盘上的元数据和元文件做了分离,这样技术的东西大家不太被理解,但是实际场景当中,我们打下去的性能指标比裸盘更高。

  目前已经可以实现机器内部的性能提升之后,那就是网络优化,网络当中主要使用的是这套Socket Based,但是通过右边的RDMA,我们可以实现一步到位的分装,带来的好处是成倍的性能提升。

  存储优化高性能,在磁盘读写的优化,更多是解决锁的问题,解决差异化策略问题,和精细化对列的问题,通过三种优化之后,整个存储集群,性能提升、吞吐提升4倍以上,磁盘优化之后的性能提升大概也是50%以上,整个存储集群带来的好处是通用、高性能、没有瓶颈,而且本身也没有安全性或者是短板。

  最后就是网络层面的优化,网络上面来说,现在主要做的事情就是把软件和硬件更好的吻合在一起。我们构建的云平台可以做到传统云平台的3倍左右,在整个平台当中,不存在因为网络分包、安全隔离的技术要求而导致性能降低。

  所有虚拟机的互通是完全无瓶颈的,而且是全无阻塞的,是无缝融合,而且没有上线,只要服务器是10G、40G的网卡都可以跑。

  前面讲的点都是实际应用过程当中的经验,云平台当中的优化,计算上面、存储上面、网络上面都优化很多之后,现在构建一个可以兼容电信运营商的IPTV业务,同时兼顾了公安、安防类的完整系统,这个系统现在目前跟运营商、客户伙伴,跟公安、政法委进行一些业务的接洽和合作,并且有一部分已经实现落地。这样雪亮工程,在电视上面的展现是看视频、看监控,一键进行安全的报警。公安一侧大系统的平台,让他办案,更大的投屏展现我们的业务。

责任编辑:王宁
版权声明:凡来源标注有“流媒体网”字样的文章,版权均属流媒体网站,如需转载,请注明出处“流媒体网”。非本站出处的文章为本站转载,观点供业内参考,不代表本站观点。

相关新闻

{$Hits}