• 01
迅雷陈磊:共享经济云计算模式的星域CDN
0
2017-02-24 11 14

8月23日,GIEC2016全球互联网经济大会暨ECECHINA2016第七届中国电子商务博览会在北京国际会议中心盛大开幕,作为2016全球互联网经济大会的第二大版块大数据高峰论坛研讨会,大会邀请了几位大咖进行演讲。在联想集团副总裁田日辉发言之后,迅雷联席CEO陈磊分享了大数据的头脑风暴。


演讲内容如下:


网心科技希望能够通过共享经济的方法来变革和重构云计算的公司,为什么要重构云计算?计算量,从计算机发明的那天开始,计算量在高速的增长,现在的社会,计算量的增长速度在大幅度的提升,这是互联网上发生了一些海量数据,每天大概有多少海量数据在产生。不但数据产生的次数在变多,同时数据的量级也在变大。


我们看到,一个人的基因序列所占有的数据空间是100Gb,在自然生长的环境里,人类个体产生的数据也是非常庞大的,这里面有一些相关的数据量级。


在美国有一家公司叫23和我,这是一家什么样的公司?在收集人的基因序列,现在有150万人的基因序列,这个基因序列收集了以后,能够通过机器学习的方法研究基因里面带来的疾病和治疗今天我们认为不可治疗的疾病手段,通过修改人的细胞的基因治疗一些疾病。这家公司现在被认为是一家独角兽,其实这公司创建的时间并不长,150万人的基因序列,如果全部要存下来的话,是一个很大的量级,150万×100Gb。所以这家公司没有那么大的存储空间,只能存片段。这对我刚才讲的课题来说,仍然是很小的量级,我们看到很多人类基因工程项目背后的投资人里面,都有他们的声音,因为基因工程真的在制药解决人类的疾病甚至长生不老等等这些方面,有着非常大的潜力。所以数据量在增加,计算量也在大幅度的增长。


今天的社会,我们看到在不久前阿尔法狗打败了李世石,当时使用的系统是谷歌的系统,在这件事情发生不到十年前,曾经发生过IBM的人工智能系统,打败了当时的国际象棋冠军。这个计算规模是它的多少倍呢?2.5万倍,这说明了两个问题,一个问题是人工智能的发展实际上是一个计算规模的高速发展。第二个,说明的问题,中国发明了游戏,比西方人发明的游戏要难2.5万倍,从人工智能的角度来讲。计算的规模大幅度的提升,但是计算的成本是不是保持了一个高速下降的趋势。


我们知道,计算规模的提升一定会给我们带来成本上的挑战,这件事情在过去的几十年里,特别是在英特尔出来之后,一直都解决得很好,随着电子计算机技术的发展,一直都解决得很好,背后最核心的一个驱动力是摩尔定律,摩尔定律是芯片,特别是晶体管的大小,在高速的变小,它所带来的成本也在降低。但是当晶体管小到一定量级以后,就很难再缩小了,因为在物理世界里面还不知道怎么去把原子本身变小,这是物理定律不能支持的。所以在过去的一段时间里面,一直有人站出来说,摩尔定律的失效,包括英特尔的技术副总裁、摩尔定律背后的摩尔本人都在讲,说摩尔定律逐渐的失效,英特尔的研发周期过去几年里面已经在拉长,拉长到24到36年。所以摩尔定律逐渐失效,而计算规模在爆发式的增长,这样一对矛盾,在未来一定会变成一个需要解决的问题。


怎么来解决呢?不同的企业或者不同的技术人员有不同方式、不同的想法来解决,但是网心科技选择了一条路在探索,就是用共享经济的办法来解决。共享经济核心的一个价值是边际成本很低,我们把边际成本降低。


我们怎么做的?首先,在我们的共享经济云计算的架构上,做了一个产品,这个产品叫星域CDN,这个产品对我们来讲有点像S3,在亚马逊那里,星域CDN通过共享经济的模式向社会提供CDN的服务,主要由这几个要素组成,首先通过迅雷赚钱宝,一个共享经济的智能平台,卖给用户,用户把它装在互联网的网络上,装在路由器背后,插上移动硬盘,变成了一个CDN的服务节点。通过广大的迅雷赚钱宝的服务节点能够覆盖中国不同运营商、不同地域的CDN服务的需求,互联网的企业享受一个比行业要低很多的CDN的价格,同时网络用户通过有偿的出租它的下载宝和网络带宽换取收入。


在共享经济的平台上去做云计算跟在大规模的IDC里面做云计算,有很大的不同,第一,我们要解决传输的问题,我们的传输主要是靠公网来传输,海量的、几十万的节点通过公网进行传输的时候,要去克服公网传输的不稳定性,这个可以对我们的传输协议的设计提出很大的挑战。同时我们有海量的计算资源,把计算变得更加复杂,每一个计算节点的体积越小,计算能力也更小,怎么让更多的节点能够发挥大型的计算设备提供的价值。


解决传输问题,我们的核心手段是把点对点的传输变成多点对多点的传输,把串行变成并行,我们知道传统的CDN通过HTTP的连接,用户从一个单点拉成一个线,HTTP一个连接决定了这个用户整个体验的质量,这样一个模型。我们做的是把一片数据通过编码的方式分布到不同的上面去,从客户端并行来做,高度的容错,用私有的网络协议高度的容错,一片数据分成100份,只要拉到80份就可以把它恢复了。


我们利用海量节点的优势去深入地理解和掌握公网的网络质量和公网高度变化和经常波动的不同连接之间网络的质量变化,通过探测网络,并且用探测的结果来智能的方法提升网络的效率、优化网络的路径,这是传统CDN节点的布局。


这是星域CDN网状的拓扑结构。


基于共享经济云计算模式的星域CDN,我们今天有30万以上的广大的末端节点加上400个以上的骨干节点,通过离用户更近、节点更多、选择更多、串行变并行,其中更优质的CDN质量,并且通过共享经济的模式大幅度的降低成本。


这是使用我们的CDN的大量的客户,都是对CDN的质量要求很高的互联网行业的核心企业。

迅雷赚钱宝成为了一个广受用户欢迎的智能硬件,从去年4月份一推出的时候,就一直在创造记录。我们的Pro版,在京东推出的时候,经常是一两秒钟就售光了。在淘宝众筹也创造了10秒之内被抢空的结果,参与预约抢购的人次已经超过400万人。


星域共享平台指在赚钱宝的基础上,把赚钱宝的计算能力开放出来,让更多的软件开发者能够用这样海量的节点,通过我们的通讯技术做更多的事情。今天我们在这个平台上已经在做一些跟大数据的存储和网速的加速相关的典型案例。


近期,赚钱宝会推出一个新的功能,我们希望在这个平台上能够有越来越多的开发者,能开发各种各样的应用,特别大数据领域,有很多适合在这样的平台上开发的应用,高度分布式的应用,比如说人工智能大数据分析、海量数据存储、机器学习网络等等,这些都可以做成高度分布的算法,通过我们在平台提供各种各样的技术,来保证传输的质量,得到很低的成本,让你提供的大数据的服务有很高、很强的成本优势。欢迎大的创业者跟我们一起来创造这样一个共享经济云计算的时代。

 

温馨提示:本文为速记初审稿,保证现场嘉宾原意,未经删节,或存纰漏,敬请谅解。

会展活动
  • 01

    2018-09-032018第四届全球互

  • 01

    2018-04-192018全球互联网经

  • 01

    2017-12-202017全球跨境电子

  • 01

    2017-09-052017全球互联网经