惊人流量:全球最大色情网Xvideos每月PV达44亿

发布时间:2013-05-10 15:34:58    点击数:63113    作者:耐思智慧
淘域网(B08.com)05月09日消息:成人网站有多大?上网之人,多少都会接触过成人网站。这是一个举世公认的事实。不过这是一个难以洞察的领域,因为相关数据少之又少。我们知道成人网站 都是那些在互联网上有着超高流量的网站。根据 Google DoubleClick 的 Ad Planner 服务(通过cookie跟踪网民)显示,全球 Top 500 网站中,就有数十个成人网站。
全球最大的色情网站 Xvideos 每月网页浏览量(Page Views,PV)高达 44 亿,是CNN或ESPN新闻网站的3 倍,是Reddit的2 倍。LiveJasmin也不小。除了Google 和Facebook等大站,其他网站在YouPorn、Tube8 和 PornHub 面前都是小巫见大巫。
虽然网页浏览量是一个很好的起始点,但它们仅告诉我们某些色情网站比某些非色情网站要受欢迎。40亿的PV,听起来很多,但当我们把那些X站用户实际在做的事考虑进来,成人网站的大小和规模就有点明朗了。
色情网站和非色情网站的主页区别是访客的平均停留时间。诸如Engadget等新闻网站的平均停留时间是3 – 6分钟,大约是是阅读1 – 2篇文章。然而色情网站的停留时间,大约是在15 – 20 分钟。
大部分网站的内容主要是文本和图像,而成人大站则是视频。ExtremeTech 首页完全加载大约是几兆数据,打开一篇文章,大约是500kb数据。访问色情网站,假设是打开一个480×200低分辨率的视频,每秒传输100 kb数据。15分钟的话,那就大约是90MB 数据了。
Xvideos每月有3.5亿访问次数,乘以90 MB,那就每月传输大约29PB数据,也就是每秒传送数据约50GB。做个对比,你家网络连接可能每秒传送两兆(2MB),Xvideos是你家的25,000 倍。简而言之,色情网站是在处理天文数字级别的数据。在原始带宽(Raw Bandwidth)方面,能与之匹敌的网站,也就只有YouTube或Hulu,而YouPorn却又是Hulu的6 倍。
基础设施
就支持视频所需的资源,数据存储器、CPU周期、I/O和带宽,远超过文本和图像所需要的资源。
当然了,虽然每个网站的情况又不一样了,但大部分成人站点都有50至200TB 的成人资料。对一个网站来说,这是个大数目(Google、Facebook、Blogger和Youtube之流存储的数据比这还要多),好在现在2TB的硬盘便宜。CPU周期和I/O会影响视频流和 PV 数量。首先,色情网站要提供动态、可搜索的海量视频数据库,然后点播视频时,从硬盘读取文件,再网络上传输。如果你有过在局域网传送大量大文件的经历,你就会知道网络系统的压力有多大了。
硬件设备情况,实际上我们几乎无法知晓,因为色情网站也没公布过。虽然如此,但我们讨论的大型色情网站会有四核服务器、千兆交换机、负载均衡器。在软件方面,大部分大型色情网站都会使用超高吞吐量的数据库(比如Redis)来存储和提供视频,还有轻量级的HTTP服务器(比如 Nginx )。
最后说带宽。还是以Xvideos为例(基于AdPlanner的数据估测),大型色情网站必须有足够的连通性(connectivity)来支撑每秒50G(400Gbps )。这还只是平均传输速率。在高峰期间,Xvideos或许要1,000Gbps  (1Tbps) ,或更高 。在伦敦和纽约直接的连通性也才15Tbps。
有很多方法来处理高流量:自己搞个数据中心,或者去大数据中心租赁几排架的服务器,或者使用诸如AmazonAWS和MicrosoftAzure之类的云服务。
真实案例
YouPorn是全球第二大的色情网站,足够提供研究数据。另外要说一下,DoubleClick的Ad Planner中的估测数据比实际数据要低很多的。
YouPorn有“超过100TB的干货”,每天网页浏览量超过1亿。总而言,这相当于每天传送950TB 数据(大部分都是视频流),每月大约传送29PB。Xvideos肯定不止28PB这个估测值了,它可能是每月35 – 40TB。
在高峰期,YouPorn每秒得响应4000个网页,相当于有每秒100GB 或(800 Gbps )的突发流量。这相当月每秒传送10+ 张双层DVD。
在软件方面,YouPorn的主数据库是Redis,用MySQL作为管理工具,用于管理和向Redis 簇中添加数据。后端是Perl 和MySQL,不过在2011 年改成了PHP + Redis。HTTP服务器是Nginx,同时用HAProxy  和 Varnish  做负载均衡。
Redis 服务器可以每秒处理30万请求,每小时记录下8 – 15GB数据,包括访客日志、行为数据等。据说Redis 可以抗住2亿的日 PV。(译注:2012年2月份,YouPorn的技术人员Eric Pickup在Google 群组宣告他们网站改用Redis DB 后。扛住了每天1亿PV浏览量,每秒30万请求,已经坚持2 周。Eric还将去加拿大一个技术大会分享经验。)
令人遗憾的是,YouPorn拒绝透露硬件设备信息。从YouPorn 的CDN的IP 地址来看,它应该没有使用云服务,应该托管在某地的大型数据中心。
互联网每天大约处理1/2 EB 数据,相当于每秒处理50Tb,YouPorn的800Gbps 这个数字几乎就占了互联网中每秒流量的 2%。而全球有几十个和YouPorn 规模相当的色情网站。互联网流量中色情内容占据了30%,这个说法也就不是不现实的哦。
(译注:1 EB = 1024 PB = 1024 * 1024 TB = 1024 * 1024 * 1024 GB)


有需要注册xxx域名。

地址:<span style="background-color:#FF9900;">https://www.jpisp.com/domain/xxx-domain-registration.php</span>
上一篇: 关于.XXX域名注册和解析问题的说明[配图]
下一篇: 5月19日中英文.com/.net域名维护通知
[返回所有新闻信息]

旗下网站:耐思智慧 - 淘域网 - 我的400电话 - 中文域名:耐思尼克.cn 耐思尼克.top

耐思智慧 © 版权所有 Copyright © 2000-2024 IISP.COM,Inc. All rights reserved

备案号码: 粤ICP备09063828号  公安备案号: 公安备案 粤公网安备 44049002000123号  域名注册服务机构许可:粤D3.1-20240003 CN域名代理自深圳万维网

声明:本网站中所使用到的其他各种版权内容,包括但不限于文章、图片、视频、音频、字体等内容版权归原作者所有,如权利所有人发现,请及时告知,以便我们删除版权内容

本站程序界面、源代码受相关法律保护, 未经授权, 严禁使用; 耐思智慧 © 为我公司注册商标, 未经授权, 严禁使用

法律顾问:珠海知名律师 广东笃行律师事务所 夏天风 律师