顶950x90
您现在的位置:首页 >> 网站运营 >> 焦点访谈 >> 内容

成人网站的大小和规模就有点明朗了上网之人

时间:2013-5-20 20:57:42 点击:

  核心提示:不过这是难以洞察的领域因为相关数据少之又少,当然成人网站都是那些在互联网上有着超高流量的网站。(译注:1 EB = 1024 PB = 1024 * 1024 TB = 1024 * 1024 * 1024 GB)...

虽然网页浏览量是一个很好的起始点但它们仅告诉我们,某些色情网站比某些非色情网站要受欢迎40亿的PV,听起来很多但当我们把那些X站用户实际在做的事考虑进来,成人网站的大小和规模就有点明朗了上网之人,多少都会接触过成人网站这是一个举世公认的事实。不过这是难以洞察的领域因为相关数据少之又少,当然成人网站都是那些在互联网上有着超高流量的网站。(译注:1 EB = 1024 PB = 1024 * 1024 TB = 1024 * 1024 * 1024 GB)

 

根据 Google DoubleClick 的 Ad Planner 服务(通过cookie跟踪网民)显示,全球 Top 500 网站中,就有数十个成人网站。全球最大的色情网站 Xvideos 每月网页浏览量(Page Views,PV)高达 44 亿,是 CNN 或 ESPN 新闻网站的 3 倍,是 Reddit 的 2 倍。LiveJasmin 也不小。除了 Google 和 Facebook 等大站,其他网站在YouPorn、Tube8 和 PornHub 面前都是小巫见大巫。色情网站和非色情网站的主页区别是访客的平均停留时间。

 

诸如 Engadget 等新闻网站的平均停留时间是 3-6 分钟,大约是是阅读 1-2 篇文章然而色情网站的停留时间,大约是在 15-20 分钟部分网站的内容主要是文本和图像,而成人大站则是视频ExtremeTech 首页完全加载,大约是几兆数据打开一篇文章大约是500kb数据。访问色情网站假设是打开一个 480×200 低分辨率的视频,每秒传输 100 kb 数据15 分钟那就大约是90MB数据。Xvideos 每月有 3.5 亿访问次数乘以90MB,每月传输大约29 PB数据也就是每秒传送数据约50GB。

 

家庭网可能每秒传送两兆(2 MB)Xvideos是25,000 倍,简而言之色情网站是在处理天文数字级别的数据。在原始带宽(Raw Bandwidth)方面,能与之匹敌的网站也就只有YouTube或Hulu,而YouPorn却又是Hulu的6倍就支持视频所需的资源,数据存储器、CPU 周期、I/O 和带宽,远超过文本和图像所需要的资源。成人站点都有 50 至 200 TB 的成人资料。在软件方面,大部分大型色情网站都会使用超高吞吐量的数据库(比如 Redis )来存储和提供视频,还有轻量级的 HTTP 服务器(比如 Nginx )。

 

对一个网站来说这是个大数目(Google、Facebook、Blogger 和 Youtube 之流存储的数据比这还要多),好在现在 2 TB 的硬盘便宜。CPU 周期和 I/O 会影响视频流和 PV 数量。首先色情网站要提供动态、可搜索的海量视频数据库,然后点播视频时从硬盘读取文件,再网络上传输如果有过在局域网,传送大量大文件的经历就知道网络系统的压力有多大。硬件设备情况实际上我们几乎无法知晓,因为色情网站也没公布过虽然如此,但我们讨论的大型色情网站会有四核服务器、千兆交换机、负载均衡器。

 

最后说带宽还是以 Xvideos 为例(基于 Ad Planner 的数据估测),大型色情网站必须有足够的连通性(connectivity)来支撑每秒 50 GB(400Gbps )。这还只是平均传输速率在高峰期间,Xvideos 或许要 1,000Gbps (1Tbps) 或更高 。在伦敦和纽约直接的连通性也才 15Tbps,有很多方法来处理高流量:自己搞个数据中心,或者去大数据中心租赁几排架的服务器,或者使用诸如 Amazon AWS 和 Microsoft Azure 之类的云服务。

 

YouPorn 是全球第二大的色情网站足够提供研究数据,另外要说一下DoubleClick 的 Ad Planner,其中的估测数据比实际数据要低很多的。YouPorn 有“超过 100 TB 的干货”,每天网页浏览量超过 1 亿。总而言,这相当于每天传送 950 TB 数据(大部分都是视频流),每月大约传送 29 PB。Xvideos 肯定不止 28 PB 这个估测值了,它可能是每月 35 – 40 TB在高峰期,YouPorn 每秒得响应 4000 个网页,相当于有每秒 100 GB 或(800 Gbps )的突发流量。这相当月每秒传送 10+ 张双层 DVD。

 

在软件方面,YouPorn 的主数据库是 Redis,用 MySQL 作为管理工具,用于管理和向 Redis 簇中添加数据。后端是 Perl 和 MySQL,不过在 2011 年改成了 PHP + Redis。HTTP 服务器是 Nginx,同时用 HAProxy 和 Varnish 做负载均衡。Redis 服务器可以每秒处理 30 万请求,每小时记录下8-15GB数据包括,访客日志、行为数据等据说 Redis 可以抗住 2 亿的日 PV。令人悲伤的是YouPorn 拒绝透露硬件设备信息,从 YouPorn 的 CDN 的 IP 地址来看它应该,没有使用云服务托管在某地的大型数据中心。

 

2012年2月份YouPorn 的技术人员 Eric Pickup,在 Google 群组宣告他们网站改用 Redis DB 后,扛住了每天1亿PV浏览量每秒30万请求,已经坚持 2 周Eric 还将去加拿大一个技术大会分享经验。互联网每天大约处理 1/2 EB 数据,相当于每秒处理 50Tb, YouPorn 的 800Gbps 这个数字,几乎就占了互联网中每秒流量的 2%。而全球有几十个和 YouPorn 规模相当的色情网站。互联网流量中色情内容占据了 30%,这个说法也就不是不现实的哦。

 

 

 

作者:tt2sf 来源:不详
468x60_1
共有评论 1相关评论
发表我的评论
  • 大名:
  • 内容:
  • 【参网淘宝最划算】(www.cen5.com) © 2024 版权所有 All Rights Reserved.
  • Email:tt2gm@qq.com 站长QQ:5679641 联ICP备10010号