从 C10K 到 C500K

国外的 Urban Airship 公司的工程师在其官方网志上发文章介绍他们在产品环境中做到 50 万并发客户端,Java + Pure NIO 的实现,最近又有文章介绍针对 Linux Kernel 调优的经验:Linux Kernel Tuning for C500k .并且指出了”单个 IP 最大并发数量上限为64K” 只是一个误解. 硬件环境?操作系统为 Ubuntu(Lucid),租用 Amazon 的 EC2 ,使用 EC2 Large instances,64 位操作系统,每个 7…

C10K问题摘要

本文的内容是下面几篇文章阅读后的内容摘要: http://www.kegel.com/c10k.html (英文版) http://www.oschina.net/translate/c10k (中文翻译版) http://www.cnblogs.com/fll/archive/2008/05/17/1201540.html The C10K problem http://blog.csdn.net/xiao_qiang_/article/details/8960229 千万级并发实现的秘密:内…

【原创】高性能网络编程(二)：上一个10年，著名的C10K并发连接问题

1.前言对于高性能即时通讯技术(或者说互联网编程)比较关注的开发者,对C10K问题(即单机1万个并发连接问题)应该都有所了解."C10K"概念最早由Dan Kegel发布于其个人站点,即出自其经典的<The C10K problem (英文PDF版.中文译文)>一文.正如你所料,过去的10年里,高性能网络编程技术领域里经过众多开发者的努力,已很好地解决了C10K问题,大家已开始关注并着手解决下一个十年要面对的C10M问题(即单机1千万个并发连接问题,C10M相关技术讨论和…

C10K 问题引发的技术变革

C10K 问题引发的技术变革 http://rango.swoole.com/archives/381…

c10k问题及其解决方案

本文主要讲述高并发http应用中的c10k瓶颈问题:在很多服务器初始状态下,无法服务1w左右的并发连接.这与每次服务的资源消耗.服务器的硬件配置固然有关,但很多时候是被linux的默认配置以及软件stack选型所限制.本文主要分析c10k问题的产生原因.限制因素以及解决方案. 如果硬件配置没有问题,性能较高的服务器上,产生c10k问题,很多情况下与配置和软件栈相关:最大文件打开数.socket 端口数.IO基础栈. 为什么呢? 如果依然存在性能问题,可以考虑优化程序的架构:比如,网络瓶颈:cdn…

C10K问题渣翻译

The C10K problem [Help save the best Linux news source on the web -- subscribe to Linux Weekly News! ] It's time for web servers to handle ten thousand clients simultaneously, don't you think? After all, the web is a big place now. And computers are …

The C10K problem

原文链接:http://www.kegel.com/c10k.html It's time for web servers to handle ten thousand clients simultaneously,don't you think? After all, the web is a big place now. And computers are big, too. You can buy a 1000MHz machinewith 2 gigabytes of RAM and a…

[转]何为C10K问题

我在学习网络编程的时候经常看到C10K问题,那么究竟什么是C10K问题呢?我看到了一篇好文章就转了过来,原文地址为:c10k问题所谓c10k问题,指的是服务器同时支持成千上万个客户端的问题,也就是concurrent 10 000 connection(这也是c10k这个名字的由来).由于硬件成本的大幅度降低和硬件技术的进步,如果一台服务器同时能够服务更多的客户端,那么也就意味着服务每一个客户端的成本大幅度降低,从这个角度来看,c10k问题显得非常有意义. 为了解决C10K问题,有各种各样的I…

C10K problem

什么是C10K问题 1W个客户端连接上一个server,客户不定时的发送请求. I/O策略软件架构 1.单线程解决多重I/O调用不要使用阻塞/同步的调用,如果非要这么做,那就采用多进程或者多线程来并发处理. 使用非阻塞的调用和就绪通知策略,当下一个I/O可用时通知调用者.适用于套接字I/O,而不是磁盘I/O. 使用异步的调用和通知策略,当下一个I/O可用时通知调用者,适用于磁盘I/O和套接字I/O. 2.如何控制服务每个客户端的代码每一个client对应一个…

C10K问题2

http://blog.csdn.net/zhoudaxia/article/details/12920993 是时候让 Web 服务器同时处理一万客户端了,你不觉得吗?毕竟,现在的 Web 是一个大地盘了. 并且,计算机也是一样的大. 你可以花 $1200 左右购买一台 1000MHz,2Gb RAM 和一块 1000Mbit/s 以太网卡的机器.我们来看看——在 20000 客户端(是 50KHz,100Kb 和 50Kb/s/客户端)时,它不采取任何更多的马力而是采用 4Kb 的硬盘和为2…

C10K问题和Libevent库介绍

http://blog.chinaunix.net/uid-20761674-id-75056.html 一．C10K的问题 C10K的问题在上个世纪90年代就被提出来了.大概的意思是当用户数超过1万时,很多设计不良好的网络服务程序性能都将急剧下降.甚至瘫痪.并且,这个问题并不能通过升级硬件设备解决,是操作系统固有的问题,也就是说,如果你的服务器最高能支撑1000个并发,尽管你升级了计算能力高一倍的 cpu,内存再翻一番,硬盘转速在快一倍,也无法支撑2000个并发. 经典的网络编程模型有4个:…

轻松应对C10k问题

http://blog.csdn.net/u011011917/article/details/17203539 传统的.教科书里的I/O复用等待函数select/poll在处理数以万计的客户端连接时,往往出现效率低下甚至完全瘫痪,,这被称为C10K 问题. 本文尝试着以一个最简单的单线程epoll程序为基础,轻松应对收发数据不频繁的过万客户端并发连接.并以此回顾C10K问题,介绍应对C10K问题的本质方法,线程模式的选择,介绍服务器编程流行的Reactor模式. 顺带介绍怎么应对socket…

浅谈C10K问题

在大型的APP中进行高并发的访问,淘宝,支付宝,微信,QQ,等 C10K问题:高并发的进行访问 C10K问题的最大特点是:设计不够良好的程序,其性能和连接数及机器性能的关系往往是非线性的.举个例子:如果没有考虑过C10K问题,一个经典的基于select的程序能在旧服务器上很好处理1000并发的吞吐量,它在2倍性能新服务器上往往处理不了并发2000的吞吐量. 这是因为在策略不当时,大量操作的消耗和当前连接数n成线性相关.会导致单个任务的资源消耗和当前连接数的关系会是O(n).而服务程序需要同时…

长连接锁服务优化实践 C10K问题 nodejs的内部构造 limits.conf文件修改 sysctl.conf文件修改

小结: 1. 当文件句柄数目超过 10 之后,epoll 性能将优于 select 和 poll:当文件句柄数目达到 10K 的时候,epoll 已经超过 select 和 poll 两个数量级. 2. 连接数 limits.conf文件修改 sysctl.conf文件修改 3. 协程将事件回调进行包装它们在实现上都是试图用一组少量的线程来实现多个任务,一旦某个任务阻塞,则可能用同一线程继续运行其他任务,避免大量上下文的切换.每个协程所独占的系统资源往往只有栈部分.而且,各个协程之间的切换,往…

C10K问题

转自:https://www.jianshu.com/p/ba7fa25d3590 C10K问题由来随着互联网的普及,应用的用户群体几何倍增长,此时服务器性能问题就出现.最初的服务器是基于进程/线程模型.新到来一个TCP连接,就需要分配一个进程.假如有C10K,就需要创建1W个进程,可想而知单机是无法承受的.那么如何突破单机性能是高性能网络编程必须要面对的问题,进而这些局限和问题就统称为C10K问题,最早是由Dan Kegel进行归纳和总结的,并且他也系统的分析和提出解决方案. C10K问题的…

(转)The C10K problem翻译

The C10K problem 如今的web服务器需要同时处理一万个以上的客户端了,难道不是吗?毕竟如今的网络是个big place了. 现在的计算机也很强大了,你只需要花大概$1200就可以买一个1000MHz的处理器,2G的内存, 1000Mbit/sec的网卡的机器.让我们来看看--20000个客户,每个为50KHz,100Kbyes和 50Kbit/sec,那么没有什么比为这两万个客户端的每个每秒从硬盘读取4千字节然后发送到网络上去更消耗资源的了.可以看出硬件不再是瓶颈了. (Tha…

c10k C10M

高性能网络编程(二):上一个10年,著名的C10K并发连接问题阅读(22369) | 评论(9)收藏10 淘帖1 赞4 JackJiang Lv.9 1 年前 | |只看大图 1.前言 <ignore_js_op> 对于高性能即时通讯技术(或者说互联网编程)比较关注的开发者,对C10K问题(即单机1万个并发连接问题)应该都有所了解.“C10K”概念最早由Dan Kegel发布于其个人站点,即出自其经典的<The C10K problem (英文PDF版.中文译文)&g…

C10K——千万级并发实现的秘密：内核不是解决方案，而是问题所在！（转）

既然我们已经解决了 C10K并发连接问题,应该如何提高水平支持千万级并发连接?你可能会说不可能.不,现在系统已经在用你可能不熟悉甚至激进的方式支持千万级别的并发连接. 要知道它是如何做到的,我们首先要了解Errata Security的CEO Robert Graham,以及他在Shmoocon 2013大会上的“无稽之谈”—— C10M Defending The Internet At Scale. Robert用一种我以前从未听说的方式来很巧妙地解释了这个问题.他首先介绍了一点有关Unix…

C10K问题及解决方案

转载自:http://blog.csdn.net/wangtaomtk/article/details/51811011 1 C10K问题大家都知道互联网的基础就是网络通信,早期的互联网可以说是一个小群体的集合.互联网还不够普及,用户也不多.一台服务器同时在线100个用户估计在当时已经算是大型应用了.所以并不存在什么C10K的难题.互联网的爆发期应该是在www网站,浏览器,雅虎出现后.最早的互联网称之为Web1.0,互联网大部分的使用场景是下载一个Html页面,用户在浏览器中查看网页上的信息.…

C10K并发连接_转

转载:http://blog.csdn.net/wangtaomtk/article/details/51811011 1 C10K问题大家都知道互联网的基础就是网络通信,早期的互联网可以说是一个小群体的集合.互联网还不够普及,用户也不多.一台服务器同时在线100个用户估计在当时已经算是大型应用了.所以并不存在什么C10K的难题.互联网的爆发期应该是在www网站,浏览器,雅虎出现后.最早的互联网称之为Web1.0,互联网大部分的使用场景是下载一个Html页面,用户在浏览器中查看网页上的信息.这…

[svc]C10K 问题引发的技术变革

C10K 问题引发的技术变革 http://rango.swoole.com/archives/381 C10K 问题服务器应用领域很古老很出名的一个问题,大意是说单台服务器要同时支持并发 10K 量级的连接,这些连接可能是保持存活状态的. 解决这一问题,主要思路有两个:一个是对于每个连接处理分配一个独立的进程/线程:另一个思路是用同一进程/线程来同时处理若干连接. 每个进程/线程处理一个连接这一思路最为直接.但是由于申请进程/线程会占用相当可观的系统资源,同时对于多进程/线程的管理会对系统…

网络编程——C10K简述

C10K问题网络服务在处理数以万计的客户端连接时,往往出现效率底下甚至完全瘫痪,这被成为C10K问题. (C10K = connection 10 kilo 问题).k 表示 kilo,即 1000 比如:kilometer(千米), kilogram(千克). 非阻塞I/O,最关键的部分是readiness notification(when ready, then notify!)和找出哪一个socket上面发生了I/O事件. 一般我们首先会想到用select来实现. int se…

网络编程——The C10K Problem(C10K = connection 10 kilo 问题)。k 表示 kilo，即 1000

The C10K problem翻译 (C10K = connection 10 kilo 问题).k 表示 kilo,即 1000 比如:kilometer(千米), kilogram(千克). 如今的web服务器需要同时处理一万个以上的客户端了,难道不是吗?毕竟如今的网络是个big place了. 现在的计算机也很强大了,你只需要花大概$1200就可以买一个1000MHz的处理器,2G的内存, 1000Mbit/sec的网卡的机器.让我们来看看--20000个客户,每个为50KHz,100K…