C1000K高性能服务器构建技术

C1000K 高性能服务器构建技术余锋 http://yufeng.info [email_address] 淘宝网核心系统资深专家 2010/10/16

C1000K 面对的挑战 ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]

解决方案 ,[object Object],图 ! 图 ! 图 !

Agenda ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]

硬件体系巨大变化现在过去北桥慢慢成为过去！

Cache 在现代 CPU 硬件上的版面，也充分说明了 cache 的重要性

内置四张网卡如何高效并行使用？

Virident pci-e 卡 IOPS 高达 200K ，带宽 800M

小结 ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]

Agenda ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]

深度调查系统，为设计做依据

Numa 架构下的调度器， CPU 亲缘性

Numa matters google Tcmalloc numa aware 版本 ,[object Object],[object Object],[object Object],[object Object]

Largepage ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]

网卡 bonding 我们需要网卡的负载均衡模式（ mode 0), 需要交换机的支持

中断平衡 ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]

RPS/RFS 解决 softirq 平衡 ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]

微调协议栈原则： dmesg 可以观察到协议栈在抱怨什么，它抱怨什么我们解决什么！ TCP 协议栈内存不可交换物理内存

来自 google 的 initcwnd 调优 ,[object Object],[object Object],[object Object],[object Object],[object Object]

IO 子系统 ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]

采用异步 IO ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]

你需要知道的访问延迟数字

多核心架构下性能问题， CPU 和内存以及 IO 间的速度越来越不平衡， CPU 大部分时间都是在等待。

如何利用好我们的 cache 和空余 CPU 计算力？ Intel Xeon 7400 CPU: 96 KB L1 cache (Data) and 16 MB of L3 cache

压缩数据集 ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]

列表 [] 数据结构 Erlang 的 [] 注意事项： 1. 单链表，只能表头访问，数据分散，特别是数据被 GC 过后，中间的洞变大，对 cache 很不友好。 2. Erlang 的 IO 支持 iolist, 底层会用 writev 发送数据，尽量用 iolist.

避免数据搬动 ,[object Object],[object Object],[object Object],[object Object]

小结 ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]

Erlang 运行期内部结构图虚拟机的选择 ,[object Object],[object Object],[object Object]

调度器机制 Running on full load or not! 进程和 BIF 按照时间片原则公平调度，抢占。

绑定调度器 spawn_opt 未公开参数 scheduler 用于绑定进程到指定调度器

Erlang 内存分配池 ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]

Erlang 进程和 Port ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]

Erlang 进程单点 /race 问题 ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]

Erlang NIF ,[object Object],[object Object],[object Object],[object Object],[object Object]

EI (erlang C interface) ,[object Object],[object Object],[object Object],[object Object],[object Object]

Mnesia OTP 最核心的部件 Mnesia ，是做分布式系统最关键的一环！

推荐的性能调优工具 ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]

了解 IO 系统 ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]

ss 用于统计大量 socket 占用的资源情况 netstat 之类的工具对于大量的链接来讲实在太慢！了！

Systemtap 帮助你了解你的程序

结论 ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]

谢谢大家！ Any question ？大部分的图片粘贴自 Google 搜索的文档，谢谢 Google ，谢谢这些可爱的作者。

C1000K高性能服务器构建技术

Recomendados

Recomendados

Mais conteúdo relacionado

Mais procurados

Mais procurados (20)

Destaque

Destaque (20)

Semelhante a C1000K高性能服务器构建技术

Semelhante a C1000K高性能服务器构建技术 (20)

Mais de Feng Yu

Mais de Feng Yu (8)

C1000K高性能服务器构建技术

Notas do Editor