服务器开发特别业务处理比较频繁的服务器,对内存的使用依赖比较高,有什么好的性能好的提高服务器内存使用性能的方式?

2010-11-06 12:46:31

4 Answers

的确,内存是影响服务器性能至关重要的一个因素,能直接制约吞吐率。
1.对于Web并发量很高的服务器,不要使用Apache(以多进程的方式处理并发请求),而使用lighttpd和Nginx(使用多线程+异步IO)。多进程占用内存,且调度非常耗CPU,对不担心线程中某个功能死掉造成进程僵死的情况,使用多线程。
2.发送文件时,特别是大文件,使用Linux提供的SendFile。因为是读文件和发文件都是直接内核操作,不需要把数据从磁盘从内核缓冲传到应用层缓冲,然后又通过内核缓冲区传递到网卡发送。这样节省了内存之间的copy占用。
3.线程申请使用线程池。
4.使用内存池,一次申请一批内存,避免内存碎片整理程序调度。但是也要按需分配,不能一次申请太多,而实际浪费掉很多空间。
5.对于要求高性能的服务器,尽量使用异步通知(通过内核回调函数通知),比如Linux上的rsync+inofity,就是采用内核监视文件然后通知应用层,而不是采用轮询,解放了CPU和内存(维护查询队列)。
6.减少内核调用,很多API是需要调用内核API的,应用层切换到内核层是非常耗CPU和内存的(CPU换入换出寄存器值,内存保存堆栈、函数入口指针)。
7.对于图片密集和网页小数据量很多的请求,使用长连接(TCP)传送数据,而不使用短连接(HTTP),或者HTTP头中加入"Keep-Alive"字段。经常建立、断开HTTP连接,维护协议栈很耗内存。
8.对存取速度要求不太高的软件,配置不写入内核缓冲,直接写磁盘。例如MySQL的InnoDB,可以配置MySQL数据直接操作磁盘。

测试工具Linux下使用ab测试Web服务器的高并发性,使用strace测试内核调用。

2010-11-06 15:15:35

这个需要注意的点很多,我认为在这四个方面是服务器开发需要注意的

  1. 减少无用的数据拷贝,这个会带来拷贝的内存消耗和更多的计算,所以应该尽量做到“零老拷贝”,虽然基本不可能 :)。
  2. 上下文切换,和数据拷贝相比,上下文切换是让高负载应用的真正杀手。系统更多的时间都花费在线程切换上,而不是花在真正做有用工作的上来。所以选择一个真真适合需求的的I/O模型很重要,合理使用线程等都很重要,这方面细节很多,比如纯种的数目和CPU的个数等。
  3. 内存分配,一次性用来预先分配内存,来减少内存分配带来的效率损失。比较常用的是内存池,当然这里面有很多变种,可根据需求选择适合自己的一款。
  4. 锁竞争,高效率的锁是非常难规划的, 这个需要一定的经验来定义锁的颗粒度,粗粒度效率虽然较好,但会有死锁发生,而细粒度锁则会产生竞争,而且这个没有统一的解法,根据需求+经验灵活掌握。
  5. 推荐一个库tcmalloc: Fast, multi-threaded malloc() and nifty performance analysis tools
2010-11-06 16:38:10

首先像楼上说的,在应用层上下功夫,其次推荐一个库tcmalloc
Fast, multi-threaded malloc() and nifty performance analysis tools

2010-11-06 17:47:30

为了保障服务的质量,需要达到两个目标:一是服务器不宕机,二是服务器的反应和处理能力在一定的水平以上。因此在服务器开发的时候对于内存尽量提高使用效率,其中内存池是一个特别有效的方式。其他的间接方式如:优化你的算法,少使用内存,或者尽量快的出来速度。

2010-11-06 19:15:31
您不能回答该问题或者回答已经关闭!

相关文章推荐

  • C#中using指令的几种用法

    using + 命名空间名字,这样可以在程序中直接用命令空间中的类型,而不必指定类型的详细命名空间,类似于Java的import,这个功能也是最常用的,几乎每个cs的程序都会用到

  • C#实例解析适配器设计模式

    将一个类的接口变成客户端所期待的另一种接口,从而使原本因接口不匹配而无法在一起工作的两个类能够一起工作

  • 使用托管C++粘合C#和C++代码(二)

    本文实现一下C++代码调用C#代码的过程。我构造一个简单并且直观的例子:通过C++ UI 触发C# UI.

  • C#开发高性能Log Help类设计开发

    项目中要在操作数据库的异常处理中加入写Log日志,对于商业上有要求,写log时对其它操作尽可能影响小,不能因为加入log导致耗时太多

  • Async和Await使异步编程更简单

    C#5.0中async和await两个关键字,这两个关键字简化了异步编程,之所以简化了,还是因为编译器给我们做了更多的工作

  • C#开发中的反射机制

    反射的定义:审查元数据并收集关于它的类型信息的能力。元数据(编译以后的最基本数据单元)就是一大堆的表,当编译程序集或者模块时,编译器会创建一个类定义表,一个字段定义表,和一个方法定义表等

  • C#运行时相互关系

    C#运行时相互关系,包括运行时类型、对象、线程栈和托管堆之间的相互关系,静态方法、实例方法和虚方法的区别等等

  • C#协变和逆变

    “协变”是指能够使用与原始指定的派生类型相比,派生程度更大的类型,“逆变”则是指能够使用派生程度更小的类型

  • C#中的索引器的简单理解和用法

    C#中的类成员可以是任意类型,包括数组和集合。当一个类包含了数组和集合成员时,索引器将大大简化对数组或集合成员的存取操作

  • C#基础概念之延迟加载

    延迟加载(lazy load)是Hibernate3关联关系对象默认的加载方式,延迟加载机制是为了避免一些无谓的性能开销而提出来的,所谓延迟加载就是当在真正需要数据的时候,才真正执行数据加载操作

  • 使用托管C++粘合C#和C++代码(一)

    C#在xml读写,数据库操纵,界面构造等很多方面性能卓越;C++的效率高,是底层开发的必备武器

  • 深入C# 序列化(Serialize)、反序列化(Deserialize)

    C#中的序列化和反序列化,序列化是.NET运行时环境用来支持用户定义类型的流化的机制