Recent Posts
-
November 27, 2012
Windows平台的zeromq在iocp出来之前还是不要用了 默认select性能很差
默认在Windows平台用的select ，性能很差！在事件循环里面调用select之前初始化fd_set的memcpy消耗额外的16%的cpu资源。之前用了zeromq做了个传输log的后端，发现 libzmq.dll 占用的cpu比较多，用性能工具分析发现，原来是select的问题。windows平台的zeromq在iocp出来之前还是不要用了，默认select性能很差 - widebright - widebright的个人空间可以看到这个地方的3个memcpy的占用非常的多。之前一...
-
November 15, 2012
实现日志系统的想法和和日志文件的写磁盘策略
领导叫改造一下现在的log部件，主要用于trace的时候记录调试记录的。 测试了一下，发现这个trace的日志还是很大的，现有的代码，喜欢每个函数进入退出都加trace记录状态。如果这些trace记录全部打开的话，测试了之前做的一愕功能模块，发现每秒可以产生 50万条trace语句，20M的 日志都有可能。 这还只是单进程的，如果多个同时运行还可能更大了。 优化了一下以前代码，应该可以大幅度的提高性能，但相比较trace 全关的时候，性能还是要差20%左右。这个日志怎么保存还是个问题...
-
November 13, 2012
C++ auto_bufer 和 高性能日志库pantheios
Pantheios 的网页说他的库比其他的 日志库要快很多，看这里的http://www.pantheios.org/related_material.html的解释，大概是说，log startment都是使用栈上的内存吧，只是在log被启用的时候，才有最多一个的日志参数的复制。其实就是使用 一个 suto_bufer的辅助类，在栈上留一段空间，比如2048字节。 然后那些 log信息字串都是放到这个 栈上。 只有参数太多，格式化出来的字符串太长的时候才有 suto_bufer 去堆里...
-
November 12, 2012
Linux动态链接库的加载 查找so文件相关的命令和配置
ldd 查看依赖的 动态链接库。objdump -p /path/to/program | grep NEEDEDman ld.so 解释 ld.so 是如何搜索 动态链接库的。 ldconfig 配置ld.so 的搜索路径配置，生成cache那些readelf -d 查看编译时指定的 DT_SONAME DT_RUNPATH 等的值。ld -soname 等链接选项。 一般修改 /etc/ld.so.conf 指定路径...
-
November 09, 2012
Linux编译动态链接库so避免运行时才发现函数未定义符号的错误undefined symbol的ld参数
ldd 查看 elf文件依赖的 so 动态链接库 可以 export LD_LIBRARY_PATH=/path 设置 so文件的路径，nm -u *.so 或者 nm |grep U 查看 那些在 动态链接库中的符号。 "U" The symbol is undefinedundefined的 symbol 这种就是表示 在其他 so动态链接库里面定义的。但是如果你的编译的 是so文件，如果符号不在外部任何so文件里面，默认的配置也不会提示错误。而是编译通...
-
October 19, 2012
一个打字练习小程序
一直以来我打字都比较慢啊。刚刚断网，弄个小程序，来练习一下数字键，特殊字符什么的。下次每天来练习几分钟。我就不信我敲键盘还要看键盘。using System;using System.Collections.Generic;using System.ComponentModel;using System.Data;using System.Drawing;using System.Linq;using System.Text;using System.Windows.Forms;names...
-
October 15, 2012
Linux文件写入流程 从vfs层通用block层到scsi磁盘驱动
之前对scsi层和vfs层有点大概的了解。想学习一下通用block层的 page cache 和 那些电梯算法之类的。但还是没什么时间认真去看啊，那个东西也算比较复杂的。大概看下面这个书和简单浏览了一下源码。这书确实够经典啊，以前就全部大概翻了一下，但我读书一般也是很粗略的过一边，没什么印象。现在再去看，很多东西其实讲的还是很清楚的。后来在chinaunix论坛的 内核源码 模块也看网友发的帖子，也列了详细的文件读取和写入调用过程了。我还是自己参考找了一遍，关键是想了解不同的数据结构是怎么...
-
September 12, 2012
大概浏览了一下 apache thrift的源代码
下载LOFTER我的照片书 |代码很容易看，结构设计的很好啊！参见http://thrift.apache.org/docs/concepts/ 的说明，抽象出 server Processor Protocol Transport四个 接口后，代码的层次分明，读起来很容易，确实值得学习啊！ 然后再这这个基本接口上面，继承实现各种模型。processor : StatsProcessor.h PeekProcessor.h TAsyncProcessorprotoco...
-
September 01, 2012
如何用perf分析程序缓存访问性能（转）
微博看到有人分析一篇文章 “Memory Access Patterns Are Important”通过java的例子来测试 内存访问时的“线性访问” “随机跨page访问” “随机跨大范围的heap访问”， 当然是第一个缓存局部性好，混存命中率更好了。文章结合源码和perf使用的例子，用perf查看程序的 第一级 第二级 第三级缓存的命中率， Translation Lookaside Buffers (TLBs) 命中，Hardware Pre-Fetchers等，实在是个不错的参...
-
September 01, 2012
Zeromq抱怨c++ 第二篇，导致内存碎片化
http://www.250bpm.com/blog:8前面第一篇说的c++的异常处理机制，这个说的面向对象的设计导致的内存碎片化。都很有道理，我也是很赞同文章的观点的。前段时间我也文章所说的list的删除和内存碎片问题。当时用 stl的list来做 队列，cancel操作的时候发现想把元素自身从队列删掉，c++的支持根本就不行，默认的删除是O（n）的，后来是就是按照 linux内存的list 自己实现了队列，也就是 文章所说的c方式的实现。再后来发现使用 iterator 也是可以做到 ...