导航

进程统计（process accounting）可以记录linux系统内执行的每个命令/进程的执行时间、占用内存等情况，可用于评估用户日常命令操作的profile/常用命令、系统资源占用是否存在瓶颈或使用不足的情况以及是由于哪个进程造成的。

1. 首先确认你的linux内核支持process accounting功能
在内核配置菜单”general setup”里面的”BSD process accounting”，注意不要选择v3 file format

2. 在/etc/rc.local里面增加以下命令，这样在系统启动时自动打开进程统计功能
accton /var/account/pacct

3. 以root用户执行以下命令观察统计结果
sa -u

输出例如：

root 0.00 cpu 378k mem 0 io hostname
root 0.00 cpu 550k mem 0 io bash *
root 0.00 cpu 381k mem 0 io dircolors
root 0.00 cpu 550k mem 0 io bash *
root 0.00 cpu 410k mem 0 io egrep
root 0.00 cpu 550k mem 0 io bash *
root 0.00 cpu 410k mem 0 io grep
root 0.00 cpu 550k mem 0 io bash *
root 0.00 cpu 410k mem 0 io grep
root 0.00 cpu 395k mem 0 io id
root 0.00 cpu 550k mem 0 io bash *
root 0.00 cpu 344k mem 0 io consoletype
root 0.00 cpu 1068k mem 0 io bash *
root 0.00 cpu 344k mem 0 io consoletype
root 0.00 cpu 890k mem 0 io kbd_mode

注意，日志文件/var/account/pacct在运行一段时间后可以会很大！

遗留问题：
* 没有记录命令/进程的启动、停止时间（wall clock）

1. kozoru
是个典型的web 2.0公司，在web 2.0 2005大会上有很多信息；据说其核心技术是基于问答模式的信息检索服务，但是目前在其网站上还没有相关演示。
根据其宣传片，其产品是通过即时消息IM作为人机接口，实现问答式交互，其实现了对自然语言查询进行结构分析和理解。产品计划在2006年4.15日发布，听起来很高级呵

2. Glenbrook Networks－所谓vertical search技术
基本上是模拟人的网站访问行为，能够自动注册和登录一些需要帐户的网站，然后可以进一步挖掘网站内部的深度信息：

The Trawler consists of five layers:

1. Discoverer - locates perspective target home pages in Surface Web
2. Scout - navigates Surface Web part of a web site and finds the “doors” - DHTML pages that contain forms leading to the Deep Web part of a web site
3. Locksmith - fills up the forms with various requests and collects responses
4. Assessor - analyses responses and makes a decision to use this door as candidate to query the Deep Web part of the site or move elsewhere
5. Harvester - collects all relevant pages from Surface and Deep Web parts of the web site

他们网站上有一个基于该技术的演示，可以显示出硅谷地区各类job招聘需求的地域分布情况。

    经过这段时间对xen的试用，我是非常推崇这个软件的，以下从几个方面，包括源码的规模统计角度来对比xen同其他类似软件的优势

1. xen同qemu等模拟器软件的比较
    我们知道，xen采用了部分虚拟化技术（paravirtualization），需要对guest OS的代码进行修改，以便同虚拟机核心监控代码进行协同，这样可以提高系统的性能，并降低实现的复杂度。
    xen代码的规模为：2.0版本 ~120k LOC（用sloccount软件统计），3.0测试版~300k LOC；代码主要包括xen核心，管理工具，内核补丁三部分，主要用C语言加部分汇编编写，工具部分也大量用到了python；
    作为对比，qemu的源码规模约135k LOC，主要是用于CPU和硬件模拟的代码；开放源码的部分不含kqemu这个虚拟化软件，因此，qemu可以认为是一个类似bochs的纯模拟器 （bochs代码规模类似，~150k LOC），其优势是适应性强，缺点是性能低；

2. xen同其他采用部分虚拟化技术的类似软件的比较
同xen原理有些类似的软件包括：
* colinux－这是一个在windows上运行linux的软件，原理有点类似于部分虚拟化技术，这个软件最初是由一个日本的学生编写，规模较小~30k；
* IBM的rhype－是IBM的hypervisor虚拟机软件的开源研究版本，规模~45k行，采用c和汇编开发；
从代码规模判断，xen同这些软件相比是比较成熟和完善的；

3. xen同linux VServer和UML的比较
* Linux vserver是 一个类似于BSD Jail的方案，同样可以达到在一台机器上运行多个linux的目的，它比xen能更节约硬盘空间，比较适用于提供hosting业务的服务商，缺点是在 操作管理上不如xen方便，因为xen操作起来同操作物理机器没有什么不同； vserver的代码规模不大－内核补丁：~12k；工具代码：30k；
* Uml（user mode linux）是一个已经包含在linux 2.6内核中的软件模块，其2.4内核补丁规模约~40k；Uml的缺点是性能比较差，现在有了xen以后，基本上没有理由再用uml了，所以现在有不少 关于将xen合并入linux内核的建议和讨论；

4. xen同vmware等商业软件的比较
同vmware相比，xen的主要优势一是性能，特别是处理I/O任务时的性能，同真实机器性能下降很少，这对服务器等应用非常关键；虽然vmware同开源的qemu+kqemu软件相比性能要高很多，但比xen仍有不小的差距；
第二个优势是稳定性，这是由软件架构而决定的。xen非常聪明地利用了linux开源的特点，而采用了部分虚拟化的技术，因此从实现的复杂度、适应性和稳定性方面都要比vmware有优势，实际使用也确实如此；稳定性对于服务器应用而言也是非常重要；
第三个就是xen经常宣传的live migration，就是可以动态地将某个虚拟机从一个物理机器迁移到另一个物理机器，而中间的业务中断时间只有几十~几百ms，这个特性也是在服务器应用里面非常有价值的，我暂时还没有机会实际使用。

小结
    由上述可见，xen同linux是一个完美的组合，是目前linux上的最佳的虚拟化解决方案，特别适合于服务器应用，如用于将多个服务器合并到一台物理 服务器上，以节省运营成本（机房空间、电力消耗）；或者是出于安全角度的考虑，需要将不同的应用进行分区，以便降低安全风险等。
    出于类似的考虑，xen得到了很多linux厂商的大力支持，其中包括novell等大公司。
    目前xen还不是很合适作为桌面应用，例如xen的2.0版本还不支持agppart和声卡设备虚拟化，运行x-windows将比较困难。
    另外，利用intel和amd最新CPU的内嵌虚拟化特性，xen也可以支持windows作为guest OS。不过我觉得这样的情况并不是很有价值。

参考资料
* wikipedia上对xen的介绍
* linux 上的虚拟机方案评价

Squid 大部份應付未登入使用者的需求，快取命中率達75%，有效的減輕Apache的負載。負載平衡是以Round-Robin DNS法來達成。

運行PHP，且搭配Turck的PHP快取系統以增進效能。這些伺服器以NFS共享工作目錄，以實現同步運作

总共83台服务器；说明LAMP已经非常成熟可用于世界级的大网站应用。

目前wikipedia的服务器访问量平均在1400req/s，峰值到2000req/s。流量方面，数据库服务器的流量大约在8MB/s（单机?）；

软件方面，mediawiki的最新版本的代码量大约为13万行（PHP代码）；

下图为wikipedia网络架构

参考资料
* Wikipedia meta
* wikipedia server原始资料，中文

google的图标也没有变化。

哎，我倒是搞了一个纪念活动，观看电影“war of world”；据说这部电影是在当年由于怕引起9-11的不良回忆而延迟到今年拍摄播出的。里面确实有很多情节可以同9-11事件有一些联系。

以下只评估开源方案（商业软件包括－vmware, MS virtualPC, win4lin, 等）

1. qemu方案

优点：不用修改guest os，使用方便；可以支持win2000作为guest OS，支持win98/2k/xp作为host OS
缺点：virtualization模块不开源，以二进制代码发布；速度不是太理想，例如在guest OS里面运行wine＋superpi就有问题
速度：模拟方式－1/5~1/10；虚拟方式－接近全速
适用场合：主要用于替代vmware的场合，在桌面环境上运行guest OS，如对新的linux发行版的评估、学习等。

2. xen方案

优点：速度快，开销低，兼容性好
缺点：需要修改guest os内核代码，目前只支持linux作为Guest/Host
适用场合：主要作为server虚拟化应用，如把几台server整合到1台物理server里面，或者是从安全性角 度考虑，把各个应用用不同的（虚拟）服务器隔离开。并且xen的效率较高，开销不大，适合长期运行，增加新的虚拟服务器只需要扩充内存和硬盘就可以了。由 于linux开放源码的优势，用xen虚拟化的效率是vmware无法相比的。xen现在已得到redhat和novell的支持。

3. Linux VServer方案

优点：非虚拟化技术，而是类似chroot的概念，可以限制guest os的存取范围，起到隔离的效果；效率高，CPU和文件系统额外开销都很小
缺点：需要修改内核；各guest os必须采用同一个linux发行版本，无进程隔离和内存隔离的效果（可能看起来有）
适用场合：同样可以作为server consolidation场合，与xen相比各有千秋。

最近网上传的很火，苹果Mac OS X的x86版本被破解了，可以在普通pc机上跑起来。不过网上介绍的操作步骤多且语焉不详。初步研究了一下，主要的原理如下：

1. 合法获取Mac OS Tiger x86 Developer Kit Install DVD
2. 用PearPC软件将该DVD安装到某一硬盘映像文件内（不是太理解这一步，PearPC是在PC上模拟Mac PowerPC的软件，难道上述DVD是在苹果机上直接安装的么）
3. 用VMware安装Darwin 8.0.1，以及升级到8.1（这是苹果公司的开源OS核心部分，这就说明x86版本的内核就仅仅是Darwin，Tiger等GUI应用就架构在它上面）
4. 在VMware里运行的darwin上，把PearPC生成的Tiger硬盘映像加进去
5. 进行patch, 破解如TPM、SSE3等限制（oah750d ditto.tgz CoreGraphics.tgz等）
6. OK

似乎并不是所有的Tiger程序都移植到了x86上，以此需要用Rosetta这个模拟器来运行PowerPC代码，而Rosetta需要SSE3支持

如果需要脱离Vmware的Native运行，可能还要麻烦些，硬件要求如下：

* CPU: must support SSE3
* Chipset: Intel 915 chipset (others may work if they support ich4 or ich5)
* GPU
o Intel Graphics Media Accelerator 900
* Motherboard
o Intel D915GUXLK (http://www.intel.com/design/motherbd/ux/ux_available.htm)

当然也可以获取已经安装和补丁后的映像文件，没有这么麻烦，但这是非法的！

目前还不是很清楚这个版本的中文支持程度如何。

Tiger的价值
对我而言，Tiger的很多功能很有吸引力，特别是Spotlight这个桌面搜索引擎。用过iTunes软件的就能体会spotlight的强大、高效。

参考资料
http://www.osx86project.org/
http://wiki.osx86project.org/

此篇是对前段时间有关信息过载及其应对方法的讨论进行了一个总结。关于这些讨论文章，请参考Ding Deng的这篇blog，以下有一些文字摘自这些blog，包括Tangos, duduwolf, keso等，在此就不逐一索引了，非常感谢大家的分享。

信息过载的危害

并且会导致压力增大，而长期处于压力之下将导致大脑萎缩！

应对信息过载的目标

应对方法1：控制订阅的RSS源数量的数量

应对方法2：根据优先级等对feed进行分组、分类

应对方法3：基于软件的自动filtering方法

应对方法4：（基于社会网络的）人工ranking/过滤方法

应对方法5：基于对历史浏览行为进行分析实现的ranking和推荐功能

River of News-一种高效的rss阅读方式

最近听同事的推荐，申请开通了数字电视；价格倒是不贵，最便宜的节目套餐每月收费15元，机定盒免费领用，映象中数字电视已经嚷嚷了四五年了，现在算是用上了。

试用几日后，随便说说我的一些体会
1. 在我看来，数字电视最大的变化是图像效果清晰一些，相当于DVD的质量，图像非常干净，没有模拟电视那些干扰和噪音（虽然不算明显）。不过效果上的这点改进，应该还算不上是革命性的。对我来说，好处可能就是在做硬盘录像的时候能够采集到更清晰的图像

2. 数字电视开通了更多的频道，我们现在能看到的大概多了十几个吧，更多的频道需要更多的银子。不过这么多频道有价值的又有多少呢？有多少时间去看呢？几个境 外英语频道早就可以通过互联网用xbmc看到了，也很少去看的，其他的电影类频道又哪里能同dvd、BT相比？数了一下，还比较有兴趣的频道有这么几个

• 辽宁搞的GTV-游戏竞技频道，看着满有意思的，特别是看到那些在线游戏，不由感慨其对现在年青一代的影响之大
• MTV中文台，印象中很多年前看过一阵MTV台，感觉奇好，后来一直没有机会看到了
• Discovery探索频道

3. 上网查了一下，现在数字电视机顶盒才三百多块钱，还真是不贵

总之，我感觉数字电视算不上是个Big Thing，我用DVR一段时间后，对于传统的频道方式的电视节目是越来越反感了，同数字电视相比，Tivo、video blog、podcasting等才是更加本质的改变。

最后，推荐一个同数字电视有关的东东，
A Low Cost Analog and Digital TV (DVB-T) Modulator
这是ffmpeg作者最近搞的一个东西，用普通显卡实现的DTV调制器，可以用普通数字电视机顶盒接收，原理是利用了显卡的DAC作信号输出，用软件实现的QAM调制，很有趣的一个项目。