未分类24 May 2010 11:22 pm
It was not that I am strangers to the bus, everything is there.
日常工作09 Jul 2007 09:00 am
20070709 Backup your Linux System | 备份你的 Linux 系统
一、我们需要备份什么？
我的 Linux 系统是基于 Redhat 的Redhat Linux 9.0,同时配置了诸如 MySQL、PHP、Apache 等基础服务,同时又配有 Awstats、MRTG、MT 等应用服务程序，因此，我们需要备份的除了系统本身的重要文件以外，还需要备份数据库、log文件和统计数据文件等。当然另外一项必不可少的就是编译各项服务时的 ./configure 参数，这里就不赘述了。
二、制定备份文件列表。
这个步骤就是归纳一下需要备份的目录列表。以下我就依照我所安装的各项服务作了一个简单的list。 一些文件的地址是以我的服务器为标准(以"/"开头)，一些则以相对目录来描述(以"./"开头)。
系统：
包含所有核心配置文件。这其中包括网络配置、系统名称、防火墙规则、用户、组，以及其他全局系统项。
包含系统守护进程（服务）所使用的信息，包括 DNS 配置、DHCP 租期、邮件缓冲文件、HTTP 服务器文件、db2 实例配置，等等。
包含所有用户的默认用户主目录。这包括他们的个人设置、已下载的文件和用户不希望失去的其他信息。
是根（root）用户的主目录。
是安装许多非系统文件的地方。IBM 软件就安装在这里。OpenOffice、JDK 和其他软件在默认情况下也安装在这里。
系统中不需要备份的目录：
应该永远不要备份这个目录。它不是一个真实的文件系统，而是运行内核和环境的虚拟化视图。它包括诸如 /proc/kcore 这样的文件，这个文件是整个运行内存的虚拟视图。备份这些文件只是在浪费资源。
包含硬件设备的文件表示。如果计划还原到一个空白的系统，那就可以备份 /dev。然而，如果计划还原到一个已安装的 Linux 系统，那么备份 /dev 是没有必要的。
更多关于目录的解释，请查看 Filesystem Hierarchy Standard 和 Red Hat Linux Overview of File System Hierarchy Standard (FHS)
MySQL：
同时要注意版本的保留，在恢复的时候使用相同的版本（或者相同系列的版本）会减少更多不必要的麻烦,例如 “/usr
/local/mysql-standard-4.1.7-pc-linux-i686”。
MySQL 的配置文件。
Apache：
Apache 的 log 文件。这里建议使用 cronolog 来 rotate Apache 的巨大 log。可以参考我的 cronolog 杂记
Apache 的配置文件，例如: httpd.conf。还是建议在修改此文本的时候使用“#”号 comment 修改的内容，然后添加需要修改的内容。
PHP：
个人觉得这个就够了。如果你设定了 php 的 error log 文件，当然那个也是需要的。
Movable Type：
一般来说 blog 不会太大，不介意的话就整个备份一下。当然最重要的是 ./MT-3.0D-full-en_ususr/db/ 文件夹，里面有所有的数据（如果你没有用 MySQL 作为 MT 的数据存储格式的话）。
Awstats：
Awstats 的配置文件。诸如：awstats.blog.conf
Awstats 的分析留档文件。 诸如：awstats082004.blog.txt
MRTG：
三、使用 tar 和 crontab 等简单工具备份。
以下是使用 tar 的脚本，去掉了多余的说明部分。 您也可以点击这里下载并修改以适合自己的系统。在脚本中我尽量用更多的方法来进行备份。在实际应用中可以将步骤更加简化。更多关于 tar 的参数请看 man tar
#!/bin/sh
# Date format: 20040626
DATE=`date -d yesterday +%Y%m%d`# MySQL version & directory
MYSQL_VERSION="4.x.x"
MYSQL_DIR="/usr/local/mysql/data"# MT Blog directory
MTBLOG_DIR="/path-to-mt/db/"# Backup directory & Backup Filelist
BACKUP_DIR="/path-to-backup/backupfile"
BACKUP_FILELIST="/path-to-backup/filelist"# Backup MySQL
printf "Backup MySQL data directory, please wait…\n"
tar -zpcvPf $BACKUP_DIR/mysql-standard-$MYSQL_VERSION-data-$DATE.tgz $MYSQL_DIR | grep "tar:"
printf "Done! The new backup file is: $BACKUP_DIR/mysql-standard-$MYSQL_VERSION-data-$DATE.tgz\n\n"# Backup MT Blog
printf "Backuping the MT3.0 Weblog data directory, please wait…\n"
tar -zpcvPf $BACKUP_DIR/MT-db-$DATE.tgz $MTBLOG_DIR | grep "tar:"
printf "Done! The new backup file is: $BACKUP_DIR/MT-db-$DATE.tgz\n"
这里引用了『Linux 备份与恢复速成指南』中的一个小技巧，将文件列表写入一个文件进行操作。查看我的Filelist。
以下是一个文件列表的例子：
/etc
/var
/home
/usr/local
/opt (有时会是空目录)
以下解释引自『Linux 备份与恢复速成指南』：
请注意 tar -T（或 files-from）命令不能接受通配符。文件必须明确地列出。上面的例子展示了一种单独地引用文件的方法。您还可以执行脚本来搜索系统，然后建立一个列表。下面就是这样一个脚本的例子：
#!/bin/sh
cat MyFiles > TempList
find /usr/share -iname *.png >> TempList
find /tmp -iname *.iso >> TempList
tar -cpzMf /path-to-backup/backupfile -T TempList
上面的脚本首先将 MyFiles 中的所有现有文件列表复制到 TempList。然后它执行两个 find 命令来搜索文件系统中匹配某个模式的文件，并将它们附加到 TempList。第一次是搜索 /usr/share 目录树中以 .png 结尾的所有文件。第二次是搜索 /tmp 目录树中以 .iso 结尾的所有文件。在建立好列表之后，tar 然后在文件设备 /dev/st0 （第一个 SCSI 磁带设备）上创建 一个新的归档文件，该文件使用 gzip 格式来压缩，并保留所有文件权限。该归档文件将跨越多个卷。要归档的文件的名称将从 TempList 文件中提取。
四、适用于 log 和数据库的增量备份(incremental backup)。
对于庞大的 log 或者 数据库文件，每天进行完全备份似乎不是很能合理高效地实现备份工作。所以在较短的时间周期内，适用增量备份(incremental backup)会是一个不错的选择。
tar 并不是最好的增量备份工具
tar 并不是最好的增量备份的工具，但是它也可以实现增量备份。参照 『The tar backup program』中的脚本可以实现这个操作。
简单地介绍一下其原理：
首先，制作一个完全备份的时间点文件，例如 "full-date"。其中写入某次完全备份的时间点，例如 echo $NOW > full-date。
然后在自定的时间循环期内（例如一周），每次和完全备份时间点(full-date)对比后进行增量备份。
其中最关键的一个语句就是：
tar –newer $full-date -zcpf $BACKUPDIR/$BACKUPFILE-$NOW.tgz $DIRECTOIES
其结果就是，在一周中会产生 6 个独立文件，其内容是前一天内新增的内容。以下是一个例子：
[root@deep] /# ls -l /backups/
total 22217
-rw-r–r– 1 root root 10731288 Feb 7 11:24 deep-01Feb.tar << 每月月初一次完全备份
-rw-r–r– 1 root root 6879 Feb 7 11:24 deep-Fri.tar << 每天的增量备份
-rw-r–r– 1 root root 2831 Feb 7 11:24 deep-Mon.tar
-rw-r–r– 1 root root 7924 Feb 7 11:25 deep-Sat.tar
-rw-r–r– 1 root root 11923013 Feb 7 11:24 deep-Sun.tar << 每周一次完全备份
-rw-r–r– 1 root root 5643 Feb 7 11:25 deep-Thu.tar
-rw-r–r– 1 root root 3152 Feb 7 11:25 deep-Tue.tar
-rw-r–r– 1 root root 4567 Feb 7 11:25 deep-Wed.tar
drwxr-xr-x 2 root root 1024 Feb 7 11:20 last-full
tar 中几个开关的简介：
注意：-u 开关并不是增量备份，而是往原有的 tar 包里面添加新的文件。
fbackup is a better choice
在 HP 的论坛上，有关于增量备份的讨论－－“Incremental "tar" Backup in HP-Ux”。但是因为我不是 HP 的系统，tar 已经可以满足现有的备份需求。
五、使用 ssh 实现安全网络远程备份。
[很抱歉，此段笔者没有试验环境，现在之能添加几篇关于 ssh 远程传送的文章。等到经过试验后，我会添加具体内容。]
六、个人使用的 e-mail 简单备份。
由于 Yahoo!、Google、Hotmail 相继推出了 1-2G 的邮箱，因此可是试着使用带有文件附件的 E-mail 来传输小于各个邮箱的单封信件上限大小的文件。 具体需要用到一些诸如 uudecode 的命令，所以需要先安装一个 Sharutils 。 我在编译中遇到一些简单的错误,这里是我修改过的 Sharutils。
在命令行下发送带附件的邮件时，还是建议使用诸如 MUTT 的 MUA，请查看我的 MUTT 的安装失败经历，也许对新装的用户有所帮助。
安装完毕后，可以使用 Mutt 的命令行一行解决问题。首先先写一个邮件文本 mailcontent.txt。
# cat mailcontent.txt | mutt -s "mailtitle" -a attachfile1 mail@address
结合上面的 shell 脚本，如果你有企业级邮箱的话，不妨也试试这种方法。仅供参考。
参考文档：
Useful Links:
本文针对几大知名的数据仓库解决方案的性能和特点做分析和比较……
IBM、Oracle、Sybase、CA、NCR、Informix、Microsoft、和SAS等有实力的公司相继(通过收购或研发的途径)推出了自己的数据仓库解决方案，BO和Brio等专业软件公司也在前端在线分析处理工具市场上占有一席之地。
IBM–IBM公司提供了一套基于可视数据仓库的商业智能(BI)解决方案，包括：Visual Warehouse(VW)、Essbase/DB2 OLAP Server 5.0、IBM DB2 UDB，以及来自第三方的前端数据展现工具(如BO)和数据挖掘工具(如SAS)。其中，VW是一个功能很强的集成环境，既可用于数据仓库建模和元数据管理，又可用于数据抽取、转换、装载和调度。Essbase/DB2 OLAP Server支持“维”的定义和数据装载。Essbase/DB2 OLAP Server不是ROLAP(Relational OLAP)服务器，而是一个(ROLAP和MOLAP)混合的HOLAP服务器，在Essbase完成数据装载后，数据存放在系统指定的DB2 UDB数据库中。
严格说来，IBM自己并没有提供完整的数据仓库解决方案，该公司采取的是合作伙伴战略。例如，它的前端数据展现工具可以是Business Objects的BO、Lotus的Approach、Cognos的Impromptu或IBM的Query Management Facility; 多维分析工具支持Arbor Software的Essbase和IBM(与Arbor联合开发)的DB2 OLAP服务器; 统计分析工具采用SAS系统。
Oracle–Oracle数据仓库解决方案主要包括Oracle Express和Oracle Discoverer两个部分。Oracle Express由四个工具组成：Oracle Express Server是一个MOLAP (多维OLAP)服务器，它利用多维模型，存储和管理多维数据库或多维高速缓存，同时也能够访问多种关系数据库; Oracle Express Web Agent通过CGI或Web插件支持基于Web的动态多维数据展现; Oracle Express Objects前端数据分析工具(目前仅支持Windows平台)提供了图形化建模和假设分析功能，支持可视化开发和事件驱动编程技术，提供了兼容Visual Basic语法的语言，支持OCX和OLE; Oracle Express Analyzer是通用的、面向最终用户的报告和分析工具(目前仅支持Windows平台)。Oracle Discoverer即席查询工具是专门为最终用户设计的，分为最终用户版和管理员版。
在Oracle数据仓库解决方案实施过程中，通常把汇总数据存储在Express多维数据库中，而将详细数据存储在Oracle关系数据库中，当需要详细数据时，Express Server通过构造SQL语句访问关系数据库。但目前的Express还不够灵活，数据仓库设计的一个变化往往导致数据库的重构。另外，目前的Oracle 8i和Express 之间集成度还不够高，Oracle 8i和Express之间需要复制元数据，如果Oracle Discoverer(或BO)需要访问汇总数据，则需要将汇总数据同时存放在Oracle和Express中，系统维护比较困难。值得注意的是，刚刚问世的Oracle 9i把OLAP和数据挖掘作为重要特点。
Sybase–Sybase提供的数据仓库解决方案称为Warehouse Studio，包括数据仓库的建模、数据抽取与转换、数据存储与管理、元数据管理以及可视化数据分析等工具。其中，Warehouse Architect是PowerDesigner中的一个设计模块，它支持星形模型、雪花模型和ER模型; 数据抽取与转换工具包括PowerStage、Replication Server、Carleton PASSPORT，PowerStage是Sybase提供的可视化数据迁移工具。
Adaptive Server Enterprise是Sybase企业级关系数据库，Adaptive Server IQ是Sybase公司专为数据仓库设计的关系数据库，它为高性能决策支持系统和数据仓库的建立作了优化处理，Sybase IQ支持各种流行的前端展现工具(如Cognos Impromptu、Business Objects、Brio Query等); 数据分析与展现工具包括PowerDimensions、EnglishWizard、InfoMaker、PowerDynamo等，PowerDimensions是图形化的OLAP分析工具，它支持SMP和多维缓存技术，能够集成异构的关系型数据仓库和分布式数据集市，从而形成单一的、新型的多维模式; 数据仓库的维护与管理工具包括Warehouse Control Center、Sybase Central、Distribution Director，其中Warehouse Control Center是为数据仓库开发人员提供的元数据管理工具。
Sybase提供了完整的数据仓库解决方案Quick Start DataMart，具有良好的性能，并支持第三方数据展现工具。从Quick Start DataMart的名称不难看出，它尤其适合于数据集市应用。另外，Sybase可以提供面向电信、金融、保险、医疗保健这4个行业的客户关系管理(CRM)产品，在这4个产品中，有80%的功能是共性的，有20%的功能需要Sybase与合作伙伴针对不同需求共同开发。
Informix–Informix于1998和1999年相继收购了国际上享有盛誉的数据仓库供应商Red Brick System和数据管理软件供应商Ardent，并提供了完整、集成的数据仓库解决方案。该解决方案还包括一个“快速启动”咨询服务，能够帮助用户快速完成数据仓库或数据集市的开发。Informix产品能够集成Microsoft IIS或Netscape Enterprise/FastTrack服务器，从而支持基于Web的数据仓库应用。
Informix没有提供自己的报表和数据挖掘工具，但他们与Brio和SAS公司建立了战略联盟，并推出了“Informix商务智能联盟计划”。该计划以Informix为主，结合Brio的前端数据分析和报表功能，以及SAS的数据挖掘功能，形成了一个“BI中心”打包方案。
(Informix Software已被IBM公司收购，此举将给IBM公司数据库及数据仓库产品，从技术和市场占有率上带来极大的提升。)
CA–CA于1999年收购了Platinum Technology公司后，得到了完整的数据仓库解决方案，包括：Erwin数据仓库设计工具、InfoPump数据转换与抽取工具、InfoBeacon ROLAP服务器、Forest&Trees前端数据展现工具、Provision系统监视与作业调度工具和DecisionBase元数据管理工具等。
与Informix解决方案相似，CA解决方案也提供了数据仓库建模、元数据管理、数据抽取与转换、基于关系数据库的在线分析服务器、系统监视与作业调度、前端数据展现等功能，同时还支持Web应用。不同之处是Informix提供了专门为数据仓库设计的高性能目标数据库(Red Birck)，而CA解决方案则提供ODBC接口，并将数据存储在第三方关系数据库(如Oracle、Sybase、SQL Server、Informix和IBM DB2等)中，其性能要打一些折扣，但开放性要好些。另外，CA的OLAP服务器目前只能与Microsoft的IIS Web服务器集成。
NCR Teradata–NCR Teradata是高端数据仓库市场最有力的竞争者，主要运行在NCR WorldMark SMP硬件的Unix操作系统平台上。1998年，该公司也提供了基于Windows NT的Teradata，试图开拓数据集市(Data Mart)市场。总的来看，NCR的产品性能很好，Teradata数据仓库在100GB、300GB、1TB和3TB级的TPCD指标测试中均创世界纪录。但是，NCR产品的价格相对较高，中小企业用户难以接受。
Microsoft–Microsoft将OLAP功能集成到Microsoft SQL Server 7.0中，提供可扩充的基于COM的OLAP接口。它通过一系列服务程序支持数据仓库应用。数据传输服务DTS(Data Transformation Services)提供数据输入/输出和自动调度功能，在数据传输过程中可以完成数据的验证、清洗和转换等操作，通过与Microsoft Repository集成，共享有关的元数据; Microsoft Repository存储包括元数据在内的所有中间数据; SQL Server OLAP Services支持在线分析处理; PivotTable Services提供客户端OLAP数据访问功能，通过这一服务，开发人员可以用VB或其他语言开发用户前端数据展现程序，PivotTable Services还允许在本地客户机上存储数据; MMC(Microsoft Management Console)提供日程安排、存储管理、性能监测、报警和通知的核心管理服务; Microsoft Office 2000套件中的Access和Excel可以作为数据展现工具，另外SQL Server还支持第三方数据展现工具。
SAS–SAS公司在20世纪70年代以“统计分析”和“线性数学模型”而享誉业界，90年代以后，SAS公司也加入了数据仓库市场的竞争，并提供了特点鲜明的数据仓库解决方案，包括30多个专用模块。其中，SAS/WA(Warehouse Administrator)是建立数据仓库的集成管理工具，包括定义主题、数据转换与汇总、更新汇总数据、元数据管理、数据集市的实现等; SAS/MDDB是SAS用于在线分析的多维数据库服务器; SAS/AF提供了屏幕设计功能和用于开发的SCL(屏幕控制语言); SAS/ITSV(IT Service Vision)是IT服务的性能评估和管理的软件，这些IT服务包括计算机系统、网络系统、Web服务器和电话系统等。SAS系统的优点是功能强、性能高、特长突出，缺点是系统比较复杂。
Business Objects–Business Objects(BO)是集查询、报表和OLAP技术为一身的智能决策支持系统。它使用独特的“语义层”技术和“动态微立方”技术来表示数据库中的多维数据，具有较好的查询和报表功能，提供钻取(Drill)等多维分析技术，支持多种数据库，同时它还支持基于Web浏览器的查询、报表和分析决策。虽然BO在不断增加新的功能，但从严格意义上说，BO只能算是一个前端工具。也许正因为如此，几乎所有的数据仓库解决方案都把BO作为可选的数据展现工具。
虽然国内有很多大学和研究机构从事数据仓库技术的研究，但到目前为止，国内基本上没有成熟的数据仓库解决方案.
技术学习29 Nov 2006 10:46 am
20061129 SOLARIS 10 OS 提升业务能力的十大优势
|
|||
|
|||
、AMD OPTERON™、或基于INTEL的系统上均可顺畅运行
|
|||
|
|||
、AMD Opteron™、和基于Intel的系统上速度最快的平台。通过支持最新的32位和64位平台，实现了性能上的突破，系统利用效率高达80%，应用程序的性能提升30倍。
|
|||
|
|||
|
|||
|
|||
|
|||
|
For a limited time, Sun is offering a free DVD media kit which includes the Solaris 10 Operating System for both SPARC and x86 platforms as well as Sun Studio 11 software. http://www2.sun.de/dc/forms/reg_us_2211_391.jsp
20061105 CISSP 2007年改版后与2006年对比
CISSP 改版前後之基本比較 |
资源共享27 Oct 2006 09:00 pm
20061027 快速取得RapidShare的Download-Ticket Update：這個bookmarklet失效了。一按下去，秒數雖然會歸零，不過輸入取得的Download-Ticket後，會跳出下面的訊息，無法開始下載： RapidShare是較早開始提供免費網路空間的網站，因此和同性質的對手相較之下，仍有一批死忠的愛用者。經常上各大軟體論壇的朋友，相信也可以看到許多存放於RapidShare的載點。 RapidShare這一類網站，最令人困擾的地方有二，其一是有下載的流量限制，未付費的使用者，在一定時間內超過流量後，即無法繼續下載；其二是進入下載的頁面後，並不能直接看到真正的載點，而必須等待一定的時間，才能取得所謂的「Download-Ticket」，開始下載。 面對這兩個問題，如果不利用特殊軟體加以破解的話（例如專門為了下載RapidShare空間而設計的The Grabber），通常透過修改Proxy的方式，可以避開流量限制。而接下來介紹的方法，則可以跳過倒數計時的步驟。 請將RapidShare No Wait這個連結托曳到瀏覽器的書籤列，或者在其上按右鍵，選擇「將此連結加入書籤」（這是Firefox的敘述，在IE裡面則是「加到我的最愛」）。 之後當你進入RapidShare下載檔案，出現如上圖的倒數計時時，只要按下這個bookmarklet，即可將秒數歸零，立刻取得Download-Ticket，並顯示下載按鈕。[via FluxionTech]
技术学习02 Aug 2006 10:15 pm
I am a IT specialist with good technical background, I familiar with network design and troubleshooting , and now I service for Security Operator Team as PL, but I donnot know the next step that I will follow. Today one of my friend in IBM let me to join him company and will work in ShenYang, I hadnt planned to relocate. I think DaLian is the best city in china with favorable weather conditions, convenient transportation though the low salary. Now I would certianly give the serious thought what is the next role. I find some metrial in IBM and share it with you.
The key to success in IBM is to see beyond the given scope of your position, and understand your role in the success of your team, organisation and the company. You must be entrepreneurial, self-directed and a strong team contributor while keeping pace with change and providing great customer service. In other words, a career plan with your goals is essential!
技术学习19 Jul 2006 09:12 pm
20060719 Running CallManager on Non-MCS Equipment
If you have the Cisco CallManager 4.1(3) Images, you can try to do it follow belowed steps: Step 1: Download a Windows utility called FDIMAGE.EXE. This is typically used to create floppy boot disks from disk images for BSD/Linux. You can get this utility from here. Step 2: Pop in in the CallManager Hardware Detect CD-ROM (Disk 1) into your PC – sorry, I can’t give this one out Step 3: Put in a blank floppy disk Step 4: Open a command prompt and type "fdimage d:\bootimg.bin a:" this copies the boot image from the CD-ROM to the floppy disk Step 5: On the floppy disk, edit the autoexec.bat file (I’m having flashbacks to the MS-DOS days) Step 6: Find the line in the autoexec.bat file that says "s:\tools\systype s:\tools\sssksys.ini" This line is right before the boot process does the hardware check to see what sort of server you have Step 7: Hit enter after the above line and add the following two lines: Step 8: Save the file Step 9: Boot off the floppy disk and put the Hardware Detect CD into the drive. Follow the wizard to blow the Windows 2000 image onto the non-MCS machine. It will prompt you for the OS Disk 3 (I’m using DVDs – it’s DVD #2 of the OS install for me). Step 10: After Windows comes online, you’ll have to install your platform specific video/netcard/etc… drivers Step 11: Pop in the Cisco CallManager CDs and proceed as normal! This rocks! Of course, this is only in a lab environment. The great Cisco powers that be would definitely frown upon a TAC support call from a Cisco CallManager running on a desktop PC.
 | ||||
)