先说一下背景，应用环境是AIX5.3+WebSphere6.0.2.37。在今年的一季度曾发生过几次OOM故障，当时通过几次内存参数优化，最后确定为“-Xgcprolicy:gencon –Xms512m –Xmx1280m –Xmn200m”，此后稳定了半年，直到此次再发生应用宕机。

赶到现场，发现profiles目录下生成有javacore和heapdump文件，Javacore的第一行“Cause of thread dump : Dump Event "systhrow" (00040000) Detail "java/lang/OutOfMemoryError" received”表明了宕机的原因是OOM，但是令我困惑的是这段内容：

0SECTION       MEMINFO subcomponent dump routine
NULL           =================================
1STHEAPFREE    Bytes of Heap Space Free: 818cb70
1STHEAPALLOC   Bytes of Heap Space Allocated: 20000000

在分配的512MB（十六进制20000000）的堆空间中，有129MB（818cb70）空闲空间，按理说，这种情况下不该发生OutOfMemory。就算有申请一个大对象，同时JVM堆的新生代由于碎片原因没有连续空间满足要求，那么应该发生堆扩展，所以此次内存溢出不是堆（Heap）溢出，GC日志的分析也支持了这一点。

既然Javacore无法得到有用信息，我把目光转向了SystemErr.log，在对应日期的地方，我发现了大量如下报错：

[8/26/10 14:12:57:860 GMT+08:00] 0000002f SystemErr     R Exception in thread "WebContainer : 1" java.lang.RuntimeException: java.lang.OutOfMemoryError: Failed to create a thread: retVal -1073741830, errno 11
[8/26/10 14:12:57:860 GMT+08:00] 0000002f SystemErr     R     at com.ibm.io.async.ResultHandler.runEventProcessingLoop(ResultHandler.java:801)
[8/26/10 14:12:57:860 GMT+08:00] 0000002f SystemErr     R     at com.ibm.io.async.ResultHandler$2.run(ResultHandler.java:881)
[8/26/10 14:12:57:860 GMT+08:00] 0000002f SystemErr     R     at com.ibm.ws.util.ThreadPool$Worker.run(ThreadPool.java:1497)
[8/26/10 14:12:57:860 GMT+08:00] 0000002f SystemErr     R Caused by: java.lang.OutOfMemoryError: Failed to create a thread: retVal -1073741830, errno 11
    at java.lang.Thread.startImpl(Native Method)
    at java.lang.Thread.start(Thread.java:980)
    at com.ibm.ws.util.ThreadPool.addThread(ThreadPool.java:630)
    at com.ibm.ws.util.ThreadPool$3.run(ThreadPool.java:1148)
    at com.ibm.ws.security.util.AccessController.doPrivileged(AccessController.java:63)
    at com.ibm.ws.util.ThreadPool.execute(ThreadPool.java:1146)
    at com.ibm.ws.util.ThreadPool.execute(ThreadPool.java:1040)
    at com.ibm.ws.runtime.WSThreadPool.execute(WSThreadPool.java:151)
    at com.ibm.io.async.ResultHandler.startHandler(ResultHandler.java:248)
    at com.ibm.io.async.ResultHandler.runEventProcessingLoop(ResultHandler.java:570)
    at com.ibm.io.async.ResultHandler$2.run(ResultHandler.java:881)
    at com.ibm.ws.util.ThreadPool$Worker.run(ThreadPool.java:1497)

在事后的学习中，我知道“Java.lang.OutOfMemoryError: unable to create native thread” 这样的异常是在说，本地内存耗尽，从而新的线程无法创建。而在当时我第一感觉是操作系统参数设置问题，之前我曾写过一篇由于nofile参数导致Too many open file的故障。于是我运行如下命令

#lsattr -El sys0 -a maxuproc
maxuproc 128 Maximum number of PROCESSES allowed per user True

然后运行chgsys修改默认的128为1024，这里我犯了一个错误，WebSphere单个Server就是一个Java进程，错误日志里是不能创建一个thread，而非process，与Oracle会创建多个oracle进程不一样。果然两天后又出现了同样的问题。

这一次的SystemErr日志中，除了上述的内容，还多了

[8/24/10 9:55:19:813 GMT+08:00] 00000036 SystemErr     R Exception in thread "WebContainer : 4" java.lang.RuntimeException: java.lang.OutOfMemoryError: Unable to allocate 8192 bytes of direct memory after 5 retries
[8/24/10 9:55:19:813 GMT+08:00] 00000036 SystemErr     R     at com.ibm.io.async.ResultHandler.runEventProcessingLoop(ResultHandler.java:801)
[8/24/10 9:55:19:813 GMT+08:00] 00000036 SystemErr     R     at com.ibm.io.async.ResultHandler$2.run(ResultHandler.java:881)
[8/24/10 9:55:19:813 GMT+08:00] 00000036 SystemErr     R     at com.ibm.ws.util.ThreadPool$Worker.run(ThreadPool.java:1497)
[8/24/10 9:55:19:813 GMT+08:00] 00000036 SystemErr     R Caused by: java.lang.OutOfMemoryError: Unable to allocate 8192 bytes of direct memory after 5 retries
    at java.nio.DirectByteBuffer.<init>(DirectByteBuffer.java:197)
    at java.nio.ByteBuffer.allocateDirect(ByteBuffer.java:303)
    at com.ibm.ws.buffermgmt.impl.WsByteBufferPoolManagerImpl.allocateBufferDirect(WsByteBufferPoolManagerImpl.java:656)
    at com.ibm.ws.buffermgmt.impl.WsByteBufferPoolManagerImpl.allocateCommon(WsByteBufferPoolManagerImpl.java:570)
    at com.ibm.ws.buffermgmt.impl.WsByteBufferPoolManagerImpl.allocateDirect(WsByteBufferPoolManagerImpl.java:506)
    at com.ibm.io.async.ResultHandler.runEventProcessingLoop(ResultHandler.java:498)
    at com.ibm.io.async.ResultHandler$2.run(ResultHandler.java:881)
    at com.ibm.ws.util.ThreadPool$Worker.run(ThreadPool.java:1497)
Caused by: java.lang.OutOfMemoryError
    at sun.misc.Unsafe.allocateMemory(Native Method)
    at java.nio.DirectByteBuffer.<init>(DirectByteBuffer.java:184)
    … 7 more

我们可以看到是由于DirectByteBuffer无法分配导致的内存溢出，而Native Method指明了这是“本地”的溢出。通过这两个关键字，我查到了IBM的一份BUG记录：PK31010: OUTOFMEMORYERROR DUE TO DIRECTBYTEBUFFER，但是我的版本已是最新，无奈继续搜寻。

在Troubleshooting native memory issues这份文档中，介绍了3种在WebSphere中最常见的导致OOM的原因。其中第二个DirectByteBuffer use就是我们问题的症结。

Java 1.4 中添加的新 I/O （NIO） 类引入了一种基于通道和缓冲区来执行 I/O 的新方式。就像 Java 堆上的内存支持 I/O 缓冲区一样，NIO 添加了对直接 ByteBuffer 的支持（使用java.nio.ByteBuffer.allocateDirect（） 方法进行分配），ByteBuffer 受本机内存而不是 Java 堆支持。直接 ByteBuffer 可以直接传递到本机操作系统库函数，以执行 I/O — 这使这些函数在一些场景中要快得多，因为它们可以避免在 Java 堆与本机堆之间复制数据。

    对于在何处存储直接 ByteBuffer 数据，很容易产生混淆。应用程序仍然在 Java 堆上使用一个对象来编排 I/O 操作，但持有该数据的缓冲区将保存在本机内存中，Java 堆对象仅包含对本机堆缓冲区的引用。非直接 ByteBuffer 将其数据保存在 Java 堆上的 byte[] 数组中。下图展示了直接与非直接 ByteBuffer 对象之间的区别：

     直接与非直接 java.nio.ByteBuffer 的内存拓扑结构

    直接 ByteBuffer 对象会自动清理本机缓冲区，但这个过程只能作为 Java 堆 GC 的一部分来执行，因此它们不会自动响应施加在本机堆上的压力。GC 仅在 Java 堆被填满，以至于无法为堆分配请求提供服务时发生，或者在 Java 应用程序中显式请求它发生（不建议采用这种方式，因为这可能导致性能问题）。

    发生垃圾收集的情形可能是，本机堆被填满，并且一个或多个直接 ByteBuffers 适合于垃圾收集（并且可以被释放来腾出本机堆的空间），但 Java 堆几乎总是空的，所以不会发生垃圾收集。

摘自《理解JVM如何使用Windows和Linux上的本机内存》

解决此问题的方法，在文档中给出的是禁止异步A/O，通过在Web Container中设置参数来避免上节中所出现的由于Java堆空闲而不发生垃圾回收，导致本地堆撑满的情况。

Servers -> Application Servers -> serverName -> Web Container Settings -> Web Container -> Custom Properties:
Press New:
Add the following pair:

Name: com.ibm.ws.webcontainer.channelwritetype
Value: sync

Press OK, and then save the configuration.

添加此属性后应用又恢复正常，但是原先提高性能的特性反而导致内存溢出，违背了初衷，现在的做法只能算一个妥协。我会继续查找此问题的解决方法，最不济也要有个使用NIO的Best Practice。

文档中另两个容易导致本地堆OOM的原因是：

过大的堆上限

我们知道32位机器单个进程可以访问的内存地址空间为4G，如右图所示，但实际情况下Windows系统由于内核态和用户态的划分，用户态只有2G的空间，Linux和AIX的可用空间大一点，但也在3G左右。，由于JVM实例进程寻址是一定的，所以Heap大小和Native Area此消彼长。而Native Area中有一部分就是供给线程的内存空间。

“应用程序中的每个线程都需要内存来存储器堆栈（用于在调用函数时持有局部变量并维护状态的内存区域）。每个 Java 线程都需要堆栈空间来运行。根据实现的不同，Java 线程可以分为本机线程和 Java 堆栈。除了堆栈空间，每个线程还需要为线程本地存储（thread-local storage）和内部数据结构提供一些本机内存。堆栈大小因 Java 实现和架构的不同而不同。一些实现支持为 Java 线程指定堆栈大小，其范围通常在 256KB 到 756KB 之间。”

1.5后一般线程堆栈大小为1M，“对于拥有数百个线程的应用程序来说，线程堆栈的总内存使用量可能非常大。如果运行的应用程序的线程数量比可用于处理它们的处理器数量多，效率通常很低，并且可能导致糟糕的性能和更高的内存占用”（摘自《理解JVM如何使用Windows和Linux上的本机内存》）

解决此问题的方法：设置恰当的JVM最大堆，32位不要超过1.5G；设置恰当的线程池大小（一般50～100），当线程使用较多时， 使用-Xss256k参数设置线程指定堆栈大小（IBM JDK还可以使用-Xmso ××k来设置Stack size for OS Threads 32-bit）；更换64位的JDK。

第三个原因是线程池的TLS泄漏

这个现象我倒没见到过，如果你的thread dump里下面三个属性里的值有大于300，那么就要注意了

"WebContainer : 1003" (TID:0×37D62000
"Default : 338" (TID:109934D0
"TCPChannel.DCS : 303" (TID:0×4D720000

解决的方法是设置线程池的最小最大值一致。

这是一部校园青春片，归类在喜剧片里，于是自然的让屏幕前的我乐不可支，但如果仅仅如此，那么它就是美国校园喜剧的翻版，我也不会在这个技术博里分享观看后感受。作为同样经历经济高速发展的邻居——印度，这部电影所探讨的理想与现实、爱情与金钱、注重结果还是过程，深深的感触到了我。

噪鹃从来不自己筑巢，他只在别人的巢里下蛋，要孵蛋的时候他们会怎样？他们会把其它的蛋从巢里挤出去，竞争结束了，他们的生命从谋杀开始，这就是大自然——要么竞争，要么死……

丛林法则，优胜劣汰，“病毒”的开场白在父母送你去补习班的时候，在你选择大学专业的时候，会听到各种各样类似的版本。在大学里，为了绩点而奋斗，只看为考试而划重点的内容，不是为了知识，而是为了“从这5年后，当你看到你的朋友买车买房时不会诅咒自己。”

一定要让自己活在“高压锅”里么？某种程度上是的，当你的父母把唯一的空调装在你的房间里让你安心学习，把自己年轻时的遗憾作为目标寄托在你的身上时，当你家里有个生病的父亲、没有嫁妆出嫁的姐姐、以及辛苦照顾这个家的母亲时，我们很难有勇气说出：过自己喜欢过的生活、做自己喜欢做的事，哪怕钱赚的再少只要自己觉得幸福就足够了（这应该就是所谓的责任感使命感吧）。所以我们像男主角的两个朋友，要么生活在“虚伪”里，要么生活在“恐惧”中。

于是我们一个个的“成功”了，但是“理想”这种东西，要么戒了，要么又作为自己的遗憾，硬加到自己的孩子身上。

影片中的爱情，则是以一场订婚一场逃婚来演绎，笔墨不多，却同样有内心抉择的痛苦。是嫁给一个生活贴了标签的成功男士，还是去找能让心情像头发一般飘逸起来的男主角？影片中女主当然选择了后者，但面对现实的生活压力，有多少人能无视暂时的闲言碎语，有多少姻缘因为经济的原因而拆散，又有多少夫妻在坚硬的钢筋水泥的城市里扎不下根来。

所以当影片放到Farhan他爸爸说到：把（电脑）退了，换一部专业摄像机，钱还不够就向我要的时候。放到Raju Rastogi说出“断了两条腿，我才真正站了起来，获得这样的生活态度不容易，我不会放弃”的时候，当病毒主任最终也说出“做你想做的”，并把32年都没送出的太空笔插到Rancho的衣领上时，我再也无法控制自己的眼泪不夺眶而出。

不过看完片后思及自身，又让我感到另外一种悲哀——我不知道自己除了工作之外，还有什么值得投入精力的爱好，不知道自己真正想要的生活是什么。乔治奥威尔痛苦的是“英国人的［阶级］烙印是打在舌头上的”，“他的一切疙瘩都来自于这个事实：他认为他应该去爱他的同胞，但是他连同他们随便交谈都做不到。”而我则是“认为应该去过自己喜欢的生活，但是却连什么是自己喜欢的都不知道”。长年的填鸭式的教育，父母的期盼，老娘舅里形形色色的人生故事，让我以为生活就是如此。看来我们都需要一个像Rancho这样的朋友，告诉我们世界上还有种不合时宜的世界观，也能通向成功。

一个没有一出生就背负使命的园丁的儿子很少见，那至少让我们记住这句话“Follow excellence，Success will chase you !"

Related posts:

• 理智与情感（一）

下午把vpsee逛了圈，感觉是VPS服务商里blog写的最有技术含量的，不仅有linux下的应用、优化，还有架构的分析以及较少看到资料的瘦客户端介绍。还有，我经常逛的LinuxTOY就是架设在他们的服务器上的。

Linux 性能监测：介绍

Linux 性能监测：CPU

Linux 性能监测：Memory

Linux 性能监测：IO

Linux 性能监测：Network

Related posts:

• 欲速则不达
• Linux System and Performance Monitoring(总结篇)
• Linux System and Performance Monitoring(CPU篇)
• 软硬兼施 优化 WebSphere Application Server
• Java性能优化参考资料

环境

平台：两台Windows 2003 SP2（SP版本要一样），必须位于同一网段，并且必须是IP广播(UDP)可到达的

软件：Weblogic9.1

拓扑

在A机上建立一个Administrator Server，作为管理节点；在AB机上分别建立Managed Server，加入集群appCluster，作为应用程序的运行环境；在B机上分别建立Proxy Server，作为提供外部访问的服务地址。

安装过程

在机器A上

创建新的Domain

选择“Tool- Configuration Wizard”，单击“下一步”按钮

选择安装域源

选择安装“WebLogic Server”，单击“下一步”按钮

配置管理员用户名和密码

输入Weblogic管理员管理服务器（AdminServer）的用户名和密码，在此以“weblogic”作用登录管理服务器的用户名和密码，单击“下一步”按钮

配置域启动模式和JDK

选择“生产模式”和“JRockit SDK”后，单击“下一步”按钮

选择是否自定义环境和服务设置

选择“是”后，单击“下一步”按钮

配置管理服务器

输入Administrator Server的名称，监听地址，监听端口，如果需要SSL支持的话可以在“SSL enabled”后面的复选取框上打勾，配置SSL监听端口，单击“下一步”按钮

配置受管理服务器（代理服务器实际上也是一个受管理服务器）

输入Managed Server的名称，监听地址，监听端口（注意同一台机器的端口不要冲突），如果需要SSL支持的话，可以在“SSL enabled”复选框上打勾，配置SSL监听端口。可以配置多个Managed Server。单击“下一步”按钮

配置群集信息

单击“切换显示”，再单击“添加”，输入Cluster的名称，Multicast address组播地址224.0.0.239 255.255.255.255，Cluster的组播地址和端口，Cluster地址可输可不输。单击“下一步”按钮

将“受管理服务器”添加到“集群”中

选择左面列表中的app Managed Server，将其添加到右面的列表中，这里代理服务器不要添加到右边，单击“下一步”按钮

创建HTTP代理应用程序

选中“为群集创建Http代理”，appCluster代理服务器选择前面没有加入appCluster的ProxyServer，单击“下一步”按钮

配置计算机

新建AB所在物理服务器的主机名，端口默认为5556，此操作目的是生成Node manager配置，在wls10以后的版本中会自动添加node manager服务，9版本还要手动运行startNodeManager.cmd，或者手动添加到服务中去。单击“下一步”按钮

注：这里应该是在安装weblogic时候没有配置nodemanager的缘故，后续添加就需要运行startNodeManager.cmd了

检查Weblogic域

在此检查前面所做的配置，如果没有问题单击“下一步”按钮

创建Weblogic域

输入要创建的域名和位置，此处域名可输入为Clust_domain，输入完成后单击“创建”按钮

正在创建域

创建无误后，单击“完成”按钮

机器B上

按上述步骤再次执行一遍，务必保证所有配置一样，当然也可以将A机上的user_projects/domain目录下的Clust_domain目录直接复制到B上。

后续配置（重要）

编辑口令文件

在刚才创建的域目录下建立boot.properties文件，内容为：

username=weblogic  /*用户名

password=weblogic /*密码

注：Oracle WebLogic 10.3之后添加boot.properties后有时依旧会让你输入用户名密码，这时候需要在domain目录下的server/your server/下新建一个security目录，然后把boot.properties放入，再启动就会看到这个文件被加密并直接运行下去了。

编辑hosts文件

添加对方主机名和IP相对应信息，避免node manager之间通讯问题。

同步集群信息（在AB上分别进行）

否则在控制台“机器”里“监视”看不到版本、状态等信息，同时在日志里输出

Could not execute command ” get Version” on the nodemanager.Reason : “I/O error while reading domain dirctory

或者 Could not use user *** to access ……permission deny

注：和AdminServer同一台机器上的可以不用执行，因为在同一个域内

打开WLST工具（程序-weblogic-tools里）

linux/unix环境下先运行

刚开始是offline状态，运行connect(‘用户名’,'密码’,'url’）连接到服务器，

例如connect(‘weblogic’,'weblogic’,'t3://ip:7001′)

你也可以通过connect(help)查看帮助

2010年5月6更新

这一说后续待完成，就过了10个月。

在执行完connect（）命令后，接着运行

nmEnroll (‘D:/weblogic/wlserver_10.3/common/nodema

nager’)

注意斜杠方向，虽然是windows，但不是反斜杠

整个过程，粗体是我执行的

D:\weblogic\wlserver_10.3\server\bin>setWLSEnv.cmd

CLASSPATH=d:\weblogic\patch_wls1033\profiles\default\sys_manifest_classpath\webl

ogic_patch.jar;D:\Java\jrmc\lib\tools.jar;D:\weblogic\WLSERV~1.3\server\lib\webl

ogic_sp.jar;D:\weblogic\WLSERV~1.3\server\lib\weblogic.jar;d:\weblogic\modules\f

eatures\weblogic.server.modules_10.3.3.0.jar;D:\weblogic\WLSERV~1.3\server\lib\w

ebservices.jar;d:\weblogic\modules\ORGAPA~1.1/lib/ant-all.jar;d:\weblogic\module

s\NETSFA~1.0_1/lib/ant-contrib.jar;

PATH=d:\weblogic\patch_wls1033\profiles\default\native;D:\weblogic\WLSERV~1.3\se

rver\native\win\x64;D:\weblogic\WLSERV~1.3\server\bin;d:\weblogic\modules\ORGAPA

~1.1\bin;D:\Java\jrmc\jre\bin;D:\Java\jrmc\bin;C:\WINDOWS\system32;C:\WINDOWS;C:

\WINDOWS\System32\Wbem;D:\weblogic\WLSERV~1.3\server\native\win\x64\oci920_8

Your environment has been set.

D:\weblogic\wlserver_10.3\server\bin>java weblogic.WLST

Initializing WebLogic Scripting Tool (WLST) …

Welcome to WebLogic Server Administration Scripting Shell

Type help() for help on available commands

wls:/offline> connect()

Please enter your username [weblogic] :weblogic

Please enter your password [welcome1] :

Please enter your server URL [t3://localhost:7001] :t3://192.168.1.32:7001

Connecting to t3://192.168.1.32:7001 with userid weblogic …

Successfully connected to Admin Server ‘AdminServer’ that belongs to domain ‘hbj

_domain’.

Warning: An insecure protocol was used to connect to the

server. To ensure on-the-wire security, the SSL port or

Admin port should be used instead.

wls:/hbj_domain/serverConfig>

wls:/hbj_domain/serverConfig> nmEnroll (‘D:/weblogic/wlserver_10.3/common/nodema

nager’)

Enrolling this machine with the domain directory at D:/weblogic/wlserver_10.3/co

mmon/nodemanager …

Successfully enrolled this machine with the domain directory at D:\weblogic\wlse

rver_10.3\common\nodemanager.

经过以上步骤，就可以在管理控制台中，通过“服务器——your server——控制”来启动，但因为使用的是demo CA，日志里会提示不安全的信息。如果你希望使用自己的CA文件，可以参考这篇《关于配置Weblogic的NodeManager服务》

另一种选择

如果nodemanager配置不成功，可以用命令行来启动，也很方便

首先用startWebLogic.sh(cmd)来启动管理控制台

然后 startManagedWebLogic.sh app1（cluster中的server名） http://*.*.*.*:7001 即可

启动proxy 使用startManagedWebLogic.sh proxy http://*.*.*.*:7001

停止server使用stopWebLogic.sh app1 t3://*.*.*.*:7001

管理控制台一般不用重启。

Related posts:

• Websphere入门篇（二）-为WAS打上补丁
• WebLogic如何更换64位JDK
• Server Node Cell Cluster-WebSphere拓扑结构及术语介绍下
• Server Node Cell Cluster—Websphere拓扑结构及术语介绍上
• 注册Weblogic9为Windows服务及外一篇

Wii是WebSphere Information Integrator的简称，原先是DB2中的一个组件，现在是单独的软件包，包括Websphere Federation Server，Websphere Replication Server和Websphere Data Event Publisher。现在WII又改名成Infosphere information Integrator，所以搜索找资料的时候，注意关键词的选用。

我这次装的版本是RepServ_9.5_Win_32-bit，补丁打到了sp2，sp3补丁地址见文中。

安装主机

192.16.29.234

Oracle 9.2.0.7，本地建立客户端并配置好

192..16.29.235:1521 sid:reposity

选择安装目录

选择需要安装的包装器

勾上简体中文语音

填入本地以创建的一个具有管理员权限的用户

安装完成。

运行补丁之前先把相关服务和进程全部停止。

运行v9.5fp2_nt32_server.exe，出现如下画面，选择使用现有产品。

安装程序会发现之前已经安装过的DB2副本

这里要选择包装器的补丁所在的磁盘目录，为v9.5fp2_nt32_iirw.exe解压出来的目录。Sp3的话两个补丁集成在了一起，因为补丁很大，所以测试就没有另下sp3的补丁。

附注sp3补丁下载地址

ftp://ftp.software.ibm.com/ps/products/db2/fixes2/english-us/db2winIA32v95/fixpack/FP3_WR21419/v9.5fp3_nt32_wsfs.zip

之后就等打补丁完毕即可

Wii的配置使用比较难，我找到了一些文档，列在这里供各位参考。

官方在线帮助：

http://publib.boulder.ibm.com/infocenter/db2luw/v9r5/index.jsp?topic=/com.ibm.db2.luw.wn.doc/doc/c0051998.html

打开后找到Federation，点开Configuring federation and data sources

IBM的这份官方帮助很详细，配置联邦的每一步步骤，包括从控制台中设置、用命令设置，都包括示例，写得很详细

官方教学文章

利用DB2 SQL Replication实现从Oracle到Informix的复制

http://www.ibm.com/developerworks/cn/data/library/techarticles/dm-0604xiaozc/index.html

DB2 与 Oracle 之间的远程复制

http://www.ibm.com/developerworks/cn/data/library/techarticles/dm-0603baiyy/index.html

用 InforSphere Replication Server 实现多种数据源之间的数据复制

http://www.ibm.com/developerworks/cn/data/library/techarticles/dm-0902chengyj/index.html

更多的文章，可以在

http://www.ibm.com/developerworks/cn/views/data/libraryview.jsp?sort_by=Date&show_abstract=true&show_all=false&search_flag=true&topic_by=请选择一个主题或产品&type_by=所有类别&search_by=Information+Integrator

上找到

首先明确个概念，wii是通过本地建立一个DB2数据库，并且加载不同的包装器，得以连接不同类型的数据源，所以本地db2数据库是一定要建一个的，不过这个数据库的配置可以用默认的设置，所有调整都交给db2自己来管理。

配置用户映射

我是用之前安装的wii用户进行映射，映射目标数据库的用户名密码，如果需要区分管理的话可以自行建立多个用户（是计算机用户）

建立昵称

建立昵称前，首先要在DB2的数据库上右键连接，用的就是上一步进行映射的本地用户名密码，否则建立昵称时候会报数据库用户名密码不对的错。

如果目标上的表比较多，那么使用“发现”方式建立昵称中间的停顿时间会比较长，如果知道表名，可以手动建立，远程模式的值，输入映射的时候数据库的用户名。

Related posts:

• Websphere入门篇（二）-为WAS打上补丁
• AIX环境下安装DB2 9.1及Inforsphere information integrator
• IBM WebSphere最新技术支持信息
• 软硬兼施 优化 WebSphere Application Server
• IBM WebSphere Recent Supports

下面是我的排错经过：

查看无法提供服务的app2的systemout.log日志，发现从昨天晚上5点09分后，没有新的日志输出。最后的日志为

查看system.err文件，没有发现有价值的内容

于是查看ffdc目录下的17：09生成的日志，在APP2_7b2c7b2c_09.04.15_17.09.27_0.txt中发现有Stack Dump = javax.imageio.IIOException: Can’t create output stream!信息。

于是使用ulimit –a命令查看AIX的limit参数

发现一个进程可以打开的最大文件数为2000.

用ps –ef | grep java命令找到app2的sid，然后用procfiles sid命令查看app2的进程现在打开了多少文件

APP2:/was/IBM/WebSphere/AppServer/profiles/AppSrv01/bin#procfiles 815304

815304 : /was/IBM/WebSphere/AppServer/java/bin/java -Declipse.security -Dwas.status.sock

Current rlimit: 2000 file descriptors

………………

1993: S_IFREG mode:0444 dev:10,15 ino:160745 uid:0 gid:0 rdev:0,0

O_RDONLY size:15694

1994: S_IFREG mode:0444 dev:10,15 ino:160745 uid:0 gid:0 rdev:0,0

O_RDONLY size:15694

1995: S_IFREG mode:0444 dev:10,15 ino:160745 uid:0 gid:0 rdev:0,0

O_RDONLY size:15694

1999: S_IFREG mode:0444 dev:10,15 ino:164300 uid:0 gid:0 rdev:0,0

O_RDONLY size:1042

打开文件数已经到达2000，于是app2无法创建新的systemout.log日志文件，也就无法再提供服务。

由此分析得AIX的nofiles参数对于websphere来说不够大（对于Hp-ux，安装前调整系统参数时就需要把maxfiles调整为8192，但是AIX内核是自调整，所以IBM安装要求上没有提到需要手动修改什么参数）特别是在压力测试时候，短时间内的积累可能会达到2000的限制，实际生产环境中也可能会遇到如此情况，当然集群中另外一台APP跑的好好的也挺让人奇怪。

接下来就是调整ulimit中的nofiles限制到4096，然后重启nodeagent，再由控制台重启app即可。当然也可以直接用命令重启app，但是因为nodeagent没有重启过，环境变量没有生效，下次在控制台中重启app后nofiles依旧会被限制在2000。

Related posts:

• Google Docs不能打开问题
• Weblogic10.3.0在AIX6.1、JDK1.6下挂起解决方法
• 各司其职-WebSphere的动静分离
• Server Node Cell Cluster—Websphere拓扑结构及术语介绍上
• 士别三日

1.1      通过 http://hostname:9060/admin进入Websphere 管理控制台，并用管理员用户登录

1.2      设置Oracle驱动环境变量（针对Oracle数据库）

1.2.1   将oracle的java驱动ojdbc14.jar复制到…/WebSphere/AppServer/lib/ext目录中。

1.2.2   修改数据库驱动环境变量

Ø        进入”环境àWebSphere变量”

Ø        修改ORACLE JDBC DRIVER PATH，值为1.2.1节中ojdbc14.jar 所在的目录，使用绝对路径。

Ø        确定并保存

1.3      新建J2C认证数据

Ø        进入”安全性——安全管理、应用程序和基础结构—— Java 认证和授权服务（JAAS）——J2C认证数据”

Ø        新建一个认证数据条目

Ø        别名为：取一个容易记住的，假设为bm1

Ø        用户标识为：  数据库连接用户

Ø        密码为：  数据库连接密码

1.4      新建JDBC提供者

Ø        进入”资源——JDBC——JDBC提供程序”

Ø        选择合适的作用域，一般选择server1

Ø        新建JDBC提供程序

Ø        数据库类型为：oracle

Ø        提供者类型为：Oracle JDBC Driver

Ø        实施类型为：连接池数据源

Ø        名称为：oracle92

Ø        点击下一步

Ø        类路径为：${ORACLE JDBC DRIVER PATH}/ojdbc14.jar

Ø        下一步

Ø        完成并保存

1.5      新建数据源

Ø        进入”资源——JDBC——数据源”

Ø        选择合适的作用域，一般选择server1（根据你要发布的Server来）

Ø        新建数据源

Ø        名称为：随便起

Ø        JNDI名称为：jdbc/需要使用的jndi name

Ø        组件管理的认证别名为：hostnameNode01/ bm1（还记得之前建立的J2C别名么）

Ø        下一步

Ø        选择刚才建立的JDBC提供程序，

Ø        设置URL：jdbc:oracle:thin:@ip:1521:sid

Ø        下一步

Ø        确定并保存

Ø        选择刚刚建立的数据源，测试连接，看看是否正常

Related posts:

• JDBC引发的服务器hang解决思路
• 为JVM启用大页面支持
• 充当了一回DBA
• WebLogic9和10集群安装配置过程
• 在Windows 上利用 MSCS 创建高可用性的 DB2 集群服务

         首先去http://www-933.ibm.com/support/fixcentral/找到自己需要的补丁，Production Group为Websphere，Product为WAS，指定版本号和平台，搜索出Fixpack。

         这里以6.1.0.23: WebSphere Application Server V6.1 Fix Pack 23 for Windows为例讲述打补丁步骤。

         首先看到一个Update Installer 7.0 for WebSphere Software for Windows，这个是补丁升级程序，从6.1之后所有的补丁（包括7.0）都要考它来升级。安装CD2中会带有这个程序，但是那个版本太低对6.1.0.6之后的补丁无法直接使用。所以先要安装这个打补丁程序。

          Websphere的补丁有WAS—IHS—PlugIn和SDK，根据你的安装拓扑和需要可以分别打，但是一般全都保持一致的版本。下载的pak文件放到Update Installer安装后的maintenance目录下。

          之后运行update installer即可，选定安装补丁的目录：AppServer对应WAS补丁，Http目录对于ihs补丁，plugins目录对应plugins补丁。每次都会自动找到相应的两个pak文件（一个程序的，一个JDK的）。全部安装完，那就OK了，在bin目录下执行versioninfo看看吧。

          WAS6.0的时候打补丁没有那么方便，先要打6.0.2的补丁，顺序为WAS—IHS—PlugIn，然后再打6.0.2之后的小补丁，也是按照WAS—IHS—PlugIn的顺序来。而且那时候还没有UpdateInstaller，每个补丁都需要各自独立安装。不过你可以把对应的PAK文件找出来，拷贝到UpdateInstaller的maintenance下去，节省一点体力活。

Related posts:

• Weblogic10.3.0在AIX6.1、JDK1.6下挂起解决方法
• WebSphere Information Integrator安装过程
• 注册Weblogic9为Windows服务及外一篇
• IBM WebSphere最新技术支持信息
• AIX环境下安装DB2 9.1及Inforsphere information integrator

1.1 域的设置

域名：sjj.gov.cn

提供的DNS：IP

1.1.1 DC

IP地址：IP

主机名：mail

第2步 Exchange的搭建

Exchange安装在DC上，F:programme file目录下，邮箱存储在G盘下，每个用户邮箱大小限制为1G。

2.1 安装必须的系统组件

安装IIS、NNTP、SMTP、及万维网服务和ASP.NET.在控制面板的【添加删除程序】里选择【添加删除Windows组件】

2.2 安装exchange

点击“Exchange部署工具”

下一步中选择“部署第一台Exchange 2003服务器”

继续选择“安装全新的Exchange 2003”

直至出现“安装任务列表”

2.2.1 森林拓展

点击“立即运行 ForestPrep”

一直下一步直至完成。

2.2.2 域拓展

点击“立即运行Domain Prep”

一路下一步直至完成。

2.2.3 安装Exchange

点击“立即运行安装程序”

选择新建Exchange组织，并输入组织名称sjj。指定管理组名称sjj，并单击下一步开始安装

安装完成

2.2.4 启用邮箱

为用户启用邮箱，在AD的用户和管理中选中用户，右键——exchange任务——启用邮箱——选择第一存储组和邮箱SJJ

2.3 为OWA启用修改密码

2.3.1 修改注册表选项

在exchange服务器上，运行“regedit”，打开注册表编辑器

找到HKEY_LOCAL_MACHINESYSTEMCurrentControlSetServices

MSExchangeWebOWA，修改DisablePassword由1变为0，保存推出。

2.3.2 配置OWA的密码功能

进入AdminScripts目录（cd c:inetpubAdminScripts）

允许修改OWA密码adsutil.vbs set w3svc/passwordchangeflags 0

以上都是在命令行完成的

2.3.3 安装证书服务

在Exchange服务器上，选择“开始→设置→控制面板→添加/删除程序→添加/删除Windows组件→证书服务”

单击“下一步”按钮，出现如图所示的对话框，选择“企业根CA”单选按钮。

单击下一步，在下一页的此“CA的公用名称”中输入SJJ

可分辨名称后缀为“DC=gov，DC=com”

有效期限选择5年。

单击下一步：选择证书存放位置

点击是安装证书服务。

2.3.4 新建虚拟主机

l 选择“开始→程序→管理工具→Internet服务（IIS）管理器”，打开Internet信息服务（IIS）管理器窗口。
选择“默认网站”，单击鼠标右键，在出现的快捷菜单中选择“新建→虚拟目录”，打开对话框，在“别名”文本框中输入要创建的站点别名“IISADMPWD”。

l 物理路径在c:winntsystem32inetsrviisadmpwd

l 权限开启“读取、记录访问、资源索引”（执行权限纯脚本）。

l 修改虚拟目录的“应用程序池”，在虚拟目录的属性中，修改应用程序池（ExchangeApplicationPool）

l 要求SSL，允许匿名身份验证，勾选“基本身份验证”

2.3.5 配置SSL服务

（1）打开IIS。
（2）选取“默认网站”，单击鼠标右键，在出现的快捷菜单中选择“属性”命令，打开“默认网站属性”对话框。
（3）选择“目录安全性”选项卡，如图所示，单击“安全通信”下的“服务器证书”按钮，打开“欢迎使用Web服务器证书向导”对话框。

选择“新建证书”

2.3.6 重启服务

重启Exchange Information Store Service 、IIS Admin Service服务

2.4 客户端修改密码

登录OWA http://mailsrv.sjj.sh.gov.cn，输入用户名“sjj用户名”和密码。

点击选项，找到“修改密码”

点击出现证书确认界面

点击是继续

输入域sjj，用户名，更改的密码，点击确定

提示修改成功

1. 在DNS上建立新的域名的DNS区域

2. 提升域和森林的运行功能级别到2003纯模式

3. 建立必要的信任关系（此处这回不用做）

4. 对DC做好备份

5. 登录一台非域控但加入域的成员机，进行如下改名操作。

6. rendom /list 在该工具文件夹下产生 domainlist.xml 文件

7. 编辑domainlist.xml文件，将所有原域名改为新域名

8. rendom /upload，产生dclist.xml

9. rendom /prepare，检查此前操作是否正确，操作是否成功，不对的话rendom /end

10. rendom /execute ，所有域控重启

11. 登录域控，更改域控的DNS名称

12. random /clean，清楚域中的老域名

13. gpfixup /olddns:** /newdns:** (/oldnb:** /newnb:** /dc:**)括号内的视情况可以省略

集群配置

1． 在DNS中添加集群虚拟IP的主机解析

2． 修改Cluster Service的启动帐号

详细过程：

1. 在DNS上建立新的域名的DNS区域

2. 提升域和森林的运行功能级别到2003纯模式

提升域功能级别

提升林功能级别

3. 建立必要的信任关系：当变动子域的时候需要建立，以满足必要的信任关系

4. 对DC做好备份：NTbackup

5. 登录一台非域控但加入域的成员机，进行如下改名操作。

6. rendom /list 在该工具文件夹下产生 domainlist.xml 文件

7. 编辑domainlist.xml文件，将所有原域名改为新域名

8. rendom /upload，产生dclist.xml

9. rendom /prepare，检查此前操作是否正确，操作是否成功，不对的话rendom /end

注意：进行到此步时AD已经被锁定，不能再对域做操作，所以如果需求有所改动不再需要改域名那么rendom /end

10. rendom /execute ，等待所有域控自动重启

11. 登录域控，更改域控的DNS名称

12. 如果域中没有Exchange服务，则直接跳到步骤13

注意：Exchange服务不能安装在域控上，否则只能备份邮箱数据，卸载Exchange，等域名改名全部完成后重装。

用改名工具完成后每个人的邮件地址不会自动改变，还是需要手动改变。

工具：XDR-fixup

重启Exchange的服务器和装有Exchange管理器的机器各两次，确保更新完成

13. rendom /clean，清楚域中的老域名

14. gpfixup /olddns:** /newdns:** (/oldnb:** /newnb:** /dc:**)括号内的视情况可以省略

/oldnb:旧的NetBios名 /newnb:新的NetBios名 /dc:不指定就默认之前rendom /prepare时联系的DC

全部完成后登录时显示的还是老域名，但其实已经是新域名了

集群配置

1． 在DNS中添加集群虚拟IP的主机解析

2． 修改Cluster Service的启动帐号

所有客户机只要重启后就会登录新的域

文中提到的两个工具下载：

rendom 

gpfixup

Related posts:

• Websphere入门篇（二）-为WAS打上补丁
• 充当了一回DBA
• 写在前面
• Sql2005数据库复制操作方法
• WebLogic9和10集群安装配置过程

WebSphere6.1的安装过程和6.0大同小异，这里就没有列出，可以到我的Google Docs查看

http://docs.google.com/fileview?id=F.97cf8c0b-5f02-4601-a317-a8a75284253f&hl=en

———————— 下面正式开始——————————

1. 开始安装IBM WebSphere Application Server Network Deployment V6

插入光盘或运行安装介质，进入安装向导

2.接受协议

3.检查条件 安装程序将自动检测是否具备安装WAS6的条件

注：此处安装Windows2003 sp2补丁后会报操作系统补丁缺失（sp1)，很明显不用在意。

4．选择安装目录

这里指定的目录为E:\Program Files\IBM\WebSphere\AppServer

5.安装如下功能部件（样本服务器通常不安装）

6．安装摘要

总大小800M左右

单击下一步开始安装

6．安装完成，选择启动概要表创建向导来创建profiles。（或者进入安装目录的/bin下，进入ProfileCreator运行pctWindows.exe）

建Deployment Manager 概要文件

在profile creation wizard 中选择第一个（如果已知要搭建DM环境，最好先创建DM再app）

39

DM profile 的名字为 Dmgr01

40

选择profile安装路径

41

命名节点名，主机名，单元名。

42 指定端口

安装会自动分配新的端口给新建的profile，为避免与先前的或是其他程序的端口冲突，可以手工更改端口，具体可以在config的serverindex.xml

文件中找到该profile的端口信息，或者进入管理控制台修改，建议事先规划好。

44系统服务定义

定义为windows 服务，启动和关闭服务是以系统服务调用的形式运行，并添加到系统服务里（这一步可根据需要自行确定启动方式）

45 summary

46 创建好Deployment Manager 概要文件之后，现在使用“第一步”控制台或进入到该该药文件的bin目录下执行 startManager 命令启动 Deployment Manager。

Unix下为 ./ startManager.sh

建appserver概要表

8．概要表类型选择“创建应用程序服务器概要表”，也就是创建一个APPSERVER的PROFILE。不管是DM环境还是单机环境 ，都要建这个应用程序服务器的profile。

9．概要表名称：AppSrv01（根据规划可自行修改）

10．概要表目录

这里为E:\Program Files\IBM\WebSphere\AppServer\profiles\AppSrv01

11.节点名：sdsxappNode01

主机名：sdsxapp（如果和物理主机有别，则应当在系统host文件中添加，建议不使用默认物理主机名，以方便移植）

12.端口值，按默认（也可根据规划进行修改）

13．可以作为Windows 服务执行操作：本地帐户，手工启动服务。unix下无此步骤

14.摘要

15.概要表创建完成

16．启动“第一步”

17.验证安装并启动服务器（也可以命令行进入该profile的bin目录下执行：startServer server1；unix下为 ./ startServer.sh server1）

查看服务器状态 ：serverStatus –all

18.进入控制台(此时未定义安全性)（http://localhost:9060/ibm/console）9060位缺省

二．安装IBM HTTP Server6.0

19开始安装IBM HTTP Server6.0

20

21选择安装路经

E:\Program Files\IBM HTTP Server

22.安装类型：典型（或定制，可自行配置端口，这里为默认的80和8008）

23．服务类型：Windows服务，本地登陆

24

安装完成

三．安装IBM WebShpere Application Serber V6服务器插件

25 开始安装IBM WAS V6 plugin

26

27检查条件

28选择现有Web Server：IBM HTTP Server6.0

29配置环境为 ：此处为was本地安装，通常情况可安装远程，则需要告诉plugin应用服务器（通常是dm）的ip地址。

30.插件安装路经E:\Program Files\IBM\WebSphere\Plugins

31．确认WAS的安装位置（远程的话则为ip）

32.选择现有的IBM HTTP Server httpd.conf文件Web服务器端口为80

33.定义Web服务器名称 webserver1

34.web服务器的 plugin-cfg.xml文件路径：（此xml文件用于传播插件，发布新的应用的时候，需要借助此文件告诉HIS关于WAS端的改变）

E:\Program Files\IBM\WebSphere\AppServer\profiles\AppSrv01\config\cells\sdsxappNode01Cell\nodes\webserver1_node\servres\webserver1\plugin-cfg.xml

35.摘要

36.

37．完成安装

47 启动好Deployment Manager之后再把另外一个appserver启动（如果没启动的话）。

在此appserver的bin目录下执行 addNode networkacs 8879 把节点添加到Deployment Manager中。或者使用 Deployment Manager 的管理控制台将应用程序服务器节点添加到单元。单击系统管理 > 节点以添加节点。Unix下是./ addNode.sh networkacs 8879

48 停止命令： server的停止命令为 stopServer server1；manager停止的命令为stopMananer。如果已经使用定义了安全性，需要加入-username –password

49 Unix下是./ stopServer.sh server1 ./ stopMananer.sh

四．配置PlugIn

安装好PlugIn之后，会在httpd..conf最后写入几行配置，但还要进行一些步骤让was得以管理webserver。

将 configureWeb_server_name 脚本从plug-ins_install_root/ bin/粘贴到wasfrofile_install_root/ bin 目录。如果一台机器在 Linux 或 UNIX 下运行，而另一台机器在 Windows 下运行，则从 plug-ins_install_root/ bin/ crossPlatformScripts 目录复制此脚本，将 configureWeb_server_name 脚本从机器 B 粘贴到机器 A 上的 wasprofile_install_root/ bin 目录，应为此脚本要运行本目录的configureWebserverDefinition.jacl文件，所以如果当前目录下没有此文件，要从was_root的bin下面复制过来。注意configureWeb_server_name 脚本中最后最后一项是系统类型，最后第二项是web节点的host，最后第三项是web节点名。

在控制台的“系统管理—节点—添加节点”添加一个web非受管节点，并指定好节点名和web节点所在host。然后从命令行运行configureWeb_server_name脚本，便完成了web插件的配置工作。（在windows单击版环境下一般没必要进行上述配置，直接运行脚本，重启was便可以识别到本地ihs）。

下一步到 IHS的bin目录里设置HTTP管理服务器的密码。

运行命令行 >htpasswd -c ..\conf\admin.passwd admin (注意路径不支持空格)

密码设置好之后再到was的管理控制台中设置远程控制http server的口令密码，跟先前设置的一样

然后传播插件测试是否成功。

运行 snoop servlet。

要验证您自己的应用程序，安装应用程序后重新生成并传播 plugin-cfg.xml 文件。

下图为plugin配置属性

Plugin在发布新的应用之后要进行一次生成插件并传播插件的操作

Related posts:

• Websphere入门篇（二）-为WAS打上补丁
• Server Node Cell Cluster—Websphere拓扑结构及术语介绍上
• Happy Birthday to Unix’s 40 Years Old
• WAS启用IHS的SSL
• WebLogic9和10集群安装配置过程

        这一年工作积累的资料很多，在硬盘里东一点西一点，没有经过梳理，总觉得不踏实，似乎随时可能忘记，遇到问题有时候还要临时抱佛脚的上Google。

         所以我希望这个系列能理清头脑，特别是后面比较复杂的性能调优这一块。前面基础部分希望可以给刚接触Websphere的带来一个捷径（其实真正的想法是以后软件部要让我搭测试环境的话我直接一个地址发过去就可以了。。）。

         你会发现文章里很多内容似曾相识，这并不奇怪，我当初也是不断的从网上、论坛里搜来的嘛。这里要感谢我的同事小白，是他在我刚入门的时候耐心解答问题，不管什么时候都能电话支持。还要提到的是http://www.webspherechina.net，这个论坛是学习Websphere的好去处。

当然要是遇到棘手的问题，不能忘了IBM的官方网站。

http://www.ibm.com/developerworks/cn/websphere/

http://publib.boulder.ibm.com/infocenter/wasinfo/v6r1/index.jsp?topic=/com.ibm.websphere.nd.doc/info/welcome_nd.html

Related posts:

• 软硬兼施 优化 WebSphere Application Server
• 应用服务器WAS CE21介绍
• IBM WebSphere Recent Supports
• WebSphere入门篇（四）-安装集群
• WebSphere相关

一点服务器技术、一点操作系统知识、一点数据库概念、一点中间件结构、一点编程能力、一点网络基础、一点存储原理，还要一点IT素质和经验积累。

借用ITpub第十九期上Orian的话，这些就是我近两年来的收获。

头一年接触的是Windows平台的产品，从Windows 2003 AD、Exchange、SQL Server、WSUS、DNS到ISA Server、集群，踏入了大门，知道了60%的知识，但是真正企业级的大规模部署没有什么参与。

如今主要负责中间件，从Websphere、Weblogic到OAS、MQ，经过近一年的工作，可以说80%的工作可以手到擒来。但是Troubleshooting仍是弱项——一是经验还不足，二是理论知识不够扎实。缺乏JAVA知识让我无法判断有些错误是由程序引起，还是中间件配置的不当造成（最典型的比如JAR包的错误），其次IBM动辄几百页的redbook也让我颇为忌惮。不过经过一年多这方面的工作，加上IBM认证考试前的学习，让我找到了查看文档的方法，从IBM浩如烟海的文档库中最快找到适合自己当前需求的内容。

中间件的承前启后、跨平台，也督促着我学习数据库知识，和AIX、Hpux、Linux等操作系统知识。做压力测试的过程让我学习了应用程序的profiling、Application Server的Tuning，了解了Apache、Lighttpd、Nginx和不同应用服务器配合下的优缺点。

正如之前所说，系统工程师这个牵涉到方方面面的职业，让知识的累积也有一定的难度——学习总是交叉并发进行的。所以这个博客，一是把自己工作中累积下来的经验进行分享；二是犹如老师授课一样，把知识进行梳理并且简单明了的表达出来（这是我觉得最好的巩固知识方式了）；三是用一篇篇更新督促自己不断学习，否则计算机类一本上百页能当砖头的书，很容易就让人打退堂鼓。

接下来我计划学习些和中间件有关的JAVA知识，一个脚本语言（惭愧啊，干系统工程师居然不会写脚本），深入学习UNIX（而不仅仅是几个命令）。当然还有一点作为业余爱好的数学——干计算机这行的，如果数学不好，怎么才能真正的深入理解呢？

Related posts:

• Websphere系列介绍
• 应用服务器WAS CE21介绍
• IBM WebSphere Recent Supports