以下各类版本如无特殊说明均指2017年4月时的情况。

在硬盘域中创建存储池和在存储池中创建LUN/文件系统，都不要把全部空间用尽，否则将来进行扩容等操作时可能会报错。

DIF需要在LUN映射前通过CLI开启。

在最新的V300R003C20SPC200版本中，SAN的重删压缩虽然已经与大多数增值业务不冲突了，但是仍旧和自动分层冲突，启用了重删压缩的LUN的SmartTier必须设定为不迁移。因此可以单独建立一个启用了重删压缩的LUN，并且设定好容量初始分配策略（如优先从容量层分配），这样的LUN用来做存档备份很好。重删默认不会进行逐个字节对比，压缩默认为高性能压缩算法，如需要启用逐个字节对比或高压缩率算法需通过CLI进行配置。

对于LUN

1. show lun dedup_compress 确认LUN的ID
2. change lun lun_id=2 dedup_enabled=yes bytecomparison_enabled=yes 打开ID为2的LUN重删逐字节比较
3. change lun lun_id=2 compression_enabled=yes compression_method=deep 设置ID为2的LUN压缩策略为压缩率优先

对于文件系统

1. show file_system general 确认文件系统的ID
2. change file_system dedup_compress file_system_id=3 dedup_enabled=yes bytecomparison_enabled=yes  打开ID为3的文件系统重删逐字节比较
3. change file_system dedup_compress file_system_id=3 compression_enabled=yes compression_method=deep 设置ID为3的文件系统压缩策略为压缩率优先

ACC重删压缩卡介入卸载CPU负载的条件是，每两分钟检查一次，如果CPU负载高于50%则卸载。

NAS不支持SmartTier，因此给文件系统存储池分配多个层级的存储介质是没有太大意义的。

此存储支持 VMware VAAI，从V300R003C20开始重删压缩LUN也支持VAAI，在ESXi的存储设备中可以看到相应的LUN硬件加速状态为支持。

VVol是VMware 6.0新的功能，让存储了解每一个虚拟机，需要eSDK Storage VASA 2.0支持，当前最新V100R005C60SPC006只支持VMware 6.0u2，存储固件只支持V300R003C00，这显然落后太多了。即便是最新尚未正式推出的eSDK Storage Plugins V200R001 1.0 RC4，VVol和vCenter的插件也只支持VMware 6.0。VVol和自动分层也是冲突的，综上故不建议使用。

vCenter的插件允许在vCenter中查看和配置存储，最新的eSDK Storage V100R005C70不支持最新的存储固件V300R003C20，只支持VMware 5.0/5.1/5.5/6.0，后面肯定是升级到eSDK Storage Plugins，故不建议使用。

华为存储有自己的多路径软件OceanStor UltraPath，需要在ESXi和VCSA上安装相同的版本，ESXi上可以通过命令行或者Update Manager安装，VCSA需要通过命令行安装，UltraPath可以查看和监控很多链路信息。但是VMware已经出6.5d了，UltraPath支持6.5的V200R001还没有正式推出（还在RC3），当前最新的V100R008C50SPC500只支持VMware 5.0/5.1/5.5/6.0，也不支持RHEL 6.9/7.3；多路径做为基本重要的服务，UltraPath和VMware的版本紧密相关，一旦VMware升级UltraPath也必须跟着升级，其过程要参考升级指导书，增加了整个系统后期的维护成本，因此不太建议使用。

使用VMware NMP多路径需要额外配置：

1. 对于ESXi 5.5/6.0/6.5，T V1 Series, Dorado5100, Dorado2100 G2, T V2 Series, 18000 V1 Series, V3 Series系列存储，仅为双控且未来也没有扩控计划的，推荐启用ALUA，配置ESXi SATP为VMW_SATP_ALUA，PSP为VMW_PSP_RR；
2. ESXi进入维护模式
3. 存储端：修改每个主机的每个启动器，勾选使用第三方多路径，切换模式选择ALUA；
4. SSH登录ESXi
   1. esxcli storage core device list 查看一下存储的Vendor和Model
   2. esxcli storage nmp satp rule add -V HUAWEI -M XSG1 -s VMW_SATP_ALUA -P VMW_PSP_RR -c tpgs_on 添加多路径规则
   3. esxcli storage nmp satp rule list | grep HUAWEI 看一下刚刚添加的规则
5. ESXi上面修改存储的LUN多路径策略为循环
6. 重启ESXi，确认存储LUN为VMW_SATP_ALUA和循环
7. 退出维护模式

LSF的lsb.resources文件中可以针对用户进行资源使用限制，用户可以用USERS和PER_USER设置，这里列出不同设置下的意义。

USERS=all：所有用户使用资源总和不能超过限制
USERS=A B C：A B C三个用户（组）使用资源总和不能超过限制
PER_USER=all：每个用户使用资源不能超过限制，按照每个用户计算不管用户组
PER_USER=A B C：A B C三个用户（组）的每个用户使用资源不能超过限制，哪怕这里的A B C是用户组，但是还是按照每个用户计算

两台Dell R730（2*E5-2670 v3，64GB内存），RAID卡为PERC H730P Mini（2GB Cache），每台5个Intel SSD 730 480GB做一个RAID5（Strip Size 128KB，Write Back，No Read Ahead），将两台节点上的SSD RAID做成一个GPFS测试。

测试命令	write	rewrite	read	reread
iozone -i 0 -i 1 -r 128K -s 128G -t 2 -+m ./io	2595	2777	4514	4584
iozone -i 0 -i 1 -r 128K -s 2G -t 128 -+m ./io	3034	3823	4543	4582
iozone -i 0 -i 1 -r 128K -s 1G -t 256 -+m ./io	2963	3767	4505	4569
iozone -i 0 -i 1 -r 128K -s 512M -t 512 -+m ./io	2783	3549	2290	2307
iozone -i 0 -i 1 -r 128K -s 256M -t 1024 -+m ./io	2204	3743	2683	2715
iozone -i 0 -i 1 -r 64K -s 128G -t 2 -+m ./io	2504	3927	4474	4581
iozone -i 0 -i 1 -r 64K -s 2G -t 128 -+m ./io	3074	3752	4507	4584
iozone -i 0 -i 1 -r 64K -s 1G -t 256 -+m ./io	2949	3952	4509	4575
iozone -i 0 -i 1 -r 64K -s 512M -t 512 -+m ./io	2826	3565	4481	4554
iozone -i 0 -i 1 -r 64K -s 256M -t 1024 -+m ./io	2288	3647	2656	2751
iozone -i 0 -i 1 -r 32K -s 128G -t 2 -+m ./io	2507	3601	4379	4559
iozone -i 0 -i 1 -r 32K -s 2G -t 128 -+m ./io	3065	3518	4501	4587
iozone -i 0 -i 1 -r 32K -s 1G -t 256 -+m ./io	2956	3540	4516	4582
iozone -i 0 -i 1 -r 32K -s 512M -t 512 -+m ./io	2810	3587	4500	4550
iozone -i 0 -i 1 -r 32K -s 256M -t 1024 -+m ./io	2310	3224	2692	2734
iozone -i 0 -i 1 -r 16K -s 128G -t 2 -+m ./io	2517	3566	4404	4579
iozone -i 0 -i 1 -r 16K -s 2G -t 128 -+m ./io	3058	3524	4494	4571
iozone -i 0 -i 1 -r 16K -s 1G -t 256 -+m ./io	2557	2675	2669	2675
iozone -i 0 -i 1 -r 16K -s 512M -t 512 -+m ./io	2406	2491	2553	2530
iozone -i 0 -i 1 -r 16K -s 256M -t 1024 -+m ./io	2056	1953	2125	2178
iozone -i 0 -i 1 -r 8K -s 128G -t 2 -+m ./io	3179	3620	4421	4513
iozone -i 0 -i 1 -r 8K -s 2G -t 128 -+m ./io	2794	2868	3082	3045
iozone -i 0 -i 1 -r 8K -s 1G -t 256 -+m ./io	1327	1366	1348	1352
iozone -i 0 -i 1 -r 8K -s 512M -t 512 -+m ./io	1242	1269	1304	1253
iozone -i 0 -i 1 -r 8K -s 256M -t 1024 -+m ./io	1214	1121	1164	1151
iozone -i 0 -i 1 -r 4K -s 128G -t 2 -+m ./io	2370	2816	3809	3854
iozone -i 0 -i 1 -r 4K -s 2G -t 128 -+m ./io	1462	1485	1594	1596
iozone -i 0 -i 1 -r 4K -s 1G -t 256 -+m ./io	675	684	716	729
iozone -i 0 -i 1 -r 4K -s 512M -t 512 -+m ./io	623	627	639	643
iozone -i 0 -i 1 -r 4K -s 256M -t 1024 -+m ./io	645	618	575	575

Dell Compellent SCv2080，双控，每控制器8GB缓存，满配84颗4TByte 3.5-inch 7.2Krpm NL-SAS。建立4个Volumes，每个Volumes容量50TB，模式为RAID 10-DM和RAID 6-10，所以实际测试的是RAID 10-DM的性能。四个卷全部映射给两台Dell R730（2*E5-2670 v3，64GB内存，单卡双口8Gb FC）IO服务器，与存储通过两台8Gb光纤交换机冗余连接。四个卷做成一个GPFS进行测试。每个IO节点通过2个万兆做LACP和核心交换机连接，6个刀片计算节点通过1个万兆和刀箱交换机连接，刀箱交换机通过2个万兆做LACP和核心交换机连接。

io为两个IO节点测试，blade为6个刀片节点测试，测试进程平均分配，单位MB/sec

测试命令	write	rewrite	read	reread
iozone -i 0 -i 1 -r 128K -s 128G -t 2 -+m ./io	1555	1574	2587	2600
iozone -i 0 -i 1 -r 128K -s 12G -t 20 -+m ./io	1573	1591	2560	2573
iozone -i 0 -i 1 -r 128K -s 6G -t 40 -+m ./io	1587	1602	2829	2817
iozone -i 0 -i 1 -r 128K -s 3G -t 80 -+m ./io	1600	1602	2882	2889
iozone -i 0 -i 1 -r 128K -s 1G -t 288 -+m ./io	1586	1600	2827	2841
iozone -i 0 -i 1 -r 128K -s 4G -t 252 -+m ./io	1564	1613	2844	2803
iozone -i 0 -i 1 -r 128K -s 4G -t 252 -+m ./io	1578	1616	2799	2805
iozone -i 0 -i 1 -r 128K -s 2G -t 504 -+m ./io	1050	1591	1710	1689
iozone -i 0 -i 1 -r 128K -s 1G -t 1008 -+m ./io	486	963	284	277
iozone -i 0 -i 1 -r 64K -s 4G -t 252 -+m ./io	1587	1611	2841	2848
iozone -i 0 -i 1 -r 64K -s 2G -t 504 -+m ./io	1093	1586	1751	1717
iozone -i 0 -i 1 -r 64K -s 1G -t 1008 -+m ./io	306	379	91	91
iozone -i 0 -i 1 -r 32K -s 4G -t 252 -+m ./io	1585	1612	2871	2875
iozone -i 0 -i 1 -r 32K -s 2G -t 504 -+m ./io	1161	1550	1764	1775

浪潮 AS500H (NetApp E2600，MD3600也一样)，双控制器，每控制器 4GB 带电池保护缓存，Write caching with mirroring, High Performance Tier。IO节点与存储双控通过MiniSAS冗余连接

测试命令：iozone -i 0 -i 1 -r 128K -s 128G

	Basic				High Performance Tier (MB/s)
	write	rewrite	read	reread	write	rewrite	read	reread
900GByte 2.5-inch 10Krpm 6Gb/s SAS 2个盘做一组RAID1	171	172	177	175	173	171	176	175
900GByte 2.5-inch 10Krpm 6Gb/s SAS 每5个盘做一组RAID5，4组RAID5	689	688	1892	1971	1447	1539	2440	2531
3TByte 3.5-inch 7.2Krpm 6Gb/s NL-SAS 每6个盘做一组RAID6，2组RAID6	629	617	832	867	839	801	819	856

 

给水：
高档些的洁水卫水宝，中档：天力、爱康、白蝶，实惠些有久通。可以冷热水全部都用6分管。如果要实惠些，冷水用6分（直径25mm），热水用4分（直径20mm）。
一般冷水管壁厚2.8mm，热水管壁要厚一些3.4mm ，加厚的是4.2。冷水管管子上用 “蓝”线标识，热水管用“红”线标识。热水管是用来传送热水器的热水的，不是用来传送烧开的自来水的。据说冷水管必须是食品级的，这样无毒；热水管不是食品级的，里面参有其他原料，长期使用对人身体有害。

水管建议沿着墙顶走，用吊顶石膏线等来修饰。水管在墙顶需要固定，固定可以减少水流的声音，同时也是施工规范。不建议从地面走水管，虽然这样比较省管子，但一旦漏水不容易发现维修也麻烦，后果很严重损失很大。水管和煤气管尽量少用接头，直管必须用完整一根的，尽量减少隐患。一旦发现水管被无故延长了，一定要纠正，因为这不是简单的多算了水管的钱，而是会影响使用效果，尤其是热水的使用效果。冷热水管不可共槽，中间要留有至少10cm间距，热水管最好包保温层。冷热水管交叉时，热水管在上冷水管在下，冷水管用过桥弯。

水管打压测试：
1. ppr水管试验一般要求在管道连接安装24小时后进行。
2. 在试压之前，对管道应采取安全有效的固定和保护措施，但接头明露出来了。
3. 打压标准是0.8~10MP(也就是8~10公斤，最低不少于6公斤)30分钟，压力允许下降少许，标准是小于等于0.06MP。

排水设计：
1.必须要有水封，深度50-100mm。短则易被破坏和干涸，长则易致渣子残留、堵塞。这一点《住宅设计规范》2003年版有明确规定。
2.不能同时有两个存水弯，就是存水弯和水封地漏不能同时存在。否则虹吸作用减弱，导致排水减慢。
3.存水弯是指管道上下的交错处长度，而不是总长度。存水弯不合格相当普遍。无论选择存水弯，还是地漏都应该满足50mm水封的要求。
4.专业期刊《给水排水》2007年33卷发表的《关于市场存水弯及地漏水封的调查研究》一文认为：“正确的做法是: ①安装直通地漏（也叫清扫口）,并安装水封深度不小于50 mm的存水弯; ②直接安装水封深度不小于50 mm的地漏。”
由此，不便设置存水弯或其长度达不到要求的情况下，才选择深水封地漏，否则普通的直通地漏就可以。

防水：
一般防水层应从地面延伸到墙面高出地面100mm；卫生间墙面防水层不得低于300mm，浴室墙面防水层不得低于1800mm。
砖墙先批水泥砂浆（不能用混合砂浆）找平，做2~3mm厚聚氨酯防水层（横竖两道，或者其他防水涂料，但聚氨酯市场上比较常见，转角处最好用无纺布或者自 粘布粘贴再刷防水），在防水层未干时甩粗砂（防止与水泥砂浆产生滑脱），再做水泥砂浆（不能用混合砂浆）保护层贴砌瓷砖。

室内防水涂料施工不复杂，但对个人的技术要求还是比较高的，要有丰富的经验和比较强的责任心。关键是闭水试验，还要注意及时做保护层。否则，原来做得再认真，后面的工人踩个乱七八糟，照样漏水。正常情况下，管根、地漏等处是薄弱环节，施工时要细心。作为非专业的普通住户们，只要记住做好闭水试验就好了。工程上要求做两遍闭水，防水层施工完一次，地砖铺完第二次。