通过光纤通道连接到Linux的SAN存储arrays存在严重问题。 这是configuration： Debian与普通的香草linux 2.6.27.25 光纤控制器QLogic 4Gb双端口（基于ISP2432） 基本上问题是：如何得到这个＃？@！ FC控制器/驱动程序能够正确识别存储arrays的configuration更改（新的或删除的LUN）？ 当我在arrays上创build一个新的LUN（通常是一些现有LUN的快照）并将其映射到我的HBA时，我无法正确识别它： rescan-scsi-bus -l -w -r实际上检测到某物通用的/ dev / sgXX设备），但是没有创build块设备（/ dev / sdXX）。 发出LIP并手动重新扫描时也是如此： echo 1> / sys / class / fc_host / host6 / issue_lip echo“ – / – ”> / sys / class / scsi_host / host6 / scan 如果我删除现有的LUN，则不会发出LIP和重新扫描或重新扫描scsi-bus。 以前的设备保持在那里，当然不起作用（“file -s / dev / sdXX – […]
试图围绕光纤通道帧如何实际填充并通过交换结构发送。 我了解WWNN WWPN，WWNN是实际HBA的WWN，而WWPN是卡上实际端口的WWN。 所以如果HBA有4个端口，它们都共享相同的WWNN，但是具有不同的WWPN。 仍然不确定WWNN在一个结构中的通信中起什么作用。 其次，一个新的N_port节点试图login到结构并分配一个引用的FCID的FLOGI过程。 在PLOGI完成之后，N端口节点可以提交它的WWPN。 这保持WWPN FCID关系…. 最后，FC寻址是域ID，区域ID和端口ID的组合。 全部8位。 我的理解是用它来定位一个界面在哪里？ 所以如果我有两个开关域1和域2，0100000将意味着第一个开关区域00和端口00？ 此外，我仍然不确定主机如何发送到另一台主机。 看一个FC帧，有24个FC地址或FCID的Destination ID和Source ID字段。 我的问题是这些DestID和SourceID由主机HBA或FC交换机填充？ 我以为主机只知道它是HBA自己的WWNN和WWPN？ 其次我没有看到WWNN或WWPN进入光纤通道帧的任何地方。 除非它们只用于FLOGI和PLOGI过程来获得dynamic的FCID。 谢谢你的帮助。 欣赏它。 PS我正在使用Cisco MDS，并在我们的主机fcinfo收集信息，我看不到一种方法来获得在每个主机上使用fcinfo FCID？ 这就是为什么如果主机维护一个目标FCID列表，我很困惑。 另外，对于直接连接的主机，没有交换机参与，做主机FLOGI到彼此？
我的团队在大量存储市场。 我们传统上使用大型的FC连接的SAN，但是它们是昂贵的，并且提供比我们所需要的更多的性能。 我们希望高度可用的共享存储，如果它像本地桌面级驱动器一样执行，那没问题。 有没有共享磁盘解决scheme可以让我们更慢，但更大的磁盘？ 我们喜欢NexSan SataBeast，但是他们并没有一个完全的全球化的存在，这使得支持尴尬（我们是一家全球性的公司）。 有没有这种types的存储，你会推荐？ 我们更愿意使用FC连接存储，但我们愿意提供build议。 谢谢， Wout的。 编辑 ：要回答澄清的要求，我们想 全球可用的硬件支持 几十个结核病的成长能力 高度可用性：能够通过常见故障提供服务，因此： 可热插拔的驱动器 多pathIO 主动/主动控制器 像这样的东西，成本/收益比较低 只有NFS可能是一个选项，取决于HA的性能和性能 价格：无论花费多less，但尽可能less 基本上我想知道什么价格性能可用性的3Dgraphics看起来像目前。 如果存在尖锐的指数曲线，我会对这些肘部的系统感兴趣。 如下所述，这可以通过服务于iSCSI和主机级软件RAID6的PC级硬件场来完成。 这certificate无论EMC高端存储arrays成本如何，这可能太多了。
由于我们需要高可用性/共享存储，因此我正在采购我们公司的第一个SAN。 我注意到光纤通道交换机是非常昂贵的，为了冗余，我们需要其中的2个，在低端花费大约12000美元。 我们所看到的SAN（HP MSA 2040）带有8个光纤通道端口，我们只需要6个（每个ESXi服务器* 3个）。 所以我的问题是： 我们可以直接将SAN连接到服务器HBA并跳过交换机吗？ 我们是否仍然能够使用来自所有服务器的直接连接使用vMotion和High Availability？
我们正在为我们的光纤通道架构获得一对新的8Gb交换机。 这是一件好事，因为我们的主要数据中心的端口已经用完了，而且至less可以让我们在两个数据中心之间运行至less一个8Gb ISL。 我们的两个数据中心距离光纤运行约3.2公里。 几年来，我们已经获得了稳定的4Gb服务，并且我也抱有很高的期望，能够支持8Gb。 我目前正在弄清楚如何重新configuration我们的结构来接受这些新的交换机。 由于几年前的成本决定，我们没有运行完全独立的双环路结构。 完全冗余的成本被认为比交换机故障的不太可能的停机时间更昂贵。 那个决定是在我的时代之前做出的，从那以后事情没有多大改善。 面对交换机故障（或FabricOS升级），我想借此机会使我们的结构更具弹性。 以下是我正在考虑的布局图。 蓝色的项目是新的，红色的项目是现有的链接，将（重新）移动。 FibreChannel digram http://sysadmin1138.net/images/fabric-option.png 红色箭头线是当前的ISL交换机链路，两个ISL来自同一个交换机。 EVA6100目前连接到两个具有ISL的16/4交换机。 新的交换机将允许我们在远程DC中有两个交换机，其中一个远程ISL正在移动到新交换机。 这样做的好处是，每台交换机与另一台交换机的距离不超过2跳，两个EVA-复制关系的EVA4400之间相距1跳。 图表中的EVA6100是一个较旧的设备，最终会被replace，可能还有另外一台EVA4400。 图表的下半部分是我们大部分服务器的地方，我对于确切的位置有一些担忧。 有什么需要去那里： 10台VMWare ESX4.1主机 访问EVA6100上的资源 一个故障转移群集（文件服务器群集）中的4台Windows Server 2008服务器 访问EVA6100和远程EVA4400上的资源 2个Windows Server 2008服务器位于第二个故障切换群集（Blackboard内容） 访问EVA6100上的资源 2个MS-SQL数据库服务器 访问EVA6100上的资源，夜间DB导出到EVA4400 1个带有2个LTO4磁带机的LTO4磁带库。 每个驱动器都有自己的光纤端口。 备份服务器（不在此列表中）后台处理 目前，ESX集群可以容忍多达3个，也许4个主机closures，然后再开始closures虚拟机。 令人高兴的是，一切都有MPIO打开。 目前的4Gb ISL链路还没有接近饱和，我注意到了。 这可能会改变两个EVA4400的复制，但至less有一个ISL将是8Gb。 看看我从EVA4400-AI中获得的性能，我很确定，即使有复制stream量，我们也很难跨越4Gb线路。 4节点文件服务集群在SAN1SW4上可以有两个节点，在SAN1SW1上可以有两个节点，因为这会使两个存储arrays都跳一跳。 10个ESX节点我有点头疼。 在SAN1SW4上有三个，在SAN1SW2上有三个，在SAN1SW1上有四个，是一种select，我很乐意听到关于布局的其他意见。 其中大部分都具有双端口FC卡，所以我可以双重运行几个节点。 不是所有的 ，但足以让一个单一的交换机失败，而不是所有的一切。 两个MS-SQL盒子需要在SAN1SW3和SAN1SW2上，因为它们需要靠近主存储器，而db-export性能不那么重要。 LTO4驱动器目前位于SW2上，距离其主拖缆2跳，所以我已经知道这是如何工作的。 那些可以留在SW2和SW3。 我不希望将图表的下半部分作为完全连接的拓扑，因为这会将我们的可用端口数从66减less到62，而SAN1SW1将是25％的ISL。 但如果强烈build议我可以走这条路。 […]
我做存储，所以我做了很多纤维。 我也不幸有一个单线的配线架，所以当别人为我打补丁的时候，我所持有的两条线中哪一条最终会成为tx（发送），哪个是rx（接收）。 我们有一个颜色代码：黄色的应该是“热”。 意外的是，只有不到一半的时间。 我知道我数据中心的绝大多数有源电缆正在发送可见的无害光。 这就是为什么我看到很多人在看着这条或那条线，知道它是安全的。 问题是我也有很less的非常危险的激光，我不会推荐拍到别人的手里，更不用说他们的眼睛了。 其中一个在可见波长之外，足够强大，可以被读取80KM。 一个测光表会告诉你一根线是否点亮，但我们只有一个，而且通常是被其他人使用。 照在纸上或手上是另一种技术，但我很难看到它。 我看到有些人随身携带的小卡片，但是我没有卡片，也不想随身携带，只需要一周一次。 在不需要特殊设备的情况下，判断电缆是否亮起的最佳方法是什么？
FC交换机如何工作，我应该如何configuration我的？
我需要一双新的眼睛。 我们正在使用一根15km的光纤线路，将光纤通道和10GbE多路复用（无源光纤CWDM）。 对于FC，我们有长达40公里的长距离激光（ Skylane SFCxx0404F0D ）。 多路复用器受限于可以做到最大的SFP。 4Gb光纤通道。 FC交换机是Brocade 5000系列。 FC的波长分别为1550,1570,1590和1610nm，10GbE的波长分别为1530nm。 问题是4GbFC布料几乎不干净。 有时候，即使有很多的交通，他们也有一段时间。 然后他们可能突然开始产生错误（RX CRC，RX编码，RX disparity，…），即使只有边际stream量。 我附上了一些错误和stream量图。 当1Gb / sstream量时，错误目前大约是每5分钟50-100个错误。 光学 以下是汇总的一个端口的功率输出（在不同的交换机上使用sfpshow收集） SITE-A单位= uW（微瓦）SITE-B ********************************************** FAB1 SW1 TX 1234.3 RX 49.1 SW3 1550nm（ko） RX 95.2 TX 1175.6 FAB2 SW2 TX 1422.0 RX 104.6 SW4 1610nm（ok） RX 54.3 TX 1468.4 我觉得在这一点上好奇的是权力的不对称。 当SW2以104uW接收到的1422uW的SW4接收时，SW2仅以54uW接收具有相似原始功率的SW4信号。 反之亦然SW1-3。 无论如何，SFP的RX灵敏度低至-18dBm（约20uW），所以在任何情况下都应该没问题。 一些SFP被制造商诊断为故障（上面显示的1550nm的“ko”）。 1610nm的显然是好的，他们已经使用stream量发生器进行了testing。 […]