king61_87f3c2

已更新

13 years ago

已解决!

前往解决方案

0

4505

August 18th, 2013 02:00

VNX运行lun的tresspass问题

第一次发帖提问:

关于vnx中lun的tresspass问题:

在我的理解中,lun从owner sp tresspass到 other sp,有以下几种可能:

1 owner sp出现故障,导致链路故障,vnx自动切换lun

2 由于维护等原因,管理员手动切换

3 类似于powerpath多路径管理软件由于负载均衡的原因进行切换

但是最近又有中说法,当owner sp的iops >64000时候,也会激发lun的tresspass行为

还望各位大师指教。

  • zhouzengchao

    6 Operator

    •

    1403 帖子

    3410

    0

    已发布 August 22nd, 2013 19:00

    这是因为initiator failover mode 设置成了4,也就是ALUA。启用了ALUA后,在发生故障时,SP会尽可能的不去trespass LUN,但这时I/O走的是non-optimal path,相对optimal path的延迟会高一点。如果i/o > 阈值,ALUA会认为optimal path一时半会好不了,因此就会去trespass。

    关于ALUA,详细附件PDF。

    1 个附件

  • Roger_Wu

    6 Operator

    •

    4025 帖子

    3410

    1

    已发布 August 22nd, 2013 19:00

    参考我之前的回复:https://community.emc.com/message/689298#689298

    如果path down掉了,I/O不会一直走non-optimal Path,根据白皮书EMC CLARiiON Asymmetric Active/Active Feature的

    说明,“When it detects that the non-optimal path has received 128,000 more

    I/Os than the optimal path, it initiates a

    trespass.”,所以到一定时间还是会trespass。ALUA可以改善FE、LCC线路短时间内不稳定造成的大量LUN

    trespass问题。


  • cxemc

    2 Intern

    •

    362 帖子

    3410

    1

    已发布 August 22nd, 2013 20:00

    1、sp坏了

    2、重启

    3、链路断了

    4、做mirror

    这几点可能引起

  • 3410

    0

    已发布 August 22nd, 2013 21:00

    多谢指导!

    我把客户现场的环境向您描述一下:

    一台vnx5100,两台host。

    由于预算原因,客户没有配置FC-SW,每台host也只有一块HBA,SPA和SPB各通过DAS链接一台host

    而且存储空间只划分了一个lun,owner sp为spa

    两台host都安装了Ctrix软件(通过类似于存储池的概念)。使得两台host都可以使用这个lun

    由于所有的io都是通过spa走的,考虑到会出现i/o > 阈值的情况,而导致不停tresspass,甚至是存储Panic,而造成DL。

    发现客户这种使用方式的隐患后,想建议客户整改

    但是我想如果只是单纯增加FC-SW的话,还是不能避免tresspass的情况

    因为毕竟还都是通过spa一边走io。还是可能会出现panic情况

    关于客户这种少见的环境,应该如何建议其调整方案呢?

    想听听您的建议。多谢

  • liulei_it

    2 Intern

    •

    3209 帖子

    3410

    1

    已发布 August 22nd, 2013 22:00

    兄弟,您的每个主机也只有一个HBA呀,您最好检查一下在架构中是否真正做到了物理上的双链路。您的两个主机一个存储没有SAN switch,存储上应该有4个port和每台主机的2个Port一共4个port对上。否则连tresspass的可能性都没有。

  • 3410

    0

    已发布 August 22nd, 2013 23:00

    巡检时候发现,已经是这个样子

    我发现有问题,想帮忙重新设计去整改

    但是只有一个lun,而且是单HBA结构

    纠结于如何设计方案,性价比最高。

  • zhouzengchao

    6 Operator

    •

    1403 帖子

    3410

    0

    已发布 August 23rd, 2013 02:00

    其实你没有必要分别连两个SP,两台主机都连一个SP就可以了。因为LUN own在SPA,所以所有I/O都是由SPA处理的,即便是连接在SPB上的主机,I/O同样会走lower upper re-director -> CMI channel -> SPA,再原路返回。所以你分别连两台主机并不能达到负载平衡的作用。

  • big_lei

    2 Intern

    •

    450 帖子

    3410

    1

    已发布 August 23rd, 2013 07:00

    发生trespass的几种可能性:

    "Unit shutdown for trespass"是说LUN的所有者进行了切换,比如原先LUN是own在SPA上的,trespass之后就会own在SPB。谁是LUN的owner,谁就要对该LUN的I/O进行处理,I/O也就要走能够到达那个SP (A or B)的路径。

    CLARIION的SP一般来说是不会发起LUN Trespass的(特殊情况例外),SP仅仅是收到了来自主机端要求Trespass的SCSI命令(一般来说是多路径软件),才会去Trespass LUN,换句话说,主机才是发起者,CLARIION是被动的。

          Lun Tresspass很多时候是因为链路断开导致主机要求从另一条链路访问LUN所以才发起了Trespass。当然clariion 上initiator的failover mode, arraycompath, initiator type也要根据不同的多路径软件以及主机操作系统做不同的配置,错误的配置也可能导致Treapsss风暴之类的问题。

    注:只有当lun属性启用了auto-assign或者由mirrorView, snapView等layerred driver发起的内部trespass才是非主机造成的。

    另外查看具体哪个lun发生了trespass可以用一下方法:

    (1)登录Unisphere -> Storage -LUNs,把Status过滤器设置为Trespassed LUNs,就会显示所有trespassed LUN。

    (2)naviseccli -h getlun -default -owner ,在结果中,如果Default Onwer 与Current Ownwer 不一致,那么该LUN 发生了trespass 。

    (3)登录Unisphere,在下面也能看见:

    Monitoring->Reports->Trespassed LUNs Status