zfs正常读取暂停

我们有一个运行在openindiana上的zfs文件系统，几乎是纯粹的只读工作负载。 最近我们发现io被阻塞或者每隔1分钟停顿2-3秒左右。 有谁知道为什么发生这种情况，以及如何阻止它发生？

pool: data state: ONLINE status: The pool is formatted using a legacy on-disk format. The pool can still be used, but some features are unavailable. action: Upgrade the pool using 'zpool upgrade'. Once this is done, the pool will no longer be accessible on software that does not support feature flags. scan: none requested config: NAME STATE READ WRITE CKSUM data01 ONLINE 0 0 0 raidz1-0 ONLINE 0 0 0 c6t5E83A97A6BAB722Fd0 ONLINE 0 0 0 c6t5E83A97BBE7FE8F1d0 ONLINE 0 0 0 c6t5E83A97CB2D1609Fd0 ONLINE 0 0 0 c6t5E83A97E0D2BC6ACd0 ONLINE 0 0 0 c6t5E83A97E1E2A6F66d0 ONLINE 0 0 0 c6t5E83A97E4C627FC0d0 ONLINE 0 0 0 c6t5E83A97E44EB7FC0d0 ONLINE 0 0 0 c6t5E83A97E124F8168d0 ONLINE 0 0 0 c6t5E83A97E86762E4Dd0 ONLINE 0 0 0 c6t5E83A97E25716311d0 ONLINE 0 0 0 c6t5E83A97EBEEB8B60d0 ONLINE 0 0 0 c6t5E83A97FCF5551F5d0 ONLINE 0 0 0 errors: No known data errors 

按照@jlliagre的要求，这里是在好的和不好的时候调用hotkernel的结果。

美好时光

• zfs`vdev_is_dead 1 0.0％
• ip`conn_ip_output 1 0.0％
• sd`sdintr 1 0.0％
• mpt_sas`mptsas_start_cmd0 1 0.0％
• genunix`new_mstate 1 0.0％
• genunix`segvn_faulta 1 0.0％
• unix`swtch 1 0.0％
• unix`tsc_scalehrtime 1 0.0％
• zfs`ddt_stat_add 1 0.0％
• unix`lwp_segregs_save 1 0.0％
• rootnex`rootnex_get_sgl 1 0.0％
• genunix`ldi_strategy 1 0.0％
• mpt_sas`mptsas_scsi_init_pkt 1 0.0％
• genunix`ddi_fm_dma_err_get 1 0.0％
• zfs`zio_create 1 0.0％
• zfs`zio_destroy 1 0.0％
• unix`strcmp 1 0.0％
• unix`cpu_acpi_idle 1 0.0％
• ip`ip_xmit_attach_llhdr 1 0.0％
• genunix`mdi_pi_get_vhci_private 1 0.0％
• genunix`lbolt_event_driven 1 0.0％
• unix`disp 1 0.0％
• genunix`cpu_update_pct 1 0.0％
• unix`tsc_gethrtime 1 0.0％
• ip`tcp_build_hdrs 1 0.0％
• genunix`dnlc_lookup 1 0.0％
• unix`page_create_va 1 0.0％
• genunix`kmem_zalloc 1 0.0％
• unix`mmapobj_map_elf 1 0.0％
• bnx`bnx_intr_1lvl 1 0.0％
• genunix`btopr 1 0.0％
• genunix`fsflush 1 0.0％
• genunix`gexec 1 0.0％
• unix`mmu_tlbflush_entry 1 0.0％
• unix`hment_alloc 1 0.0％
• specfs`spec_lockcsp 1 0.0％
• zfs`vdev_stat_update 1 0.0％
• genunix`stk_getptr 1 0.0％
• unix“resume 1 0.0％
• unix`do_splx 1 0.0％
• unix`page_clr_all_props 1 0.0％
• bnx`bnx_xmit_ring_xmit_mblk 1 0.0％
• genunix`list_create 1 0.0％
• scsi`scsi_uscsi_handle_cmd 1 0.0％
• unix`page_lookup_nowait 1 0.0％
• genunix`syscall_mstate 1 0.0％
• genunix`kmem_free 1 0.0％
• genunix`as_map_locked 1 0.0％
• unix`cpu_idle_adaptive 1 0.0％
• unix`page_lookup_create 1 0.0％
• sd`sd_start_cmds 1 0.0％
• unix`0xfffffffffb85 1 0.0％
• unix`atomic_cas_64 1 0.0％
• genunix`restorectx 1 0.0％
• genunix`vmem_is_populator 1 0.0％
• unix`disp_anywork 1 0.0％
• unix`prefetch_page_r 1 0.0％
• sd`xbuf_iostart 1 0.0％
• zfs`zfs_read 1 0.0％
• unix`hwblkclr 1 0.0％
• specfs`sfind 1 0.0％
• genunix`swapfs_getvp 1 0.0％
• zfs`vdev_cache_allocate 1 0.0％
• zfs`buf_hash_find 1 0.0％
• genunix`taskq_thread 2 0.0％
• unix`tsc_read 2 0.0％
• unix`tsc_gethrtimeunscaled 2 0.0％
• genunix`fop_getpage 2 0.0％
• unix`inflate_table 2 0.0％
• unix`ddi_get32 2 0.0％
• unix`mutex_exit 2 0.0％
• unix`idle 3 0.0％
• zfs`lzjb_compress 3 0.0％
• unix`mutex_enter 6 0.1％
• unix`page_nextn 9 0.1％
• genunix`fsflush_do_pages 9 0.1％
• unix`disp_getwork 12 0.2％
• unix`acpi_cpu_cstate 441 5.7％
• unix`i86_mwait 7118 92.7％

艰难时期

• 内存写入caching和ZIL数据是否都通过TXG提交进行提交？
• 是否有可能禁用zfs自我修复而不禁用校验和？
• 几个池的zfs快照-rprimefaces？
• 卸载的ZFS文件系统
• 为什么zfs文件系统在发送到不同的池后大小不同？

• genunix`cpu_update_pct 1 0.0％
• unix`splr 1 0.0％
• bnx`bnx_timer 1 0.0％
• unix`av_check_softint_pending 1 0.0％
• genunix`devid_str_decode_id 1 0.0％
• pcplusmp`apic_send_ipi 1 0.0％
• genunix`callout_downheap 1 0.0％
• unix`prefetch_page_r 1 0.0％
• dtrace`dtrace_state_clean 1 0.0％
• genunix`fsflush 1 0.0％
• unix`link_ptp 1 0.0％
• ip`ip_input_cksum_v4 1 0.0％
• ip`tcp_timer_callback 1 0.0％
• unix`page_pptonum 1 0.0％
• unix`do_splx 1 0.0％
• unix`page_nextn 5 0.1％
• genunix`fsflush_do_pages 6 0.1％
• unix`acpi_cpu_cstate 782 17.7％
• unix`i86_mwait

 cpupm disable 

 pmconfig