有没有人有经验堵塞GlusterFS和Openfiler在一起或类似的东西 ? 这是动机: 多个服务器上的磁盘空间使用GlusterFS重新组合 使用LDAP / AD集中访问和使用Openfiler作为GlusterFS客户端的配额pipe理 SMB / CIFS服务器,便于在Mac和Windows上共享多个用户 我知道我可以在Openfiler(rPath Linux)上成功安装Gluster,但是Openfiler似乎对可用作共享驱动器的内容非常挑剔。 将Gluster卷安装到现有共享中似乎不允许使用已安装文件夹的可用空间进行配额。 如果这是不可能的,是否有其他select来提供相同的function?
我有几个file upload网站,文件从几百千字节到几千兆字节。 目前我有几个服务器上的分布式复制Gluster卷中的所有文件。 我对Gluster最大的问题是速度。 例如,我有一个大约80,000张图像的文件夹,平均每张500KB,花了我几个小时才能更换图像的所有者。 目前一切都相当不错,但是我担心有更多的文件和时间需要与他们合作。 我有什么替代方法? 我在做什么错误的Gluster? 这是我的glusterconfiguration: performance.cache-size: 1GB performance.cache-refresh-timeout: 60 performance.cache-max-file-size: 100KB cluster.choose-local: true performance.readdir-ahead: on performance.io-thread-count: 16 client.event-threads: 3 server.event-threads: 3
我使用分布式用户空间文件系统(GlusterFS),我希望确保GlusterFS进程始终具有所需的计算能力。 我的网格的每个执行节点都有2个CPU,每个CPU有4个内核,每个内核有2个线程(Linux可以看到16个“处理器”)。 我的目标是确保GlusterFS进程具有足够的处理能力,可靠,响应迅速。 (这里没有市场营销,只是系统pipe理员的梦想;-) 我考虑两点: GlusterFS进程 数据访问的I / O(在本地磁盘或远程磁盘上) 我想过在特定的“处理器”上绑定GlusterFS实例。 我想确保: 没有网格工作会影响内核和GlusterFS实例 研究人员的工作不会受到系统进程的影响(我想保留一个核心池来执行工作,并确保没有系统进程将使用这些CPU) 但是I / O呢? 当我们处理大量的数据(几兆字节)时,我们会有很多的干扰。 我如何在我的处理器上分配这些操作? 什么是“最佳实践”? 感谢您的意见!
一直在读(这里)和其他有关GLUSTERFS。 任何人都有第一手的经验与DFSR与GLUSTERFS或两者之间切换? DFSR = Microsoft的Distrubted文件系统复制或DFS文件系统复制技术之上。 该应用程序不是基于Web的。 这是传统的文件服务器angular色; 客户端都是Windows7 64bit,目前正在访问一个DOMAINangular色的Linux + Samba3 + OpenLDAP系统,因此机器和工作站被authentication… 我有两个新的2970的规格:内存:8GIG,也许16GIG,6个磁盘(2个在RAID1的操作系统,3个在RAID5的文件和1个热备份的任何团队)。 文件主要是办公室types的文件(Word,Excel,JPG,PDF)。 目前大约有30个客户端连接到当前的Linux文件服务器。 大约一百万个文件左右; 他们正试图为他们的一部分业务进行无纸化,并将所有公司的印刷品(他们从印刷品中提取)转移到在线检索types设置(如果这很重要,那么他们有很多小文件)。 在某种程度上,我们注意到SMBD进程正在消耗更高的内存,因为普通共享下的文件和目录数量较多。 我们正在做的其他任务之一是将文档文件分散到共享下的更多树状布局,以减less内存负载。 目前我们在文件服务器和备用服务器之间进行rsync,但是故障切换是手动的。 目标是尽可能获得更自动的故障切换/故障恢复scheme,而不会比我们预算购买的硬件花费更多的费用。 两台服务器将在同一交换机上的同一个物理IT机房中。 交换机是一个GigE思科。 我有兴趣听到有关使用GLUSTERFS或使用类似设置或DFSR进行testing的任何真实世界反馈。 如果你对这两种技术有什么反馈意见,以及促使交换机发生什么的话,那将是令人震惊的。 ============================= 作为后续: 我们结束了微软解决scheme与DFS复制全网configuration,我只能说,它工作得很好。 我怀疑; 我一直恨微软,但是这个工作非常好。 这件事情是由一个非微软的人写的,他花了相当多的时间研究一个类似的设置,并发现与Win2K8 R2,特别是,主要的改进是为了加快DFSR,并发布了一些registry黑客最新的DFSR性能啾啾的优势。 开箱即用,一切工作都很顺利。 我自己陷入的唯一缺陷是将所有旧数据复制到新的DFSR共享中,而无需先将其分级。 我贪心。 有几个从100 MB到几GB的拷贝。 我做了一个15GB的副本没有问题,但是接近300GB的副本只是被淘汰,最终超时,服务器在networking上变得没有反应。 我不得不杀死副本,只是复制到一个非复制的目录,然后“复制”不“移动”完成的结果到复制的共享; 删除完成后的数据。 在预算不允许的情况下,我可以看看GLUSTERFS,但如果有人想要任何细节,请打我。
我们正在做好(我们想想)通过Icinga监控我们的GlusterFS 服务器 。 我们也想监视客户 。 除了确保, /etc/fstab每个glusterfs -entry都有一个glusterfs进程运行,还有什么可以做的? 如果可能的话,我们希望避免在安装的卷上进行表面读/写操作 – 可以在不增加额外负载的情况下监控安装架的运行状况,但是小到可以吗? 任何其他的想法? 谢谢!
我有以下gluster卷,详情如下 Volume Name: geo-vol Type: Distribute Status: Started Number of Bricks: 1 Transport-type: tcp Bricks: Brick1: bst:/backup Options Reconfigured: geo-replication.indexing: on 我将这个卷安装在与nfs mount相同的机器上,并且brick1也位于同一台机器上,并使用地理复制将其镜像到备份服务器。 正如你可以从我的设置看到我使用glusterfs几乎实时备份。 我只需要可靠的方式来备份我的数据到辅助服务器,早些时候我使用的是rsync,但随着数字文件的增加,它开始占用大量的内存,所以我们切换到gluster,当我们尝试实时复制时,它阻碍了服务器的性能,所以最后我们用ge-replication去了,我们现在面临的一个问题是gluster的cpu消耗是高的,我问这个问题到gluster邮件列表但是没有更新。
我有一个控制器服务器和两个24个SAS文件服务器arrays。 每个文件服务器arrays都设置为一个ZFS池,每个RAIDZ2 vdevs有6个驱动器。 最终,我希望能够将控制器服务器用作两个文件服务器的单个装入点。 主要思想是我的最终用户只需访问一个控制器服务器和一个安装点,以便在两台服务器的组合存储容量上访问/备份他们的数据。 我正在考虑使用glusterfs,但是迄今为止我所能find的信息似乎是用于生成冗余存储池的。 在这个应用程序中,gluster正被用作分布式镜像RAID1,这并不适合我的需要,因为它会产生另一个不需要的冗余级别。 您如何build议我从两台独立的计算机上托pipe的ZFS池创build非冗余分布式文件系统? 有没有办法做到这一点与gluster,或者如果有不同的NFS更适合完成这个? 我也考虑过桑巴舞,但是我不确定它是否足够安全。 我真的很喜欢只有在控制器上公开托pipessh的严格的2FAauthentication的前景。
您能否帮我理解GlusterFS中的'direct-io-mode'。 在禁用直接I / O模式的情况下,读取结果会越来越好 – 这是否意味着在禁用模式下它正在从caching写入/读取 – 是系统caching还是GlusterFScaching? 什么是推荐的方法? 我正在使用分布式复制卷的4个节点进行Web服务: Write: dd if=/dev/zero of=tempfile bs=1M count=1024 conv=fdatasync,notrunc echo 3 > /proc/sys/vm/drop_caches Read: dd if=tempfile of=/dev/null bs=1M count=1024 Read-Read: dd if=tempfile of=/dev/null bs=1M count=1024 Write Read Re-Read 67.5 MB/s 94.9 MB/s 94.6 MB/s direct-io-mode=enabled 65.8 MB/s 230 MB/s 226 MB/s direct-io-mode=disabled
使用Ubuntu 12.04或14.04,如何才能防止启动一个新的服务,直到成功安装几个networking卷(GlusterFS)?
我在Google Cloud Compute上设置了一些networking服务器,我需要在所有服务器之间同步一个目录,以保持网站的同步。 我还想在需要时使用自动调节function来调配新的服务器。 我意识到GlusterFS需要知道所有的实例,但我的想法是设置从每个服务器的监视和新的/删除的服务器事件自动更新configuration。 (虽然没有尝试过) 有没有人有这些系统的经验? 如果是这样,那么如何维护,以及涉及哪些成本呢,因为我不确定GlusterFS是否会花费额外的成本,而Google云存储FS的存储成本加上它运行的api命令。