有关归档解决scheme的一般build议。 〜15tb,并不断增长。

我需要一个更好的存储和存档系统为我的小企业的文件。 具体来说这些文件是完成video项目。 除了时间和成本限制之外,我不相信任何我曾经思考过的解决scheme。 因此,我正在解决问题和我的想法。 我将不胜感激任何意见。

预算:我相信花费的是什么。 这就是说,我们是一个小企业。 我希望能够在1-3k左右时间内跳出<5k以上的距离。 这可能是一个梦想。 请告诉我。

问题:

  • 原始video文件在文件大小上是巨大的。 到目前为止,我们已经积累了大概10 + TB,并且正在快速增长。
  • video编辑需要对文件进行快速的读/写访问,所以中央或云端文件服务器速度不够快。 因此,我们可能需要一个老项目的实现解决scheme,目前的项目将不得不留在本地。
  • 我们想要某种冗余和异地解决scheme。

我们目前的工作:

  • 我们使用大型,高质量的外置硬盘。
  • 我们总是成对购买并手动复制内容。 换句话说,我们的工作是一个,并将文件复制到另一个作为备份/回退。
  • 这些HD与Firewire800或USB3的速度足够快,可以直接使用。
  • 一旦填满,我们把这一对放在一边。

目前的解决scheme有什么问题:

  • 虽然两个驱动器之间的数据是重复的,但是这些驱动器不是“备份”的或者是异地存储的。
  • 跨越这些许多外部HDs的组织是困难的。 什么项目在什么驱动器上? 等等
  • 最终我们会有一个荒谬的硬盘驱动器。
  • 复制不是RAID。

选项:

本地服务器

  • 购买一个机架式服务器和一个机架安装的硬盘arraysshell,如Norco(SAS)(20个托架)。
  • 所有的video文件将存储在这台服务器上。 我们可以安装和支付云服务来备份这台电脑/服务器。 CrashPlan在Linux上工作,对数据量没有限制。 hardrives将是连接到服务器的物理驱动器,所以我们避开了像CrashPlan那样的“没有NAS”规则的公司。 这不是一台个人电脑,所以同步可以24/7/365运行。 这将解决异地问题。
  • 我们可以使用脚本将这些文件同步到Amazon Glacier帐户,而不是使用像CrashPlan这样的在线备份服务。
  • video窥视当前项目的外部硬盘驱动器的策略,但必须在完成时将该项目放在这台新计算机上。 换句话说,继续为当前项目使用外部硬盘驱动器,并在此服务器上存储归档项目。

基于云的备份服务(CrashPlan.com,BackBlaze.com,Carbonite.com)

  • 通常只能让您备份物理连接到计算机的外部硬盘。 (没有NAS或networking驱动器)。
  • 通常他们希望备份的外部驱动器保持连接到您的计算机和所有数据保留在驱动器上。 如果几个月没有连接外部硬盘,备份会发生什么情况? 如果您通过删除旧项目来清理空间,则它们也将从在线服务中删除。
  • 要求我们的用户离开连接到他们计算机的外部硬盘驱动器,直到所有数据都在云端。 一个大项目可能需要几周的时间。
  • 由于互联网传输速度的原因,恢复项目将会非常缓慢。
  • 这些云备份帐户通常特定于一个用户/一台计算机。 所以如果硬盘是由一个用户备份的话。 然后第二个用户在这个项目上工作,这是什么意思?

一个大NAS

  • NAS是“networking区域存储”。 你坚持尽可能多的硬盘驱动器,因为它会举行。 它会袭击他们。 您可以通过networking连接或者USB3 / Firewire来访问。
  • 大多数都有一个操作系统烘焙到它。 所以你不能运行其他软件,如基于云的备份服务。 你也不能做任何定制或运行你自己的软件。 你得到你买的东西。
  • 大的NAS非常昂贵,并不是那么大。 你不会发现有超过4个海湾。 目前一个大的HD是3TB。 所以,可能有四分之一左右的存储空间。 对未来不是超级舒适。

其他想法是:

  • 磁带备份。
  • 只需将较旧的项目直接归档到Amazon Glacier,跳过构build本地服务器来存储它们。

感谢您的任何意见! 杰德

胶带。 这样简单。 昆腾有一个SuperSTore系统,可以处理更多的方式,我已经看到他们的价格低于5000点 – 新。 好的是,你可以把磁带拉出来存储,所以缩放这将是相当经济的,磁带最后。

首先,我build议避开冰川。 这听起来不错,直到你真正恢复大量数据的成本。 这是一个非官方的计算器,你可以用它来计算冰川的存储和检索成本,并为自己判断 。 从Glacier恢复兆兆字节的数据是一个相当不吸引人的前景。

其次,我build议,为了简单的备份目的,你可以用一台带有大量驱动器的单个NAS服务器。 这听起来像你只看着家庭和小型办公室的NAS选项,你应该考虑一个适当的NAS产品。 喜欢戴尔,我会指出戴尔的PowerVault NAS服务器 ,但惠普,IBM,超微,和几乎每个人都有类似的产品。 我在家里有一个较老的戴尔PowerVault NX,可以作为我的媒体库,并且有12个2TB的近线SAS磁盘。 现在也有4TB的近线SAS驱动器,所以你可以随时用这些东西填满适当的NAS服务器。 (或者购买一对NAS服务器。)

您可以轻松地在您的本地局域网上使用其中一种,安装您select的备份软件( 如Bacula,如果您喜欢免费的 ,或者如果您希望供应商支持,可以使用十几种商业产品中的任何一种),并使用大容量RAID备份目标。 然后,您可以使用云备份服务来备份该NAS服务器,并享受本地和远程备份的好处。 再次,这就是我在家做的事。 正确的NAS服务器,将数TB的数据备份到云服务。

当然,您也可以使用磁带…购买LTO磁带机或磁带库 – 个人而言,我将竭尽全力避免使用磁带或光盘介质,但它们是合法的select,并且可能比磁盘便宜到磁盘解决scheme。

最后,我build议你需要考虑云备份服务的主要缺点,这是你的互联网pipe道的大小。 通过互联网连接上传数千兆字节的数据可能需要几周或几个月的时间,并且/或者向您的ISP收取额外的费用。 因此,尽pipe它们是备份数据,甚至是企业数据的可行select,但这是大多数人在达到数据之前不会考虑的限制。

我认为这取决于你的预算。 如果你只能花费$ 6k,你需要build立你自己的NAS。 我会看看nas4free和一个服务器花费你。 如果你可以花2万美元,你可能可以在Linux或者其他任何地方用一堆磁盘和一个不错的RAID卡或者软件RAID来填充服务器。

对于大约40,000美元,您可以将具有10Gbit iSCSI的高端1U(IBM x3550 M4,2端口Emulex 10GBit nic,4千兆网卡,128GB内存,2个本地10k SAS磁盘)连接到Infortrend SAN盒,并配有24个4TB SAS磁盘切片和骰子,但是你想要的。 RAID6是一个合理的configuration。

磁带也是一个好主意,但我不知道它真的有多便宜。 这取决于你得到了多大的图书馆。 如果一个48磁带库是好的,你可以用一个1U和外部SAS卡来做到这一点,可能需要3万美元和2个LTO6驱动器……但是,那么你需要软件许可证来pipe理磁带备份等等。 我只使用了NetBackup,在这里可能不太适合你。 不要忘记,你可能想用软件来驱动磁带库。 但是,一旦你离开图书馆,不要忘记找磁带并加载它,再加上访问的中转区…