Articles of 云存储

最快可靠的全球传输100GB文件的方法?

我们最新的工作项目包括从我们位于达拉斯的办公室向我们在澳大利亚的客户发送100GB +文件。 我被要求把最快,最可靠的方式传输这些文件。 通常这不会是汗,但是当他们说100GB时,我决定需要征求意见。 我也处于紧张状态,所以我有24个小时的时间来组build一个专业的解决scheme(没有重大的软件开发)。 它必须快速尖叫,并且在上传和下载方面必须能够容忍networking服务中断(上传恢复和下载恢复)。 它也需要在客户端下载方面尽可能地交钥匙。 一个GUI界面工具将是伟大的。 我的第一个想法是在第三方下载/上传pipe理器上使用Amazon S3帐户,但是我不确定Amazon S3的带宽限制有多快。 EC2更快? 此外,亚马逊网站倾向于迎合软件程序员 – 是否有任何可靠的预滚动应用程序,支持分段上传和下载?

如何重置Azure中的连接池(错误:达到最大池大小)?

我在我的Azure网站上得到了下面的错误,我正在争先恐后地修复它: Timeout expired. The timeout period elapsed prior to obtaining a connection from the pool. This may have occurred because all pooled connections were in use and max pool size was reached. Description: An unhandled exception occurred during the execution of the current web request. Please review the stack trace for more information about the […]

什么是存储一致性组?

任何人都可以向我解释在存储解决scheme中“一致性组”是什么? 我怎样才能在现实世界中使用它们? 看来每个供应商都有自己专有的存储function术语,但以下是我可以收集的内容: 一致性组是(我认为)一堆存储容量保证始终保持一致,也就是说,没有一个容量会比其他同类容器更进一步。 现在,我得不到,也找不到其他地方: 1 – 同一组的所有卷之间的一致性组是一致的还是仅在每个卷与其相应的镜像之间的一致性组? 2 – 如果我正在运行一致性组,这是否也意味着我正在另一个远程一致的组中运行该组的镜像? 3 – 如果存储后端突然closures,来自一致性组的卷将保持一致吗? 即使在断电等故障的情况下,是否在一致性组中也足以保证卷的始终一致? 4 – 调用某个一致性组所需要的最小function集是多less? 谢谢

Linux可以将我的rsyncjoinDropbox或其他免费的云存储服务吗?

我们托pipe一个小型社区,而不是为了营利网站和邮件列表,是否可以通过同步到Dropbox或类似的(免费)服务来维护备份? 编辑:对于上下文,我们主持共享的虚拟机,并不想安装任何东西,除非我们必须。 我目前正在看dropbox-uploader ,这只是一个bash脚本 谢谢

在Linux VMangular色中安装Azure blob容器

我以前问过关于这个主题的一个问题,但现在我更喜欢从头开始重写,因为那时我很困惑。 我目前在Azure中有一个Linux XS VMangular色。 我基本上想要使用虚拟机创build一个自我pipe理和演化的托pipe服务,而不是使用Azure的更昂贵的Webangular色。 我还想利用负载平衡(虚拟机angular色之间)和地理复制(存储angular色),确保客户的“networking文件”位于定义和可pipe理的位置。 我在这里描述了一种在Linux VM中“挂载”驱动器的方法,它涉及在虚拟机上安装VHD。 从我所了解到的情况来看,VHD可靠地存储在一个存储angular色中,并被使用它的虚拟机专门locking。 一旦虚拟机angular色有其驱动器,我可以格式化分区到我想要的任何大小。 我不要那个! 我希望每个托pipe站点都有自己的blob目录,然后将每个复制/负载平衡VMangular色挂载到像NFS那样的blob目录以读取HTML和脚本文件。 数据库显然是微软的礼貌:) 我的问题是 实际上是否可以将Blob存储mount到Linux FS的目录中? 在Windows Server 2008中可以吗?

桉树海象连接问题

我从Eucalyptus开始,有一些S3和EC2背景。 我有一个应用程序,我使用个人图书馆与S3接口,并从那里存储/检索文件。 现在我想让我的应用程序与Walrus兼容。 这是我的设置: Ubuntu 10.04服务器UEC: 只是把它安装在一个新的虚拟机上,select所有的组件,但是只有数控,因为我只需要Walrus 开机后,我确认海象在10.211.55.18:8773/services/Walrus运行 转到10.211.55.18:8443 Web门户并更改了pipe理员密码 从同一个地方我检索查询接口凭证(ID +秘密) 我能够通过Cyber​​duck和Cloudberry与Walrus交互,没有任何问题,我创build了一个桶'mybucket'和一个对象'myobject',但是不能用一个编程HTTP库做一个简单的请求,既不使用curl生成的授权。 如果我去浏览器并插入: http://10.211.55.18:8773/services/Walrus/mybucket/myfile : http://10.211.55.18:8773/services/Walrus/mybucket/myfile : http://10.211.55.18:8773/services/Walrus/mybucket/myfile我得到一个漂亮的XML消息与授权错误(如预期)。 但是当试图获得这个对象时,我已经完成了下面的签名过程(伪代码): digest = new_openssl_sha1_digest date = "Sat, 03 Mar 2012 18:13:54 GMT" (now UTC datetime) description = "GET\n\n\nSat, 03 Mar 2012 18:13:54 GMT\n/mybucket/myfile" signature = new_base_64_HMAC(digest, secret_key, description) headers = { Date: date, Authorization: "AWS <access_key_id>:<signature>" […]

“诺西邻居”和CFQ调度

我想了解如何使用CFQ影响“讨厌的邻居”问题。 我会问这个问题,使用CFQ的时候,是否还会有一个“好邻居”? 是不是CFQ应该确保所有进程(VM)获得公平的存储时间片? 如果是这样,当CFQ被使用时,一个VM I / O如何干扰另一个VM I / O? 环境是CentOS6.5 + OpenStack + KVM + Ceph

云托pipe与免费文件系统集成同步

我目前使用wuala进行远程存储/同步,虽然我不喜欢他们的graphics用户界面(以及他们对无头系统的支持不佳),但是他们有一个很棒的function,其中虚拟磁盘(windows)或挂载点(使用Linux上的CBFS)创build让我保存我的文件远程存储,但访问他们,就像他们本地可用。 我还没有find任何其他的主要提供者(DropBox,SpiderOak等)的任何自由的方式来做到这一点,但我想知道是否有人看到任何东西? 使用S3FS( http://code.google.com/p/s3fs/ )可以使用原始S3存储解决scheme,但缺less两个重要function:自动同步本地文件(因为有时候我需要本地镜像)等等重要的是,一个Windows版本(我似乎无法得到它使用Dokan编译)。 有没有人findWuala的替代scheme(使用FUSE,WebDAV或其他),同时支持Windows和Linux?

没有“本地”部分的AWS Storage Gateway?

AWS Storage Gateway的使用案例总是假设虚拟存储网关将安装在本地(即,本地客户),然后将同步到AWS。 我想知道把存储网关放在EC2上。 我的用例是这样的: 我有大量的客户数据必须通过文件系统访问(即不能简单地存储在S3中)。 很大比例的这些数据很less被访问。 我使用安装在EC2上的一些EBS卷来实现这一点,并将它们快照到S3。 但是,由于EBS驱动器只能连接到单个实例,因此存储成本很高,并且存在单点故障。 但是,这听起来像我可以在我的EC2服务器上安装虚拟存储网关,并使用新的网关cachingfunction在本地保留经常访问的数据(使用免费实例存储进行caching)。 另外,我已经读到,只要iSCSI驱动器使用支持群集的文件系统进行格式化, 就可以安装在多个服务器上 。 我的问题: 这对于Storage Gateway来说是否合理? Storage Gateway iSCSI驱动器能否真正从多个EC2实例中挂载,消除单点故障?

Azure中存储大约50tb的存储空间作为单个Windows文件共享

我已经search了,到目前为止我发现的最接近的事情是另一个SF问题: Azure存储限制 目标: 将大约50TB的存储空间移动到云端,将该存储作为标准的Windows文件共享,并随着其持续增长而相对容易地扩展。 问题: 看起来,单个VHD只能是1TB的大小,显然不好。 我不认为这里有人可以提供解决scheme吗? 感谢您的阅读, 泽维尔。