Articles of 亚马逊 EC2

最有效(时间,成本)的方式来刮去500万网页?

我有一个网页的清单,我需要刮,分析,然后将结果数据存储在数据库中。 总数约为500万。 我目前最好的方法是假设部署〜100个EC2实例,为每个实例提供50,000个页面,然后让它们运行,然后一旦这个过程完成,就将数据库合并在一起。 假设是需要花费大约一天的时间来运行(600ms来加载,parsing和保存每个页面)。 有没有人有限的时间内做这么大的页面抓取经验? 我之前(1.5米)已经做了大量的工作,但那是一台机器,花了一个多星期才完成。 我的情况的瓶颈是下载页面,parsing是不超过2毫秒,所以可以简化下载页面的过程是我正在寻找的东西。

亚马逊ec2公共DNS不工作

参照这个问题: 我如何访问我的公共DNS在亚马逊的EC2上 如果我按照Windows Web平台防火墙规则configuration我的安全组,那么是否有问题? 因为当我这样做,我无法访问Web浏览器上的公共DNS。 我的安全组是默认的,入站规则是HTTP,RDP,SMTPS,ICMP。 我的实例types是t1.micro webmatrix托pipe服务器与默认安全组。 我的Windows防火墙是活跃的域名,公共和私人的个人资料。 我不确定这一点。 它的HTTP端口80如我的安全组中所示。 我是亚马逊EC2的新手,这真的很紧迫。

将多个弹性IP分配给EC2实例

当我尝试将第二个弹性IP关联到一个小的EC2实例时,当前分配的弹性IP将被解除关联。 我需要使用VPC吗?

以最less的停机时间生产部署到EC2

我有一个简单的Web应用程序部署在EC2的大型实例。 我现在想把最新的代码部署到这个服务器上,但是我想这样做的方式是尽量减less停机时间,并尽可能平稳地为最终用户。 这是我的计划: 开火另一个大实例 安装该实例上的所有软件层 将EBS驱动器还原并附加到实例 在新实例上部署最新的生产就绪代码 运行所有testing(包括应用程序的手动testing) (如果testing通过)在网站上放置“正在维护的网站”通知。 备份实况站点上的EBS实例 从新服务器上分离EBS实例,并replace为最新的备份 使用ec2-associate-address将IP地址移动到新的实例 坐下来等待stream量开始stream经新的实例 终止旧的实例 这似乎是一个好策略吗? 有没有可能涵盖这个主题的教程或书籍? 我已经阅读了George Reese的“Cloud Application Architectures”,这是一本很好的书,但没有涉及部署。 另外,我知道有些工具可以帮助像RightScale或者enStratus这样的工具,当我开始使用多个实例的时候我会使用它。

为什么Amazon EC2上既有安全组又有iptables?

我最近偶然发现了我的EC2实例的防火墙问题。 TCP端口通过EC2安全组提供给所有人,但仍然使用iptables进行实例端过滤。 我想如果有什么安全组只是IPTables的一个奇特的API。 事实certificate,他们完全是从我所知道的。 有什么理由同时使用? 一个防火墙应该是足够的,添加另一个复杂的层似乎是一个头痛,只是等待发生。 与此同时,我打算或者打开我的安全组中的所有端口,然后通过iptables进行所有过滤,或者反过来,禁用iptables并使用安全组过滤。 任何关于我的逻辑是否有缺陷的反馈? 我是否缺less重要的东西?

如何直接在putty或winscp上用rootloginamazon ec2?

0最喜欢的 1)我怎样才能直接用腻子loginamazon ec2? 每次我需要su – 根,并改变根…有没有其他的方法? 2)如何直接在winscp或filezilla中用rootloginamazon ec2? 因为我想直接从我的计算机“推”一些文件,但我不能这样做(例如创build目录,当用ec2用户login时)

有没有人有任何经验,当涉及到小型服务器上的Amazon RDS与MySQL的速度?

EC2 Small vs Amazon RDS – 哪个更快? (我有一个数据库,索引和调整很好,每个表上大约有10,000行)。 performance如何?

将AWS EC2临时存储磁盘上的文件系统格式从ext3转换为ext4

我有一个Ubuntu 11.04 i386的实例存储EC2实例。 目前我的磁盘分区如下所示: Filesystem Size Used Avail Use% Mounted on /dev/xvda1 9.9G 529M 8.9G 6% / none 828M 116K 828M 1% /dev none 833M 0 833M 0% /dev/shm none 833M 40K 833M 1% /var/run none 833M 0 833M 0% /var/lock /dev/xvda2 147G 188M 140G 1% /mnt 我可以将/ mnt(/ dev / xvda2)转换为ext4吗? 如果是的话,你可以请指导我或指向我正确的资源。 谢谢

亚马逊aws – 区域数据传输 – 进出/在EC2 Avail Zones之间

任何人都可以说这个收费项目是从帐户活动? 每GB 0.010美元 – 区域数据传输 – input/输出/ EC2 Avail Zones之间或使用公共/弹性IP地址或ELB 我推出了一个亚马逊ec2的微型实例,我想知道这个收费是什么? 这是非常小的,但我仍然不明白。 thnx 🙂

弹性负载平衡器可以正确地将stream量分配给不同大小的实例

刚刚查看了Elastic Load Balancer。 据我所知,他们只是循环,平均分配连接到服务器后面的服务器。 那么,如果ELB背后有不同大小的实例会发生什么呢? 它发送更多的连接到更大的实例,还是继续平均分配连接,这意味着你真的不应该使用不同大小的实例。