服务器 Gind.cn
  1. 服务器 Gind.cn
  3. 寻找软件套件将CPU密集型任务委托给EC2按需实例
Intereting Posts
将Exchange多租户添加到现有Exchangenetworking 备份整个Linux环境 如何设置https证书失败，然后自动redirectIIS中的另一个站点 以太网属于哪个OSI层？ 如何设置登台apt版本库来安全地pipe理升级 如何转换MS Exchange的“激活设备pipe理员”的请求（在Android设备上显示） 将cPanel WHM服务器备份到Amazon S3的最佳方法是什么？ Sql Server 2005 Express和Sql Server 2008并排 主Smtp地址New-Mailbox cmdlet的有效格式 使用7模式CLI获取NetApp磁盘架序列号 如何克隆由vmdk文件表示的磁盘？ 有没有FreeRADIUS特定属性的列表？ 正确的nginx设置来处理子域 成功连接到VPN后，SSTP客户端立即断开连接 从M – SEARCH * HTTP / 1.1的Wireshark解码URL

寻找软件套件将CPU密集型任务委托给EC2按需实例

我正在寻找一个简化脚本执行的EC2按需实例pipe理的项目。 这是我的情况。

  • 脚本等待新的工作
  • 我的脚本读取执行参数
  • 它执行外部python脚本进行长期处理
  • 脚本处理python脚本的输出
  • 循环到开始（转到10）

而不是在同一台服务器上执行cpu密集型python脚本，我想委托它到一个按需EC2实例。 我正在寻找一个项目来帮助我以下几点：

  1. 提供build立在ec2之上的脚本来进行实例pipe理
  2. 我想，一旦实例启动，可能会进入并build立必要的环境，比如上传数据文件
  3. 在这个新实例中执行应用程序执行
  4. 收集结果表单实例并终止实例

我知道这可以通过一些疯狂的脚本来完成，但我更愿意使用现有的软件。 请build议我可以使用的软件包/库或工具。

有几种库可用于不同的编程语言，可以帮助您与AWS进行交互：

  • 博托 （Python）
  • right_aws （ruby）
  • 雾 （ruby）

HTH

我使用boto （一个Python的AWS控制库）为这种事情运气好。

作为一个构build模块，请查看AWS SQS队列系统。 您的脚本可以添加“作业”，您的EC2实例将从那里读取它。