在AWS EC2 VPC中创建n个新实例,然后对其进行配置

时间:2016-04-19 01:37:31

标签: amazon-web-services amazon-ec2 ansible amazon-vpc

我很难做一些看似相当标准的事情,所以我希望有人可以帮助我。我已经用疯狂搜索了这个,并且大多数示例都没有在VPC中,或者使用了弃用的结构,这使得它在我的用例中出错或无法使用。

以下是我的目标:

  1. 我想在我的VPC中发布一大堆新实例(同样的 下面的代码有3个,但可能是一百个)
  2. 我想等待那些活动来活着
  3. 然后我想配置这些实例(ssh到它们中,改变 主机名,启用某些服务等。)
  4. 现在我可以在2个任务中完成这个任务。我可以在1个剧本中创建实例。等他们安定下来。然后运行第二个剧本来配置它们。这可能是我现在要做的事情,因为我想要动起来 - 但必须有一个答案。

    这是我到目前为止的剧本

    ---
    - hosts: localhost
      connection: local
      gather_facts: False
      tasks:
        - name: Provision Lunch
          with_items:
            - hostname: eggroll1
            - hostname: eggroll2
            - hostname: eggroll3
          ec2:
            region: us-east-1
            key_name: eggfooyong
            vpc_subnet_id: subnet-8675309
            instance_type: t2.micro
            image: ami-8675309
            wait: true
            group_id: sg-8675309
            exact_count: 1
            count_tag:
              Name: "{{ item.hostname }}"
            instance_tags:
              Name: "{{ item.hostname }}"
              role:   "supper"
              ansibleowned: "True"
          register: ec2
    
        - name: Wait for SSH to come up
          wait_for: host={{ item.private_ip }} port=22 delay=60 timeout=900 state=started
          with_items: '{{ec2.instances}}'
    
        - name: Update hostname on instances
          hostname: name={{ item.private_ip }}
          with_items: '{{ec2.instances}}'
    

    这样做很有效。我得到的是

    TASK [Wait for SSH to come up] *************************************************
    [DEPRECATION WARNING]: Skipping task due to undefined Error, in the future this will be a fatal error.. This feature will be removed in a future release. Deprecation warnings can be disabled by setting
    deprecation_warnings=False in ansible.cfg.
    
    TASK [Update hostname on instances] ********************************************
    [DEPRECATION WARNING]: Skipping task due to undefined Error, in the future this will be a fatal error.. This feature will be removed in a future release. Deprecation warnings can be disabled by setting
    deprecation_warnings=False in ansible.cfg.
    

    这让我很伤心。现在这是我最新的剧本版本。但是我试图用我在互联网上找到的每个例子来重写它。他们中的大多数都以不同的方式编写了with_items,但是ansible告诉我这种方式是被删除的,然后失败了。

    到目前为止,ansible一直很有趣,但这让我想把笔记本电脑扔到街对面。

    有什么建议吗?我应该使用register和with_items吗?我会更好地使用这样的东西:

    add_host: hostname={{item.public_ip}} groupname=deploy
    

    代替?我在这里重写了一遍。我准备在2本剧本中写这篇文章,并希望得到建议。

    谢谢!

    **** **** EDIT 现在它刚刚开始感到破碎或严重改变。我用谷歌搜索了几十个例子,它们都以同样的方式编写,它们都以同样的错误失败了。这是我现在的简单剧本:

    ---
    - hosts: localhost
      connection: local
      gather_facts: False
      vars:
        builderstart: 93
        builderend: 94
      tasks:
        - name: Provision Lunch
          ec2:
            region: us-east-1
            key_name: dakey
            vpc_subnet_id: subnet-8675309
            instance_type: t2.micro
            image: ami-8675309
            wait: True
            group_id: sg-OU812
            exact_count: 1
            count_tag:
              Name: "{{ item }}"
            instance_tags:
              Name: "{{ item }}"
              role:   "dostuff"
              extracheese: "True"
          register: ec2
          with_sequence: start="{{builderstart}}" end="{{builderend}}" format=builder%03d
    
    
        - name: the newies
          debug: msg="{{ item }}"
          with_items: "{{ ec2.instances }}"
    

    它真的不能更直接。无论我如何写它,无论我如何改变它,我都会得到同样的基本错误:

      

    [DEPRECATION WARNING]:由于未定义的错误导致的跳过任务   未来这将是一个致命的错误:' dict object'没有属性   '实例'

    所以它看起来像是with_items:" {{ec2.instances}}"导致错误的行。

    我已经使用调试打印出ec2,并且该错误看起来很准确。看起来结构改变了我。看起来ec2现在包含一个字典,结果作为另一个字典对象的键,并且实例是该字典中的键。但我无法找到一种理智的方式来访问数据。

    为了它的价值,我尝试在2.0.1,2.0.2和2.2中访问它,我在每种情况下都会遇到同样的问题。

    你们其他人使用的是1.9还是其他什么?我无法在任何有效的地方找到一个例子。这非常令人沮丧。

    再次感谢您的帮助。

3 个答案:

答案 0 :(得分:1)

不要这样做:
- name: Provision Lunch with_items: - hostname: eggroll1 - hostname: eggroll2 - hostname: eggroll3 ec2: region: us-east-1

因为通过使用它,您可以在项目中清除ec2中的所有信息 您收到以下输出:

TASK [Launch instance] *********************************************************
changed: [localhost] => (item={u'hostname': u'eggroll1'})
changed: [localhost] => (item={u'hostname': u'eggroll2'})

但是项目应该是这样的:

changed: [localhost] => (item={u'kernel': None, u'root_device_type': u'ebs', u'private_dns_name': u'ip-172-31-29-85.ec2.internal', u'public_ip': u'54.208.138.217', u'private_ip': u'172.31.29.85', u'id': u'i-003b63636e7ffc27c', u'ebs_optimized': False, u'state': u'running', u'virtualization_type': u'hvm', u'architecture': u'x86_64', u'ramdisk': None, u'block_device_mapping': {u'/dev/sda1': {u'status': u'attached', u'delete_on_termination': True, u'volume_id': u'vol-37581295'}}, u'key_name': u'eggfooyong', u'image_id': u'ami-fce3c696', u'tenancy': u'default', u'groups': {u'sg-aabbcc34': u'ssh'}, u'public_dns_name': u'ec2-54-208-138-217.compute-1.amazonaws.com', u'state_code': 16, u'tags': {u'ansibleowned': u'True', u'role': u'supper'}, u'placement': u'us-east-1d', u'ami_launch_index': u'1', u'dns_name': u'ec2-54-208-138-217.compute-1.amazonaws.com', u'region': u'us-east-1', u'launch_time': u'2016-04-19T08:19:16.000Z', u'instance_type': u't2.micro', u'root_device_name': u'/dev/sda1', u'hypervisor': u'xen'})

尝试使用以下代码

- name: Create a sandbox instance
  hosts: localhost
  gather_facts: False
  vars:
    keypair: eggfooyong
    instance_type: t2.micro
    security_group: ssh
    image: ami-8675309
    region: us-east-1
    subnet: subnet-8675309
    instance_names:
      - eggroll1
      - eggroll2
  tasks:
    - name: Launch instance
      ec2:
        key_name: "{{ keypair }}"
        group: "{{ security_group }}"
        instance_type: "{{ instance_type }}"
        image: "{{ image }}"
        wait: true
        region: "{{ region }}"
        vpc_subnet_id: "{{ subnet }}"
        assign_public_ip: no
        count: "{{ instance_names | length }}"
      register: ec2

    - name: tag instances
      ec2_tag:
        resource: '{{ item.0.id }}'
        region: '{{ region }}'
        tags:        
          Name: '{{ item.1 }}'
          role:   "supper"
          ansibleowned: "True"
      with_together:
        - '{{ ec2.instances }}'
        - '{{ instance_names }}'

    - name: Wait for SSH to come up
      wait_for: host={{ private_ip }} port=22 delay=60 timeout=320 state=started
      with_items: '{{ ec2.instances }}'

假设您的ansible主机位于VPC内部

答案 1 :(得分:0)

为了实现这一目标,我编写了一个非常小的过滤插件get_ec2_info

创建一个名为filter_plugins

的目录

使用以下内容创建插件文件get_ec2_info.py

from jinja2.utils import soft_unicode

class FilterModule(object):

    def filters(self):
        return {
            'get_ec2_info': get_ec2_info,
        }

def get_ec2_info(list, ec2_key):

    ec2_info = []
    for item in list:
        for ec2 in item['instances']:
            ec2_info.append(ec2[ec2_key])
    return ec2_info

然后你可以在你的剧本中使用它:

---
- hosts: localhost
  connection: local
  gather_facts: False
  tasks:
    - name: Provision Lunch
      ec2:
        region: us-east-1
        key_name: eggfooyong
        vpc_subnet_id: subnet-8675309
        instance_type: t2.micro
        image: ami-8675309
        wait: true
        group_id: sg-8675309
        exact_count: 1
        count_tag:
          Name: "{{ item.hostname }}"
        instance_tags:
          Name: "{{ item.hostname }}"
          role:   "supper"
          ansibleowned: "True"
      register: ec2
      with_items:
        - hostname: eggroll1
        - hostname: eggroll2
        - hostname: eggroll3
   - name: Create SSH Group to login dynamically to EC2 Instance(s)
     add_host: 
       hostname: "{{ item }}"
       groupname: my_ec2_servers
     with_items: "{{ ec2.results | get_ec2_info('public_ip') }}"

   - name: Wait for SSH to come up on EC2 Instance(s)
     wait_for:
       host: "{{ item }}" 
       port: 22 
       state: started
     with_items: "{{ ec2.results | get_ec2_info('public_ip') }}" 

# CALL THE DYNAMIC GROUP IN THE SAME PLAYBOOK
- hosts: my_ec2_servers
  become: yes 
  remote_user: ubuntu
  gather_facts: yes
  tasks:
    - name: DO YOUR TASKS HERE

EXTRA INFORMAITON:

  • 使用ansible 2.0.1.0
  • 假设您正在启动ubuntu实例,如果没有,则更改remote_user: ubuntu中的值
    • 假设正确配置了ssh密钥

请咨询这些github回购以获得更多帮助:

答案 2 :(得分:0)

我认为这对调试很有帮助。

https://www.middlewareinventory.com/blog/ansible-dict-object-has-no-attribute-stdout-or-stderr-how-to-resolve/

ec2寄存器是dict类型。而且它有一个密钥results

results键具有许多元素,包括dictlist,如下所示:

{
    "msg": {
        "results": [
            {
                "invocation": {
                },
                "instances": [],
                "changed": false,
                "tagged_instances": [
                    {
                    }
                ],
                "instance_ids": null,
                "failed": false,
                "item": [
                ],
                "ansible_loop_var": "item"
            }
        ],
        "msg": "All items completed",
        "changed": false
    },
    "_ansible_verbose_always": true,
    "_ansible_no_log": false,
    "changed": false
}

因此,您可以使用.(例如具有item.changed布尔值的false)获取所需的数据。

- debug:
    msg: "{{ item.changed }}"
  loop: "{{ ec2.results }}"