Moto. Макаем AWS

Тэставанне - гэта неад'емная частка працэсу распрацоўкі. І часам распрацоўнікам патрабуецца запусціць тэсты лакальна, да таго моманту коміту змен.
Калі дадатак выкарыстоўвае Amazon Web Services, пітон бібліятэка Moto ідэальна для гэтага падыходзіць.
Moto. Макаем AWS

Поўны спіс пакрыцця рэсурсаў можна паглядзець тут.
На Github ёсць рэпа Hugo Picado - moto-server. Гатовы вобраз, запускай і выкарыстоўвай. Нюанс толькі ў тым, што пасля запуску, ніякіх AWS рэсурсаў там яшчэ не створана.

Што ж, гэта дастаткова лёгка выправіць.

Паколькі пры запуску неабходна ўказаць тып сэрвісу (env зменнай MOTO_SERVICE), нам застаецца апісаць стварэнне рэсурсу.

Трохі зменім пачатак.ш:

замест

moto_server $MOTO_SERVICE -H $MOTO_HOST -p $MOTO_PORT

Устаўляемы:

if [ -f /opt/init/bootstrap.py ]; then
  moto_server $MOTO_SERVICE -H $MOTO_HOST -p $MOTO_PORT & (sleep 5 && echo "Executing bootstrap script." && python /opt/init/bootstrap.py)
else
  moto_server $MOTO_SERVICE -H $MOTO_HOST -p $MOTO_PORT
fi
wait

Выніковы файл атрымліваецца:

пачатак.ш

#!/bin/sh

# validate required input
if [ -z "$MOTO_SERVICE" ]; then
  echo "Please define AWS service to run with Moto Server (e.g. s3, ec2, etc)"
  exit 1
fi

# setting defaults for optional input
if [ -z "$MOTO_HOST" ]; then
  MOTO_HOST="0.0.0.0"
fi

if [ -z "$MOTO_PORT" ]; then
  MOTO_PORT="5000"
fi

echo "Starting service $MOTO_SERVICE at $MOTO_HOST:$MOTO_PORT"

if [ -f /opt/init/bootstrap.py ]; then
  moto_server $MOTO_SERVICE -H $MOTO_HOST -p $MOTO_PORT & (sleep 5 && echo "Executing bootstrap script." && python /opt/init/bootstrap.py)
else
  moto_server $MOTO_SERVICE -H $MOTO_HOST -p $MOTO_PORT
fi
# Prevent container from exiting when bootstrap.py finishing
wait

Білдзім новы вобраз і пушым у свой registry.

Далей, напішам скрыпт ініцыялізацыі рэсурсу, напрыклад SWF domain, выкарыстоўваючы бібліятэку для працы з AWS - boto3:

bootstrap_swf.py

import boto3
from botocore.exceptions import ClientError
import os

os.environ["AWS_ACCESS_KEY_ID"] = "fake"
os.environ["AWS_SECRET_ACCESS_KEY"] = "fake"

client = boto3.client('swf', region_name='us-west-2', endpoint_url='http://localhost:5000')

try:
    client.register_domain(
        name='test-swf-mock-domain',
        description="Test SWF domain",
        workflowExecutionRetentionPeriodInDays="10"
    )
except ClientError as e:
    print "Domain already exists: ", e.response.get("Error", {}).get("Code")

response = client.list_domains(
    registrationStatus='REGISTERED',
    maximumPageSize=123,
    reverseOrder=True|False
)

print 'Ready'

Логіка такая:

  • Мантаваны пры запуску наш скрыпт у /opt/init/bootstrap.py.
  • Калі файл прымантаваны - ён будзе выкананы.
  • Калі файла няма - проста запусціцца голы moto-server.

І, можна макаць цэлы рэсурс запускам аднаго кантэйнера:

docker run --name swf -d 
    -e MOTO_SERVICE=swf 
    -e MOTO_HOST=0.0.0.0 
    -e MOTO_PORT=5000 
    -p 5001:5000 
    -v /tmp/bootstrap_swf.py:/opt/init/bootstrap.py 
    -i awesome-repo.com/moto-server:latest

Спрабуем у інтэрактыўным рэжыме:

Moto. Макаем AWS

Працуе!

Такім чынам, мы можам зрабіць docker-compose.yml, які дапаможа зэканоміць час на тэставанне змен:

докер-compose.yml

version: '3'
services:
  s3:
    image: picadoh/motocker
    environment:
      - MOTO_SERVICE=s3
      - MOTO_HOST=10.0.1.2
    ports:
      - "5002:5000"
    networks:
      motonet:
        ipv4_address: 10.0.1.2
    volumes:
      - /tmp/bootstrap_s3.py:/opt/init/bootstrap.py
  swf:
    image: picadoh/motocker
    environment:
      - MOTO_SERVICE=swf
      - MOTO_HOST=10.0.1.3
    ports:
      - "5001:5000"
    networks:
      motonet:
        ipv4_address: 10.0.1.3
    volumes:
      - /tmp/bootstrap_swf.py:/opt/init/bootstrap.py
  ec2:
    image: picadoh/motocker
    environment:
      - MOTO_SERVICE=ec2
      - MOTO_HOST=10.0.1.4
    ports:
      - "5003:5000"
    networks:
      motonet:
        ipv4_address: 10.0.1.4
    volumes:
      - /tmp/bootstrap_ec2.py:/opt/init/bootstrap.py
networks:                             
  motonet:                          
    driver: bridge                
    ipam:                         
      config:                       
        - subnet: 10.0.0.0/16

Уласна, не толькі на наўтбуку распрацоўніка можна выкарыстоўваць такі падыход. Папярэднія тэсты з мокамі пасля зборкі, дапамогуць пазбавіцца ад магчымых праблем пры запуску на dev* асяроддзі.

спасылкі:

Motocker repo - github.com/picadoh/motocker
Moto repo github.com/spulec/moto
Boto3 Docs - boto3.amazonaws.com/v1/documentation/api/latest/index.html

Крыніца: habr.com

Дадаць каментар