Moto. Mokaem AWS

Testimine on arendamisprotsessi lahutamatu osa. Mõnikord peab arendaja testima koodimuudatusi kohapeal, enne kui muutused commititakse.
Kui rakendus kasutab Amazon Web Services, python teeki moto , siis sobib see ideaalselt.


Kogutud ressursside täielikku loetelu saab vaadata siin.
Githubis on repos Hugo Picado — moto-server. Valmis pilt, käivita ja kasuta. Ainult nüanss on see, et käivitamisel ei ole seal veel ühtegi AWS resurssi loodud.

Kuid seda on lihtne parandada.

Kuna käivitamisel peab määrama teenuse tüübi (env muutuja MOTO_SERVICE), peame jääma ressurssi looma.

Muudame veidi start.sh:

Asetame

moto_server $MOTO_SERVICE -H $MOTO_HOST -p $MOTO_PORT

:

if [ -f /opt/init/bootstrap.py ]; then
  moto_server $MOTO_SERVICE -H $MOTO_HOST -p $MOTO_PORT & (sleep 5 && echo "Käivitame bootstrap skripti." && python /opt/init/bootstrap.py)
else
  moto_server $MOTO_SERVICE -H $MOTO_HOST -p $MOTO_PORT
fi
wait

Lõplik fail on:

start.sh

#!/bin/sh

# validate required input
if [ -z "$MOTO_SERVICE" ]; then
  echo "Please define AWS service to run with Moto Server (e.g. s3, ec2, etc)"
  exit 1
fi

# setting defaults for optional input
if [ -z "$MOTO_HOST" ]; then
  MOTO_HOST="0.0.0.0"
fi

if [ -z "$MOTO_PORT" ]; then
  MOTO_PORT="5000"
fi

echo "Starting service $MOTO_SERVICE at $MOTO_HOST:$MOTO_PORT"

if [ -f /opt/init/bootstrap.py ]; then
  moto_server $MOTO_SERVICE -H $MOTO_HOST -p $MOTO_PORT & (sleep 5 && echo "Executing bootstrap script." && python /opt/init/bootstrap.py)
else
  moto_server $MOTO_SERVICE -H $MOTO_HOST -p $MOTO_PORT
fi
# Prevent container from exiting when bootstrap.py finishing
wait

Ehita uus pilt ja edasta see oma registry'sse.

Seejärel kirjutame ressursi initsialiseerimise skripti, näiteks SWF domeen, kasutades AWS-i jaoks mõeldud teeki — boto3:

bootstrap_swf.py

import boto3
from botocore.exceptions import ClientError
import os

os.environ["AWS_ACCESS_KEY_ID"] = "fake"
os.environ["AWS_SECRET_ACCESS_KEY"] = "fake"

client = boto3.client('swf', region_name='us-west-2', endpoint_url='http://localhost:5000')

try:
    client.register_domain(
        name='test-swf-mock-domain',
        description="Test SWF domain",
        workflowExecutionRetentionPeriodInDays="10"
    )
except ClientError as e:
    print "Domain already exists: ", e.response.get("Error", {}).get("Code")

response = client.list_domains(
    registrationStatus='REGISTERED',
    maximumPageSize=123,
    reverseOrder=True|False
)

print 'Ready'

Loogika on selline:

• Käivitame meie skripti käivitamise ajal /opt/init/bootstrap.py.
• Kui fail on timmitud — see käivitatakse.
• Kui faili ei ole — käivitatakse lihtsalt tühi moto-server.

Ja ühe konteineriga saame simuleerida tervet ressurssi:

docker run --name swf -d 
    -e MOTO_SERVICE=swf 
    -e MOTO_HOST=0.0.0.0 
    -e MOTO_PORT=5000 
    -p 5001:5000 
    -v /tmp/bootstrap_swf.py:/opt/init/bootstrap.py 
    -i awesome-repo.com/moto-server:latest

Proovime interaktiivses režiimis:

Töötas!

Nii saame teha docker-compose.yml, mis aitab kokku hoida aega muudatuste testimisel:

docker-compose.yml

versioon: '3'
teenused:
  s3:
    pilt: picadoh/motocker
    keskkond:
      - MOTO_SERVICE=s3
      - MOTO_HOST=10.0.1.2
    sadamad:
      - "5002:5000"
    võrgud:
      motonet:
        ipv4_aadress: 10.0.1.2
    mahud:
      - /tmp/bootstrap_s3.py:/opt/init/bootstrap.py
  swf:
    pilt: picadoh/motocker
    keskkond:
      - MOTO_SERVICE=swf
      - MOTO_HOST=10.0.1.3
    sadamad:
      - "5001:5000"
    võrgud:
      motonet:
        ipv4_aadress: 10.0.1.3
    mahud:
      - /tmp/bootstrap_swf.py:/opt/init/bootstrap.py
  ec2:
    pilt: picadoh/motocker
    keskkond:
      - MOTO_SERVICE=ec2
      - MOTO_HOST=10.0.1.4
    sadamad:
      - "5003:5000"
    võrgud:
      motonet:
        ipv4_aadress: 10.0.1.4
    mahud:
      - /tmp/bootstrap_ec2.py:/opt/init/bootstrap.py
võrgud:
  motonet:
    draiver: sild
    ipam:
      config:
        - alamvõrk: 10.0.0.0/16

Tegelikult ei saa sellist lähenemist kasutada mitte ainult arendaja sülearvutis. Eeltestid, kasutades moode, aitavad kõrvaldata võimalikke probleeme dev* keskkondades käivitamisel.

Lingid:

Motocker repo — github.com/picadoh/motocker
Moto repo — github.com/spulec/moto
Boto3 dokumendid — boto3.amazonaws.com/v1/documentation/api/latest/index.html

Allikas: habr.com