Moto. Moka AWS

Testēšana ir neatņemama izstrādes procesa sastāvdaļa. Un dažreiz izstrādātājiem ir nepieciešams palaist testus lokāli, pirms veic izmaiņas.
Ja lietojumprogrammai ir nepieciešams Amazon Web Services, python bibliotēka moto ir ideāli piemērots šim.


Pilnu resursu seguma sarakstu var apskatīt šeit.
Github ir repozitorijs Hugo Picado — moto-server. Gatavs attēls, palaiž un izmanto. Vienīgi nianses ir tādas, ka pēc palaišanas tur vēl nav izveidoti nekādi AWS resursi.

Nu, tas ir diezgan viegli labojams.

Jo, palaižot, ir jānorāda pakalpojuma veids (env mainīgo MOTO_SERVICE), mums atliek tikai aprakstīt resursa izveidi.

Nedaudz mainīsim start.sh:

Tā vietā

moto_server $MOTO_SERVICE -H $MOTO_HOST -p $MOTO_PORT

Ievietojam:

if [ -f /opt/init/bootstrap.py ]; then
  moto_server $MOTO_SERVICE -H $MOTO_HOST -p $MOTO_PORT & (sleep 5 && echo "Izpildot uzsākšanas skriptu." && python /opt/init/bootstrap.py)
else
  moto_server $MOTO_SERVICE -H $MOTO_HOST -p $MOTO_PORT
fi
wait

Galīgais fails ir:

start.sh

#!/bin/sh

# validate required input
if [ -z "$MOTO_SERVICE" ]; then
  echo "Please define AWS service to run with Moto Server (e.g. s3, ec2, etc)"
  exit 1
fi

# setting defaults for optional input
if [ -z "$MOTO_HOST" ]; then
  MOTO_HOST="0.0.0.0"
fi

if [ -z "$MOTO_PORT" ]; then
  MOTO_PORT="5000"
fi

echo "Starting service $MOTO_SERVICE at $MOTO_HOST:$MOTO_PORT"

if [ -f /opt/init/bootstrap.py ]; then
  moto_server $MOTO_SERVICE -H $MOTO_HOST -p $MOTO_PORT & (sleep 5 && echo "Executing bootstrap script." && python /opt/init/bootstrap.py)
else
  moto_server $MOTO_SERVICE -H $MOTO_HOST -p $MOTO_PORT
fi
# Prevent container from exiting when bootstrap.py finishing
wait

Veidojam jaunu attēlu un nosūtam uz savu reģistru.

Tālāk mēs uzrakstīsim resursa inicializācijas skriptu, piemēram SWF domain, izmantojot bibliotēku darbam ar AWS — boto3:

bootstrap_swf.py

import boto3
from botocore.exceptions import ClientError
import os

os.environ["AWS_ACCESS_KEY_ID"] = "false"
os.environ["AWS_SECRET_ACCESS_KEY"] = "false"

client = boto3.client('swf', region_name='us-west-2', endpoint_url='http://localhost:5000')

try:
    client.register_domain(
        name='test-swf-mock-domain',
        description="Test SWF domain",
        workflowExecutionRetentionPeriodInDays="10"
    )
except ClientError as e:
    print "Domēne jau pastāv: ", e.response.get("Error", {}).get("Code")

response = client.list_domains(
    registrationStatus='REGISTERED',
    maximumPageSize=123,
    reverseOrder=True|False
)

print 'Gatavs'

Loģika ir šāda:

• Montašās palaidīsim mūsu skriptu /opt/init/bootstrap.py.
• Ja fails ir piestiprināts — tas tiks izpildīts.
• Ja faila nav — vienkārši tiks palaists bare moto-server.

Un, var mocīt veselu resursu palaižot vienu konteineru:

docker run --name swf -d 
    -e MOTO_SERVICE=swf 
    -e MOTO_HOST=0.0.0.0 
    -e MOTO_PORT=5000 
    -p 5001:5000 
    -v /tmp/bootstrap_swf.py:/opt/init/bootstrap.py 
    -i awesome-repo.com/moto-server:latest

Mēģinām interaktīvā režīmā:

Strādā!

Tādējādi mēs varam izveidot docker-compose.yml, kas palīdzēs ietaupīt laiku, testējot izmaiņas:

docker-compose.yml

version: '3'
services:
  s3:
    image: picadoh/motocker
    environment:
      - MOTO_SERVICE=s3
      - MOTO_HOST=10.0.1.2
    ports:
      - "5002:5000"
    networks:
      motonet:
        ipv4_address: 10.0.1.2
    volumes:
      - /tmp/bootstrap_s3.py:/opt/init/bootstrap.py
  swf:
    image: picadoh/motocker
    environment:
      - MOTO_SERVICE=swf
      - MOTO_HOST=10.0.1.3
    ports:
      - "5001:5000"
    networks:
      motonet:
        ipv4_address: 10.0.1.3
    volumes:
      - /tmp/bootstrap_swf.py:/opt/init/bootstrap.py
  ec2:
    image: picadoh/motocker
    environment:
      - MOTO_SERVICE=ec2
      - MOTO_HOST=10.0.1.4
    ports:
      - "5003:5000"
    networks:
      motonet:
        ipv4_address: 10.0.1.4
    volumes:
      - /tmp/bootstrap_ec2.py:/opt/init/bootstrap.py
networks:                             
  motonet:                          
    driver: bridge                
    ipam:                         
      config:                       
        - subnet: 10.0.0.0/16

Patiesībā, šādu pieeju var izmantot ne tikai izstrādātāja portatīvajā datorā. Iepriekšējie testi ar moku palīdzēs novērst potenciālas problēmas palaišanā dev* vidēs.

Saites:

Motocker repozitorijs — github.com/picadoh/motocker
Moto repozitorijs — github.com/spulec/moto
Boto3 dokumentācija — boto3.amazonaws.com/v1/documentation/api/latest/index.html

Avots: habr.com