Podstawy pracy z zmq w pythonie, tworzenie prostego magazynu key/value

Wprowadzenie

Rozważmy przykład prostego magazynu key/value, takiego jak memcache. Jest on prosty — dane są przechowywane w pamięci w strukturze hashmap. Dostęp do nich odbywa się przez gniazdo tcp. W Pythonie hashmap to zwykły dict. Do dostępu użyjemy zeromq.

Konfiguracja

Aby zainstalować ten pakiet w debian/ubuntu, wystarczy wprowadzić w konsoli
sudo apt-get install libzmq-dev
sudo pip install zmq

Kod

Napiszemy klasę do pracy z naszym serwerem:
Typ używanego gniazda zmq to REQ (REQuest, zapytanie), wysyłamy zapytanie — czekamy na odpowiedź.
Aby przechowywać i przesyłać przez sieć dowolny typ danych, używamy standardowego modułu pickle. 'Protokół' działania to krotka z trzema wartościami: (komenda, klucz, dane)

import zmq
import pickle

class SuperCacher:
    def __init__(self):
        context = zmq.Context()
        self.socket = context.socket(zmq.REQ)
        self.socket.connect('tcp://127.0.0.1:43000')

    def get(self, key):
        self.socket.send(pickle.dumps(('get', key, None)))
        return pickle.loads(self.socket.recv())

    def set(self, key, data):
        self.socket.send(pickle.dumps(('set', key, data)))
        return self.socket.recv() == b'ok'

Użycie

cache = SuperCacher()
cache.set('key', 'value')
cache.get('key')

Jako zadanie domowe — poprawić implementację, dodając możliwość określenia adresu/portu przy tworzeniu instancji klasy.

Teraz napiszemy sam serwer.
Tym razem używamy gniazda REP (REPly, odpowiedź) — czekamy na zapytanie, wysyłamy odpowiedź. Rozbieramy zapytanie, odpowiadamy albo 'ok' w przypadku zapisu, albo danymi / None w przypadku odczytu.

import pickle
import json
import zmq

def run_daemon():
    memory = {}

    context = zmq.Context()
    socket = context.socket(zmq.REP)
    socket.bind('tcp://127.0.0.1:43000')

    while True:
        try:
            command, key, data = pickle.loads(socket.recv())
            if command == 'set':
                memory[key] = data
                socket.send(b'ok')
            elif command == 'get':
                result = memory.get(key, None)
                socket.send(pickle.dumps(result))
        except Exception as e:
            print(e)

if __name__ == '__main__':
    run_daemon()

Aby przetestować wszystko razem, uruchamiamy serwer komendą
python daemon.py

W sąsiedniej karcie uruchamiamy python w trybie interaktywnym.

>>> from lib import SuperCacher
>>> cache=SuperCacher()
>>> cache.set('key', 'value')
True
>>> cache.get('key')
'value'

O cud, działa! Teraz można z pewnością wpisać w swoim CV "tworzenie magazynu key-value z użyciem protokołu zmq"

Źródło: habr.com