Bazele lucrului cu zmq în python, creare unui simplu depozit key/value

Introducere

Să analizăm un exemplu de stocare simplă key/value, cum ar fi memcache. Este construit simplu — datele sunt stocate în memorie, într-o structură hashmap. Accesul la acestea se face printr-un socket tcp. În Python, hashmap este un dicționar obișnuit. Vom folosi zeromq pentru acces.

Configurare

Pentru a instala acest pachet în debian/ubuntu, este suficient să introducem în consolă
sudo apt-get install libzmq-dev
sudo pip install zmq

Cod

Să scriem o clasă pentru a lucra cu acesta serverul:
Tipul socket-ului zmq folosit este REQ (REQuest, cerere), trimitem o cerere — așteptăm un răspuns.
Pentru a stoca și a transmite orice tip de date prin rețea, folosim modulul standard pickle. "Protocolul" de funcționare este un tuplu format din trei valori: (comandă, cheie, date)

import zmq
import pickle

class SuperCacher:
    def __init__(self):
        context = zmq.Context()
        self.socket = context.socket(zmq.REQ)
        self.socket.connect('tcp://127.0.0.1:43000')

    def get(self, key):
        self.socket.send(pickle.dumps(('get', key, None)))
        return pickle.loads(self.socket.recv())

    def set(self, key, data):
        self.socket.send(pickle.dumps(('set', key, data)))
        return self.socket.recv() == b'ok'

Utilizare

cache = SuperCacher()
cache.set('key', 'value')
cache.get('key')

Ca temă pentru acasă — îmbunătățiți implementarea, adăugând posibilitatea de a specifica adresa/portul la crearea unei instanțe a clasei.

Acum să scriem serverul serverul.
De data aceasta se folosește un socket REP (REPly, răspuns) — așteptăm o cerere, trimitem un răspuns. Analizăm cererea, răspundem fie cu 'ok' în cazul scrierii, fie cu datele / None în cazul citirii.

import pickle
import json
import zmq

def run_daemon():
    memory = {}

    context = zmq.Context()
    socket = context.socket(zmq.REP)
    socket.bind('tcp://127.0.0.1:43000')

    while True:
        try:
            command, key, data = pickle.loads(socket.recv())
            if command == 'set':
                memory[key] = data
                socket.send(b'ok')
            elif command == 'get':
                result = memory.get(key, None)
                socket.send(pickle.dumps(result))
        except Exception as e:
            print(e)

if __name__ == '__main__':
    run_daemon()

Pentru a testa totul împreună, pornim serverul cu comanda
python daemon.py

Într-o filă separată, lansăm python în modul interactiv.

>>> from lib import SuperCacher
>>> cache=SuperCacher()
>>> cache.set('key', 'value')
True
>>> cache.get('key')
'value'

O mirare, funcționează! Acum poți scrie cu încredere în CV-ul tău „dezvoltarea unui stocare key-value folosind protocolul zmq”

Sursa: habr.com