Základy práce so zmq v pythone, vytvorenie jednoduchého úložiska kľúč/hodnota

Úvod

Pozrime sa na príklad jednoduchého úložiska kľúč/hodnota, ako je memcache. Je navrhnutý jednoducho – dáta sú uložené v pamäti, v štruktúre hashmap. Sú prístupné cez tcp socket. V Pythone je hashmap bežný diktát. Pre prístup použijeme zeromq.

nastavenie

Ak chcete nainštalovať tento balík v debian/ubuntu, stačí zadať do konzoly
sudo apt-get install libzmq-dev
sudo pip install zmq

kód

Napíšme triedu, ktorá bude pracovať s naším serverom:
Typ použitého zmq socketu je REQ(REQuest, request), pošleme požiadavku a čakáme na odpoveď.
Na ukladanie a prenos akéhokoľvek typu dát cez sieť používame štandardný pickle modul. Pracovný „protokol“ je n-tica troch hodnôt: (príkaz, kľúč, údaje)

import zmq
import pickle

class SuperCacher:
    def __init__(self):
        context = zmq.Context()
        self.socket = context.socket(zmq.REQ)
        self.socket.connect('tcp://127.0.0.1:43000')

    def get(self, key):
        self.socket.send(pickle.dumps(('get', key, None)))
        return pickle.loads(self.socket.recv())

    def set(self, key, data):
        self.socket.send(pickle.dumps(('set', key, data)))
        return self.socket.recv() == b'ok'

Použitie

vyrovnávacia pamäť = SuperCacher()
cache.set('key', 'value')
cache.get('kľúč')

Ako domácu úlohu vylepšite implementáciu pridaním možnosti špecifikovať adresu/port pri vytváraní inštancie triedy.

Teraz napíšme samotný server.
Tentokrát sa používa socket REP(REPly, odpoveď) - čakáme na požiadavku, odoslanie odpovede. Požiadavku analyzujeme a odpovieme buď „ok“ v prípade zápisu, alebo údajmi / Žiadne v prípade čítania.

import pickle
import json
import zmq

def run_daemon():
    memory = {}

    context = zmq.Context()
    socket = context.socket(zmq.REP)
    socket.bind('tcp://127.0.0.1:43000')

    while True:
        try:
            command, key, data = pickle.loads(socket.recv())
            if command == 'set':
                memory[key] = data
                socket.send(b'ok')
            elif command == 'get':
                result = memory.get(key, None)
                socket.send(pickle.dumps(result))
        except Exception as e:
            print(e)

if __name__ == '__main__':
    run_daemon()

Aby sme všetko spolu otestovali, spustíme server príkazom
python daemon.py

Na ďalšej karte spustite python v interaktívnom režime.

>>> from lib import SuperCacher
>>> cache=SuperCacher()
>>> cache.set('key', 'value')
True
>>> cache.get('key')
'value'

Ó zázrak, funguje to! Teraz môžete vo svojom životopise bezpečne napísať „vývoj úložiska kľúč-hodnota pomocou protokolu zmq“

Zdroj: hab.com