A zmq alapjai Pythonban, egy egyszerű key/value tároló létrehozása

Bevezetés

Nézzük meg egy egyszerű key/value tároló példáját, mint például a memcache. Ennek a felépítése egyszerű: az adatok a memóriában találhatók, hashmap struktúrában. Az adások tcp-socketen keresztül történnek. A Pythonban a hashmap egy hagyományos dict. Az hozzáféréshez a zeromq-t fogjuk használni.

Beállítás

Ennek a csomagnak a telepítéséhez Debian/Ubuntu rendszeren elegendő beírni a konzolba
sudo apt-get install libzmq-dev
sudo pip install zmq

Kód

Írjunk egy osztályt a tárolónk működtetésére szerverrel:
A használt zmq socket típusa - REQ (REQuest, kérés), elküldjük a kérést - várunk a válaszra.
Bármilyen típusú adat tárolásához és hálózaton történő továbbításához használjuk a standard pickle modult. A művelet "protokollja" - egy három értékből álló tuple: (parancs, kulcs, adatok)

import zmq
import pickle

class SuperCacher:
    def __init__(self):
        context = zmq.Context()
        self.socket = context.socket(zmq.REQ)
        self.socket.connect('tcp://127.0.0.1:43000')

    def get(self, key):
        self.socket.send(pickle.dumps(('get', key, None)))
        return pickle.loads(self.socket.recv())

    def set(self, key, data):
        self.socket.send(pickle.dumps(('set', key, data)))
        return self.socket.recv() == b'ok'

Használat

cache = SuperCacher()
cache.set('key', 'value')
cache.get('key')

A házi feladat - javítani a megvalósítást, lehetőséget biztosítani az IP/cím és port megadására az osztály példányának létrehozásakor.

Most írjuk meg magát szerver.
Ezúttal REP (REPly, válasz) socketet használunk - várjuk a kérést, küldjük a választ. A kérést elemezzük, és válaszolunk 'ok'-kal írás esetén, vagy az adatokkal / None-nal olvasás esetén.

import pickle
import json
import zmq

def run_daemon():
    memory = {}

    context = zmq.Context()
    socket = context.socket(zmq.REP)
    socket.bind('tcp://127.0.0.1:43000')

    while True:
        try:
            command, key, data = pickle.loads(socket.recv())
            if command == 'set':
                memory[key] = data
                socket.send(b'ok')
            elif command == 'get':
                result = memory.get(key, None)
                socket.send(pickle.dumps(result))
        except Exception as e:
            print(e)

if __name__ == '__main__':
    run_daemon()

Hogy mindent együtt teszteljünk, indítsuk el a szervert a következő paranccsal
python daemon.py

A szomszédos fülön indítsuk el a Python-t interaktív módban.

>>> from lib import SuperCacher
>>> cache=SuperCacher()
>>> cache.set('key', 'value')
True
>>> cache.get('key')
'value'

Ó csoda, működik! Most már nyugodtan írhatod az önéletrajzodba, hogy "key-value tároló fejlesztése zmq protokollal"

Forrás: habr.com