Základy práce se zmq v pythonu, vytvoření jednoduchého úložiště klíč/hodnota

úvod

Podívejme se na příklad jednoduchého úložiště klíčů/hodnot, jako je memcache. Je uspořádán jednoduše – data jsou uložena v paměti, ve struktuře hashmap. Přístup k nim se provádí přes tcp socket. V pythonu je hashmap jen diktát. Pro přístup použijeme zeromq.

Nastavení

Chcete-li nainstalovat tento balíček v debian/ubuntu, stačí zadat do konzole
sudo apt-get install libzmq-dev
sudo pip install zmq

Kód

Pojďme napsat třídu, která bude pracovat s naším serverem:
Typ použitého zmq socketu je REQ(REQuest, request), odešleme požadavek - čekáme na odpověď.
Pro ukládání a přenos jakýchkoliv dat po síti používáme standardní pickle modul. "Protokol" práce - n-tice tří hodnot: (příkaz, klíč, data)

import zmq
import pickle

class SuperCacher:
    def __init__(self):
        context = zmq.Context()
        self.socket = context.socket(zmq.REQ)
        self.socket.connect('tcp://127.0.0.1:43000')

    def get(self, key):
        self.socket.send(pickle.dumps(('get', key, None)))
        return pickle.loads(self.socket.recv())

    def set(self, key, data):
        self.socket.send(pickle.dumps(('set', key, data)))
        return self.socket.recv() == b'ok'

Použití

cache = SuperCacher()
cache.set('klíč', 'hodnota')
cache.get('klíč')

Jako domácí úkol vylepšete implementaci přidáním možnosti zadat adresu/port při vytváření instance třídy.

Nyní napíšeme samotný server.
Tentokrát je použit socket REP(REPly, response) - čekáme na požadavek, odešleme odpověď. Požadavek analyzujeme, odpovíme buď 'ok' v případě zápisu, nebo data / Žádný v případě čtení.

import pickle
import json
import zmq

def run_daemon():
    memory = {}

    context = zmq.Context()
    socket = context.socket(zmq.REP)
    socket.bind('tcp://127.0.0.1:43000')

    while True:
        try:
            command, key, data = pickle.loads(socket.recv())
            if command == 'set':
                memory[key] = data
                socket.send(b'ok')
            elif command == 'get':
                result = memory.get(key, None)
                socket.send(pickle.dumps(result))
        except Exception as e:
            print(e)

if __name__ == '__main__':
    run_daemon()

Chcete-li vše otestovat společně, spusťte server pomocí příkazu
python daemon.py

Na další kartě spusťte python v interaktivním režimu.

>>> from lib import SuperCacher
>>> cache=SuperCacher()
>>> cache.set('key', 'value')
True
>>> cache.get('key')
'value'

Páni, funguje to! Nyní můžete do svého životopisu bezpečně napsat „vývoj úložiště klíč-hodnota pomocí protokolu zmq“

Zdroj: www.habr.com