Noções básicas de trabalho com zmq em python, criando um armazenamento simples de chave/valor

Introdução

Vejamos um exemplo de armazenamento simples de chave/valor, como o memcache. Ele foi projetado de forma simples - os dados são armazenados na memória, em uma estrutura hashmap. Eles são acessados ​​através de um soquete tcp. Em Python, hashmap é um ditado regular. Para acesso usaremos zeromq.

Fixação

Para instalar este pacote no debian/ubuntu, basta entrar no console
sudo apt-get install libzmq-dev
sudo pip install zmq

código

Vamos escrever uma classe para trabalhar com nosso servidor:
O tipo de soquete zmq usado é REQ(REQuest, request), enviamos uma solicitação e aguardamos uma resposta.
Para armazenar e transmitir qualquer tipo de dados pela rede, utilizamos o módulo pickle padrão. O “protocolo” de trabalho é uma tupla de três valores: (comando, chave, dados)

import zmq
import pickle

class SuperCacher:
    def __init__(self):
        context = zmq.Context()
        self.socket = context.socket(zmq.REQ)
        self.socket.connect('tcp://127.0.0.1:43000')

    def get(self, key):
        self.socket.send(pickle.dumps(('get', key, None)))
        return pickle.loads(self.socket.recv())

    def set(self, key, data):
        self.socket.send(pickle.dumps(('set', key, data)))
        return self.socket.recv() == b'ok'

Usar

cache = SuperCacher()
cache.set('chave', 'valor')
cache.get('chave')

Como lição de casa, melhore a implementação adicionando a capacidade de especificar um endereço/porta ao criar uma instância de uma classe.

Agora vamos escrever o próprio servidor.
Desta vez é utilizado o soquete REP(REPly, response) - estamos aguardando a solicitação, enviando uma resposta. Analisamos a solicitação e respondemos com 'ok' no caso de escrita ou com dados / Nenhum no caso de leitura.

import pickle
import json
import zmq

def run_daemon():
    memory = {}

    context = zmq.Context()
    socket = context.socket(zmq.REP)
    socket.bind('tcp://127.0.0.1:43000')

    while True:
        try:
            command, key, data = pickle.loads(socket.recv())
            if command == 'set':
                memory[key] = data
                socket.send(b'ok')
            elif command == 'get':
                result = memory.get(key, None)
                socket.send(pickle.dumps(result))
        except Exception as e:
            print(e)

if __name__ == '__main__':
    run_daemon()

Para testar tudo junto, iniciamos o servidor com o comando
python daemon.py

Na próxima guia, inicie o python no modo interativo.

>>> from lib import SuperCacher
>>> cache=SuperCacher()
>>> cache.set('key', 'value')
True
>>> cache.get('key')
'value'

Oh milagre, funciona! Agora você pode escrever com segurança em seu currículo “desenvolvimento de armazenamento de valor-chave usando o protocolo zmq”

Fonte: habr.com