Utgivningen av dokumentorienterad databas Apache CouchDB 3.0

Händelse genomförd utgåvan av en distribuerad dokumentorienterad databas Apache CouchDB 3.0, som tillhör klassen NoSQL-system. Källkoden för projektet sprids är licensierad under Apache 2.0.

Förbättringar, genomförd i Apache CouchDB 3.0:

• Säkerheten har förstärkts i standardkonfigurationen.
  Vid start måste nu användaren admin definieras, annars avslutas servern med ett fel (detta löser problem med start av servrar som av misstag lämnar åtkomst utan autentisering). För att göra anrop till " /_all_dbs " krävs nu administratörsrättigheter, och alla databaser skapas som standard tillgängliga endast för användaren admin (åtkomstparametrar kan ändras via objektet " _security "). Redigering av objekt i databasen _users är förbjuden som standard;
• Tillagd möjlighet att skapa användardefinierade segmenterade databaser (partitionerade), som ger möjlighet att definiera egna regler för fördelning av dokument över segment (shard range). Speciella optimeringar har lagts till i vyer och Mango-index för segmenterade databaser;
• Implementerad automatiskt uppdelningsläge vid segmentering (sharding). Det är nu möjligt att omfördela data över segment med beaktande av det ökande q-faktorn, som används för att bestämma uppdelningsnivån;
• Tillagd ken-subsystemet för automatisk bakgrundsindexering och för att hålla sekundära index (JavaScript, Mango, text-sökningsindex) aktuella utan att explicit starta byggoperationer;
• Processen för smoosh, som används för automatisk paketering av databaser, har helt omarbetats;
• Ett nytt subsystem IO Queue, som används för att ändra in- och utdata-prioritet för vissa operationer;
• Systemet för regressiv testning har implementerats;
• Officiellt stöd har lagts till för plattformar arm64v8 (aarch64) och ppc64le (ppc64el);
• Stöd har lagts till för bindning till JavaScript-motorn SpiderMonkey 1.8.5 (ESR-grenen av Firefox 60) med förbättrat stöd för ES5, ES6 och ES2016+;
• Sökmotorn Dreyfus baserad på Lucene, vilket gör det betydligt enklare att implementera ett söksystem baserat på CouchDB;
• En backend för loggning med systemd-journald har lagts till;
• Inställningen "[couchdb] single_node" har lagts till, där mindre systemdatabaser automatiskt skapas av CouchDB om de saknas;
• Prestanda för couch_server-processen har optimerats;
• Installationsprogrammet för Windows-plattformen har betydligt förbättrats;
• Visningsstorleken är begränsad till 2^28 (268435456) resultat. Denna gräns kan konfigureras separat för vanliga och segmenterade visningar med hjälp av alternativen query_limit och partition_query_limit i avsnittet «[query_server_config]»;
• Den separata HTTP-gränssnittet för att hantera den lokala noden, som körs på port 5986, har tagits bort; funktionaliteten är nu tillgänglig via det gemensamma gränssnittet för klusterhantering;
• Maximal dokumentstorlek har reducerats till 8 MB, vilket kan orsaka problem med datareplication från äldre servrar efter uppgradering till CouchDB 3.0. För att öka gränsen kan inställningen «[couchdb] max_document_size» användas;
• En omfattande rensning av föråldrade funktioner har genomförts, såsom anrop av _replicator och _external, fälten disk_size och data_size, alternativet delayed_commits;
• För att köra CouchDB krävs nu Erlang/OTP 20.3.8.11+, 21.2.3+ eller 22.0.5. Funktionalitet med Erlang/OTP 19 har teoretiskt bevarats, men den är täckt av tester.

CouchDB lagrar data i ett ordnat lista-format och möjliggör partiell datareplication mellan flera databaser i ett «master-master»-läge, med samtidig upptäckte och lösningar av konfliktsituationer. Varje server lagrar sin lokala uppsättning data, som synkroniseras med andra servrar som kan sättas i offline-läge och periodiskt replikera ändringar. Denna funktion gör särskilt CouchDB till en attraktiv lösning för att organisera synkronisering av programinställningar mellan olika datorer. Lösningar baserade på CouchDB har implementerats av företag såsom BBC, Apple och CERN.

Frågor till CouchDB och datainindexering kan utföras enligt paradigmet MapReduce, med användning av JavaScript för att formulera logiken för dataval. Systemkärnan är skriven i Erlang, som är optimerad för att hantera många parallella begärningar i distribuerade system. View-servern är skriven i C och baseras på JavaScript-motorn från Mozilla-projektet. Åtkomst till databasen sker via HTTP-protokollet med hjälp av RESTful JSON API, vilket möjliggör åtkomst till data även från webbaserade applikationer som körs i webbläsaren.

En enhet för datalagring är ett dokument som har ett unikt identifierare, en version och innehåller en godtycklig uppsättning namngivna fält i formatet nyckel/värde. För att organisera en pseudo-strukturerad uppsättning data från godtyckliga dokument (aggregering och skapande av urval) används konceptet att skapa vyer (view), vilket definieras med hjälp av JavaScript. Med JavaScript kan man också definiera funktioner för att validera data när nya dokument läggs till i en viss vy.

Källa: opennet.ru