Nawonso database ya Messenger (gawo 2): kugawa "popeza phindu"

Tapanga bwino dongosolo la database yathu ya PostgreSQL yosungira makalata, chaka chatha, ogwiritsa ntchito akudzaza, ndipo tsopano ili ndi mamiliyoni a zolemba, ndipo... chinachake chinayamba kuchepa.

• Gawo 1: Kupanga maziko a maziko
• Gawo 2: gawo la "phindu"

Point ndi kuti Pamene kukula kwa tebulo kumakula, momwemonso "kuya" kwa ma index. - ngakhale logarithmically. Koma pakapita nthawi izi zimakakamiza seva kuti igwire ntchito zowerengera / kulemba zomwezo konza masamba ochulukirapo nthawi zambirikuposa pachiyambi.

Apa ndi pamene zimabwera kudzapulumutsa magawo.

Ndiloleni ndizindikire kuti sitikulankhula za sharding, ndiko kuti, kugawa deta pakati pa ma database osiyanasiyana kapena ma seva. Chifukwa ngakhale kugawa deta mu angapo ma seva, simudzachotsa vuto la indexes "kutupa" pakapita nthawi. Zikuwonekeratu kuti ngati mutha kuyika seva yatsopano tsiku lililonse, ndiye kuti mavuto anu sadzakhalanso mu ndege ya database inayake.

Sitidzalingalira zolemba zenizeni zogwiritsira ntchito magawo "mu hardware", koma njira yokhayokha - zomwe ziyenera "kudulidwa mu magawo", ndi zomwe chilakolako choterocho chimatsogolera.

Malingaliro

Tiyeni tifotokozenso cholinga chathu: tikufuna kuwonetsetsa kuti lero, mawa, ndi chaka chimodzi, kuchuluka kwa deta yowerengedwa ndi PostgreSQL pa ntchito iliyonse yowerengera / kulemba imakhalabe yofanana.

Kwa aliyense deta yosonkhanitsidwa motsatira nthawi (mauthenga, zikalata, zipika, zosungidwa, ...) kusankha kwachilengedwe ngati kiyi yogawa ndi tsiku/nthawi. Kwa ife, chochitika choterocho ndi mphindi yotumiza uthenga.

Dziwani kuti ogwiritsa ntchito pafupifupi nthawi zonse gwirani ntchito ndi "zaposachedwa". deta yotere - amawerenga mauthenga aposachedwa, amasanthula zipika zaposachedwa,... Ayi, ndithudi, amatha kupitilira mmbuyo nthawi, koma amachita izi kawirikawiri.

Kuchokera pazovuta izi zikuwonekeratu kuti yankho labwino kwambiri la uthenga lingakhale magawo "tsiku". - pambuyo pake, wogwiritsa ntchito nthawi zonse amawerenga zomwe zidabwera kwa iye "lero" kapena "dzulo".

Ngati timalemba ndikuwerenga pafupifupi gawo limodzi masana, ndiye kuti izi zimatipatsanso kugwiritsa ntchito bwino kukumbukira ndi disk - popeza magawo onse amalozera mosavuta mu RAM, mosiyana ndi "zazikulu ndi zonenepa" patebulo lonselo.

mwatsatane-tsatane

Kawirikawiri, zonse zomwe zanenedwa pamwambapa zikuwoneka ngati phindu limodzi lopitirira. Ndipo ndizotheka, koma chifukwa cha izi tiyenera kuyesetsa kwambiri - chifukwa chigamulo chogawa chimodzi mwa mabungwewo kumabweretsa kufunikira "kuona" zomwe zikugwirizana nazo.

Uthenga, katundu wake ndi zoyerekeza

Popeza tinaganiza zodula mauthenga ndi madeti, ndizomveka kugawanso zinthu zomwe zimadalira iwo (mafayilo ophatikizidwa, mndandanda wa olandila), ndi komanso ndi tsiku la uthenga.

Popeza imodzi mwa ntchito zomwe timachita ndikuwonera zolemba zamauthenga (zosawerengeka, zobwera, zonse), ndizomveka "kuwakokera" kuti agawane ndi masiku a uthenga.

Timawonjezera kiyi yogawa (tsiku lauthenga) kumatebulo onse: olandila, fayilo, zolembetsa. Simuyenera kuwonjezera pa uthenga womwewo, koma gwiritsani ntchito DateTime yomwe ilipo.

ulusi

Popeza pali mutu umodzi wokha wa mauthenga angapo, palibe njira "yodula" mu chitsanzo chomwecho; muyenera kudalira chinachake. Kwa ife ndi abwino tsiku la uthenga woyamba m'makalata - ndiko kuti, nthawi yolenga, kwenikweni, ya mutuwo.

Onjezani kiyi yogawa (tsiku la mutu) kumatebulo onse: mutu, wophunzira.

Koma tsopano tili ndi mavuto awiri nthawi imodzi:

• Ndi gawo liti lomwe ndiyenera kuyang'ana mauthenga pamutuwu?
• Ndi gawo liti lomwe ndiyenera kuyang'ana mutu wa uthengawu?

Tikhoza, ndithudi, kupitiriza kufufuza m'magawo onse, koma izi zidzakhala zachisoni kwambiri ndipo zidzanyalanyaza zopambana zathu zonse. Chifukwa chake, kuti tidziwe komwe tikuyenera kuyang'ana, tipanga maulalo / zolozera zomveka ku zigawo:

• tidzawonjezera mu uthengawo tsiku la mutu
• tiwonjeze pamutuwu tsiku la uthenga lakhazikitsidwa makalata awa (atha kukhala tebulo lapadera, kapena masiku angapo)

Popeza padzakhala zosintha zochepa pamndandanda wamasiku a mauthenga a aliyense payekhapayekha (pambuyo pa zonse, pafupifupi mauthenga onse amagwera masiku 1-2 oyandikana nawo), ndidzayang'ana pankhaniyi.

Pazonse, kapangidwe ka nkhokwe yathu idatenga mawonekedwe awa, poganizira kugawa:

Matebulo: RU, ngati mumadana ndi zilembo za Cyrillic m'maina a matebulo / minda, ndibwino kuti musayang'ane

-- секции по дате сообщения
CREATE TABLE "Сообщение_YYYYMMDD"(
  "Сообщение"
    uuid
      PRIMARY KEY
, "Тема"
    uuid
, "ДатаТемы"
    date
, "Автор"
    uuid
, "ДатаВремя" -- используем как дату
    timestamp
, "Текст"
    text
);

CREATE TABLE "Адресат_YYYYMMDD"(
  "ДатаСообщения"
    date
, "Сообщение"
    uuid
, "Персона"
    uuid
, PRIMARY KEY("Сообщение", "Персона")
);

CREATE TABLE "Файл_YYYYMMDD"(
  "ДатаСообщения"
    date
, "Файл"
    uuid
      PRIMARY KEY
, "Сообщение"
    uuid
, "BLOB"
    uuid
, "Имя"
    text
);

CREATE TABLE "РеестрСообщений_YYYYMMDD"(
  "ДатаСообщения"
    date
, "Владелец"
    uuid
, "ТипРеестра"
    smallint
, "ДатаВремя"
    timestamp
, "Сообщение"
    uuid
, PRIMARY KEY("Владелец", "ТипРеестра", "Сообщение")
);
CREATE INDEX ON "РеестрСообщений_YYYYMMDD"("Владелец", "ТипРеестра", "ДатаВремя" DESC);

-- секции по дате темы
CREATE TABLE "Тема_YYYYMMDD"(
  "ДатаТемы"
    date
, "Тема"
    uuid
      PRIMARY KEY
, "Документ"
    uuid
, "Название"
    text
);

CREATE TABLE "УчастникТемы_YYYYMMDD"(
  "ДатаТемы"
    date
, "Тема"
    uuid
, "Персона"
    uuid
, PRIMARY KEY("Тема", "Персона")
);

CREATE TABLE "ДатыСообщенийТемы_YYYYMMDD"(
  "ДатаТемы"
    date
, "Тема"
    uuid
      PRIMARY KEY
, "Дата"
    date
);

Sungani khobiri lokongola

Chabwino, bwanji ngati sitigwiritsa ntchito classic sectioning njira kutengera kugawa kwamitengo yamunda (kudzera zoyambitsa ndi cholowa kapena GAWO BY), ndi "pamanja" pamlingo wofunsira, mudzazindikira kuti mtengo wa kiyi yogawa wasungidwa kale m'dzina la tebulo lomwe.

Ndiye ngati muli choncho Kodi mukuda nkhawa kwambiri ndi kuchuluka kwa data yomwe yasungidwa?, ndiye mutha kuchotsa minda "yowonjezera" ndikuyika matebulo enieni. Zowona, zisankho zonse m'magawo angapo pankhaniyi ziyenera kusamutsidwa ku mbali yofunsira.

Source: www.habr.com