{"id":35687,"date":"2019-10-31T22:05:46","date_gmt":"2019-10-31T19:05:46","guid":{"rendered":"https:\/\/prohoster.info\/blog\/kategorii-vmesto-direktorij-ili-semanticheskaya-fajlovaya-sistema-dlya-linux\/"},"modified":"2019-10-31T22:05:46","modified_gmt":"2019-10-31T19:05:46","slug":"kategorii-vmesto-direktorij-ili-semanticheskaya-fajlovaya-sistema-dlya-linux","status":"publish","type":"post","link":"https:\/\/prohoster.info\/da\/blog\/administrirovanie\/kategorii-vmesto-direktorij-ili-semanticheskaya-fajlovaya-sistema-dlya-linux","title":{"rendered":"Kategorier i stedet for mapper, eller en semantisk filsystem til Linux","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

Data classification is, in itself, an interesting topic for research. I enjoy collecting information that seems necessary and have always tried to create logical hierarchies of directories for my files. Once, I dreamed of a beautiful and convenient program for assigning tags to files, and I decided that I could no longer live this way.<\/p>\n

<\/a><\/noindex><\/p>\n

The problem of hierarchical file systems<\/h1>\n

<\/p>\n

Users often face the problem of deciding where to save the next new file and the challenge of finding their own files (sometimes the file names are not even meant to be remembered by a person).<\/p>\n

<\/p>\n

L\u00f8sningen kan v\u00e6re semantiske filsystemer, som som regel er et lag oven p\u00e5 det traditionelle filsystem. Mapperne i dem erstattes af semantiske attributter, ogs\u00e5 kaldet tags, kategorier, metadata. Jeg vil oftere bruge termen \u201ekategori\u201c, da ordet \u201etag\u201c nogle gange virker lidt underligt i konteksten af filsystemer, is\u00e6r n\u00e5r \u201eunder-tags\u201c og \u201etags aliaser\u201c dukker op.<\/p>\n

<\/p>\n

Assigning categories to files significantly alleviates issues of storage and file retrieval: if you remember (or at least suspect) even one of the categories assigned to a file, the file will never be lost from view.<\/p>\n

<\/p>\n

This topic has been raised several times on Habr (en<\/a><\/noindex>, to<\/a><\/noindex>, tre<\/a><\/noindex>, fire<\/a><\/noindex> and others), here I describe my solution.<\/p>\n

<\/p>\n

The path to implementation<\/h1>\n

<\/p>\n

Right after the mentioned dream, I outlined in a notebook a command-line interface that would enable the necessary work with categories. Back then, I thought I could write a prototype in a week or two using Python or Bash, and later work on creating a graphical interface with Qt or GTK. Reality, as always, turned out to be much harsher, and the development took longer.<\/p>\n

<\/p>\n

The initial idea was primarily to create a program with a user-friendly and concise command-line interface that would allow creating and deleting categories, assigning categories to files, and removing categories from files. I named the program vitis<\/em>.<\/p>\n

<\/p>\n

The first attempt to create vitis<\/em> endte uden resultater, da der blev brugt meget tid p\u00e5 arbejde og universitetet. Det andet fors\u00f8g var allerede noget: jeg lykkedes med at afslutte det projekt, jeg havde t\u00e6nkt mig til min kandidatopgave, og endda lave en prototype af GTK-gr\u00e6nsefladen. Men den version viste sig at v\u00e6re s\u00e5 usikker og ubehagelig, at jeg m\u00e5tte genoverveje meget.<\/p>\n

<\/p>\n

Jeg brugte den tredje version i meget lang tid selv og kategoriserede flere tusinde af mine filer. Dette blev i h\u00f8j grad faciliteret af det implementerede autoudfyld i bash. Men nogle problemer, s\u00e5som manglen p\u00e5 automatiske kategorier og muligheden for at gemme filer med samme navn, forblev stadig, og programmet var allerede ved at bukke under for sin egen kompleksitet. S\u00e5 jeg inds\u00e5 behovet for at l\u00f8se problemerne med udviklingen af kompliceret software: at skrive detaljerede krav, udvikle et funktionelt testsystem, studere pakkeinstruktioner og meget mere. Nu er jeg n\u00e5et til det \u00f8nskede, s\u00e5 dette beskedne v\u00e6rk kan pr\u00e6senteres for det frie f\u00e6llesskab. S\u00e5dan en specifik filh\u00e5ndtering, som h\u00e5ndtering gennem konceptet kategorier, rejser uventede sp\u00f8rgsm\u00e5l og problemer, og i l\u00f8sningen af dem vitis<\/em> skabte fem yderligere projekter omkring sig, nogle af dem vil blive n\u00e6vnt i artiklen. Indtil i dag vitis<\/em> har jeg ikke erhvervet en grafisk gr\u00e6nseflade, men brugervenligheden ved filkategorier fra kommandolinjen overstiger allerede for mig enhver fordel ved en almindelig grafisk filh\u00e5ndter.<\/p>\n

<\/p>\n

Eksempler p\u00e5 brug<\/h1>\n

<\/p>\n

Lad os starte simpelt \u2014 lad os oprette en kategori:<\/p>\n

<\/p>\n

vitis create Musik<\/code><\/pre>\n
<\/p>\n
Lad os tilf\u00f8je et eksempelnummer til den:<\/p>\n
<\/p>\n
vitis assign Musik -f \"The Ink Spots - I Don't Want To Set The World On Fire.mp3\"<\/code><\/pre>\n
<\/p>\n
Indholdet af kategorien \u201eMusik\u201c kan ses med underkommandoen \u201eshow\u201c:<\/p>\n
<\/p>\n
vitis show Musik<\/code><\/pre>\n
<\/p>\n
Den kan afspilles med underkommandoen \u201eopen\u201c<\/p>\n
<\/p>\n
vitis open Musik<\/code><\/pre>\n
<\/p>\n
Da vi i kategorien \u201eMusik\u201c kun har \u00e9n fil, vil kun denne fil blive startet. Jeg har lavet et s\u00e6rskilt v\u00e6rkt\u00f8j til at \u00e5bne filer med standardprogrammerne. vts-fs-open<\/em> (standardv\u00e6rkt\u00f8jer som xdg-open eller mimeopen tilfredsstillede mig af forskellige \u00e5rsager ikke; men hvis det er n\u00f8dvendigt, kan du i indstillingerne angive et andet v\u00e6rkt\u00f8j til universal \u00e5bning af filer). Dette v\u00e6rkt\u00f8j fungerer godt p\u00e5 forskellige distributioner med forskellige skriveborde, s\u00e5 jeg anbefaler at installere det sammen med vitis.<\/p>\n
<\/p>\n
Du kan ogs\u00e5 angive programmet til at \u00e5bne filer direkte:<\/p>\n
<\/p>\n
vitis open Musik --app qmmp<\/code><\/pre>\n
<\/p>\n
\"Kategorier<\/p>\n
<\/p>\n
Lad os oprette flere kategorier og tilf\u00f8je filer med \u201eassign\u201c. Hvis filer tildeles ikke-eksisterende kategorier, vil der blive anmodet om at oprette dem. Den un\u00f8dvendige anmodning kan undg\u00e5s ved at bruge flaget \u2014yes.<\/p>\n
<\/p>\n
vitis assign Programmering R -f \"Introduktion til R.pdf\" \"Statistikpakken R: sandsynlighedsteori og matematisk statistik.pdf\" --yes<\/code><\/pre>\n
<\/p>\n
Nu \u00f8nsker vi at tilf\u00f8je filen \u201eStatistical Package R: probability theory and mathematical statistics.pdf\u201c til kategorien \u201eMatematik\u201c. Vi ved, at denne fil allerede har kategorien \u201eR\u201c og derfor kan vi bruge den kategoriske sti fra Vitis-systemet:<\/p>\n
<\/p>\n
vitis assign Matematik -v \"R\/Statistikpakken R: sandsynlighedsteori og matematisk statistik.pdf\"<\/code><\/pre>\n
<\/p>\n
Heldigvis g\u00f8r bash-autocomplete dette nemt.<\/p>\n
<\/p>\n
Lad os se, hvad der blev resultatet, ved at bruge flaget \u2014categories for at se listen over kategorier for hver fil:<\/p>\n
<\/p>\n
vitis show R --categories<\/code><\/pre>\n
<\/p>\n
\"Kategorier<\/p>\n
<\/p>\n
Bem\u00e6rk, at filerne ogs\u00e5 blev tildelt automatiske kategorier baseret p\u00e5 format, type (som kombinerer formater) og filudvidelser. Disse kategorier kan deaktiveres, hvis \u00f8nskes. Senere vil jeg helt sikkert lave en lokalisering af deres navne.<\/p>\n
<\/p>\n
Lad os tilf\u00f8je noget ekstra til \u201eMatematik\u201c:<\/p>\n
<\/p>\n
vitis assign Matematik -f \"Matematisk analyse - 1984.pdf\" Perelman_Sjov_matematik_1927.djvu <\/code><\/pre>\n
<\/p>\n
Og nu begynder det interessante. I stedet for kategorier kan man skrive udtryk med operationer for sammens\u00e6tning, snit og forskydning, det vil sige anvende operationer p\u00e5 m\u00e6ngder. For eksempel vil intersection af \u201eMatematik\u201c med \u201eR\u201c resultere i \u00e9n fil.<\/p>\n
<\/p>\n
vitis show R i: Matematik<\/code><\/pre>\n
<\/p>\n
Tr\u00e6k \u201eR\u201c ud af \u201eMatematik\u201c:<\/p>\n
<\/p>\n
vitis show Matematik R #eller vitis show Matematik c: R<\/code><\/pre>\n
<\/p>\n
Vi kan tilf\u00e6ldigt forene musik og sprog R:<\/p>\n
<\/p>\n
vitis show Musik u: R<\/code><\/pre>\n
<\/p>\n
Flaget -n g\u00f8r det muligt at \u201etr\u00e6kke\u201c de n\u00f8dvendige filer ud fra resultatet af foresp\u00f8rgslen efter numre og\/eller omr\u00e5der, for eksempel, -n 3-7<\/code>, eller mere komplekst: -n 1,5,8-10,13<\/code>. Det er ofte nyttigt med underkommandoen open, som g\u00f8r det muligt at \u00e5bne de n\u00f8dvendige filer fra listen.<\/p>\n
<\/p>\n
\"Kategorier<\/p>\n
<\/p>\n
Selvom vi bev\u00e6ger os v\u00e6k fra at bruge almindelig hierarkisk mapper, kan det ofte v\u00e6re nyttigt at have underkategorier. Lad os oprette underkategorien \u201eStatistik\u201c i kategorien \u201eMatematik\u201c og tilf\u00f8je denne kategori til den passende fil:<\/p>\n
<\/p>\n
vitis create Matematik\/Statistik\n\nvitis assign Matematik\/Statistik -v \"R\/Introduktion til R.pdf\"\n\nvitis show Matematik --kategorier<\/code><\/pre>\n
<\/p>\n
\"Kategorier<\/p>\n
<\/p>\n
Vi kan se, at denne fil nu har kategorien \u201eMatematik\/Statistik\u201c i stedet for \u201eMatematik\u201c (un\u00f8dvendige links overv\u00e5ges).<\/p>\n
<\/p>\n
Attributing by full path can be inconvenient, so let's create a \"global\" alias:<\/p>\n
<\/p>\n
vitis assign Matematik\/Statistik -a Statistik\n\nvitis show Statistik<\/code><\/pre>\n
<\/p>\n
\"Kategorier<\/p>\n
<\/p>\n
Ikke kun almindelige filer<\/h2>\n
<\/p>\n
Internetsider<\/h3>\n
<\/p>\n
For at ensarte opbevaringen af enhver information ville det v\u00e6re nyttigt at kategorisere links til internetressourcer som minimum. Og dette er muligt:<\/p>\n
<\/p>\n
vitis assign Habr Farveanomalitet -i https:\/\/habr.com\/ru\/company\/sfe_ru\/blog\/437304\/ --yes<\/code><\/pre>\n
<\/p>\n
P\u00e5 et s\u00e6rligt sted vil en fil med titlen p\u00e5 HTML-siden og med filendelse .desktop blive oprettet. Dette er et traditionelt format for genveje i GNU\/Linux. S\u00e5danne genveje f\u00e5r automatisk kategorien NetworkBookmarks.<\/p>\n
<\/p>\n
Naturligvis bliver genveje oprettet for at blive brugt:<\/p>\n
<\/p>\n
vitis open Farveanomalitet<\/code><\/pre>\n
<\/p>\n
Udf\u00f8relsen af kommandoen \u00e5bner det netop gemte link i browseren. Kategoriserede genveje til internetkilder kan fungere som erstatning for browserbogm\u00e6rker.<\/p>\n
<\/p>\n
Filfragmenter<\/h3>\n
<\/p>\n
It is also useful to have categories for separate file fragments. Not a bad proposal, right? But the current implementation only concerns regular text files, audio, and video files. For instance, if you need to mark a specific piece of a concert or a funny moment in a movie, then by using assign you can take advantage of the flags \u2014fragname, \u2014start, \u2014finish. Let's save the intro from \"Duck Tales\":<\/p>\n
<\/p>\n
vitis assign vitis assign -c Introer -f Duck_Tales\/s01s01.avi --finish 00:00:59 --fragname \"Duck Tales intro\"\n\nvitis open Introer<\/code><\/pre>\n
<\/p>\n
In reality, no files are actually cut; instead, a pointer file to the fragment is created, describing the file type, file path, start and end of the fragment. Creating and opening pointers to fragments is delegated to utilities specifically created for this purpose \u2014 mediafragmenter and fragplayer. The first creates, the second opens. In the case of audio and video recordings, playing a media file from a specific to a specific position occurs using the VLC player, so it also needs to be on the system. I initially wanted to base this on mplayer, but for some reason, it was very clunky with positioning at the needed moment.
\nIn our example, a file \"Duck Tales intro.fragpointer\" is created (it is placed in a special location), and then the fragment is played from the start of the file (since \u2014start was not specified during creation) to a mark at 59 seconds, after which VLC closes.<\/p>\n
<\/p>\n
Et andet eksempel er, at vi har besluttet at kategorisere en enkelt optr\u00e6den ved en koncert med en kendt kunstner:<\/p>\n
<\/p>\n
vitis assign \u041b\u0435\u043f\u0441 \"\u0421\u043f\u0430\u0441\u0438\u0442\u0435 \u043d\u0430\u0448\u0438 \u0434\u0443\u0448\u0438\" -f \u0413\u0440\u0438\u0433\u043e\u0440\u0438\u0439 \u041b\u0435\u043fc - Koncert P\u0430\u0440\u0443\u0441 - sange af Vladimir Vysotsky.mp4 --fragname \"\u0421\u043f\u0430\u0441\u0438\u0442\u0435 \u043d\u0430\u0448\u0438 \u0434\u0443\u0448\u0438\" --start 00:32:18 --finish 00:36:51\n\nvitis open \"\u0421\u043f\u0430\u0441\u0438\u0442\u0435 \u043d\u0430\u0448\u0438 \u0434\u0443\u0448\u0438\"<\/code><\/pre>\n
<\/p>\n
N\u00e5r filen \u00e5bnes, vil den v\u00e6re inkluderet p\u00e5 den \u00f8nskede position og lukke efter fire og et halvt minut.<\/p>\n
<\/p>\n
Hvordan det hele fungerer + yderligere muligheder<\/h1>\n
<\/p>\n
Opbevaring af kategorier<\/h2>\n
<\/p>\n
I begyndelsen af planl\u00e6gningen af den semantiske filsystemorganisation kom jeg p\u00e5 tre metoder: gennem opbevaring af symbolske links, via en database, gennem beskrivelse i XML. Den f\u00f8rste metode vandt, da den p\u00e5 den ene side er enkel at implementere, og p\u00e5 den anden side giver brugeren mulighed for at se kategorierne direkte fra filsystemet (og det er praktisk og vigtigt). I begyndelsen af brugen vitis<\/em> In the user's home directory, a directory \"Vitis\" is created along with the configuration file \".config\/vitis\/vitis.conf\". In ~\/Vitis, directories corresponding to categories are created, and symbolic links to the original files are created in these category directories. Category aliases are also just links to them. Of course, having the \"Vitis\" directory in the home folder might not suit everyone. We can switch to any other location:<\/p>\n
<\/p>\n
vitis service set path \/mnt\/MyFavoriteDisk\/Vitis\/<\/code><\/pre>\n
<\/p>\n
At a certain point, it becomes clear that categorizing files scattered across different locations is somewhat senseless, as their placement may change. Therefore, I initially created a directory where I simply dumped everything and assigned categories to it. Then I decided that it would be nice to formalize this moment at the program level. Thus, the concept of \"file space\" emerged. At the beginning of usage. vitis<\/em> ville det bestemt ikke v\u00e6re d\u00e5rligt at konfigurere et sted (hvor alle de n\u00f8dvendige filer vil blive opbevaret) og aktivere automatisk gemming:<\/p>\n
<\/p>\n
vitis service add filespace \/mnt\/MyFavoriteDisk\/Filespace\/\n\nvitis service set autosave yes<\/code><\/pre>\n
<\/p>\n
Uden autosave ved brug af underkommandoen «assign» vil flaget —save v\u00e6re n\u00f8dvendigt, hvis man \u00f8nsker at gemme den tilf\u00f8jede fil i filomr\u00e5det.<\/p>\n
<\/p>\n
Desuden kan man tilf\u00f8je flere filsystemer og \u00e6ndre deres prioriteter, hvilket kan v\u00e6re nyttigt, n\u00e5r der er mange filer, der opbevares p\u00e5 forskellige medier. Her vil jeg ikke gennemg\u00e5 denne mulighed, detaljer kan l\u00e6ses i programmets hj\u00e6lp.<\/p>\n
<\/p>\n
Migration af semantisk filsystem<\/h2>\n
<\/p>\n
P\u00e5 den ene eller anden m\u00e5de kan mappen Vitis og filsystemerne teoretisk flytte rundt. For at bringe det til funktion oprettede jeg et separat v\u00e6rkt\u00f8j link-editor<\/em>, som kan redigere links i bulk ved at erstatte dele af stien med andre:<\/p>\n
<\/p>\n
cp -r \/mnt\/MyFavoriteDisk\/Vitis\/ ~\/Vitis\nlink-editor -d ~\/Vitis\/ -f \/mnt\/MyFavoriteDisk\/Vitis\/ -r ~\/Vitis\/ -R\ncp -r \/mnt\/MyFavoriteDisk\/Filespace\/ ~\/MyFiles\nlink-editor -d ~\/Vitis\/ -f \/mnt\/FlashDrive-256\/Filespace\/ -r ~\/MyFiles -R<\/code><\/pre>\n
<\/p>\n
I det f\u00f8rste tilf\u00e6lde, efter at vi er flyttet fra \/mnt\/MyFavoriteDisk\/Vitis\/ til hjemmebiblioteket, redigeres de symbolske links, der er relateret til aliasene. I det andet tilf\u00e6lde efter \u00e6ndringen af placeringen af filsystemet \u00e6ndres alle links i Vitis til de nye i henhold til anmodningen om at erstatte dele af deres sti.<\/p>\n
<\/p>\n
Automatiske kategorier<\/h2>\n
<\/p>\n
Hvis du k\u00f8rer kommandoen vitis service get autocategorization<\/code>, kan du se, at der som standard er indstillet automatisk tildeling af kategorier efter format (Format og Type) og filudvidelse (Extension).<\/p>\n
<\/p>\n
Dette er nyttigt, n\u00e5r du for eksempel skal finde noget blandt PDF-filer eller se, hvad du har gemt af EPUB og FB2, kan du blot udf\u00f8re anmodningen<\/p>\n
<\/p>\n
vitis show Format\/MOBI u: Format\/FB2<\/code><\/pre>\n
<\/p>\n
Det er sket, at de standardv\u00e6rkt\u00f8jer, som GNU\/Linux tilbyder, som file eller mimetype ikke har v\u00e6ret tilfredsstillende for mig, fordi de ikke altid korrekt bestemmer formatet. Jeg m\u00e5tte derfor lave en egen implementering baseret p\u00e5 filsiganturer og udvidelser. Generelt er emnet for bestemmelse af filformater et interessant forskningsomr\u00e5de og fortjener en egen artikel. Indtil videre kan jeg sige, at jeg muligvis ikke har sikret n\u00f8jagtig genkendelse for alle formater i verden, men det fungerer allerede temmelig godt. Desuden identificeres EPUB-filer i \u00f8jeblikket som ZIP (hvilket i det store hele er berettiget, men i praksis skal dette ikke betragtes som normalt). Indtil videre skal du betragte denne mulighed som eksperimentel og rapportere om fejl. I m\u00e6rkelige situationer kan du altid bruge kategorier baseret p\u00e5 filudvidelser, for eksempel Extension\/epub.<\/p>\n
<\/p>\n
Hvis automatisk kategorisering efter format er aktiveret, er ogs\u00e5 automatisk kategorisering aktiveret, som samler nogle formater som «Archives», «Pictures», «Video», «Audio» og «Documents». Der vil ogs\u00e5 blive oprettet lokaliserede navne for disse underkategorier.<\/p>\n
<\/p>\n
Hvad der ikke er n\u00e6vnt<\/h1>\n
<\/p>\n
vitis<\/em> er blevet et meget alsidigt v\u00e6rkt\u00f8j, og det er sv\u00e6rt at d\u00e6kke alt p\u00e5 \u00e9n gang. Kort n\u00e6vner jeg, hvad der ogs\u00e5 kan g\u00f8res:<\/p>\n
<\/p>\n