Team cp: korrekt kopiering av mappar med filer i *nix

I den här artikeln kommer vi att avslöja några obekanta saker relaterade till användning av wildcards vid kopiering, och otydligt beteende hos kommandot cp vid kopiering, samt sätt att korrekt kopiera stora mängder filer utan förluster eller kraschar.

Anta att vi behöver kopiera allt från mappen /source till mappen /target.

Det första som kommer att tänka på är:

cp /source/* /target

Låt oss genast korrigera detta kommando till:

cp -a /source/* /target

Nyckeln -a lägger till kopiering av alla attribut, rättigheter och gör det rekursivt. När exakt reproduktion av rättigheter inte krävs räcker nyckeln -r.

Efter kopieringen kommer vi att upptäcka att inte alla filer kopierades — filer som börjar med en punkt, såsom:

.profil
.lokal
.mc
och liknande.

Varför hände detta?

För att wildcards hanteras av skalet (bash i typiska fall). Som standard ignorerar bash alla filer som börjar med punkter, eftersom de tolkas som dolda. För att undvika detta beteende måste vi ändra beteendet bash med kommandot:

shopt -s dotglob

För att denna beteendeförändring ska bevaras efter omstart, kan vi skapa en fil wildcard.sh med detta kommando i mappen /etc/profile.d (det kan vara en annan mapp i din distribution).

Om det inte finns några filer i källkatalogen kan skalet inte ersätta stjärnan och kopieringen kommer också att sluta med ett fel. Det finns alternativ mot en sådan situation failglob och nullglob. Vi behöver ställa in failglob, vilket kommer att förhindra kommandot från att köras. nullglob inte fungerar, eftersom det omvandlar raden med wildcards som inte matchat till en tom rad (noll längd), vilket för cp kommer att orsaka ett fel.

Men om det finns tusentals filer i mappen bör vi helt överge tillvägagångssättet med wildcards. Anledningen är att bash expanderar wildcards till en mycket lång kommandorad liknande:

cp -a /souce/a /source/b /source/c …… /target

Det finns en begränsning för längden på kommandoraden, vilket vi kan ta reda på genom att använda kommandot:

getconf ARG_MAX

Vi får den maximala längden på kommandoraden i byte:

2097152

Eller:

xargs --show-limits

Vi får något som detta:

….
Maximum length of command we could actually use: 2089314
….

Så låt oss klara oss utan wildcards helt.

Låt oss helt enkelt skriva

cp -a /source /target

Och här kommer vi att stöta på otydligheten i beteendet cp. Om mappen /target inte finns kommer vi att få vad vi behöver.

Om mappen target redan finns, kommer filerna att kopieras till mappen /target/source.

Vi kan inte alltid ta bort mappen /target i förväg, eftersom det kan finnas filer där som vi behöver, och vårt mål är att till exempel komplettera filerna i /target med filer från /source.

Om käll- och målmapparna hade samma namn, till exempel om vi kopierade från /source till /home/source, skulle vi kunna använda kommandot:

cp -a /source /home

Och efter kopieringen skulle filerna i /home/source vara kompletterade med filer från /source.

Här är en logisk uppgift: Vi kan komplettera filer i mål-mappen om mapparna har samma namn, men om de skiljer sig åt kommer käll-mappen att placeras inuti målen. Hur kopierar man filer från /source till /target med cp utan wildcards?

För att kringgå denna skadliga begränsning använder vi en oväntad lösning:

cp -a /source/. /target

De som är väl bekanta med DOS och Linux har redan förstått: Inuti varje mapp finns två osynliga mappar «.» och «..», som är pseudomapper-länkar till den aktuella och överordnade katalogen.

• Vid kopiering cp kontrollerar den existensen och försöker skapa /target/.
• Denna katalog finns och det är /target
• Filer från /source har kopierats korrekt till /target.

Så, låt oss hänga upp det i en fet ram i vår minne eller på väggen:

cp -a /source/. /target

Kommandoets beteende är entydigt. Allt kommer att fungera utan fel oavsett om du har en miljon filer eller inte har några alls.

Slutsatser

Om du behöver kopiera alla filer från en mapp till en annan, använd inte wildcards, istället är det bättre att använda cp i kombination med punkten i slutet av källmappen. Detta kommer att kopiera alla filer, inklusive dolda, och misslyckas inte vid miljontals filer eller fullständig brist på filer.

Epilog

vmspike föreslog ett liknande command som ger samma resultat:

cp -a -T /source /target

Oz_Alex

cp -aT /source /target

OBS: storleken på bokstaven T är viktigt. Om du blandar ihop dem kommer du få en fullständig röra: riktningen för kopieringen kommer att förändras.
Tack:

• Företaget RUVDS.COM för stöd och möjligheten att publicera på sin blogg på Habré.
• För bilden TripletConcept. Bilden är väldigt stor och detaljerad, kan öppnas i ett separat fönster.

P.S. Rapportera eventuella upptäckta fel till mig. Jag ökar din karma för det.

Källa: habr.com