Команда cp: правилно копиране на папки с файлове в *nix

В тази статия ще бъдат разкрити някои неочевидни неща, свързани с използването на wildcard-ове при копирането, нееднозначното поведение на командата cp при копирането, както и начините, позволяващи коректно копиране на огромно количество файлове без пропуски и грешки.

Да предположим, че трябва да копираме всичко от папка /source в папка /target.

Първото, което идва на ум, е:

cp /source/* /target

Веднага ще поправим тази команда на:

cp -a /source/* /target

Ключ -a което ще добави копирането на всички атрибути, права и ще добави рекурсия. Когато не е необходимо точното възпроизвеждане на правата, е достатъчен ключът -r.

След копирането ще открием, че не всички файлове са скопирани — игнорирани са файлове, започващи с точка, като:

.профил
.местен
.mc
и подобни.

Защо стана така?

Защото wildcard-овете се обработват от shell (bash като правило). По подразбиране bash игнорира всички файлове, започващи с точки, тъй като ги третира като скрити. За да избегнем такова поведение, ще трябва да променим настройките bash с помощта на командата:

shopt -s dotglob

За да запазим това поведение след рестартиране, можем да създадем файл wildcard.sh с тази команда в папката /etc/profile.d (възможно е в дистрибуцията ви да има друга папка).

Ако в директорията източник няма файлове, shell няма да може да замести звездичката, и копирането ще завърши с грешка. Съществуват опции failglob и nullglob. Ще трябва да зададем failglob, което няма да позволи на командата да се изпълни. nullglob не е подходяща, тъй като я трансформира в пуст низ (нулева дължина), което за cp ще предизвика грешка.

Въпреки това, ако в папката има хиляди файлове и повече, трябва да се откажем от подхода с wildcard-овете. Фактът е, че bash развива wildcard-ове в много дълга командна линия, подобна на:

cp -a /souce/a /source/b /source/c …… /target

Има ограничение на дължината на командната линия, което можем да разберем, използвайки командата:

getconf ARG_MAX

Ще получим максималната дължина на командната линия в байтове:

2097152

Или:

xargs --show-limits

Ще получим нещо от сорта на:

….
Максимална дължина на команди, която всъщност можем да използваме: 2089314
….

И така, нека се справим без wildcard-ове.

Просто ще напишем

cp -a /source /target

И тук ще се сблъскаме с нееднозначно поведение cp. Ако папката /target не съществува, ще получим това, което ни трябва.

Въпреки това, ако папката target съществува, файловете ще бъдат копирани в папката /target/source.

Не винаги можем да изтрием предварително папката /target, тъй като в нея може да има нужни файлове и нашата цел, да речем, е да добавим файлове от /source в /target.

Ако папките на източника и получателя бяха именувани по същия начин, например, ако копираме от /source в /home/source, бихме могли да използваме командата:

cp -a /source /home

И след копирането файловете в /home/source щяха да бъдат допълнени с файловете от /source.

Ето една логическа задача: можем да допълним файловете в папката-получател, ако папките имат същите имена, но ако се различават, папката-източник ще бъде поставена вътре в получателя. Как да копираме файловете от /source в /target с cp без wildcards?

За да заобиколим това нежелано ограничение, използваме неочевидно решение:

cp -a /source/. /target

Тези, които добре познават DOS и Linux, вече са разбрали всичко: всяка папка има две невидими папки „.“ и „..“, които са псевдопапки-свръзки към текущата и горната директория.

• При копиране cp се проверява съществуването и се опитва да създаде /target/.
• Такава директория съществува и това е /target.
• Файловете от /source бяха коректно копирани в /target.

И така, вмъкнете в паметта или на стената:

cp -a /source/. /target

Поведението на тази команда е недвусмислено. Всичко ще работи без грешки, независимо дали имате милион файлове или нямате никакви.

Изводи

Ако трябва да копирате всичко файлове от една папка в друга, не използвайте wildcards, вместо тях е по-добре да използвате cp в комбинация с точка в края на папката-източник. Това ще копира всички файлове, включително скритите, и няма да се срине при милиони файлове или при пълно отсъствие на файлове.

Следсловие

vmspike предложи аналогичен по резултат вариант на командата:

cp -a -T /source /target

Oz_Alex

cp -aT /source /target

ВАЖНО: регистърът на буквите T има значение. Ако объркате, можете да получите пълна бъркотия: посоката на копиране ще се промени.
Благодарности:

• На компаниите RUVDS.COM за подкрепата и възможността за публикуване в техния блог в Хабра.
• За изображението TripletConcept. Картината е много голяма и детайлна, може да се отвори в отделен прозорец.

P.S. Забелязани грешки моля изпращайте на лични съобщения. Повишавам за това кармата.

Източник: habr.com