it-swarm-ru.tech

Как переместить 100 файлов из папки, содержащей тысячи?

У меня есть каталог с тысячами файлов. Как я могу переместить 100 файлов (любые файлы будут делать) в другое место.

43
gaijin
for file in $(ls -p | grep -v / | tail -100)
do
mv $file /other/location
done

Это предполагает, что имена файлов не содержат пробелов, символ новой строки (предполагается, что значение по умолчанию $IFS), символы подстановки (?, *, [) или начните с -.

36
ennuikiller

Это проще всего в Zsh:

mv -- *([1,100]) /other/location/

Это перемещает первые 100 не скрытых файлов (любого типа, изменить ([1,100]) до (.[1,100]) только для обычных файлов или (^/[1,100]) для любого типа, кроме каталога ) в лексикографическом порядке имен. Вы можете выбрать другой порядок сортировки с помощью oglob qualifier , например, переместить 100 самых старых файлов:

mv -- *(Om[1,100]) /other/location/

С другими оболочками вы можете сделать это в цикле с ранним выходом.

i=0
for x in *; do
  if [ "$i" = 100 ]; then break; fi
  mv -- "$x" /other/location/
  i=$((i+1))
done

Другим переносимым способом было бы создать список файлов и удалить все, кроме последних 100 .

37

Если вы не используете zsh:

set -- *
[ "$#" -le 100 ] || shift "$(($# - 100))"
mv -- "[email protected]" /target/dir

Переместил бы последние (в алфавитном порядке) 100 единиц.

8
Stéphane Chazelas

Следующее сработало для меня. Извините, если он был опубликован ранее, но я не увидел его в быстром сканировании.

ls path/to/dir/containing/files/* | head -100 | xargs -I{} cp {} /Path/to/new/dir
5
Joe

Следующий oneliner в Shell поможет.

 foreach i (`find Source_Directory -type f --max-глубина 1 | хвост -100`); делать; {mv $ i Target_Directory}; сделанный
3
diham
3
den2042

mmv - выдающаяся утилита, которая также позволит вам делать массовые переименования файлов. (Мне пришлось Sudo apt-get install mmv на моем компьютере, чтобы установить его.) Простой пример использования: предположим, у вас есть каталог файлов с расширением .JPG, который вы хотите изменить на строчный .jpg. Следующая команда делает трюк:

mmv \*.JPG \#1.jpg

Обратная косая черта используется для обозначения подстановочного знака. */JPG соответствует чему-либо с расширением JPG. В части "to" команды # 1 использует соответствующий текст из первого подстановочного знака для переименования файла. Конечно, вы можете поставить другой путь перед # 1, чтобы также переместить файл.

1
Pete
#!/bin/bash
c=1; d=1; mkdir -p NEWDIR_${d}
for jpg_file in *.jpg
do
if [ $c -eq 100 ]
then
d=$(( d + 1 )); c=0; mkdir -p NEWDIR_${d}
fi
mv "$jpg_file" NEWDIR_${d}/
c=$(( c + 1 ))
done

попробуй этот код

1
juicebyah

следующая команда работает, если вы заинтересованы в использовании ls

$ ls -rt source/* | head -n100 | xargs cp -t destination

Как это работает ??

  • ls -rt source/* - команда выводит список всех файлов с относительным путем
  • head -n100 - занимает первые 100 файлов
  • xargs cp -t destination - перемещает эти файлы в папку назначения
1
Rohith Yeravothula

Попробуй это:

find /source/directory -type f -maxdepth 1 -print | tail -100 | xargs -J % mv % /other/location/
0
Saumil

Если вы хотите быть в безопасности/обрабатывать имена файлов с пробелами, символами новой строки, кавычками, обратной косой чертой и т.д., Вы должны использовать разделители, заканчивающиеся нулем:

find "$srcdir" -maxdepth 1 -type f -print0 | head -z -n 100 | xargs -0 -r -- mv -t "$destdir" --

РЕДАКТИРОВАТЬ 2: ПРИМЕЧАНИЕ: если у вас нет head -z ( по какой-либо причине ) вы можете заменить вышеуказанное head -z -n 1000 с tr '\0\n' '\n\0' | head -n 1000 | tr '\0\n' '\n\0' (или см. другие способы )

-maxdepth 1 не будет искать файлы в подкаталогах $srcdir, поэтому перечислены только файлы в $srcdir.
-print0 буду использовать \0 вместо новой строки (\n) между каждым перечисленным файлом - это помогает обрабатывать файлы, содержащие символы новой строки и пробелы с xargs.
head -z будет считать \0 прекращено (вместо новой строки (\n) прекращено) строки как строки. -n 100 перечислит только первое 100 файлы, которые find найдены.
Если вы хотите увидеть, какая команда xargs будет выполняться, добавьте -t (или --verbose).
xargs -0 "Элементы ввода завершаются нулем (\0) символ вместо пробела, и кавычки и обратный слеш не являются специальными (каждый символ воспринимается буквально)
xargs -r не будет запускаться mv, если нет файлов для перемещения (т. е. если find не найдено ни одного файла).
-- прекращает обработку аргументов как опций для программы, подробнее здесь

Пример вывода (запускается одна команда mv и ​​может обрабатывать файлы с символами новой строки в их имени):

$ find /tmp/t -maxdepth 1 -type f -print0 | head -z -n 100 | xargs -t -0 -r -- mv -t /tmp -- ; echo "exit codes: ${PIPESTATUS[@]}"
mv -t /tmp -- /tmp/t/file containing quotes"' then spaces /tmp/t/file containing quotes"' /tmp/t/file containing a slash n here\n /tmp/t/file containing a new line here
and continues /tmp/t/s /tmp/t/-x and -L 1. /tmp/t/of replace-str in the initi /tmp/t/-thisfile_starts_with_a_hyphen and has spaces and a -hyphen here /tmp/t/-thisfile_starts_with_a_hyphen and has spaces /tmp/t/-thisfile_starts_with_a_hyphen /tmp/t/another      with       spaces /tmp/t/one with spaces /tmp/t/c /tmp/t/a 
exit codes: 0 0 0

$ ls -1R /tmp/t
/tmp/t:
a
'another      with       spaces'
b
c
'file containing a new line here'$'\n''and continues'
'file containing a slash n here\n'
'file containing quotes"'\'''
'file containing quotes"'\'' then spaces'
'of replace-str in the initi'
'one with spaces'
s
'some dir'
-thisfile_starts_with_a_hyphen
'-thisfile_starts_with_a_hyphen and has spaces'
'-thisfile_starts_with_a_hyphen and has spaces and a -hyphen here'
'-x and -L 1.'

/tmp/t/b:
'file with spaces'

'/tmp/t/some dir':
'some file'

Для find:

-maxdepth levels
       Descend at most levels (a non-negative integer) levels of direc‐
       tories below the starting-points.  -maxdepth 0
        means only apply the tests and actions to  the  starting-points
       themselves.
-type c
       File is of type c:

       b      block (buffered) special

       c      character (unbuffered) special

       d      directory

       p      named pipe (FIFO)

       f      regular file

       l      symbolic link; this is never true if the -L option or the
              -follow  option is in effect, unless the symbolic link is
              broken.  If you want to search for symbolic links when -L
              is in effect, use -xtype.

       s      socket

       D      door (Solaris)
-P     Never follow symbolic links.  This  is  the  default  behaviour.
       When find examines or prints information a file, and the file is
       a symbolic link, the information used shall be  taken  from  the
       properties of the symbolic link itself.
-L     Follow symbolic links.  When find examines or prints information
       about files, the information used shall be taken from the  prop‐
       erties  of  the file to which the link points, not from the link
       itself (unless it is a broken symbolic link or find is unable to
       examine  the file to which the link points).  Use of this option
       implies -noleaf.  If you later use the -P option,  -noleaf  will
       still  be  in  effect.   If -L is in effect and find discovers a
       symbolic link to a subdirectory during its search, the subdirec‐
       tory pointed to by the symbolic link will be searched.

       When the -L option is in effect, the -type predicate will always
       match against the type of the file that a symbolic  link  points
       to rather than the link itself (unless the symbolic link is bro‐
       ken).  Actions that can cause symbolic links  to  become  broken
       while  find  is executing (for example -delete) can give rise to
       confusing behaviour.  Using -L causes  the  -lname  and  -ilname
       predicates always to return false.

Для head:

-n, --lines=[-]NUM
       print the first NUM lines instead of  the  first  10;  with  the
       leading '-', print all but the last NUM lines of each file
-z, --zero-terminated
       line delimiter is NUL, not newline

РЕДАКТИРОВАТЬ: Кто-то упоминается что у них не было head -z, это версия, которую я использовал (в Fedora 25):

$ head --version
head (GNU coreutils) 8.25
Copyright (C) 2016 Free Software Foundation, Inc.
License GPLv3+: GNU GPL version 3 or later <http://gnu.org/licenses/gpl.html>.
This is free software: you are free to change and redistribute it.
There is NO WARRANTY, to the extent permitted by law.

Written by David MacKenzie and Jim Meyering.

$ rpm -qf /usr/bin/head
coreutils-8.25-17.fc25.x86_64

Для xargs:

-0, --null
       Input  items  are  terminated  by a null character instead of by
       whitespace, and the quotes and backslash are not special  (every
       character is taken literally).  Disables the end of file string,
       which is treated like any other  argument.   Useful  when  input
       items  might  contain  white space, quote marks, or backslashes.
       The GNU find -print0 option produces  input  suitable  for  this
       mode.
-r, --no-run-if-empty
       If the standard input does not contain any nonblanks, do not run
       the command.  Normally, the command is run once even if there is
       no input.  This option is a GNU extension.
-P max-procs, --max-procs=max-procs
       Run  up  to max-procs processes at a time; the default is 1.  If
       max-procs is 0, xargs will run as many processes as possible  at
       a  time.   Use the -n option or the -L option with -P; otherwise
       chances are that only one exec will be  done.   While  xargs  is
       running,  you  can send its process a SIGUSR1 signal to increase
       the number of commands to run simultaneously, or  a  SIGUSR2  to
       decrease  the number.  You cannot increase it above an implemen‐
       tation-defined limit (which is shown with  --show-limits).   You
       cannot  decrease  it  below  1.  xargs never terminates its com‐
       mands; when asked to decrease, it merely waits for more than one
       existing command to terminate before starting another.

       Please  note  that  it is up to the called processes to properly
       manage parallel access to shared  resources.   For  example,  if
       more  than one of them tries to print to stdout, the ouptut will
       be produced in an indeterminate order (and very likely mixed up)
       unless  the  processes  collaborate in some way to prevent this.
       Using some kind of locking scheme is one  way  to  prevent  such
       problems.   In  general, using a locking scheme will help ensure
       correct output but reduce performance.  If  you  don't  want  to
       tolerate  the  performance  difference,  simply arrange for each
       process to produce a separate output file (or otherwise use sep‐
       arate resources).
-t, --verbose
       Print  the command line on the standard error output before exe‐
       cuting it.

Для cp:

-t, --target-directory=DIRECTORY
       copy all SOURCE arguments into DIRECTORY
-v, --verbose
       explain what is being done
0
user306023

Я пришел сюда, но мне нужно было копировать файлы по частям (по 99) из /DIR1 до /DIR2. Я вставлю сценарий сюда, чтобы помочь другим, может быть:

#!/bin/bash
# Thanks to <Jordan_U> @ #ubuntu
# 06 Dec 2014

i=0
copy_unit=98

for file in /DIR1/*; do
  cp "$file" /DIR2
  if [[ "$i" -ge "$copy_unit" ]]; then
    echo "Pausing, press enter to continue"
    read
    i=0
  fi
  ((i++))
done
0
Enissay

Другой вариант, вдохновленный https://unix.stackexchange.com/a/105042/66736 :

cp `ls -d ./* | head -n 100` tmpi

Это может быть не самый быстрый или самый элегантный способ, но это способ, который вы можете сохранить в памяти.

0
lucidbrot