scp lub sftp kopiują wiele plików za pomocą jednego polecenia

Chciałbym skopiować pliki z / na zdalny serwer w różnych katalogach. Na przykład chcę uruchomić te 4 polecenia jednocześnie.

scp remote:A/1.txt local:A/1.txt
scp remote:A/2.txt local:A/2.txt
scp remote:B/1.txt local:B/1.txt
scp remote:C/1.txt local:C/1.txt

Jak najłatwiej to zrobić?

Skopiuj wiele plików ze zdalnego do lokalnego:

$ scp [email protected]:/some/remote/directory/\{a,b,c\} ./

Skopiuj wiele plików z lokalnego na zdalny:

$ scp foo.txt bar.txt [email protected]:~
$ scp {foo,bar}.txt [email protected]:~
$ scp *.txt [email protected]:~

Skopiuj wiele plików ze zdalnego do zdalnego:

$ scp [email protected]:/some/remote/directory/foobar.txt \
[email protected]:/some/remote/directory/

Źródło: http://www.hypexr.org/linux_scp_help.php

Z lokalnego na serwer:

scp file1.txt file2.sh [email protected]:~/pathtoupload

Z serwera na lokalny:

scp -T [email protected]:"file1.txt file2.txt" "~/yourpathtocopy"

Możesz kopiować całe katalogi za pomocą -rprzełącznika, więc jeśli możesz wyizolować swoje pliki do własnego katalogu, możesz skopiować wszystko naraz.

scp -r ./dir-with-files user@remote-server:upload-path

scp -r user@remote-server:path-to-dir-with-files download-path

więc na przykład

scp -r [email protected]:/var/log ~/backup-logs

Lub jeśli jest ich tylko kilka, możesz użyć:

scp 1.txt 2.txt 3.log user@remote-server:upload-path

Jak wspomniał Jiri, możesz użyć scp -r user@host:/some/remote/path /some/local/path do kopiowania plików rekurencyjnie. Zakłada się, że istnieje jeden katalog zawierający wszystkie pliki, które chcesz przenieść (i nic więcej).

Jednak SFTP stanowi alternatywę, jeśli chcesz przesyłać pliki z wielu różnych katalogów, a miejsca docelowe nie są identyczne:

sftp user@host << EOF
  get /some/remote/path1/file1 /some/local/path1/file1
  get /some/remote/path2/file2 /some/local/path2/file2
  get /some/remote/path3/file3 /some/local/path3/file3
EOF

Używa składni „tutaj doc” do definiowania sekwencji poleceń wejściowych SFTP. Alternatywnie, możesz umieścić polecenia SFTP w pliku tekstowym i wykonaćsftp user@host -b batchFile.txt

Odpowiedzi z {file1,file2,file3} działa tylko z bash (zdalnie lub lokalnie)

Prawdziwy sposób to:

scp user@remote:'/path1/file1 /path2/file2 /path3/file3' /localPath

Po dłuższej zabawie ze scp znalazłem najsolidniejsze rozwiązanie:

(Uwaga na pojedyncze i podwójne znaki cudzysłowu)

Lokalny do zdalnego:

scp -r "FILE1" "FILE2" HOST:'"DIR"'

Zdalne do lokalnego:

scp -r HOST:'"FILE1" "FILE2"' "DIR"

Zauważ, że cokolwiek po „HOST:” zostanie wysłane do pilota i tam parsowane. Musimy więc upewnić się, że nie są one przetwarzane przez lokalną powłokę. Właśnie dlatego pojawiają się pojedyncze cudzysłowy. Podwójne cudzysłowy są używane do obsługi spacji w nazwach plików.

Jeśli wszystkie pliki znajdują się w tym samym katalogu, możemy użyć *, aby dopasować je wszystkie, np

scp -r "DIR_IN"/*.txt HOST:'"DIR"'
scp -r HOST:'"DIR_IN"/*.txt' "DIR"

W porównaniu do użycia składni „{}”, która jest obsługiwana tylko przez niektóre powłoki, ta jest uniwersalna

Najprostszy sposób to

local$ scp remote:{A/1,A/2,B/3,C/4}.txt ./

Tak więc lista {..} może zawierać katalogi (A, B i C tutaj są katalogami; „1.txt” i „2.txt” to nazwy plików w tych katalogach).

Chociaż skopiuje wszystkie cztery pliki do jednego katalogu lokalnego - nie jestem pewien, czy tego właśnie chciałeś.

W powyższym przypadku skończysz na plikach zdalnych A / 1.txt, A / 2.txt, B / 3.txt i C / 4.txt skopiowanych do jednego lokalnego katalogu o nazwach plików ./1.txt, ./2.txt, ./3.txt i ./4.txt

Problem : Kopiowanie wielu katalogów ze zdalnego serwera na komputer lokalny za pomocą pojedynczego polecenia SCP i zachowanie każdego katalogu tak, jak jest na zdalnym serwerze.

Rozwiązanie : SCP może to zrobić z łatwością. Rozwiązuje to irytujący problem wielokrotnego wprowadzania hasła podczas korzystania z SCP z wieloma folderami. W rezultacie oszczędza to również dużo czasu!

na przykład

# copies folders t1, t2, t3 from `test` to your local working directory
# note that there shouldn't be any space in between the folder names;
# we also escape the braces.
# please note the dot at the end of the SCP command

~$ cd ~/working/directory
~$ scp -r [email protected]:/work/datasets/images/test/\{t1,t2,t3\}  .

PS: Motywowany tą świetną odpowiedzią: scp lub sftp kopiują wiele plików za pomocą jednego polecenia

W oparciu o komentarze działa to również dobrze w Git Bash w systemie Windows

Skopiuj wiele katalogów:

scp -r dir1 dir2 dir3 [email protected]:~/

Możesz to zrobić w następujący sposób:

scp hostname@serverNameOrServerIp:/path/to/files/\\{file1,file2,file3\\}.fileExtension ./

Spowoduje to pobranie wszystkich wymienionych nazw plików do dowolnego lokalnego katalogu.

Pamiętaj, aby nie wstawiać spacji między każdą nazwą pliku, tylko przecinek ,.

UWAGA: Z góry przepraszam za odpowiedź tylko na część powyższego pytania. Uważam jednak, że te polecenia są przydatne w moich bieżących potrzebach dotyczących Uniksa.

Przesyłanie określonych plików z komputera lokalnego na komputer zdalny:

~/Desktop/dump_files$ scp file1.txt file2.txt lab1.cpp etc.ext [email protected]:Folder1/DestinationFolderForFiles/

Przesyłanie całego katalogu z komputera lokalnego na komputer zdalny:

~$ scp -r Desktop/dump_files [email protected]:Folder1/DestinationFolderForFiles/

Pobieranie całego katalogu ze zdalnego komputera na komputer lokalny:

~/Desktop$ scp -r [email protected]:Public/web/ Desktop/

W moim przypadku jestem ograniczony tylko do używania polecenia sftp.
Musiałem więc użyć pliku wsadowego z sftp. Utworzyłem skrypt taki jak poniżej. Zakłada się, że pracujesz w katalogu / tmp i chcesz umieścić pliki w systemie destdir_on_remote_system w systemie zdalnym. Działa to również tylko przy nieinteraktywnym logowaniu. Musisz skonfigurować klucze publiczne / prywatne, abyś mógł się zalogować bez podawania hasła. Zmień w razie potrzeby.

#!/bin/bash

cd /tmp
# start script with list of files to transfer
ls -1 fileset1* > batchfile1
ls -1 fileset2* >> batchfile1

sed -i -e 's/^/put /' batchfile1
echo "cd destdir_on_remote_system" > batchfile
cat batchfile1 >> batchfile
rm batchfile1

sftp -b batchfile user@host

twoje polecenie działa idealnie, ale chcę również zmienić nazwę pliku podczas wysyłania lokalnego do zdalnego. Napisałem polecenie: - sshpass -p hasło scp /path/to/file.txt root @ nazwa_hosta: /path/newfile.txt

Daje jednak błąd, że /path/newfile.txt: Nie znaleziono takiego pliku lub katalogu plz pomaga mi w tej sytuacji

scp używa ssh do przesyłania danych z tym samym uwierzytelnieniem i zapewnia takie samo bezpieczeństwo jak ssh.

Najlepszą praktyką jest wdrożenie „KLUCZY SSH I AUTORYZACJI KLUCZA PUBLICZNEGO”. Dzięki temu możesz pisać swoje skrypty, nie martwiąc się o uwierzytelnianie. Proste.

Zobacz CO TO JEST SSH-KEYGEN

W konkretnym przypadku, w którym wszystkie pliki mają to samo rozszerzenie, ale z innym sufiksem (powiedzmy numer pliku dziennika), stosujesz:

scp [email protected]:/some/log/folder/some_log_file.* ./

Spowoduje to skopiowanie wszystkich plików o nazwie plik_logu z podanego folderu w zdalnym folderze, tj. Plik_logu.1, plik_logu.2, plik_logu.3.

scp remote:"[A-C]/[12].txt" local: