Jak sklonować repozytorium git tylko niektóre katalogi?

26

Na przykład chcę pobrać PCL 3d_rec_framework.

To jest repozytorium git PCL: https://github.com/PointCloudLibrary/pcl.git

Jak pobrać ten katalog?

https://github.com/PointCloudLibrary/pcl/tree/master/apps

Próbowałem uruchomić, ale nie działa:

sam@sam:~/code/pcl_standalone$ git clone https://github.com/PointCloudLibrary/pcl/tree/master/apps/3d_rec_framework
Cloning into '3d_rec_framework'...
error: The requested URL returned error: 403 while accessing https://github.com/PointCloudLibrary/pcl/tree/master/apps/3d_rec_framework/info/refs
fatal: HTTP request failed
sam@sam:~/code/pcl_standalone$ 

Jak go pobrać?

Nawiasem mówiąc, nie chcę pobierać git PCL i usuwać wszystkich innych katalogów, których nie chcę. Dlatego zadaję to pytanie.

Dziękuję ~

sam
źródło

Odpowiedzi:

7

Nie możesz. Dzięki git klonujesz całe repozytorium i pełną historię repozytorium.

Istnieje kilka sposobów obejścia tego problemu, aby móc pobrać pojedynczy plik z archiwum git, wymienionego w odpowiedzi Stack Stack na to samo pytanie , ale nadal będziesz musiał pobrać całe repozytorium, aby uzyskać ten pojedynczy plik lub katalog, który chcesz.

dobey
źródło
4
Po prostu nieprawda: askubuntu.com/a/729798/384425
CelticParser
3
@CelticParser Więc twierdzisz, że moja odpowiedź jest nieprawdziwa, a następnie przejdź do odpowiedzi, która wymaga pobrania każdego pliku z repozytorium git, aby uzyskać pojedynczy plik?
dobey,
2
lub askubuntu.com/a/645276/384425
CelticParser
> „Nie chcę pobierać git PCL i usuwać wszystkich innych katalogów, których nie chcę”. To jest otwarte. Przeczytałem to, ponieważ @sam nie chce ręcznie usuwać katalogów.
CelticParser
39

odpowiedź dobeya nie jest już prawdą od czasu git v1.7. Możesz teraz pobierać określone foldery z repozytorium. Pełne instrukcje można znaleźć tutaj .

git init <repo>
cd <repo>
git remote add -f origin <url>

git config core.sparseCheckout true

echo "some/dir/" >> .git/info/sparse-checkout
echo "another/sub/tree" >> .git/info/sparse-checkout

To mówi git, które katalogi chcesz pobrać. Następnie możesz pobrać tylko te katalogi

git pull origin master
skukx
źródło
3
Oznacza to, że wszystkie wersje Ubuntu mają 1.7 dostępne. Powinieneś to sprawdzić i skomentować swoją odpowiedź tutaj, które wersje będą faktycznie działać. PowerShell również nie jest Ubuntu i dlatego moim zdaniem nie powinien być włączony.
Thomas Ward
2
@ThomasW. Wszystkie obecnie obsługiwane wersje Ubuntu zawierają co najmniej git 1.7, a większość z nich ma teraz wersję 2.x.
dobey,
4
Nadal spowoduje to sklonowanie całego repozytorium, a następnie wykonanie rzadkiej transakcji.
Clerenz
@dobey, poważnie usunąłeś przydatne informacje, których ludzie szukający tego pytania w Google mogą bardzo szukać ?! Gdybym był zmuszony użyć PowerShell, zdecydowanie chciałbym zobaczyć szczegóły potoku, nie są one oczywiste! echo "some / dir /" | Plik wyjściowy -kodowanie ascii .git / info / sparse-checkout echo „another / sub / tree /” | Plik wyjściowy -Załóż -Zakoduj ascii .git / info / sparse-checkout
Samuel Åslund,
8

Najpierw wykonaj:

git clone --depth 1 [repo root] [name of destination directory]

Następnie:

cd [name of destination directory]

... i na koniec:

git filter-branch --prune-empty --subdirectory-filter [path to sub-dir] HEAD

To takie proste. Git przepisze repo, aby uwzględnić tylko pożądany katalog. Działa to nawet wtedy, gdy katalog częściowy ma kilka warstw głębokości. Po prostu nazwij katalog docelowy nazwą podkatalogu. Następnie w poleceniu „git filter-branch” podaj ścieżkę względną do podkatalogu. Aha, --depth 1każe gittylko pobierać czubek głowy ( zasadniczo usuwając historię ).

CelticParser
źródło
Umożliwia to pobranie jednego podkatalogu, ale pytanie dotyczy wielu katalogów. Czy jest to możliwe w ten sposób? Muszę powiedzieć, że nie widzę, jak to działa, patrząc na dokumentację.
Joeppie
Czy istnieje prosty sposób na odświeżenie tego katalogu od czasu do czasu?
Clerenz
4

git clone --filter z Git 2.19

Ta opcja faktycznie pomija pobieranie większości niepotrzebnych obiektów z serwera:

git clone --depth 1 --no-checkout --filter=blob:none \
  "file://$(pwd)/server_repo" local_repo
cd local_repo
git checkout master -- mydir/myfile

Serwer powinien być skonfigurowany z:

git config --local uploadpack.allowfilter 1
git config --local uploadpack.allowanysha1inwant 1

Począwszy od wersji 2.19.0 nie ma obsługi serwera, ale można ją już przetestować lokalnie.

DO ZROBIENIA: --filter=blob:nonepomija wszystkie obiekty BLOB, ale nadal pobiera wszystkie obiekty drzewa. Ale w normalnym repo powinno to być małe w porównaniu do samych plików, więc jest to już wystarczająco dobre. Zapytano pod adresem : https://www.spinics.net/lists/git/msg342006.html Devs odpowiedział, że --filter=tree:0jest w przygotowaniu.

Pamiętaj, że to --depth 1już sugeruje --single-branch, patrz także: /programming/1778088/how-to-clone-a-single-branch-in-git

file://$(path)jest wymagany, aby pokonać git cloneprotokół shenanigans: /programming/47307578/how-to-shallow-clone-a-local-git-repository-with-a-relative-path

Format --filterjest udokumentowany na man git-rev-list.

Rozszerzono zdalny protokół Git w celu obsługi tej funkcji.

Dokumenty na drzewie Git:

Zobacz także: /programming/2466735/how-to-checkout-only-one-one-file-from-git-repository-sparse-checkout

Przetestuj to

#!/usr/bin/env bash
set -eu

list-objects() (
  git rev-list --all --objects
  echo "master commit SHA: $(git log -1 --format="%H")"
  echo "mybranch commit SHA: $(git log -1 --format="%H")"
  git ls-tree master
  git ls-tree mybranch | grep mybranch
  git ls-tree master~ | grep root
)

# Reproducibility.
export GIT_COMMITTER_NAME='a'
export GIT_COMMITTER_EMAIL='a'
export GIT_AUTHOR_NAME='a'
export GIT_AUTHOR_EMAIL='a'
export GIT_COMMITTER_DATE='2000-01-01T00:00:00+0000'
export GIT_AUTHOR_DATE='2000-01-01T00:00:00+0000'

rm -rf server_repo local_repo
mkdir server_repo
cd server_repo

# Create repo.
git init --quiet
git config --local uploadpack.allowfilter 1
git config --local uploadpack.allowanysha1inwant 1

# First commit.
# Directories present in all branches.
mkdir d1 d2
printf 'd1/a' > ./d1/a
printf 'd1/b' > ./d1/b
printf 'd2/a' > ./d2/a
printf 'd2/b' > ./d2/b
# Present only in root.
mkdir 'root'
printf 'root' > ./root/root
git add .
git commit -m 'root' --quiet

# Second commit only on master.
git rm --quiet -r ./root
mkdir 'master'
printf 'master' > ./master/master
git add .
git commit -m 'master commit' --quiet

# Second commit only on mybranch.
git checkout -b mybranch --quiet master~
git rm --quiet -r ./root
mkdir 'mybranch'
printf 'mybranch' > ./mybranch/mybranch
git add .
git commit -m 'mybranch commit' --quiet

echo "# List and identify all objects"
list-objects
echo

# Restore master.
git checkout --quiet master
cd ..

# Clone. Don't checkout for now, only .git/ dir.
git clone --depth 1 --quiet --no-checkout --filter=blob:none "file://$(pwd)/server_repo" local_repo
cd local_repo

# List missing objects from master.
echo "# Missing objects after --no-checkout"
git rev-list --all --quiet --objects --missing=print
echo

echo "# Git checkout fails without internet"
mv ../server_repo ../server_repo.off
! git checkout master
echo

echo "# Git checkout fetches the missing file from internet"
mv ../server_repo.off ../server_repo
git checkout master -- d1/a
echo

echo "# Missing objects after checking out d1/a"
git rev-list --all --quiet --objects --missing=print

GitHub w górę .

Dane wyjściowe w Git v2.19.0:

# List and identify all objects
c6fcdfaf2b1462f809aecdad83a186eeec00f9c1
fc5e97944480982cfc180a6d6634699921ee63ec
7251a83be9a03161acde7b71a8fda9be19f47128
62d67bce3c672fe2b9065f372726a11e57bade7e
b64bf435a3e54c5208a1b70b7bcb0fc627463a75 d1
308150e8fddde043f3dbbb8573abb6af1df96e63 d1/a
f70a17f51b7b30fec48a32e4f19ac15e261fd1a4 d1/b
84de03c312dc741d0f2a66df7b2f168d823e122a d2
0975df9b39e23c15f63db194df7f45c76528bccb d2/a
41484c13520fcbb6e7243a26fdb1fc9405c08520 d2/b
7d5230379e4652f1b1da7ed1e78e0b8253e03ba3 master
8b25206ff90e9432f6f1a8600f87a7bd695a24af master/master
ef29f15c9a7c5417944cc09711b6a9ee51b01d89
19f7a4ca4a038aff89d803f017f76d2b66063043 mybranch
1b671b190e293aa091239b8b5e8c149411d00523 mybranch/mybranch
c3760bb1a0ece87cdbaf9a563c77a45e30a4e30e
a0234da53ec608b54813b4271fbf00ba5318b99f root
93ca1422a8da0a9effc465eccbcb17e23015542d root/root
master commit SHA: fc5e97944480982cfc180a6d6634699921ee63ec
mybranch commit SHA: fc5e97944480982cfc180a6d6634699921ee63ec
040000 tree b64bf435a3e54c5208a1b70b7bcb0fc627463a75    d1
040000 tree 84de03c312dc741d0f2a66df7b2f168d823e122a    d2
040000 tree 7d5230379e4652f1b1da7ed1e78e0b8253e03ba3    master
040000 tree 19f7a4ca4a038aff89d803f017f76d2b66063043    mybranch
040000 tree a0234da53ec608b54813b4271fbf00ba5318b99f    root

# Missing objects after --no-checkout
?f70a17f51b7b30fec48a32e4f19ac15e261fd1a4
?8b25206ff90e9432f6f1a8600f87a7bd695a24af
?41484c13520fcbb6e7243a26fdb1fc9405c08520
?0975df9b39e23c15f63db194df7f45c76528bccb
?308150e8fddde043f3dbbb8573abb6af1df96e63

# Git checkout fails without internet
fatal: '/home/ciro/bak/git/test-git-web-interface/other-test-repos/partial-clone.tmp/server_repo' does not appear to be a git repository
fatal: Could not read from remote repository.

Please make sure you have the correct access rights
and the repository exists.

# Git checkout fetches the missing directory from internet
remote: Enumerating objects: 1, done.
remote: Counting objects: 100% (1/1), done.
remote: Total 1 (delta 0), reused 0 (delta 0)
Receiving objects: 100% (1/1), 45 bytes | 45.00 KiB/s, done.
remote: Enumerating objects: 1, done.
remote: Counting objects: 100% (1/1), done.
remote: Total 1 (delta 0), reused 0 (delta 0)
Receiving objects: 100% (1/1), 45 bytes | 45.00 KiB/s, done.

# Missing objects after checking out d1
?f70a17f51b7b30fec48a32e4f19ac15e261fd1a4
?8b25206ff90e9432f6f1a8600f87a7bd695a24af
?41484c13520fcbb6e7243a26fdb1fc9405c08520
?0975df9b39e23c15f63db194df7f45c76528bccb

Wnioski: d1/abrakuje wszystkich obiektów blob z wyjątkiem . Na przykład f70a17f51b7b30fec48a32e4f19ac15e261fd1a4, co jest d1/b, nie jest tam po sprawdzeniu d1/.

Zauważ, że root/rooti mybranch/mybranchrównież ich brakuje, ale --depth 1ukrywa to na liście brakujących plików. Jeśli usuniesz --depth 1, zostaną one wyświetlone na liście brakujących plików.

Ciro Santilli
źródło