Comment cloner le dépôt git uniquement certains répertoires?


26

Par exemple, je souhaite télécharger PCL 3d_rec_framework.

Ceci est le référentiel git de PCL: https://github.com/PointCloudLibrary/pcl.git

Comment télécharger ce répertoire?

https://github.com/PointCloudLibrary/pcl/tree/master/apps

J'ai essayé de courir mais ne fonctionne pas:

sam@sam:~/code/pcl_standalone$ git clone https://github.com/PointCloudLibrary/pcl/tree/master/apps/3d_rec_framework
Cloning into '3d_rec_framework'...
error: The requested URL returned error: 403 while accessing https://github.com/PointCloudLibrary/pcl/tree/master/apps/3d_rec_framework/info/refs
fatal: HTTP request failed
sam@sam:~/code/pcl_standalone$ 

Comment le télécharger?

Au fait, je ne veux pas télécharger git de PCL et supprimer tous les autres répertoires dont je ne veux pas. C'est pourquoi je pose cette question.

Merci ~

Réponses:


7

Vous ne pouvez pas. Avec git, vous clonez l'intégralité du référentiel et l'historique complet du référentiel.

Il existe des solutions de contournement pour pouvoir extraire un seul fichier d'une archive git, répertorié dans une réponse Stack Exchange pour la même question , mais vous devrez toujours télécharger l'intégralité du référentiel pour obtenir le fichier ou le répertoire que vous souhaitez.


4
Tout simplement pas vrai: askubuntu.com/a/729798/384425
CelticParser

3
@CelticParser Donc, vous prétendez que ma réponse n'est pas vraie, puis passez à pointer vers une réponse qui nécessite de télécharger chaque fichier à partir d'un référentiel git, pour obtenir un seul fichier?
dobey


> "Je ne veux pas télécharger git de PCL et supprimer tous les autres répertoires dont je ne veux pas." C'est illimité. Je l'ai lu car @sam ne veut pas supprimer manuellement les répertoires.
CelticParser

39

la réponse de dobey n'est plus le cas depuis git v1.7. Vous pouvez désormais extraire certains dossiers d'un référentiel. Les instructions complètes se trouvent ici .

git init <repo>
cd <repo>
git remote add -f origin <url>

git config core.sparseCheckout true

echo "some/dir/" >> .git/info/sparse-checkout
echo "another/sub/tree" >> .git/info/sparse-checkout

Cela indique à git quels répertoires vous souhaitez extraire. Ensuite, vous pouvez extraire uniquement ces répertoires

git pull origin master

3
Cela implique que toutes les versions d'Ubuntu ont 1,7 disponible. Vous devriez vérifier que c'est le cas et commenter votre réponse ici quant aux versions individuelles qui fonctionneront réellement. PowerShell n'est pas non plus Ubuntu et ne devrait donc pas être inclus, à mon avis.
Thomas Ward

2
@ThomasW. Toutes les versions actuellement prises en charge d'Ubuntu incluent au moins git 1.7, et la plupart sont maintenant 2.x.
dobey

4
Cela clone tout le référentiel, puis effectue cette vérification clairsemée.
Clerenz

@dobey, Sérieusement, vous avez supprimé des informations utiles que les personnes trouvant cette question avec Google pourraient très bien rechercher?! Si j'étais obligé d'utiliser PowerShell, j'aimerais vraiment voir les détails du tuyau, ils ne sont pas évidents! echo "certains / dir /" | Out-File -Encoding ascii .git / info / sparse-checkout echo "another / sub / tree /" | Out-File -Append -Encoding ascii .git / info / sparse-checkout
Samuel Åslund

8

Tout d'abord, faites:

git clone --depth 1 [repo root] [name of destination directory]

Ensuite:

cd [name of destination directory]

...Et enfin:

git filter-branch --prune-empty --subdirectory-filter [path to sub-dir] HEAD

C'est si facile. Git réécrira le dépôt afin que seul le sous-répertoire souhaité soit inclus. Cela fonctionne même si le sous-répertoire a plusieurs couches de profondeur. Nommez simplement le répertoire de destination le nom du sous-répertoire. Ensuite, dans la commande "git filter-branch", mettez le chemin relatif vers le sous-répertoire. Oh, le --depth 1dit gitde ne télécharger que le haut de la tête (en supprimant essentiellement l'historique ).


Cela vous permet de télécharger un seul sous-répertoire, mais la question concerne plusieurs répertoires .. est-ce possible de cette façon? Je dois dire que je ne vois pas comment cela fonctionne, en regardant la documentation.
Joeppie

Existe-t-il un moyen simple d'actualiser ce répertoire de temps en temps?
Clerenz

4

git clone --filter de Git 2.19

Cette option sautera en fait la récupération de la plupart des objets inutiles du serveur:

git clone --depth 1 --no-checkout --filter=blob:none \
  "file://$(pwd)/server_repo" local_repo
cd local_repo
git checkout master -- mydir/myfile

Le serveur doit être configuré avec:

git config --local uploadpack.allowfilter 1
git config --local uploadpack.allowanysha1inwant 1

Il n'y a pas de support serveur à partir de la v2.19.0, mais il peut déjà être testé localement.

TODO: --filter=blob:noneignore tous les blobs, mais récupère toujours tous les objets d'arbre. Mais sur un dépôt normal, cela devrait être minuscule par rapport aux fichiers eux-mêmes, donc c'est déjà assez bon. Demandé à: https://www.spinics.net/lists/git/msg342006.html Devs a répondu qu'un --filter=tree:0était en train de le faire.

N'oubliez pas que cela --depth 1implique déjà --single-branch, voir aussi: /programming/1778088/how-to-clone-a-single-branch-in-git

file://$(path)est nécessaire pour surmonter git cloneles manigances du protocole: /programming/47307578/how-to-shallow-clone-a-local-git-repository-with-a-relative-path

Le format de --filterest documenté sur man git-rev-list.

Une extension a été apportée au protocole distant Git pour prendre en charge cette fonctionnalité.

Documents sur l'arbre Git:

Voir également: /programming/2466735/how-to-checkout-only-one-file-from-git-repository-sparse-checkout

Testez-le

#!/usr/bin/env bash
set -eu

list-objects() (
  git rev-list --all --objects
  echo "master commit SHA: $(git log -1 --format="%H")"
  echo "mybranch commit SHA: $(git log -1 --format="%H")"
  git ls-tree master
  git ls-tree mybranch | grep mybranch
  git ls-tree master~ | grep root
)

# Reproducibility.
export GIT_COMMITTER_NAME='a'
export GIT_COMMITTER_EMAIL='a'
export GIT_AUTHOR_NAME='a'
export GIT_AUTHOR_EMAIL='a'
export GIT_COMMITTER_DATE='2000-01-01T00:00:00+0000'
export GIT_AUTHOR_DATE='2000-01-01T00:00:00+0000'

rm -rf server_repo local_repo
mkdir server_repo
cd server_repo

# Create repo.
git init --quiet
git config --local uploadpack.allowfilter 1
git config --local uploadpack.allowanysha1inwant 1

# First commit.
# Directories present in all branches.
mkdir d1 d2
printf 'd1/a' > ./d1/a
printf 'd1/b' > ./d1/b
printf 'd2/a' > ./d2/a
printf 'd2/b' > ./d2/b
# Present only in root.
mkdir 'root'
printf 'root' > ./root/root
git add .
git commit -m 'root' --quiet

# Second commit only on master.
git rm --quiet -r ./root
mkdir 'master'
printf 'master' > ./master/master
git add .
git commit -m 'master commit' --quiet

# Second commit only on mybranch.
git checkout -b mybranch --quiet master~
git rm --quiet -r ./root
mkdir 'mybranch'
printf 'mybranch' > ./mybranch/mybranch
git add .
git commit -m 'mybranch commit' --quiet

echo "# List and identify all objects"
list-objects
echo

# Restore master.
git checkout --quiet master
cd ..

# Clone. Don't checkout for now, only .git/ dir.
git clone --depth 1 --quiet --no-checkout --filter=blob:none "file://$(pwd)/server_repo" local_repo
cd local_repo

# List missing objects from master.
echo "# Missing objects after --no-checkout"
git rev-list --all --quiet --objects --missing=print
echo

echo "# Git checkout fails without internet"
mv ../server_repo ../server_repo.off
! git checkout master
echo

echo "# Git checkout fetches the missing file from internet"
mv ../server_repo.off ../server_repo
git checkout master -- d1/a
echo

echo "# Missing objects after checking out d1/a"
git rev-list --all --quiet --objects --missing=print

GitHub en amont .

Sortie dans Git v2.19.0:

# List and identify all objects
c6fcdfaf2b1462f809aecdad83a186eeec00f9c1
fc5e97944480982cfc180a6d6634699921ee63ec
7251a83be9a03161acde7b71a8fda9be19f47128
62d67bce3c672fe2b9065f372726a11e57bade7e
b64bf435a3e54c5208a1b70b7bcb0fc627463a75 d1
308150e8fddde043f3dbbb8573abb6af1df96e63 d1/a
f70a17f51b7b30fec48a32e4f19ac15e261fd1a4 d1/b
84de03c312dc741d0f2a66df7b2f168d823e122a d2
0975df9b39e23c15f63db194df7f45c76528bccb d2/a
41484c13520fcbb6e7243a26fdb1fc9405c08520 d2/b
7d5230379e4652f1b1da7ed1e78e0b8253e03ba3 master
8b25206ff90e9432f6f1a8600f87a7bd695a24af master/master
ef29f15c9a7c5417944cc09711b6a9ee51b01d89
19f7a4ca4a038aff89d803f017f76d2b66063043 mybranch
1b671b190e293aa091239b8b5e8c149411d00523 mybranch/mybranch
c3760bb1a0ece87cdbaf9a563c77a45e30a4e30e
a0234da53ec608b54813b4271fbf00ba5318b99f root
93ca1422a8da0a9effc465eccbcb17e23015542d root/root
master commit SHA: fc5e97944480982cfc180a6d6634699921ee63ec
mybranch commit SHA: fc5e97944480982cfc180a6d6634699921ee63ec
040000 tree b64bf435a3e54c5208a1b70b7bcb0fc627463a75    d1
040000 tree 84de03c312dc741d0f2a66df7b2f168d823e122a    d2
040000 tree 7d5230379e4652f1b1da7ed1e78e0b8253e03ba3    master
040000 tree 19f7a4ca4a038aff89d803f017f76d2b66063043    mybranch
040000 tree a0234da53ec608b54813b4271fbf00ba5318b99f    root

# Missing objects after --no-checkout
?f70a17f51b7b30fec48a32e4f19ac15e261fd1a4
?8b25206ff90e9432f6f1a8600f87a7bd695a24af
?41484c13520fcbb6e7243a26fdb1fc9405c08520
?0975df9b39e23c15f63db194df7f45c76528bccb
?308150e8fddde043f3dbbb8573abb6af1df96e63

# Git checkout fails without internet
fatal: '/home/ciro/bak/git/test-git-web-interface/other-test-repos/partial-clone.tmp/server_repo' does not appear to be a git repository
fatal: Could not read from remote repository.

Please make sure you have the correct access rights
and the repository exists.

# Git checkout fetches the missing directory from internet
remote: Enumerating objects: 1, done.
remote: Counting objects: 100% (1/1), done.
remote: Total 1 (delta 0), reused 0 (delta 0)
Receiving objects: 100% (1/1), 45 bytes | 45.00 KiB/s, done.
remote: Enumerating objects: 1, done.
remote: Counting objects: 100% (1/1), done.
remote: Total 1 (delta 0), reused 0 (delta 0)
Receiving objects: 100% (1/1), 45 bytes | 45.00 KiB/s, done.

# Missing objects after checking out d1
?f70a17f51b7b30fec48a32e4f19ac15e261fd1a4
?8b25206ff90e9432f6f1a8600f87a7bd695a24af
?41484c13520fcbb6e7243a26fdb1fc9405c08520
?0975df9b39e23c15f63db194df7f45c76528bccb

Conclusions: tous les blobs sauf d1/asont manquants. Par exemple f70a17f51b7b30fec48a32e4f19ac15e261fd1a4, ce qui n'est d1/bpas le cas après le paiement d1/.

Notez que root/rootet mybranch/mybranchsont également manquants, mais les --depth 1masquent dans la liste des fichiers manquants. Si vous supprimez --depth 1, ils apparaissent sur la liste des fichiers manquants.


En utilisant notre site, vous reconnaissez avoir lu et compris notre politique liée aux cookies et notre politique de confidentialité.
Licensed under cc by-sa 3.0 with attribution required.