Как мне клонировать только подкаталог Git-репозитория?

У меня есть мой Git-репозиторий, в корне которого есть два подкаталога:

/finisht
/static

Когда это было в SVN , /finishtбыло проверено в одном месте, в то время как /staticбыло проверено в другом месте, вот так:

svn co svn+ssh://admin@domain.com/home/admin/repos/finisht/static static

Есть ли способ сделать это с Git?

РЕДАКТИРОВАТЬ : Начиная с Git 2.19, это наконец возможно, как видно из этого ответа .

Подумайте об этом ответе.

Примечание: в Git 2.19 реализована только поддержка на стороне клиента, поддержка на стороне сервера по-прежнему отсутствует, поэтому она работает только при клонировании локальных репозиториев. Также обратите внимание, что крупные хосты Git, например GitHub, на самом деле не используют сервер Git, они используют свою собственную реализацию, поэтому даже если поддержка появляется на сервере Git, это не означает, что она автоматически работает на хостах Git. (OTOH, поскольку они не используют Git-сервер, они могли бы реализовать его быстрее в своих собственных реализациях, прежде чем он появится на Git-сервере.)

Нет, это не возможно в Git.

Внедрение чего-то подобного в Git было бы существенным усилием, и это означало бы, что целостность клиентского репозитория больше не может быть гарантирована. Если вам интересно, поищите обсуждения "sparse clone" и "sparse fetch" в списке рассылки git.

В целом, в сообществе Git единодушным является то, что если у вас есть несколько каталогов, которые всегда извлекаются независимо, то это действительно два разных проекта, которые должны находиться в двух разных репозиториях. Вы можете склеить их вместе, используя Git Submodules .

То, что вы пытаетесь сделать, называется разреженной проверкой , и эта функция была добавлена ​​в git 1.7.0 (февраль 2012 г.). Шаги для разреженного клона следующие:

mkdir <repo>
cd <repo>
git init
git remote add -f origin <url>

Это создает пустой репозиторий с вашим пультом и выбирает все объекты, но не проверяет их. Затем сделайте:

git config core.sparseCheckout true

Теперь вам нужно определить, какие файлы / папки вы хотите проверить. Это можно сделать, перечислив их .git/info/sparse-checkout, например:

echo "some/dir/" >> .git/info/sparse-checkout
echo "another/sub/tree" >> .git/info/sparse-checkout

И последнее, но не менее важное: обновите ваш пустой репо с помощью состояния с удаленного компьютера:

git pull origin master

Теперь у вас есть файлы «проверило» для some/dirи another/sub/treeв файловой системе (с этими траекториями еще), и никаких других путями настоящим.

Возможно, вы захотите взглянуть на расширенный учебник, и вам, вероятно, следует прочитать официальную документацию для редких проверок .

Как функция:

function git_sparse_clone() (
  rurl="$1" localdir="$2" && shift 2

  mkdir -p "$localdir"
  cd "$localdir"

  git init
  git remote add -f origin "$rurl"

  git config core.sparseCheckout true

  # Loops over remaining args
  for i; do
    echo "$i" >> .git/info/sparse-checkout
  done

  git pull origin master
)

Применение:

git_sparse_clone "http://github.com/tj/n" "./local/location" "/bin"

Обратите внимание, что при этом все хранилище будет загружено с сервера - только размер извлечения уменьшается. На данный момент невозможно клонировать только один каталог. Но если вам не нужна история хранилища, вы можете по крайней мере сэкономить на пропускной способности, создав мелкий клон. См . Ответ Удондана ниже для получения информации о том, как объединить мелкий клон и редкую проверку.

Начиная с git 2.25.0 (январь 2020 г.) в git добавлена экспериментальная команда sparse-checkout :

git sparse-checkout init
# same as: 
git config core.sparseCheckout true

git sparse-checkout set "A/B"
# same as:
echo "A/B" >> .git/info/sparse-checkout

git sparse-checkout list
# same as:
cat .git/info/sparse-checkout

git clone --filter из Git 2.19

Эта опция фактически пропускает выборку ненужных объектов с сервера. Кроме того, включая --filter=tree:0Git 2.20 и --filter=combineкомпозитный фильтр, добавленный в Git 2.24, мы получаем:

git clone \
  --depth 1 \
  --filter=combine:blob:none+tree:0 \
  --no-checkout \
  "file://$(pwd)/server_repo" \
  local_repo \
;
cd local_repo
git checkout master -- mydir/

Сервер должен быть настроен с:

git config --local uploadpack.allowfilter 1
git config --local uploadpack.allowanysha1inwant 1

Было сделано расширение к протоколу удаленного доступа Git для поддержки этой функции v2.19.0и пропуска выборки ненужных объектов, но в то время поддержка сервера отсутствовала. Но это уже можно проверить на месте.

Распределение команд:

• --filter=blob:noneпропускает все BLOB- объекты , но по-прежнему выбирает все объекты дерева
• --filter=tree:0пропускает ненужные деревья: https://www.spinics.net/lists/git/msg342006.html
• --depth 1уже подразумевается --single-branch, см. также: Как мне клонировать одну ветку в Git?
• file://$(path)Требуется преодолеть git cloneпротокол shenanigans: Как мелко клонировать локальный репозиторий git с относительным путем?
• --filter=combine:FILTER1+FILTER2это синтаксис для использования нескольких фильтров одновременно, попытка передать --filterпо какой-то причине не удалась с помощью: «несколько спецификаций фильтра не могут быть объединены». Это было добавлено в Git 2.24 на e987df5fe62b8b29be4cdcdeb3704681ada2b29e "список-объект-фильтр: реализовать составные фильтры"

Формат --filterзадокументирован man git-rev-list.

Документы по дереву Git:

• https://github.com/git/git/blob/v2.19.0/Documentation/technical/partial-clone.txt
• https://github.com/git/git/blob/v2.19.0/Documentation/rev-list-options.txt#L720
• https://github.com/git/git/blob/v2.19.0/t/t5616-partial-clone.sh

Проверьте это

#!/usr/bin/env bash
set -eu

list-objects() (
  git rev-list --all --objects
  echo "master commit SHA: $(git log -1 --format="%H")"
  echo "mybranch commit SHA: $(git log -1 --format="%H")"
  git ls-tree master
  git ls-tree mybranch | grep mybranch
  git ls-tree master~ | grep root
)

# Reproducibility.
export GIT_COMMITTER_NAME='a'
export GIT_COMMITTER_EMAIL='a'
export GIT_AUTHOR_NAME='a'
export GIT_AUTHOR_EMAIL='a'
export GIT_COMMITTER_DATE='2000-01-01T00:00:00+0000'
export GIT_AUTHOR_DATE='2000-01-01T00:00:00+0000'

rm -rf server_repo local_repo
mkdir server_repo
cd server_repo

# Create repo.
git init --quiet
git config --local uploadpack.allowfilter 1
git config --local uploadpack.allowanysha1inwant 1

# First commit.
# Directories present in all branches.
mkdir d1 d2
printf 'd1/a' > ./d1/a
printf 'd1/b' > ./d1/b
printf 'd2/a' > ./d2/a
printf 'd2/b' > ./d2/b
# Present only in root.
mkdir 'root'
printf 'root' > ./root/root
git add .
git commit -m 'root' --quiet

# Second commit only on master.
git rm --quiet -r ./root
mkdir 'master'
printf 'master' > ./master/master
git add .
git commit -m 'master commit' --quiet

# Second commit only on mybranch.
git checkout -b mybranch --quiet master~
git rm --quiet -r ./root
mkdir 'mybranch'
printf 'mybranch' > ./mybranch/mybranch
git add .
git commit -m 'mybranch commit' --quiet

echo "# List and identify all objects"
list-objects
echo

# Restore master.
git checkout --quiet master
cd ..

# Clone. Don't checkout for now, only .git/ dir.
git clone --depth 1 --quiet --no-checkout --filter=blob:none "file://$(pwd)/server_repo" local_repo
cd local_repo

# List missing objects from master.
echo "# Missing objects after --no-checkout"
git rev-list --all --quiet --objects --missing=print
echo

echo "# Git checkout fails without internet"
mv ../server_repo ../server_repo.off
! git checkout master
echo

echo "# Git checkout fetches the missing directory from internet"
mv ../server_repo.off ../server_repo
git checkout master -- d1/
echo

echo "# Missing objects after checking out d1"
git rev-list --all --quiet --objects --missing=print

GitHub вверх по течению .

Выход в Git v2.19.0:

# List and identify all objects
c6fcdfaf2b1462f809aecdad83a186eeec00f9c1
fc5e97944480982cfc180a6d6634699921ee63ec
7251a83be9a03161acde7b71a8fda9be19f47128
62d67bce3c672fe2b9065f372726a11e57bade7e
b64bf435a3e54c5208a1b70b7bcb0fc627463a75 d1
308150e8fddde043f3dbbb8573abb6af1df96e63 d1/a
f70a17f51b7b30fec48a32e4f19ac15e261fd1a4 d1/b
84de03c312dc741d0f2a66df7b2f168d823e122a d2
0975df9b39e23c15f63db194df7f45c76528bccb d2/a
41484c13520fcbb6e7243a26fdb1fc9405c08520 d2/b
7d5230379e4652f1b1da7ed1e78e0b8253e03ba3 master
8b25206ff90e9432f6f1a8600f87a7bd695a24af master/master
ef29f15c9a7c5417944cc09711b6a9ee51b01d89
19f7a4ca4a038aff89d803f017f76d2b66063043 mybranch
1b671b190e293aa091239b8b5e8c149411d00523 mybranch/mybranch
c3760bb1a0ece87cdbaf9a563c77a45e30a4e30e
a0234da53ec608b54813b4271fbf00ba5318b99f root
93ca1422a8da0a9effc465eccbcb17e23015542d root/root
master commit SHA: fc5e97944480982cfc180a6d6634699921ee63ec
mybranch commit SHA: fc5e97944480982cfc180a6d6634699921ee63ec
040000 tree b64bf435a3e54c5208a1b70b7bcb0fc627463a75    d1
040000 tree 84de03c312dc741d0f2a66df7b2f168d823e122a    d2
040000 tree 7d5230379e4652f1b1da7ed1e78e0b8253e03ba3    master
040000 tree 19f7a4ca4a038aff89d803f017f76d2b66063043    mybranch
040000 tree a0234da53ec608b54813b4271fbf00ba5318b99f    root

# Missing objects after --no-checkout
?f70a17f51b7b30fec48a32e4f19ac15e261fd1a4
?8b25206ff90e9432f6f1a8600f87a7bd695a24af
?41484c13520fcbb6e7243a26fdb1fc9405c08520
?0975df9b39e23c15f63db194df7f45c76528bccb
?308150e8fddde043f3dbbb8573abb6af1df96e63

# Git checkout fails without internet
fatal: '/home/ciro/bak/git/test-git-web-interface/other-test-repos/partial-clone.tmp/server_repo' does not appear to be a git repository
fatal: Could not read from remote repository.

Please make sure you have the correct access rights
and the repository exists.

# Git checkout fetches the missing directory from internet
remote: Enumerating objects: 1, done.
remote: Counting objects: 100% (1/1), done.
remote: Total 1 (delta 0), reused 0 (delta 0)
Receiving objects: 100% (1/1), 45 bytes | 45.00 KiB/s, done.
remote: Enumerating objects: 1, done.
remote: Counting objects: 100% (1/1), done.
remote: Total 1 (delta 0), reused 0 (delta 0)
Receiving objects: 100% (1/1), 45 bytes | 45.00 KiB/s, done.

# Missing objects after checking out d1
?8b25206ff90e9432f6f1a8600f87a7bd695a24af
?41484c13520fcbb6e7243a26fdb1fc9405c08520
?0975df9b39e23c15f63db194df7f45c76528bccb

Выводы: все капли снаружи d1/отсутствуют. Например 0975df9b39e23c15f63db194df7f45c76528bccb, которого d2/bнет после проверки d1/a.

Обратите внимание, что root/rootи mybranch/mybranchтакже отсутствуют, но --depth 1скрывает это из списка отсутствующих файлов. Если удалить --depth 1, то они отобразятся в списке отсутствующих файлов.

У меня есть мечта

Эта функция может революционизировать Git.

Представьте себе, что вся кодовая база вашего предприятия в одном репо без уродливых сторонних инструментов, таких какrepo .

Представьте себе хранение огромных блобов прямо в репо без каких-либо уродливых сторонних расширений .

Представьте, что GitHub разрешит метаданные для каждого файла / каталога, такие как звездочки и разрешения, чтобы вы могли хранить все свои личные вещи в одном репо.

Представьте, что подмодули обрабатываются точно так же, как обычные каталоги : просто запросите дерево SHA, и DNS-подобный механизм разрешит ваш запрос , сначала посмотрев на ваш локальный~/.git сервер, затем сначала на более близкие серверы (зеркало / кэш вашего предприятия) и попав на GitHub.

Вы можете объединить скудный контроль и мелкий клон . В мелком клоне отрежет историю и разреженной проверка тянет только файлы , которые соответствуют вашей модели.

git init <repo>
cd <repo>
git remote add origin <url>
git config core.sparsecheckout true
echo "finisht/*" >> .git/info/sparse-checkout
git pull --depth=1 origin master

Вам понадобится минимум git 1.9, чтобы это работало. Протестировал сам только с 2.2.0 и 2.2.2.

Таким образом, вы все равно сможете толкать , что невозможно сgit archive .

Для других пользователей, которые просто хотят загрузить файл / папку с github, просто используйте:

svn export <repo>/trunk/<folder>

например

svn export https://github.com/lodash/lodash.com/trunk/docs

(да, это svn здесь. очевидно, в 2016 году вам все еще нужно svn, чтобы просто загрузить некоторые файлы github)

Вежливость: загрузите одну папку или каталог из репозитория GitHub

Важно - убедитесь, что вы обновили URL-адрес github и заменили/tree/master/ на «/ trunk /».

Как скрипт bash:

git-download(){
    folder=${@/tree\/master/trunk}
    folder=${folder/blob\/master/trunk}
    svn export $folder
}

Примечание. Этот метод загружает папку, а не клонирует / извлекает ее. Вы не можете отправить изменения обратно в хранилище. С другой стороны - это приводит к меньшей загрузке по сравнению с редкой проверкой или мелкой проверкой.

Если вы никогда не планируете взаимодействовать с репозиторием, из которого вы клонировали, вы можете сделать полный клон git и переписать свой репозиторий, используя git filter-branch --subdirectory-filter . Таким образом, по крайней мере, история будет сохранена.

Это выглядит намного проще:

git archive --remote=<repo_url> <branch> <path> | tar xvf -

Git 1.7.0 имеет «редкие проверки». Смотрите «core.sparseCheckout» в мерзавец конфигурации станицы руководство «разреженной проверке» в мерзавце чтение дерева справочной страницы , и «Skip-worktree бит» в мерзавец обновлении индекса- странице руководстве .

Интерфейс не так удобен, как в SVN (например, нет способа сделать редкую проверку во время первоначального клона), но теперь доступна базовая функциональность, на которой могут быть построены более простые интерфейсы.

Невозможно клонировать подкаталог только с помощью Git, но ниже приведено несколько обходных путей.

Ветвь фильтра

Возможно, вы захотите переписать репозиторий, чтобы он выглядел так, как если бы trunk/public_html/он был корневым каталогом проекта, и отбросьте всю другую историю (используя filter-branch), попробуйте уже извлеченную ветку:

git filter-branch --subdirectory-filter trunk/public_html -- --all

^{Примечания: Объект, --который отделяет параметры ветви фильтра от параметров ревизии, и --allперезаписывает все ветви и теги. Вся информация, включая исходное время фиксации или информацию о слиянии, будет сохранена . Эта команда учитывает .git/info/graftsфайл и ссылки в refs/replace/пространстве имен, поэтому, если у вас есть какие-либо трансплантаты или refsопределенные замены , выполнение этой команды сделает их постоянными.}

Предупреждение! Переписанная история будет иметь разные имена объектов для всех объектов и не будет сходиться с исходной ветвью. Вы не сможете легко перемещать и распространять переписанную ветку поверх оригинальной ветви. Пожалуйста, не используйте эту команду, если вы не знаете всех последствий, и избегайте ее использования в любом случае, если для решения вашей проблемы будет достаточно простого коммита.

Редкий заказ

Вот простые шаги с подходом разреженной проверки, который будет редко заполнять рабочий каталог, так что вы можете указать Git, какие папки или файлы в рабочем каталоге стоит проверить.

1. Репозиторий клонов как обычно ( --no-checkoutнеобязательно):

   git clone --no-checkout git@foo/bar.git
   cd bar
   

   ^{Вы можете пропустить этот шаг, если ваш репозиторий уже клонирован.}

   Подсказка: для больших репозиториев рассмотрите мелкий clone ( --depth 1), чтобы получить только последнюю версию или / и--single-branch только.

2. Включить sparseCheckoutпараметр:

   git config core.sparseCheckout true
   

3. Укажите папку (ы) для разреженной проверки ( без пробела в конце):

   echo "trunk/public_html/*"> .git/info/sparse-checkout
   

   или редактировать .git/info/sparse-checkout .

4. Оформить заказ в филиале (например master):

   git checkout master
   

Теперь вы должны были выбрать папки в вашем текущем каталоге.

Вы можете рассмотреть символические ссылки, если у вас слишком много уровней каталогов или фильтрующих веток.

Я только что написал скрипт для GitHub .

Применение:

python get_git_sub_dir.py path/to/sub/dir <RECURSIVE>

Это клонирует конкретную папку и удаляет всю историю, не связанную с ней.

git clone --single-branch -b {branch} git@github.com:{user}/{repo}.git
git filter-branch --subdirectory-filter {path/to/folder} HEAD
git remote remove origin
git remote add origin git@github.com:{user}/{new-repo}.git
git push -u origin master

Вот сценарий оболочки, который я написал для сценария использования единственной подкаталога разреженной проверки

coSubDir.sh

localRepo=$1
remoteRepo=$2
subDir=$3


# Create local repository for subdirectory checkout, make it hidden to avoid having to drill down to the subfolder
mkdir ./.$localRepo
cd ./.$localRepo
git init
git remote add -f origin $remoteRepo
git config core.sparseCheckout true

# Add the subdirectory of interest to the sparse checkout.
echo $subDir >> .git/info/sparse-checkout

git pull origin master

# Create convenience symlink to the subdirectory of interest
cd ..
ln -s ./.$localRepo/$subDir $localRepo

Я написал .gitconfig [alias]для выполнения "редких проверок". Проверьте это (не каламбур):

На Windows запустить в cmd.exe

git config --global alias.sparse-checkout "!f(){ [ $# -eq 2 ] && L=${1##*/} L=${L%.git} || L=$2; mkdir -p \"$L/.git/info\" && cd \"$L\" && git init --template= && git remote add origin \"$1\" && git config core.sparseCheckout 1; [ $# -eq 2 ] && echo \"$2\" >> .git/info/sparse-checkout || { shift 2; for i; do echo $i >> .git/info/sparse-checkout; done }; git pull --depth 1 origin master;};f"

В противном случае:

git config --global alias.sparse-checkout '!f(){ [ $# -eq 2 ] && L=${1##*/} L=${L%.git} || L=$2; mkdir -p "$L/.git/info" && cd "$L" && git init --template= && git remote add origin "$1" && git config core.sparseCheckout 1; [ $# -eq 2 ] && echo "$2" >> .git/info/sparse-checkout || { shift 2; for i; do echo $i >> .git/info/sparse-checkout; done }; git pull --depth 1 origin master;};f'

Использование :

# Makes a directory ForStackExchange with Plug checked out
git sparse-checkout https://github.com/YenForYang/ForStackExchange Plug

# To do more than 1 directory, you have to specify the local directory:
git sparse-checkout https://github.com/YenForYang/ForStackExchange ForStackExchange Plug Folder

Эти git configкоманды «уменьшенные» для удобства и хранения, но здесь это псевдоним расширен:

# Note the --template= is for disabling templates.
# Feel free to remove it if you don't have issues with them (like I did)
# `mkdir` makes the .git/info directory ahead of time, as I've found it missing sometimes for some reason
f(){
    [ "$#" -eq 2 ] && L="${1##*/}" L=${L%.git} || L=$2;
    mkdir -p "$L/.git/info"
        && cd "$L"
        && git init --template=
        && git remote add origin "$1"
        && git config core.sparseCheckout 1;
    [ "$#" -eq 2 ]
        && echo "$2" >> .git/info/sparse-checkout
        || {
            shift 2;
            for i; do
                echo $i >> .git/info/sparse-checkout;
            done
        };
    git pull --depth 1 origin master;
};
f

Используете Linux? И хотите только легкий доступ и очистку рабочего дерева? не мешая остальной код на вашей машине. попробуй симлинки !

git clone https://github.com:{user}/{repo}.git ~/my-project
ln -s ~/my-project/my-subfolder ~/Desktop/my-subfolder

Тестовое задание

cd ~/Desktop/my-subfolder
git status

Просто чтобы прояснить некоторые из замечательных ответов здесь, шаги, описанные во многих ответах, предполагают, что у вас уже есть удаленный репозиторий.

Дано: существующий репозиторий git, например git@github.com:some-user/full-repo.git, с одним или несколькими каталогами, которые вы хотите использовать независимо от остальных репозиториев, например , каталоги с именами app1иapp2

Предполагая, что у вас есть Git-репозиторий, как указано выше ...

Затем: вы можете выполнить шаги, подобные следующим, чтобы извлечь только определенные каталоги из этого более крупного репо:

mkdir app1
cd app1
git init
git remote add origin git@github.com:some-user/full-repo.git
git config core.sparsecheckout true
echo "app1/" >> .git/info/sparse-checkout
git pull origin master

Я ошибочно подумал, что параметры sparse-checkout должны были быть установлены в исходном хранилище: это не так. Вы определяете, какие каталоги вы хотите локально, перед извлечением из пульта. Надеюсь, что это разъяснение поможет кому-то еще.

Хотя я ненавижу использовать svn при работе с git-репозиториями: / Я использую это все время;

function git-scp() (
  URL="$1" && shift 1
  svn export ${URL/blob\/master/trunk}
)

Это позволяет вам копировать из URL-адреса github без изменений. Применение;

--- /tmp » git-scp https://github.com/dgraph-io/dgraph/blob/master/contrib/config/kubernetes/helm                                                                                                                  1 ↵
A    helm
A    helm/Chart.yaml
A    helm/README.md
A    helm/values.yaml
Exported revision 6367.

--- /tmp » ls | grep helm
Permissions Size User    Date Modified    Name
drwxr-xr-x     - anthony 2020-01-07 15:53 helm/

Если вы действительно заинтересованы только в последних версиях файлов каталога, Github позволяет вам загрузить репозиторий в виде Zip-файла, который не содержит истории. Таким образом, загрузка происходит намного быстрее.

Итак, я попробовал все в этом шаге, и у меня ничего не получалось ... Оказывается, что в Git версии 2.24 (той, которая поставляется с cpanel во время этого ответа), вам не нужно делать это

echo "wpm/*" >> .git/info/sparse-checkout

все, что вам нужно, это имя папки

wpm/*

Короче говоря, вы делаете это

git config core.sparsecheckout true

Затем вы редактируете .git / info / sparse-checkout и добавляете имена папок (по одному в строке) с / * в конце, чтобы получить подпапки и файлы.

wpm/*

Сохраните и запустите команду проверки

git checkout master

Результатом была ожидаемая папка из моего репо и ничего больше Upvote, если это сработало для вас