Есть ли простой способ синхронизировать папку с каталогом через HTTP?
Редактировать :
Спасибо за совет с Wget! Я создал скрипт оболочки и добавил его в качестве задания cron:
remote_dirs=( "http://example.com/" "…") # Add your remote HTTP directories here
local_dirs=( "~/examplecom" "…")
for (( i = 0 ; i < ${#local_dirs[@]} ; i++ )) do
cd "${local_dirs[$i]}"
wget -r -l1 --no-parent -A "*.pdf" -nd -nc ${remote_dirs[$i]}
done
# Explanation:
# -r to download recursively
# -l1 to include only one directory depth
# --no-parent to exclude parent directories
# -A "*.pdf" to accept only .pdf files
# -nd to prevent wget to create directories for everything
# -N to make wget to download only new files
Редактировать 2:
Как упоминалось ниже, можно также использовать --mirror
( -m
), что является сокращением для -r -N
.
synchronization
http
Ленар Хойт
источник
источник
Ответы:
wget
это отличный инструмент.использование
wget -m http://somesite.com/directory
источник
Подобно rsync, но используйте zsync для получения с httpd-сервера.
источник
lftp
и егоmirror
команду теперь вместо этого.