Вопросы с тегом «batch-processing»

34
Почему мой голый металлический компьютер с ядрами 16x 2,93 ГГц работает хуже, чем VPS с ядрами 4x 2,5 ГГц?

Я написал фрагмент многопоточного программного обеспечения, которое выполняет кучу симуляций в день. Это очень ресурсоемкая задача, и я запускал эту программу в облачных службах, обычно в конфигурациях, таких как 1 ГБ на ядро. Я использую CentOS 6.7 и /proc/cpuinfoсообщаю, что мои четыре VPS-ядра...

27
предотвратить выход XARGS из-за ошибки

Согласно man-странице, xargs завершит работу, если одна из строк выполнения завершится с ошибкой 255: Если какой-либо вызов команды завершается со статусом 255, xargs немедленно останавливается, не читая никаких дальнейших вводных данных. Когда это происходит, на stderr выдается сообщение об...

16
Самый эффективный способ пакетного удаления файлов S3

Я хотел бы иметь возможность пакетного удаления тысяч или десятков тысяч файлов одновременно на S3. Каждый файл будет от 1 до 50 МБ. Естественно, я не хочу, чтобы пользователь (или мой сервер) ждал, пока файлы находятся в процессе удаления. Отсюда и вопросы: Как S3 обрабатывает удаление файлов,...