WikiDer > HTCondor

HTCondor
HTCondor
Разработчики)Университет Висконсина-Мэдисона
Стабильный выпуск
8.8.10 Стабильный / 6 августа 2020 г.; 3 месяца назад (2020-08-06)
Предварительный выпуск
8.9.8 / 6 августа 2020 г.; 3 месяца назад (2020-08-06)
Операционная системаМайкрософт Виндоус, Mac OS X, Linux, FreeBSD
ТипВычисления с высокой пропускной способностью
ЛицензияЛицензия Apache 2.0
Интернет сайтhtcondor.org

HTCondor является Открытый исходный код высокопроизводительные вычисления программный фреймворк для крупнозернистого распределенного распараллеливания ресурсоемких задач.[1]Его можно использовать для управления рабочей нагрузкой на выделенном кластер компьютеров, или отдать работу простаивающим настольным компьютерам - так называемые цикл уборки. HTCondor работает на Linux, Unix, Mac OS X, FreeBSD, и Майкрософт Виндоус операционные системы. HTCondor может интегрировать как выделенные ресурсы (монтируемые в стойку кластеры), так и неспециализированные настольные компьютеры (циклическая очистка) в одной вычислительной среде.

HTCondor разработан командой HTCondor в Университет Висконсина-Мэдисона и свободно доступен для использования. HTCondor следует Открытый исходный код философия и лицензирована под Лицензия Apache 2.0.[2]

В то время как HTCondor использует неиспользованное вычислительное время, оставление компьютеров включенными для использования с HTCondor приведет к увеличению энергопотребления и связанных с этим затрат. Начиная с версии 7.1.1, HTCondor может переводить машины в спящий и пробуждающий режим в соответствии с политиками, заданными пользователем. Ранее эта функция была доступна только через стороннее программное обеспечение.

История

Разработка HTCondor началась в 1988 году.

HTCondor ранее назывался Condor; название было изменено в октябре 2012 года в связи с судебным разбирательством по делу о товарных знаках.[3]

HTCondor - это программа-планировщик, которая использовалась для распределения заданий для первой черновой сборки генома человека.

Пример использования

В качестве примера Усовершенствованный суперкомпьютерный центр НАСА (NAS) Пул HTCondor состоит примерно из 350 SGI и солнце рабочие станции, приобретенные и используемые для разработки программного обеспечения, визуализации, электронной почты, подготовки документов и т. д. Каждая рабочая станция запускает демон который наблюдает за пользователем Ввод / вывод и загрузка процессора. Когда рабочая станция бездействует в течение двух часов, ей назначается задание из пакетной очереди, которое будет выполняться до тех пор, пока демон не обнаружит нажатие клавиши, движение мыши или высокую загрузку ЦП, отличную от HTCondor. В этот момент задание будет удалено с рабочей станции и снова помещено в пакетную очередь.

Функции

HTCondor может выполнять как последовательные, так и параллельные задания. Последовательные задания могут выполняться в нескольких разных «юниверсах», включая «ванильную», которая обеспечивает возможность запуска большинства «пакетных» программ, и «стандартную вселенную», в которой целевое приложение повторно связано с библиотекой ввода-вывода HTCondor. который обеспечивает удаленный ввод-вывод заданий и контрольные точки заданий. HTCondor также предоставляет «локальную вселенную», которая позволяет запускать задания на «хосте отправки».

В мире параллельных рабочих мест HTCondor поддерживает стандарт Интерфейс передачи сообщений и Параллельная виртуальная машина (Goux, et al. 2000) в дополнение к собственной библиотеке Master Worker "MW" для чрезвычайно параллельных задач.

HTCondor-G позволяет заданиям HTCondor использовать ресурсы, не находящиеся под его непосредственным контролем. сетка и облако ресурсы, такие как pre-WS и WS Глобус, Nordugrid ARC, UNICORE и Amazon Elastic Compute Cloud.Но его также можно использовать для взаимодействия с другими пакетными системами, например Крутящий момент / PBS и LSF. Поддержка для Sun Grid Engine в настоящее время разрабатывается как часть EGEE проект.[нужна цитата]

HTCondor поддерживает DRMAA API вакансий. Это позволяет клиентам, совместимым с DRMAA, отправлять и отслеживать задания HTCondor. В Эталонная реализация SAGA C ++ предоставляет плагин (адаптер) HTCondor, который делает отправку и мониторинг заданий HTCondor доступными через API-интерфейсы SAGA Python и C ++.

Другие функции HTCondor включают:DAGMan"который обеспечивает механизм для описания зависимости работы.

Смотрите также

Рекомендации

  1. ^ Тейн, Дуглас; Танненбаум, Тодд; Ливны, Мирон (2005). «Распределенные вычисления на практике: опыт Condor» (PDF). Параллелизм и вычисления: практика и опыт. 17 (2–4): 323–356. CiteSeerX 10.1.1.6.3035. Дои:10.1002 / cpe.938.
  2. ^ «HTCondor - Информация о лицензии». research.cs.wisc.edu.
  3. ^ Танненбаум, Тодд. ""Condor "имя меняется на" HTCondor"". Получено 11 марта 2013.

внешняя ссылка