Система управления заданиями распределенной сети суперкомпьютерных центров коллективного пользования
Шабанов Б.М., Телегин Павел Николаевич, Овсянников Алексей Павлович et al. · Труды НИИСИ РАН. · 2018
В статье рассмотрены вопросы построения системы управления заданиями распределённой сети суперкомпьютерных научных центров. Авторами предлагается децентрализованная схема управления, основанная на асинхронном взаимодействии коллектива равноправных диспетчеров через глобальную очередь заданий. Рассмотрена практическая реализация глобальной очереди на базе распределённой СУБД Elasticsearch, предложены подходы к обеспечению защищённого доступа к распределённой базе данных и организации безопасного копирования исходных данных заданий между различными суперкомпьютерными центрами. The article discusses issues of building jobs management system for distributed network of supercomputer research centers. The authors suggest a decentralized management scheme based on asynchronous interaction of a team of equal dispatchers via the global jobs queue. Implementation of the global queue on the base of the Elasticsearch distributed database is considered. There are proposed approaches that ensure secure access to a distributed database and secure transfer of input data between supercomputer centers.
Cited by 3 works. doi:10.25682/niisi.2018.6.0009
Authors
- Шабанов Б.М.
- Телегин Павел Николаевич
- Овсянников Алексей Павлович
- Баранов А.В.
- Тихомиров Артем Игоревич
- D. S. Lyakhovets
References
- SLURM: Simple Linux Utility for Resource Management
- Job scheduling under the Portable Batch System
- The distributed network of the supercomputer centers for collaborative research
- Methods and tools for organizing the global job queue in the geographically distributed computing system
- Comparison of Auction Methods for Job Scheduling with Absolute Priorities
- Применение метода английского аукциона при планировании заданий с абсолютными приоритетами в распределенной вычислительной системе
- Comparison of priority-based and first price sealed-bid auction algorithms of job scheduling in a geographically-distributed computing system