Средства платформы apache hadoop для параллельных и распределенных вычислени

Abstract

У зв'язку з широким розповсюдженням Grid-систем для наукових обчислень важливою стає проблема вибору найбільш підходящої платформи для вирішення конкретних завдань. Проблема ускладнюється – тим, що тенденція зростання обсягів даних для обробки має експонентний характер. У роботі розглянута одна з новітніх Grid-платформ, що реалізує сучасні методики керування обчисленнями, ресурсами та балансування навантаженням. Наведено порів-няння основних компонент даної платформи з існуючими аналогами і конкуруючими системами.

Nowadays Grid-based scientific projects become more wide-spread. However, the essential restriction is the problem to choose the appropriate platform for concrete tasks resolutions. The distributed platform Apache Hadoop is considered in the paper. This modern Grid platform, based on the modern scientific paradigms, is suitable for processing of the huge amount of the data in reliable and effective way. The functional comparison of this platform to the other modern Grid platforms is described in this paper.

У зв'язку з широким розповсюдженням Grid-систем для наукових обчислень важливою стає проблема вибору найбільш підходящої платформи для вирішення конкретних завдань. Проблема ускладнюється – тим, що тенденція зростання обсягів даних для обробки має екс-понентний характер. У роботі розглянута одна з новітніх Grid-платформ, що реалізує сучасні методики керування обчисленнями, ресурсами та балансування навантаженням. Наведено порівняння основних компонент даної платформи з існуючими аналогами і конкуруючими сис-темами.