Разработка моделей и приложений высокопроизводительной распределенной обработки данных на основе технологии MapReduce - Hadoop для задач нефтедобычи
Full Name of the work head: Данаев Н.Т.
Исполнители проекта: Мансурова М.Е.*
: Научно-исследовательский институт математики и механики при КазНУ им. аль-Фараби
Inventory number: 0213РК02511
Registration number: 0112РК02061
Keywords: распределенная обработка данных*распределенный параллельный алгоритм*задачи нефтедобычи*алгоритмы кластеризации*
Исследованы методы формализации распределенных параллельных вычислений на платформе MapReduce - Hadoop, инструменты дискретного описания моделей для дальнейшей автоматизации генерации программного кода с учетом специфики платформы Hadoop, организация параллельных распределенных вычислений на платформе Hadoop для решения задач нефтедобычи. Разработаны параллельные алгоритмы кластеризации с применением технологии MapReduce, которые позволяют проводить структурный анализ оперативных промысловых данных нефтегазовых месторождений. Создана шаблонная MDA модель для решения задач нефтедобычи с вычислительными компонентами, с помощью которых могут быть построены научные приложения на базе различных высокопроизводительных технологий. Разработан распределенный параллельный алгоритм решения модельных задач, который в дальнейшем будет использован для решения сложных задач нефтедобычи. Разработан Web интерфейс мониторинга и управления взаимодействием между вычислительными ресурсами распределенной системы. Разработан прототип эффективного распределенного решения модельной задачи нефтедобычи.*
