Neoflex Datagram стал первым отечественным ETL-средством для BIG DATA, вошедшим в реестр российского ПО

29.06.2020 |

Neoflex Datagram включен в единый реестр российских программ для электронных вычислительных машин и баз данных. Neoflex Datagram позволяет создавать высоконагруженные аналитические бизнес-приложения по обработке данных с использованием технологий Big Data.

Заказчики как в России, так и за рубежом уже оценили преимущества использования Neoflex Datagram для создания аналитических приложений с использованием стека технологий Big Data. Благодаря подходу Model Driven Architecture, лежащего в основе Neoflex Datagram, разработчики могут проектировать процессы обработки данных в визуальном редакторе, а исполняемый Scala-код будет сгенерирован автоматически. Таким образом, для создания Big Data-решений могут быть привлечены ETL и SQL-программисты, что значительно ускоряет процесс разработки и помогает решить проблему дефицита Big Data-специалистов.

Neoflex Datagram использует библиотеку Apache Spark и поддерживает как пакетный, так и потоковый режим обработки данных. Ядром платформы является сервер метаданных, содержащий информацию об источниках и приемниках данных, исполняющих средах, трансформациях, последовательности выполнения заданий и т.д. Neoflex Datagram поддерживает полный цикл разработки, включая компиляцию и генерацию приложения, его развертывание на исполняющей среде и планирование исполнения.

Среди основных возможностей Neoflex Datagram: создание схем параллельного и последовательного преобразования данных; поддержка shell scripts и java программ; возможность создания схем управления последовательностями преобразований с использованием вложенных объектов Workflow; запланированное исполнение Workflow по времени или событиям файловой системы.

Neoflex Datagram сокращает время на разработку бизнес-приложений для задач онлайн-мониторинга и выявления аномалий в потоковом режиме, высоконагруженных приложений для обработки и анализа данных, систем для автоматизации обязательной отчетности в крупных финансовых организациях.

Neoflex Datagram уже успешно используют в своей работе НКО НКЦ (Группа «Московская биржа»), банк «Открытие», Эс-Би-Ай Банк, «БНП ПАРИБА Банк» АО, Mediascope, BAI (Ангола) и др.