Технічні науки Українською Відкритий доступ
Обробка та аналіз даних з використанням Apache Spark
Анотація
Аналіз і дослідження вирішення задачі розподіленого оброблення даних за допомогою Apache Spark. У цій статті представляється дослідження найсучасніших методів оброблення даних та виділено їх переваги і недоліки у контексті вимог до розподіленої системи. Показується підхід Apache Spark до вирішення задач розподіленого оброблення даних. Демонструється на тестових прикладах використання Apache Spark.
Ключові слова: Розподілені системи; обробка даних; потокова обробка; аналіз даних; великі дані
English
Data processing and analysis using Apache Spark
Abstract. Analysis and research of the solution of the problem of distributed data processing with the help of Apache Spark. This article presents an investigation of modern data processing methods and identifies their advantages and disadvantages in the context of requirements for a distributed system. Apache Spark's approach to solving distributed data processing problems is shown. It is demonstrated on test cases using Apache Spark.
Keywords: Distributed systems; data processing; stream processing; data analysis; large data
Як цитувати
Ловчинський С. Б. Обробка та аналіз даних з використанням Apache Spark // Міжнародний науковий журнал "Інтернаука". — 2017. — №9.
@article{internauka2667,
author = {Ловчинський, Сергій Броніславович},
title = {Обробка та аналіз даних з використанням Apache Spark},
journal = {Міжнародний науковий журнал «Інтернаука»},
year = {2017},
number = {9},
url = {https://www.inter-nauka.com/issues/2017/9/2667}
}
TY - JOUR AU - Ловчинський, Сергій Броніславович TI - Обробка та аналіз даних з використанням Apache Spark JO - Міжнародний науковий журнал «Інтернаука» PY - 2017 IS - 9 SN - 2520-2057 UR - https://www.inter-nauka.com/issues/2017/9/2667 LA - uk ER -