Видавничий дім «Інтернаука» — на головну

Технічні науки Українською Відкритий доступ

Обробка та аналіз даних з використанням Apache Spark

Ловчинський Сергій Броніславович

Міжнародний науковий журнал «Інтернаука», № 9, червень 2017

Анотація

Аналіз і дослідження вирішення задачі розподіленого оброблення даних за допомогою Apache Spark. У цій статті представляється дослідження найсучасніших методів оброблення даних та виділено їх переваги і недоліки у контексті вимог до розподіленої системи. Показується підхід Apache Spark до вирішення задач розподіленого оброблення даних. Демонструється на тестових прикладах використання Apache Spark.

Ключові слова: Розподілені системи; обробка даних; потокова обробка; аналіз даних; великі дані

English

Data processing and analysis using Apache Spark

Abstract. Analysis and research of the solution of the problem of distributed data processing with the help of Apache Spark. This article presents an investigation of modern data processing methods and identifies their advantages and disadvantages in the context of requirements for a distributed system. Apache Spark's approach to solving distributed data processing problems is shown. It is demonstrated on test cases using Apache Spark.

Keywords: Distributed systems; data processing; stream processing; data analysis; large data

Як цитувати

Ловчинський С. Б. Обробка та аналіз даних з використанням Apache Spark // Міжнародний науковий журнал "Інтернаука". — 2017. — №9.

@article{internauka2667,
  author   = {Ловчинський, Сергій Броніславович},
  title    = {Обробка та аналіз даних з використанням Apache Spark},
  journal  = {Міжнародний науковий журнал «Інтернаука»},
  year     = {2017},
  number   = {9},
  url      = {https://www.inter-nauka.com/issues/2017/9/2667}
}
TY  - JOUR
AU  - Ловчинський, Сергій Броніславович
TI  - Обробка та аналіз даних з використанням Apache Spark
JO  - Міжнародний науковий журнал «Інтернаука»
PY  - 2017
IS  - 9
SN  - 2520-2057
UR  - https://www.inter-nauka.com/issues/2017/9/2667
LA  - uk
ER  - 

Текст статті

Або відкрийте файл PDF

PDF, 325 КБ — Завантажити PDF

Як цитувати

Ловчинський С. Б. Обробка та аналіз даних з використанням Apache Spark // Міжнародний науковий журнал "Інтернаука". — 2017. — №9.

@article{internauka2667,
  author   = {Ловчинський, Сергій Броніславович},
  title    = {Обробка та аналіз даних з використанням Apache Spark},
  journal  = {Міжнародний науковий журнал «Інтернаука»},
  year     = {2017},
  number   = {9},
  url      = {https://www.inter-nauka.com/issues/2017/9/2667}
}
TY  - JOUR
AU  - Ловчинський, Сергій Броніславович
TI  - Обробка та аналіз даних з використанням Apache Spark
JO  - Міжнародний науковий журнал «Інтернаука»
PY  - 2017
IS  - 9
SN  - 2520-2057
UR  - https://www.inter-nauka.com/issues/2017/9/2667
LA  - uk
ER  -