Современные системы хранения и обработки больших данных: Hadoop и Apache Spark
Автор: Ермагамбетов Р.Т., Киселев Е.С.
Журнал: Форум молодых ученых @forum-nauka
Статья в выпуске: 8 (24), 2018 года.
Бесплатный доступ
В рамках данной статьи были проанализированы основные характеристики таких Big Data систем, как Hadoop и Apache Spark, и выяснены причины, по которым на данный момент они являются наиболее популярными.
Большие данные, системы хранения, парадигма mapreduce
Короткий адрес: https://sciup.org/140284014
IDR: 140284014
Список литературы Современные системы хранения и обработки больших данных: Hadoop и Apache Spark
- Аббакумов В., Лезина Т. Бизнес-анализ информации. Статистические методы. - М.: «Экономика», 2009. - 374 с.
- Гусейнов А.А., Бочкова И.А. Исследование распределенной обработки данных на примере системы Hadoop // Актуальные проблемы авиации и космонавтики. 2016. №1. С. 604-607.
- Самарев Р.С. Обзор состояния области потоковой обработки данных // труды ИСП РАН. 2017. №1, том 29. С. 231-260.
- Силен Д., Мейсман А., Али М. Основы Data Science и Big Data. Python и наука о данных. 4 изд. Спб.: Питер, 2017. 336 с.
- Armbrust M., Xin R., Lian, C. Spark SQL: Relational data processing in spark. In ACM Special Interest Group on Management of Data, 2015, pp. 1-12.
- Dean J., Ghemawat, S. Mapreduce: simplified data processing on large clusters. In OSDI'04: Proceedings of the 6th conference on Symposium on Operating Systems Design & Implementation (Berkeley, CA, USA, 2004), USENIX Association, pp. 10-10.
- Laney D. 3-D Data Management: Controlling Data Volume, Velocity and Variety. Application Delivery Strategies by META Group Inc. 2001, p. 949.
- Meng X., Bradley J., Yuvaz B. MLlib: Machine learning in Apache Spark. In Journal of Machine Learning Research, 17(34):1D7, 2016, pp. 1-7.
- T. White. Hadoop: The Definitive Guide. Yahoo Press, 2010, p. 756.
- Zaharia M., Das T., Li H. Discretized streams: Fault-tolerant streaming computation at scale. In Symposium on Operating Systems Principles, 2013, 1-16.
Статья научная
