ellibsЭлектронные библиотекиRussian Digital Libraries Journal1562-5419Казанский (Приволжский) федеральный университетellibs-26Research ArticleСтатьиТенденции развития технологий обработки больших данных и инструментария хранения разноформатных данных и аналитикиTechnology trends handling of big data and tools storage of multiformat data and analyticsБиктимировМ. Р.marat@ras.ruЕлизаровА. М.amelizarov@gmail.comЩербаковА. Ю.x509@ras.ruВсероссийский институт научной и технической информации РАНRussian FederationИнститут математики и механики им. Н.И. Лобачевского Казанского (Приволжского) федерального университетаRussian FederationНИУ «Высшая школа экономики»; Федеральный исследовательский центр «Информатика и управление» РАНRussian Federation201628102016195390407Copyright © Биктимиров М.Р., Елизаров А.М., Щербаков А.Ю., 20162016Биктимиров М.Р., Елизаров А.М., Щербаков А.Ю.Биктимиров М.Р., Елизаров А.М., Щербаков А.Ю.Данная работа распространяется под лицензией Creative Commons Attribution 4.0.This work is licensed under a Creative Commons Attribution 4.0 License.https://ellibs.elpub.ru/jour/article/view/26

Статья посвящена анализу тенденций развития технологий обработки Больших Данных и инструментария хранения разноформатных данных и аналитики, который проведен в рамках работ по программе фундаментальных исследований Отделения математических наук РАН «Алгебраические и комбинаторные методы математической кибернетики и информационные системы нового поколения», а также гранта РФФИ № 14-07-00783 «Способы хранения и обработки большого объема научно-справочных данных на современных аппаратных платформах».

This article analyzes the development trends of processing Big Data tools and multi-format data storage and analysis. This analysis was carried out as part of our program of basic research of the Department of Mathematical Sciences, Russian Academy of Sciences “Algebraic and Combinatorial Methods of Mathematical Cybernetics and information systems of the new generation", as well as RFBR grant number 14-07-00783 “Way to store and process a large volume of scientific and reference data modern hardware platforms”.

большие данныеанализинформацияпрограммное обеспечениераспределенные вычислениясистемы храненияоблачные технологииBig Datastorage systemsanalysisinformationsoftwaregrid computingcloud computingReferencesKord Davis with Doug Patterson. Ethics of Big data: Balancing Risk and Innovation. O'Reilly Media, Inc., 2012. 82 p. ISBN: 978-1-4493-1179-7.Kord Davis with Doug Patterson. Ethics of Big data: Balancing Risk and Innovation. O'Reilly Media, Inc., 2012. 82 p. ISBN: 978-1-4493-1179-7.Hopkins B., Evelson B. Expand your digital horizon with Big Data. 2011. 16 p. http://www.asterdata.com/newsletter-images/30-04-2012/resources/forrester_ expand_your_digital_horiz.pdfHopkins B., Evelson B. Expand your digital horizon with Big Data. 2011. 16 p. http://www.asterdata.com/newsletter-images/30-04-2012/resources/forrester_ expand_your_digital_horiz.pdfОбзор рынка BigData. http://habrahabr.ru/company/moex/blog/256747/Обзор рынка BigData. http://habrahabr.ru/company/moex/blog/256747/IBM: Бизнес выбирает когнитивные решения. https://www.crn.ru/news/ detail.php?ID=109059IBM: Бизнес выбирает когнитивные решения. https://www.crn.ru/news/ detail.php?ID=109059Будзко В.И. BigData. Новый вызов. http://www.myshared.ru/slide/535343/, 18 марта 2016 г.Будзко В.И. BigData. Новый вызов. http://www.myshared.ru/slide/535343/, 18 марта 2016 г.«Мировой объем данных увеличивается более чем в два раза каждые два года, большие объемы данных открывают новые возможности и изменяют роль ИТ», <tweet> http://russia.emc.com/about/news/press/2011/20110628-01.htm«Мировой объем данных увеличивается более чем в два раза каждые два года, большие объемы данных открывают новые возможности и изменяют роль ИТ», <tweet> http://russia.emc.com/about/news/press/2011/20110628-01.htmCisco: в период с 2012 по 2017 гг. объем мобильного трафика вырастет в 13 раз Пресс-релиз. http://www.cisco.com/c/ru_ru/about/press/press-releases/ 2013/ 02-020713a.htmlCisco: в период с 2012 по 2017 гг. объем мобильного трафика вырастет в 13 раз Пресс-релиз. http://www.cisco.com/c/ru_ru/about/press/press-releases/ 2013/ 02-020713a.htmlBig Data от А до Я. Часть 1: Принципы работы с большими данными, парадигма MapReduce. https://habrahabr.ru/company/dca/blog/267361/Big Data от А до Я. Часть 1: Принципы работы с большими данными, парадигма MapReduce. https://habrahabr.ru/company/dca/blog/267361/NoSQL: http://nosql-database.org/NoSQL: http://nosql-database.org/Apache Hadoop. MapReduce Tutorial. https://hadoop.apache.org/docs/ r1.2.1/mapred_tutorial.htmlApache Hadoop. MapReduce Tutorial. https://hadoop.apache.org/docs/ r1.2.1/mapred_tutorial.htmlApache Hadoop. http://hadoop.apache.org/Apache Hadoop. http://hadoop.apache.org/SAP HANA. https://hana.sap.com/abouthana.htmlSAP HANA. https://hana.sap.com/abouthana.htmlCios K.J. Data Mining: A Knowledge Discovery Approach. Springer 2007, 606 p. ISBN 978-0-387-33333-5.Cios K.J. Data Mining: A Knowledge Discovery Approach. Springer 2007, 606 p. ISBN 978-0-387-33333-5.Wakelin P., Day S., Read S., McKenna F. CICS transaction gateway V3.1: the WebSphere connector for CICS. SG24-6133-00, IBM, 2001. 269 p.Wakelin P., Day S., Read S., McKenna F. CICS transaction gateway V3.1: the WebSphere connector for CICS. SG24-6133-00, IBM, 2001. 269 p.http://www.techproresearch.com/, http://22century.ru/popular-science-publications/gartner-preliminary-results/attachment/bigdatahttp://www.techproresearch.com/, http://22century.ru/popular-science-publications/gartner-preliminary-results/attachment/bigdataМедетов А.А. Термин Big Data и способы его применения // Молодой ученый. 2016. № 11. С. 207–210.Медетов А.А. Термин Big Data и способы его применения // Молодой ученый. 2016. № 11. С. 207–210.Эра Big Data. Как ритейлеры используют данные о своих клиентах. http://retail-community.com.ua/news/tehnologii/3677-era-big-data-kak-riteyleryi-ispolzuyut-dannyie-o-svoih-klientahЭра Big Data. Как ритейлеры используют данные о своих клиентах. http://retail-community.com.ua/news/tehnologii/3677-era-big-data-kak-riteyleryi-ispolzuyut-dannyie-o-svoih-klientahПредсказание оттока игроков из World of Tanks от Yandex Data Factory. Лекция для Малого ШАДа. https://habrahabr.ru/company/yandex/blog/281777/Предсказание оттока игроков из World of Tanks от Yandex Data Factory. Лекция для Малого ШАДа. https://habrahabr.ru/company/yandex/blog/281777/Сергей Немалевич. Гадание на больших данных. https://republic.ru/ biz/1152340/Сергей Немалевич. Гадание на больших данных. https://republic.ru/ biz/1152340/Андрей Васильков. Data Collective: «большие данные» — приоритетное направление инвестиций. http://www.computerra.ru/97457/data-collective-relies-on-big-data/Андрей Васильков. Data Collective: «большие данные» — приоритетное направление инвестиций. http://www.computerra.ru/97457/data-collective-relies-on-big-data/Wikibon Big Data Capital Markets Day 2014, Jeff Kelly. http://www. slideshare.net/jeffkelly568/wikibon-big-data-capital-markets-day-2014Wikibon Big Data Capital Markets Day 2014, Jeff Kelly. http://www. slideshare.net/jeffkelly568/wikibon-big-data-capital-markets-day-2014Небольшие выводы о больших данных, Генеральный директор T-Systems в России. Алексей Тоскин 19 августа 2014. http://www.computerra.ru/ 105278/nebolshie-vyivodyi-o-bolshih-dannyih/Небольшие выводы о больших данных, Генеральный директор T-Systems в России. Алексей Тоскин 19 августа 2014. http://www.computerra.ru/ 105278/nebolshie-vyivodyi-o-bolshih-dannyih/10 лучших продуктов на рынке Big Data в 2015 году. https://www.crn.ru/ news/detail.php?ID=10711810 лучших продуктов на рынке Big Data в 2015 году. https://www.crn.ru/ news/detail.php?ID=107118Измалкова С.А., Головина Т.А. Использование глобальных технологий «big data» в управлении экономическими системами //Изв. Тульского гос. ун-та. Экономические и юридические науки. 2015. № 4-1. С. 151–158.Измалкова С.А., Головина Т.А. Использование глобальных технологий «big data» в управлении экономическими системами //Изв. Тульского гос. ун-та. Экономические и юридические науки. 2015. № 4-1. С. 151–158.Большие данные. Большие возможности. http://www.emc.com/ru-ru/big-data/index.htmБольшие данные. Большие возможности. http://www.emc.com/ru-ru/big-data/index.htmТренды мирового e-commerce рынка в 2015–2016 годах. https:// habrahabr.ru/company/SECL_GROUP/blog/268455/Тренды мирового e-commerce рынка в 2015–2016 годах. https:// habrahabr.ru/company/SECL_GROUP/blog/268455/Семенов Ю.А. Обзор по материалам ведущих фирм, работающих в сфере сетевой безопасности. http://book.itep.ru/10/2015.htmСеменов Ю.А. Обзор по материалам ведущих фирм, работающих в сфере сетевой безопасности. http://book.itep.ru/10/2015.htm

The authors declare that there are no conflicts of interest present.