Розвиток технологій Big Data в умовах цифрових трансформацій

Н. П. Юрчук; С. С. Кіпоренко

РОЗВИТОК ТЕХНОЛОГІЙ BIG DATA В УМОВАХ ЦИФРОВИХ ТРАНСФОРМАЦІЙ
Н. П. Юрчук, С. С. Кіпоренко

DOI: 10.32702/2306-6792.2021.9-10.60

УДК: 311.21:004

Н. П. Юрчук, С. С. Кіпоренко

РОЗВИТОК ТЕХНОЛОГІЙ BIG DATA В УМОВАХ ЦИФРОВИХ ТРАНСФОРМАЦІЙ

Анотація

У статті досліджено сутність великих даних, доведено актуальність їх використання в умовах цифровізації усіх сфер діяльності суспільства. Здійснено порівняльний аналіз Data Science та Big Data. Визначено, що характеристиками для великих даних сьогодні є фізичний об'єм, швидкість приріст даних, необхідність їх швидкої обробки, здатність обробляти дані різних типів, достовірність, життєздатність, цінність, змінність та візуалізація.
Охарактеризовано основні принципи роботи з Big Data: горизонтальна масштабованість, відмовостійкість, локальність даних. Встановлено, що основними джерелами Big Data є корпоративні відомості, дані з різноманітних вимірювальних пристроїв, потоки повідомлень із Інтернету.
Досліджено, що великі дані використовуються за такими напрямами: інформаційні технології, промисловість, сільське господарство, енергетика, банківські і фінансові послуги, медицина та охорона здоров'я, торгівля, маркетинг, експлуатація та обслуговування складного обладнання, логістика, туризм, телекомунікації, житлово-комунальне господарство, електронне урядування, освіта, наукові дослідження та інші. Акцентовано увагу на основних напрямах використання Big Data у сільському господарстві. Розглянуто тенденції розвитку великих даних та аналітики.

Ключові слова: Big Data; великі дані; дані; інформація; знання; джерело даних; цифровізація.

Література

1. Entering the Future: Top Big Data Trends to Define Upcoming Years. URL: https://www.intellias.com/future-big-data-trends/?_ga=2.146932407.1029102768.1620842007-108721363.1618380113
2. Балабанов О.С. Аналітика великих даних: принципи, напрямки і задачі (огляд). Проблеми програмування. 2019. № 2. С. 47—68. DOI: https://doi.org/10.15407/pp2019.02.047
3. Задорожна Р.П. Big data — новий інформаційний феномен цифрової епохи. Економіка та управління АПК. 2016. № 1—2. С. 64—72.
4. Fundamental Principles of Official Statistics (A/RES/68/261 from 29 January 2014). URL: https://unstats.un.org/unsd/dnss/gp/fundprinciples.aspx
5. Аналитический обзор рынка Больших Данных. URL: http://www.ipoboard.ru/files/cms/5e3af134b9942559eb802ea93a1c9050
6. Тимошин Ю.А., Гохкаленко С.Д. Цільове застосування та основні тенденції сумісного впровадження Big Data та IoT. International scientific journal. 2016. № 3. С. 89—94.
7. Big Data: що це таке та як працює. URL: https://hub.kyivstar.ua/news/big-data-shho-cze-take-ta-yak-praczyue/
8. Statista company factsheet. URL: https://www.statista.com/
9. Великі Дані: Що Це Таке і Де Цьому Навчитися. URL: https://itcluster.lviv.ua/velyki-dani/
10. Big Data (Великі дані). URL: https://www.it.ua/knowledge-base/technology-innovation/big-data-bolshie-dannye
11. Действительно большие данные: как big data помогает компаниям зарабатывать. URL: https://thebell.io/dejstvitelno-bolshie-dannye-kak-big-data-pomogaet-kompaniyam-zarabatyvat
12. 2050: прокормить на треть больше людей. URL: fao.org/news/story/ru/item/35677/icode/
13. Кернасюк Ю.В. BIG DATA: Інноваційні можливості підвищення прибутковості агробізнесу. Агробізнес сьогодні. URL: http://agro-business.com.ua/agro/idei-trendy/item/8396-big-data-innovatsiini-mozhlyvosti-pidvyshchennia-prybutkovosti-ahrobiznesu.html
14. Panetta Kasey. From artificial intelligence to small data and graph technology, data and analytics leaders should think about leveraging these trends/ URL: https://www.gartner.com/smarterwithgartner/gartner-top-10-data-and-analytics-trends-for-2021

N. Yurchuk, S. Kiporenko

DEVELOPMENT OF BIG DATA TECHNOLOGIES IN THE CONDITIONS OF DIGITAL TRANSFORMATIONS

Summary

The article investigates the essence of big data, proves the relevance of their use in the context of digitalization of all spheres of society. A comparative analysis of Data Science and Big Data was performed. The characteristics of big data today are determined to be physical volume, data growth rate, the need for fast data processing, the ability to process different types of data, reliability, viability, value, variability and visualization. The basic principles of working with Big Data are described: horizontal scalability, fault tolerance, data locality. These principles differ from those of traditional, centralized, vertical storage models for well-structured data. It is established that Big Data is created by a person who leaves an information trace. The main sources of Big Data are corporate information (archives, internal company data, etc.), data from various measuring devices (IoT sensors, audio and video recorders, smart gadgets, smartphones, cellular communications, etc.), message flows from the Internet (social communities, forums, blogs, websites, media, etc.).
It is investigated that big data are used in the following areas: information technology, industry, agriculture, energy, banking and financial services, medicine and health care, trade, marketing, operation and maintenance of complex equipment, logistics, tourism, telecommunications, housing utilities, e-government, education, research and others. The defining characteristics of big data are, in addition to their physical volume, others that emphasize the complexity of the task of processing and analyzing this data. Emphasis is placed on the main areas of use of Big Data in agriculture. The biggest direction of their introduction today is the technology of precision agriculture, which allows not only to increase crop yields, but also significantly reduce the unproductive costs of fuels and lubricants, seeds and fertilizers. In recent years, the technology of robotic milking of dairy cows has become widespread, which allows you to effectively manage resources and product flows, while optimizing unproductive costs. The main trends in the development of big data and analytics are considered.

Keywords: Big Data; big data; data; information; knowledge; data source; digitization.

References

1. The official site of Software Development Company Intellias (2021), "Entering the Future: Top Big Data Trends to Define Upcoming Years", available at: https://www.intellias.com/future-big-data-trends/?_ga=2.146932407.1029102768.1620842007-108721363.1618380113 (Accessed 20 April 2021).
2. Balabanov, О.S. (2019), "Big Data Analytics: principles, trends and tasks (a survey)", Problems in programming, vol. 2, pp. 471-68. DOI: https://doi.org/10.15407/pp2019.02.047
3. Zadorozhna, R.Р. (2016), "Big Data — a new information phenomenon of digital epoch", Aic economics and management, vol. 1—2, pp. 64—72.
4. The official site of Statistics Division of the United Nations Department of Economic and Social Affairs (2021), "Fundamental Principles of Official Statistics (A/RES/68/261 from 29 January 2014)", available at: https://unstats.un.org/unsd/dnss/gp/fundprinciples.aspx (Accessed 21 April 2021).
5. The official site of IPOboard (2021), "Analytical review of the Big Data market", available at: http://www.ipoboard.ru/files/cms/5e3af134b9942559eb802ea93a1c9050 (Accessed 22 April 2021).
6. Tymoshyn, Yu.A. and Hokhkalenko, S.D. (2016), "Intended use and major trends of the joint implementation of Big Data and IoT", International scientific journal, vol. 3, pp. 89—94.
7. The official site of Kyivstar Business Hub (2021), "Big Data: what it is and how it works", available at: https://hub.kyivstar.ua/news/big-data-shho-cze-take-ta-yak-praczyue/ (Accessed 22 April 2021).
8. The Statistics Portal Statista company factsheet (2021), "Statistics", available at: https://www.statista.com, (Accessed 28 April 2021).
9. The official site of Lviv IT Cluster (2021), "Big Data: What It Is and Where to Learn It", available at: https://itcluster.lviv.ua/velyki-dani/ (Accessed 25 April 2021).
10. The official site of IT-Enterprise (2021), "Big Data", available at: https://www.it.ua/knowledge-base/technology-innovation/big-data-bolshie-dannye (Accessed 26 April 2021).
11. The official site of the Bell project (2021), "Really big data: how big data helps companies make money", available at: https://thebell.io/dejstvitelno-bolshie-dannye-kak-big-data-pomogaet-kompaniyam-zarabatyvat (Accessed 26 April 2021).
12. The official site of Food and Agriculture Organization of the United Nations (2021), "2050: A third more mouths to feed", available at: http://www.fao.org/news/story/en/item/35571/icode/ (Accessed 28 April 2021).
13. Kernasiuk, Yu.V. (2020), "BIG DATA: Innovative opportunities to increase the profitability of agribusiness", Ahrobiznes S'ohodni, [Online], available at: http://agro-business.com.ua/agro/idei-trendy/item/8396-big-data-innovatsiini-mozhlyvosti-pidvyshchennia-prybutkovosti-ahrobiznesu.html (Accessed 28 April 2021).
14. The official site of Global Research and Advisory Company Gartner (2021), "From artificial intelligence to small data and graph technology, data and analytics leaders should think about leveraging these trends", available at: https://www.gartner.com/smarterwithgartner/gartner-top-10-data-and-analytics-trends-for-2021/ (Accessed 26 April 2021).

№ 9-10 2021, стор. 60 - 68

Дата публікації: 2021-05-25

Кількість переглядів: 1088