Из Википедии, бесплатной энциклопедии
Перейти к навигации Перейти к поиску
Обозреватель данных Azure
Windows Azure logo.png
Разработчики)Microsoft
Первый выпуск2018 ; 3 года назад ( 2018 )
ПлатформаMicrosoft Azure
ТипОблачное хранилище
ЛицензияПроприетарный
Веб-сайтдокументы .microsoft .com / en-us / azure / data-explorer /

Azure Data Explorer - это полностью управляемая [1] облачная платформа для анализа больших данных [2] [3] и служба исследования данных [4], разработанная Microsoft , [5] [6], которая принимает структурированные , частично структурированные (например, JSON ) и неструктурированные данные (например, свободный текст). [7] [8] [9] [10] Затем служба сохраняет эти данные и отвечает на специальные аналитические запросы с задержкой в ​​несколько секунд. Это база данных полнотекстового индексирования и поиска, включаявозможности анализа временных рядов [6] [7], а также оценка регулярных выражений и анализ текста. [11]

Он предлагается как « Платформа как услуга» (PaaS) как часть платформы Microsoft Azure . Продукт был анонсирован Microsoft в 2018 году.

История [ править ]

Развитие продукта началось в 2014 году в качестве низовых инкубационного проекта в Израиле я R & D центр Microsoft, [12] с внутренним кодовым названием «Кусто [9] [7] » (названные в честь Жака Кусто , как ссылка на " исследуя океан данных »). Целью проекта было удовлетворить потребности служб Azure в быстрой и масштабируемой аналитике журналов и телеметрии. В 2016 году он стал серверной службой обработки больших данных и аналитики для Application Insights Analytics [13] . Продукт был объявлен как общедоступный предварительный продукт на конференции Microsoft Ignite 2018, [14]и был объявлен общедоступным продуктом на конференции Microsoft Ignite в феврале 2019 г. [15]

Особенности [ править ]

Обозреватель данных Azure предлагает оптимизированный язык запросов и параметры [16] визуализации данных с помощью SQL- подобного языка под названием KQL (язык запросов Kusto. [17] [18] [19] ). [7] [8] KQL используется только для запросов и, в отличие от SQL, KQL не может обновлять или удалять данные. [20]

Обозреватель данных Azure может принимать 200 МБ в секунду на узел. [14] Методы приема данных - это конвейеры и соединители для общих служб, таких как Azure Event Grid или Azure Event Hub, [21] или программный прием с использованием пакетов SDK .

Визуализации данных можно добиться с помощью таких инструментов, как PowerBI [21] [22] или Grafana . [23] [24]

Дизайн [ править ]

Обозреватель данных Azure - это распределенная база данных, работающая в кластере вычислительных узлов в Microsoft Azure . Он основан на системах управления реляционными базами данных (СУБД) , поддерживающих такие объекты, как базы данных, таблицы , функции и столбцы. Он поддерживает операторы сложных аналитических запросов, такие как вычисляемые столбцы, поиск и фильтрация или строки, группировка по агрегатам и объединения . [25]

Служба движка предоставляет реляционную модель данных : на верхнем уровне ( кластере ) есть набор баз данных, каждая база данных содержит набор таблиц и хранимых функций. Каждая таблица определяет схему (упорядоченный список типизированных полей).

В Azure Data Explorer, в отличие от типичных систем управления реляционными базами данных (RDBMS) , нет ограничений, таких как уникальность ключа, первичный и внешний ключ . [26] Необходимые отношения устанавливаются во время запроса. [27] Данные в обозревателе данных Azure обычно следуют этому шаблону: [28] Создание базы данных, получение данных, запрос к базе данных.

Ссылки [ править ]

  1. ^ Серра, Джеймс (2019-03-14). «Обозреватель данных Azure» . Блог Джеймса Серры . Проверено 9 апреля 2020 .
  2. ^ «Microsoft развертывает хранилище озера данных Azure, обозреватель данных Azure» . eWEEK . Проверено 10 апреля 2020 .
  3. ^ Могенис, Макс. "Что такое обозреватель данных Azure?" . blog.pragmaticworks.com . Проверено 21 марта 2020 .
  4. ^ «Создание кластера и базы данных обозревателя данных Azure в Azure» . www.c-sharpcorner.com . Проверено 9 апреля 2020 .
  5. ^ Маки, Курт; 20.09.2019. «Скоро появятся обновленные инструменты для Office 365 и Microsoft Azure - Redmondmag.com» . Redmondmag . Проверено 10 апреля 2020 .CS1 maint: числовые имена: список авторов ( ссылка )
  6. ^ a b «Сравнение данных Microsoft Azure Data Explorer и базы данных Microsoft Azure SQL» . db-engines.com . Проверено 9 апреля 2020 .
  7. ^ а б в г Махаджан, Гаури (27 февраля 2020 г.). «Обозреватель данных Azure для начинающих» . SQL Shack - статьи об аудите баз данных, производительности серверов, восстановлении данных и многом другом . Проверено 9 апреля 2020 .
  8. ^ a b orspod. "Что такое обозреватель данных Azure?" . docs.microsoft.com . Проверено 6 декабря 2019 .
  9. ^ a b Махаджан, Гаури (27 февраля 2020 г.). «Обозреватель данных Azure для начинающих» . SQL Shack - статьи об аудите баз данных, производительности серверов, восстановлении данных и многом другом . Проверено 21 марта 2020 .
  10. ^ Лай, Алекс (2019-01-14). "Что такое обозреватель данных Azure и язык запросов Kusto (KQL)?" . Адатис . Проверено 10 апреля 2020 .
  11. ^ «Обозреватель данных Azure - цифровая торговая площадка» . www.digitalmarketplace.service.gov.uk . Проверено 21 марта 2020 .
  12. ^ «Microsoft R&D» . www.microsoftrnd.co.il . Проверено 6 декабря 2019 .
  13. ^ orspod. «Представляем Application Insights Analytics» . devblogs.microsoft.com . Проверено 6 декабря 2019 .
  14. ^ a b «Знакомство с обозревателем данных Azure» . azure.microsoft.com . Проверено 6 декабря 2019 .
  15. ^ «Общая доступность: Обозреватель данных Azure | Обновления Azure | Microsoft Azure» . azure.microsoft.com . Проверено 6 декабря 2019 .
  16. ^ Brust, Эндрю. «Быстро, Microsoft станет партнером по аналитике в реальном времени с помощью Azure Data Explorer» . ZDNet . Проверено 9 апреля 2020 .
  17. ^ Маки, Курт; 18.07.2019. «Microsoft предварительно просматривает данные Prometheus в Azure Monitor для контейнеров - Redmondmag.com» . Redmondmag . Проверено 9 апреля 2020 .CS1 maint: числовые имена: список авторов ( ссылка )
  18. ^ «Начало работы с языком запросов Kusto (KQL) - System.Blog.Martens.Ben» . blogs.msdn.microsoft.com . Проверено 6 декабря 2019 .
  19. ^ «Изучение данных в Microsoft Azure с использованием языка запросов Kusto и обозревателя данных Azure» . www.pluralsight.com . Проверено 21 марта 2020 .
  20. ^ Лай, Алекс (2019-01-14). "Что такое обозреватель данных Azure и язык запросов Kusto (KQL)?" . Адатис . Проверено 10 апреля 2020 .
  21. ^ a b «Архитектура конвейеров данных и аналитики в Azure» . Gartner . Проверено 10 апреля 2020 .
  22. ^ Mahajan, Гаури (2020-02-27). «Обозреватель данных Azure для начинающих» . SQL Shack - статьи об аудите баз данных, производительности серверов, восстановлении данных и многом другом . Проверено 10 апреля 2020 .
  23. ^ «Графана против панелей мониторинга Azure - какую из них использовать и когда?» . CloudIQ Tech . 2018-12-10 . Проверено 10 апреля 2020 .
  24. ^ «Подключаемый модуль источника данных Azure Data Explorer для Grafana» . Grafana Labs . Проверено 10 апреля 2020 .
  25. ^ orspod. «Начало работы с Kusto - Azure Data Explorer» . docs.microsoft.com . Проверено 6 декабря 2019 .
  26. ^ «Сравнение GraphDB и Microsoft Azure Data Explorer» . db-engines.com . Проверено 10 апреля 2020 .
  27. ^ «Обозреватель данных Azure: облачная платформа для анализа больших данных» (PDF) .
  28. ^ Серра, Джеймс (2019-03-14). «Обозреватель данных Azure» . Блог Джеймса Серры . Проверено 21 марта 2020 .