Яндекс DataLens: для каких задач полезен

Что это такое? Яндекс DataLens – инструмент аналитики, рассчитанный на корпоративных пользователей. Предоставляет массовый доступ, что облегчает работу целой команды.

Как работать? Для использования сервиса не нужно покупать лицензию или ежемесячно вносить оплату – DataLens бесплатный. Следует лишь зарегистрироваться и начать пользоваться возможностями системы аналитики.

Анализ данных стал неотъемлемой частью успешного бизнеса, предоставляя компаниям ценную информацию для принятия решений, разработки эффективных стратегий и удовлетворения потребностей пользователей. Объем данных постоянно растет, поэтому потребность в их анализе и интерпретации становится все более выраженной.

Для получения максимальной пользы от работы с информацией компаниям необходимы опытные аналитики. Эти специалисты играют важную роль в обработке данных, создании отчетов и выявлении ценных инсайтов, которые помогают в стратегическом планировании и улучшают работу отдельных подразделений.

Такие сотрудники применяют BI-системы, которые автоматически собирают информацию из источников и позволяют создавать подробные отчеты. К примеру, для анализа статистики продаж или оценки результатов рекламных кампаний на различных платформах.

Некоторые зарубежные сервисы прекратили свою деятельность в России. Хотя отдельные компании все также применяют зарубежные BI-системы, для многих предприятий эти инструменты стали недоступными, поэтому они переключились на отечественные платформы и проекты с открытыми исходными данными.

Яндекс DataLens – это мощный инструмент для бизнес-аналитики, который предоставляет возможность подключиться к источнику, описать модель данных, создать визуальные отображения информации, разработать дашборды и легко обмениваться результатами с командой. С самого начала своего развития DataLens является внутренним инструментом Яндекса. В то же время он представляет собой облачное решение для клиентов Yandex Cloud.

DataLens, используемый внутри Яндекса, является корпоративным стандартом для визуализации данных и бизнес-аналитики. Если вы пользуетесь услугами Яндекса, то, скорее всего, вы уже взаимодействовали с DataLens, например, при анализе оценок на КиноПоиске.

DataLens, доступный как облачный сервис в Yandex Cloud, имеет более 100 000 экземпляров. Они применяются как небольшими технологическими стартапами, так и крупными банками, и федеральными розничными сетями.

Яндекс DataLens был разработан как инновационный инструмент для создания запросов к разнообразным источникам данных с возможностью интерактивной визуализации. Однако DataLens не хранит информацию внутри себя, а напрямую взаимодействует с базами данных. Источником может являться внешняя БД, другое облако или on-premise.

Продуманная архитектура и обширный функционал для визуализации делают DataLens универсальным инструментом для работы с различными сценариями: от формирования графиков по метрикам до крупных дашбордов, где данные могут быть проанализированы, сопоставлены друг с другом, представлены на карте и использованы для выявления трендов. Эффективность анализа во многом зависит от качества информации.

Рассмотрим несколько компаний, успешно использующих этот сервис:

Опыт, накопленный внутренними заказчиками, может стать ценным источником информации для других компаний. В качестве примера можно взять Яндекс.Маркет и Yandex Go. Обе эти команды применяли Tableau для своей core-отчётности.

Когда появился DataLens, было принято решение перевести на него отчетность для массовых ролей, таких как сотрудники поддержки, внештатные рабочие и складской персонал. Через некоторое время обе команды поняли, что DataLens предоставляет всё необходимое для удовлетворения их потребностей. В течение всего трех месяцев они перенесли более 700 отчетов для 4000 пользователей на эту платформу.

Подобные истории успеха помогают новым пользователям DataLens лучше понять, как применять данный сервис для решения конкретных задач.

При использовании DataLens вам не нужно беспокоиться о выборе программного или аппаратного обеспечения, так как платформа интегрирована в Data Platform в рамках экосистемы Yandex.Cloud. DataLens – это полностью облачное решение, которое соответствует современным требованиям и стандартам безопасности. Для доступа к этой платформе пользователям, администраторам и разработчикам достаточно иметь веб-браузер.

DataLens является облачным решением SaaS. Архитектура распределена по трём ЦОДам на территории России. Благодаря особенностям DataLens компании не нужно беспокоиться о технических аспектах внутренней реализации.

Инструмент демонстрирует свою надежность и устойчивость даже при интенсивном общественном использовании. К примеру, при сборе и анализе статистики COVID, рейтингов актеров и фильмов на Kinopoisk.

DataLens – это масштабируемый инструмент с дневной аудиторией в 200-300 тысяч уникальных посетителей. Его архитектура способна принимать ещё 1 миллион пользователей без необходимости изменения структуры.

Функция автоматического создания резервных копий интегрирована в SaaS-сервис. Случайно удаленные объекты можно восстановить. Для этого нужно просто обратиться в службу поддержки.

DataLens не имеет собственных инструментов ETL. Однако инфраструктура Yandex.Cloud предоставляет разнообразные альтернативы для выполнения ETL-процессов, включая Data Transfer, DataProc, DataSphere, Cloud Functions, Managed Service for Apache Kafka, Data Streams и Apache Airflow.

Существует два режима работы с источниками данных в DataLens:

Вы можете сформировать иерархию и воспользоваться ею для активации режима drill—down/drill—up. Drill-through позволяет перейти на связанный отчет по ссылке.

Основные функции включают выбор типа данных, агрегации, формата (число/процент), размерности, а также префикса и постфикса для показателей (измерений). При этом есть возможность изменять показатели не только при формировании набора данных, а в любой момент в процессе работы.

В DataLens также имеется конструктор для создания вычисляемых полей, который расширяет базовые возможности по формированию показателей. Кроме того, вы можете использовать SQL-запросы для описания источника данных или создания специальных графиков, которые нельзя построить с помощью стандартных виджетов (QL-чартов).

Хотя кастомизация стандартных виджетов недоступна, вы можете создавать собственные виджеты с помощью кастомных скриптов и библиотек на базе Yandex DataSphere.

DataLens обеспечивает эффективную работу со множеством источников данных непосредственно из платформы, включая ClickHouse, CSV-файлы, PostgreSQL, MySQL, MS SQL Server, GreenPlum, Oracle, Google Sheets, YandexDatabase, Yandex Cloud Billing, Yandex Metrica и Yandex AppMetrica.

Чтобы интегрировать данные в DataLens, можно применять разнообразные инструменты Yandex.Cloud. К примеру:

Сервис позволяет экспортировать данные в различные форматы, включая *.xls, *.csv, *.markdown.

Для Yandex.Cloud доступно публичное API, документацию к которому можно найти на официальном веб-сайте. В ближайшем будущем будет разработано API DataLens, предназначенное для автоматизированного описания чартов и получения информации из внешних сервисов.

Можно встроить платформу во внешние порталы без дополнительной платы. Предполагается, что в будущем будет реализована опция встраивания во внутренние защищенные порталы, но за это пользователю придется заплатить определенную сумму.

Все элементы отчетности (дашборды, чарты, датасеты, подключения) находятся в каталогах. Каждый пользователь имеет личную папку и ограниченный доступ к общим ресурсам. Вы можете скопировать общий объект к себе и внести в него необходимые изменения в личном каталоге.

Сервис позволяет осуществлять поиск как по различным типам объектов, так и по всей базе данных.

DataLens поддерживает совместную работу пользователей и создание отчетов. Платформа предоставляет стандартный функционал баз данных и сервисов интеграции. На данный момент отсутствует возможность сохранения разных версий дашбордов, но эту функцию планируется внедрить в скором времени.

Пользователи, которые имеют аккаунты Яндекс, добавленные в ваш бизнес-аккаунт, могут назначать права доступа к объектам. Кроме того, сервис позволяет создавать ссылки для публичного доступа к дашбордам.

Начнем с преимуществ:

Недостатки:

С помощью DataLens можно создать свой дашборд для визуализации данных. Инструмент позволяет загружать небольшие файлы формата CSV. Однако для хранения и обработки больших объемов информации рекомендуется воспользоваться управляемыми БД на платформе Yandex.Cloud.

Материализация – это перенос данных из их источника во встроенное хранилище DataLens. При работе с БД эта операция может и не выполняться. Все файлы формата CSV автоматически проходят процесс материализации.

Нет, ваша конфиденциальность будет соблюдена, если вы не внесете соответствующие настройки. Платформа Yandex.Cloud и все ее сервисы соответствуют современным стандартам безопасности России и международного уровня.

Да, существует Marketplace, где есть полезные примеры дашбордов, датасеты и дополнительные коннекторы к различным системам.

Этот инструмент бесплатен в связи с тем, что он является частью платформы Яндекс Облако, которая имеет хорошую конверсию. Однако в будущем появятся дополнительные платные функции. К примеру, secure embedding, позволяющий встраивать дашборды в защищенные порталы и личные кабинеты. Стандартная функция embedding останется бесплатной.

Этот инструмент не подойдет тем, кто ищет глубокую кастомизацию (CSS).

Основные цели проекта:

DataLens – это простой и бесплатный инструмент для self-service-аналитики. Сервис является очень простым в использовании. При этом его функционал постоянно расширяется.