Кэши данных в расчете DAX

В этом руководстве вы узнаете, что кэши данных делают в расчете DAX. Вы поймете, как они работают с формулами и механизмами хранения, чтобы давать ответы на ваши запросы.

Оглавление

• Что такое кэш данных?
• Каковы ключевые особенности?
• Где найти кэш данных?
• Заключение

Что такое кэш данных?

Механизм хранения взаимодействует с механизмом формул в виде кэша данных.

Если вы помните из предыдущих сообщений в блоге о структуре запроса DAX, вы знаете, что обработчик формул запрашивает данные у обработчика хранилища. Последний затем обращается к базе данных, получает различные типы данных, а затем возвращает их обратно в механизм формул в виде кэша данных.

Механизм хранения может выполнять простую математику и агрегацию, что делает его быстрее. Он также предлагает параллелизм, который может одновременно заполнять несколько кэшей данных. Ответ на один запрос механизма хранения может занять некоторое время. Но если вы суммируете все разные запросы механизма хранения, результаты не будут одинаковыми, потому что он заполняет более одного кеша данных.

Механизм формул, с другой стороны, работает со сложными запросами. Поскольку это однопоточный движок, он может использовать только один конечный кэш консолидированных данных. Он начинает работать с кешем данных после того, как механизм хранения заполнит все запросы.

Если запрос обработчика формул точно такой же, как и предыдущий запрос, ранее возвращенный кеш будет использоваться снова. Механизм хранения достаточно умен, чтобы возвращать тот же кэш данных, если он получает тот же запрос. Это повышает производительность DAX, поскольку данные уже кэшированы.

Когда вы запускаете меру, важно запускать ее для холодного кэша; всегда избегайте выполнения запросов в теплом кеше. Теплый кеш означает, что кеш данных подсистемы хранения уже сформирован и готов к возврату.

Каковы ключевые особенности?

Кэши данных — это таблицы, материализованные в памяти, что требует времени и потребляет оперативную память. Всегда помните, что материализация должна быть как можно ниже.

Другая ключевая особенность заключается в том, что эти кэши не сжаты . Как только он выходит из механизма хранения и отправляется в механизм формул, кэш данных становится несжатой полной таблицей в памяти. Это выполнение намного медленнее, чем запрос механизма однорангового хранилища, который полностью находится в памяти и сжат.

Нет проблем с использованием механизма формул; вам просто нужно заставить механизм хранения выполнять работу как можно больше.

Кэши данных также являются временными. Они существуют какое-то время, а потом исчезают. Несмотря на то, что они материализуются в памяти, они непостоянны, поэтому их можно стереть.

Где найти кэш данных?

Вы можете найти эту информацию в столбце Records физических планов запросов и в DAX Studio Server Timings в столбце Rows . Это покажет, сколько строк создается механизмом хранения и отправляется в механизм формул.

Если вы запустите определенные тесты в таймингах сервера, вы заметите, что количество строк может немного отличаться. Это всего лишь ориентир того, сколько рядов вы вытягиваете.

Главное, что нужно иметь в виду при кэшировании данных, это то, что количество материализуемых строк должно быть как можно ближе равно количеству строк, необходимых для вывода. Если есть большая разница в количестве строк, это означает, что операция заказа отключена.

Если количество материализованных строк равно количеству строк, необходимых для вывода, это называется поздней материализацией . Однако, если количество материализованных строк превышает количество необходимых строк, это называется ранней материализацией . Поскольку это несжатые данные, вы не должны позволять обоим механизмам материализовать их, поскольку это снизит производительность DAX.

Вот пример ранней материализации:

В плане физического запроса вы можете увидеть 25 миллионов строк, которые вытягиваются из столбца записей. Однако для примера запроса не требуется 25 миллионов строк вывода. Это означает, что запрос извлек слишком много строк, чем необходимо.

Если вы посмотрите на серверные тайминги, вы увидите такое же количество строк, извлекаемых в столбце строк.

На изображениях ЦП SE вы увидите число, если в ваших запросах есть параллелизмы. Поскольку в этом примере их нет, он показал 0.

Что такое DAX Studio в LuckyTemplates Desktop
Учебное пособие по DAX: контекст и механизм вычислений
VertiPaq Analyzer в DAX Studio | Учебник по LuckyTemplates

Заключение

Медленная работа DAX может означать, что ваш запрос извлекает ненужные кеши для работы ваших механизмов. Кэши данных отвечают за скорость и точность вашего DAX, потому что механизмы работают с ними, чтобы генерировать ответы на разные запросы. Чтобы повысить производительность DAX, вы можете решить эту проблему, правильно создав модель данных и меры DAX.