LuckyTemplates 増分更新: 概要と使用方法

LuckyTemplates は、データを扱う企業にとって価値のあるツールに進化しました。増分更新は、データを動的に更新することで作業を容易にする LuckyTemplates の重要な機能です。

LuckyTemplates の増分更新は、ユーザーが毎回完全なデータ更新を行うのではなく、段階的にデータを更新できるようにするプロセスです。これにより、データの更新が大幅に高速化され、LuckyTemplates とデータ ソース間で転送する必要があるデータの量が削減されます。

この記事では、プロのように LuckyTemplates で増分更新を設定し、データ分析ワークフローをより俊敏にし、最新のデータをすぐに利用してリアルタイムで情報に基づいた意思決定を行えるようにする方法を説明します。 。

さあ行こう！

目次

• LuckyTemplates 増分更新の基礎
  • 1.Power Query と LuckyTemplates
  • 2. リフレッシュポリシー
  • 3. フィルタロジック
  • 4. データフロー
• LuckyTemplates で増分更新を設定する方法
  • 1.パラメータの管理
  • 2. RangeStart パラメータと RangeEnd パラメータ
  • 3. LuckyTemplates での増分更新ポリシーの構成
• LuckyTemplates 増分更新の使用中にデータとフィルターを操作する方法
  • 1. 日付/時刻と整数のデータ型
  • 2. 代理キー
  • 3. カスタムフィルター
• LuckyTemplates で増分更新を使用しながらパフォーマンスと効率を向上させる方法
  • 1. パーティションとクエリの折りたたみ
  • 2. 大規模なデータセットの保存形式
  • 3. リソース消費の最適化
• 異なるデータソースでの増分更新の使用
  • 1.SQLデータベース
  • 2. DirectQuery およびインポート データ モード
  • 3. データウェアハウス
• 増分リフレッシュを使用するための 3 つの高度なテクニックとヒント
  • 1. リアルタイムのデータと更新
  • 2. DataView の日付/時刻を整数に変換する
• 最終的な考え

LuckyTemplates 増分更新の基礎

LuckyTemplates の増分更新は非常に便利なツールであり、レポートやダッシュボードの効率的なデータ更新プロセスに活用するには、その基礎を理解することが不可欠です。

これらの基本には次のものが含まれます。

1.Power Query と LuckyTemplates

増分更新は、新しいデータ モデルまたは更新されたデータ モデルのみを読み込むことができる LuckyTemplates の機能であり、データ更新プロセスの効率を向上させます。

大文字と小文字を区別する予約名RangeStart および RangeEnd を持つ Power Query の日付/時刻パラメーターを使用すると、テーブル データをフィルター処理し、増分範囲に基づいて動的に分割して、頻繁に更新されるデータと頻度の低いデータを分離できます。

2. リフレッシュポリシー

増分更新プロセスの実装に興味がある場合は、次の手順に従ってください。

• LuckyTemplates デスクトップで、カスタム フィルターが適用されたテーブルを選択します。

• 右クリックして、コンテキスト メニューから [増分更新] オプションを選択します。

• 表示される「増分更新」ウィンドウで、さまざまなオプションを設定し、ポリシーを定義できます。

LuckyTemplates Desktopで定義したポリシーは、LuckyTemplates サービスに適用されます。

3. フィルタロジック

増分更新で使用されるフィルター ロジックは、日付範囲に基づいています。フィルター ロジックを定義するときは、次の要素を考慮する必要があります。

• データ ソースの履歴データ保持ポリシーに注意してください。

• データ ソースがクエリの折りたたみと増分更新をサポートしていることを確認してください。

• ロード時間を最小限に抑えるために、データ テーブルの最適な範囲を決定します。

4. データフロー

データフローで増分更新を使用するには、追加の考慮事項がいくつか必要です。

• まず、データフローは、Premium 容量を持つワークスペースに存在する必要があります。

• 次に、Power Apps での増分更新には、Power Apps のアプリごとまたはユーザーごとのプランが必要です。

• 最後に、データフローは宛先として Azure Data Lake Storage を使用する必要があります。

LuckyTemplates の増分更新により、時間を節約し、データ更新の効率を向上させることができます。

LuckyTemplates の増分更新の基礎を説明したので、次のセクションで LuckyTemplates で増分更新を設定する方法について詳しく説明します。 

LuckyTemplates で増分更新を設定する方法

LuckyTemplates での増分更新のセットアップは簡単なプロセスです。まず、Power Query エディターで機能を有効にし、次に更新するテーブルを指定し、最後にストレージと更新のポリシーを定義します。

以下は、LuckyTemplates 増分更新を設定する方法に関する詳細なガイドです。

1.パラメータの管理

LuckyTemplates で増分更新を設定するには、まず Power Query を使用して日付/時刻パラメーターを作成する必要があります。これらのパラメータは、段階的に更新されるデータの範囲を定義するのに役立ちます。

• LuckyTemplates Desktop で [データの変換] をクリックしてPower Query エディターを開きます。

• 「パラメータの管理」に移動し、「新しいパラメータ」をクリックします。

2. RangeStart パラメータと RangeEnd パラメータ

目的の増分範囲で増分更新を成功させるには、次の 2 つの Power Query 日付/時刻パラメーターを、大文字と小文字を区別する予約名を使用して作成する必要があります。

• RangeStart : このパラメータは、増分更新に含めるデータ範囲の開始日を表します。

  

• RangeEnd : このパラメータは、増分更新のデータ範囲の終了日を示します。

  

これらのパラメーターを作成すると、データ セットに日付範囲フィルターを適用できるようになります。

3. LuckyTemplates での増分更新ポリシーの構成

RangeStart パラメーターと RangeEnd パラメーターの両方を設定したら、増分更新ポリシーを構成できます。

• LuckyTemplates Desktop で、目的のテーブルを右クリックし、[増分更新] を選択します。

• [増分更新] 設定ウィンドウで、[このテーブルを増分更新] スライダーをオンにします。

• 以下を定義してストレージ ポリシーを設定します。

  • LuckyTemplates サービスにデータを保存する日数/年数。

  • 増分更新の頻度を決定する更新ポリシー。

• ポリシーを構成した後、「すべて適用」をクリックして設定を保存します。

  

これらの手順に従うことで、LuckyTemplates で増分更新を設定し、大規模なデータセットの更新プロセスを最適化できます。それはとても簡単です！

これで説明が終わりましたので、次のセクションでは、LuckyTemplates の増分更新を使用しながらデータとフィルターを操作する方法を見ていきます。

LuckyTemplates 増分更新の使用中にデータとフィルターを操作する方法

LuckyTemplates でデータとフィルターを操作する方法を知っておくと、頻繁に変更されない大規模なデータセットがあるものの、最新のデータを定期的に確認したい場合に役立ちます。

その方法は次のとおりです。

1. 日付/時刻と整数のデータ型

LuckyTemplates の増分更新を使用する場合、日付/時刻と整数データ型で機能するさまざまなフィルターを理解することが重要です。

大文字と小文字を区別する予約名 RangeStart および RangeEnd を持つ日付/時刻パラメーターを使用すると、日付に基づいてテーブル データを効果的にフィルターできます。

たとえば、2005 年以降のデータを含むファクト テーブルでは、増分更新を設定して、過去 10 年間のみを保持し、2010 年より前のデータを除外できます。

整数データ型の場合、カスタム フィルターを設定して増分更新を管理できます。これは、頻繁に更新する必要があるデータを、それほど頻繁に更新する必要のないデータから分割して分離するのに役立ちます。

2. 代理キー

LuckyTemplates で増分更新を操作する場合、サロゲート キーは重要な役割を果たします。これらの一意のキーは、テーブル データの管理と制御に役立ちます。

構成プロセス中に代理キーを使用すると、主キーが変更されていないことを確認しながら、データの変更や更新を簡単に追跡できます。

これにより、データの整合性を維持しながら、効率的かつ効果的な増分更新が可能になります。

3. カスタムフィルター

日付/時刻および整数のデータ型に加えて、増分更新でカスタム フィルターを作成して利用することもできます。カスタム フィルターは、特定のニーズや基準に基づいてデータをより適切に管理および分割するのに役立ちます。

カスタム フィルターを作成するためのステップバイステップ ガイドは次のとおりです。

1. ファクト テーブルを右クリックし、増分更新構成の必須フィールドに入力します。

2. RangeStart と RangeEnd という名前の、日付/時刻データ型の 2 つのパラメーターを作成します。各パラメータのデフォルト値を設定します。

3. クエリまたはデータ処理ステップにカスタム フィルター関数を実装して、特定の要件に基づいてデータをフィルターします。

カスタム フィルターを使用すると、LuckyTemplates ソリューション内のデータを効率的に整理および管理でき、最適なパフォーマンスと使いやすさを確保できます。

罠に陥ったり、全体的なエクスペリエンスを妨げる可能性のある問題に直面したりしないように、増分更新の設定に注意してください。

LuckyTemplates でデータとフィルターを操作する方法を理解したら、次のセクションで増分更新を利用してレポートとダッシュボードのパフォーマンスと効率を向上させる方法を詳しく見てみましょう。

LuckyTemplates で増分更新を使用しながらパフォーマンスと効率を向上させる方法

LuckyTemplates で増分更新を使用する際のパフォーマンスと効率を向上させるには、さまざまな方法があります。以下にその一部を見ていきます。

1. パーティションとクエリの折りたたみ

LuckyTemplates で増分更新を構成すると、テーブルは自動的にパーティション化されます。一方のパーティションには頻繁に更新する必要があるデータが含まれており、もう一方のパーティションには変更されていない行が含まれています。

これにより、リフレッシュ プロセスのパフォーマンスと効率が向上します。クエリの折りたたみもこのプロセスで役割を果たします。クエリの複数のステップを 1 つのデータベース クエリに結合し、レポートの更新に必要な処理量と時間を削減します。

2. 大規模なデータセットの保存形式

LuckyTemplates Premium では、列ストアや集計などのストレージ形式を使用して、大規模なデータセットをより効率的に操作できます。

大量のデータを処理する場合、これらのストレージ形式により更新パフォーマンスが向上し、レポートをより速く操作できるようになります。

• 列ストア: この形式は、列指向のストレージと圧縮機能により、読み取り中心のクエリのパフォーマンスを向上させます。

• 集計: この機能により、集計されたテーブルによって多くのクエリに応答できるようになり、大きなファクト テーブルにアクセスする必要性が減り、パフォーマンスが向上します。

LuckyTemplates Premium を使用するときにこれらのストレージ形式を使用すると、大規模な LuckyTemplates データセットの管理がより効率的になります。

3. リソース消費の最適化

リソース消費の監視と最適化は、LuckyTemplates システムのパフォーマンスを維持するために重要です。これを行うには次のような方法があります。

• メモリ使用量の追跡: データセットの更新操作中に PeakMemory メトリックを分析して、消費された最大メモリを把握します。この値を監視すると、ボトルネックを特定し、メモリ使用量を最適化するのに役立ちます。

• CPU 使用率を監視する: すべてのクエリに対して Power Query エンジンによって消費される合計 CPU 時間を示す MashupCPUTime に注目してください。この洞察により、クエリを最適化し、消費を最小限に抑えることができます。

上記で説明したことを実装し、パーティショニング、クエリの折りたたみ、大規模なデータセットの保存形式などのLuckyTemplates の機能を活用することで、LuckyTemplates システムの全体的なパフォーマンスと効率を向上させることができます。

次に、さまざまなソースを使用して増分更新を構成する方法を検討します。

異なるデータソースでの増分更新の使用

LuckyTemplates 増分更新は、SQL Database、DirectQuery、インポート データ モード、データ ウェアハウスなどのさまざまなデータ ソースで使用できます。

LuckyTemplates にインポートするデータ ソースを選択する際に考慮すべき点がいくつかあります。

1.SQLデータベース

SQL データベースをデータ ソースとして使用する場合は、次の点に注意してください。

• 大文字と小文字を区別する予約名 RangeStart および RangeEnd を使用して、Power Query の日付/時刻パラメーターを作成します。

• これらのパラメーターを使用してデータにフィルターを適用し、頻繁に更新されるデータとそれほど頻繁に更新されないデータを分離します。

• LuckyTemplates サービスに発行する前に、LuckyTemplates Desktop で増分更新ポリシーを定義します。

増分更新は、LuckyTemplates Pro、LuckyTemplates Embedded データセット、およびユーザーごとの Premium プラン環境でのみサポートされることに注意してください。

2. DirectQuery およびインポート データ モード

LuckyTemplates は、 DirectQueryとImport Dataという 2 つのデータ アクセス モードを提供します。

これらのモードで増分リフレッシュを使用するには、次の操作が必要です。

• DirectQuery : ダイレクト クエリ モードでは、データ ソースからリアルタイムでデータをクエリします。つまり、LuckyTemplates データセットにはデータがインポートされません。LuckyTemplates Premium、LuckyTemplates Embedded データセット、またはユーザーごとの Premium プランを所有している場合にのみ、ダイレクト クエリでの増分更新を使用できます。

• データのインポート: このモードでは、データを LuckyTemplates データセットにインポートし、インポートされたデータを操作できるようになります。データのインポート モードで増分更新を使用するには、RangeStart パラメーターと RangeEnd パラメーターを構成し、フィルターを適用し、増分更新ポリシーを定義します。

3. データウェアハウス

データ ウェアハウスでの増分更新の使用は、SQL データベースの使用と似ています。データセットを LuckyTemplates サービスに公開する前に、同じ手順に従って RangeStart パラメーターと RangeEnd パラメーターを作成し、更新頻度に基づいてフィルターを個別のデータに適用し、増分更新ポリシーを定義します。

さまざまなデータ ソースで増分更新を適切に利用するための、LuckyTemplates 環境のデータ アクセス モードと制限事項を必ず理解してください。

増分更新を適切に構成すると、データ ストレージの効率が向上し、LuckyTemplates レポートで最新の情報を確実に利用できるようになります。

さまざまなデータ ソースで増分更新を使用する方法を説明したので、次のセクションでは LuckyTemplates 増分更新を使用するときの高度なヒントとテクニックを見ていきます。

これらのヒントとテクニックは、データを最大限に活用し、増分更新を正しく使用するのに役立ちます。

増分リフレッシュを使用するための 3 つの高度なテクニックとヒント

データ モデルで LuckyTemplates 増分更新を適切にデプロイして最適化するための高度なヒントとテクニックを以下に示します。

1. リアルタイムのデータと更新

LuckyTemplates を使用する場合、最適なパフォーマンスを得るには、増分更新とリアルタイム データを効率的に構成することが不可欠です。

増分更新を使用すると、データセット全体ではなく、新しいデータまたは変更されたデータを個別に更新できます。リアルタイム データと組み合わせると、最新の情報でレポートを効率的に更新できます。

このような機能を利用するには、LuckyTemplates Desktop を使用するか、XMLA エンドポイントを介して表形式モデル スクリプト言語 (TMSL) や表形式オブジェクト モデル (TOM) などのツールを使用して構成します。

2. DataView の日付/時刻を整数に変換する

日付/時刻値を整数に変換すると、データの操作が容易になり、更新効率が最適化されます。Power Query で日付/時刻を整数に変換する手順は次のとおりです。

1. LuckyTemplates で Power Query エディターを開きます。

2. 日付/時刻値を含む列を選択します。

3. 「変換」タブに移動し、「データ型」をクリックします。

4. 新しいデータ型として「整数」を選択します。

この変換により、増分更新中のデータ処理の負担が軽減され、パフォーマンスが向上します。

3. 完了した日のみ更新

増分更新ポリシーを構成する場合は、完全な日のみを更新することが重要です。これにより、不必要なデータ処理が防止され、レポートの読み込み時間が短縮されます。

これを実現するには、次の手順に従います。

1. LuckyTemplates Desktop でテーブルを右クリックし、[増分更新] を選択します。

2. [増分更新] ウィンドウで、Date_IS_AFTER = Date.IsAfterOrEqual([Date], DateTimeZone.SwitchZone(DateTime.LocalNow(), -TimeZoneOffset)) などのフィルターを定義します。

3. 完全な日のみを使用するように「rangeStart」パラメータと「rangeEnd 」パラメータを構成します。たとえば、「rangeEnd」を前日の日付に設定します。

これらの高度なテクニックとヒントを適用することで、LuckyTemplates ワークフローの効率的なデータセット管理、レポート生成、およびパフォーマンスの向上を保証できます。

最終的な考え

そして、それができました！LuckyTemplates 増分更新の謎が解明されました。これは単なる技術用語ではなく、大幅な時間とリソースを節約しながら、大規模なデータセットの処理を簡単にする革新的なツールです。

LuckyTemplates ユーザーは、増分更新機能から大きなメリットを得ることができます。Microsoft の人気のあるビジネス インテリジェンス ツールのこの高度な機能は、データセット内の新しいデータまたは変更されたデータのみを更新することで、リソースと時間を節約します。

それでは、実際に試してみて、データ更新の効率性を体験してください。データの世界では、常に最新の状態を維持することが、常に先を行くことであることを忘れないでください。

LuckyTemplates について詳しく知りたい場合は、以下のビデオをご覧ください。