eltable刷新整个表格方法_利用SSAS实现PBI报表增量刷新

欢迎访问我的博客网站阅读最新BI文章

对于经常处理大量数据且其Power BI报表不需要每次都刷新整个数据集的用户而言，增量刷新一直都是个问题，特别是对于那些没有条件使用Premium空间的用户以及在本地报表服务器发布报表的用户。一个稳定可靠的方法是利用SSAS表格模型的既有功能去突破Power BI本身的局限性，具体实现的方法，简而言之，就是让Power BI以实时连接的方式连接到SSAS表格模型数据库，因此刷新数据时不需要依赖Power BI本身，而依赖于数据处理功能更强大的SSAS--利用分区策略解决增量刷新。

本文将使用SSDT (Visual Studio 2017)作为演示, 如果你还没有安装可以点此到达下载页面。对于使用Visual Studio 2019的用户同样适用，如果你的SQL Server版本较低且使用SSDT(Visual Studio 2012), 本文亦提供了相应的代码。

案例介绍：

本案例需要完成一个可以动态展示近90天的销售数据的PBI报表，但总数据量多达几千万行，每次都对数据集进行全量刷新是不现实的，下文演示会说明如何做到每天只刷新最新一天的数据，实现增量刷新。

方案演示：

首先打开SSDT2017新建表格模型项目，刚开始你需要先连接到表格模型实例。注意，理论上同一个SQL Server实例的多维数据集实例与表格模型实例不能并存，如果你的SSAS是多维数据集，你可以查看此文章以了解如何将多维数据集实例转换为表格模型实例。（这样做的原因是Power BI连接表格模型在性能上要好得多）

另一个要注意的一点是，如下图所示，就是该表格模型项目的兼容级别。就我个人情况而言(也许对于多数用户也如此），1200是最好的选择。

然后在SSDT界面从SQL Server导入数据。本案例使用的数据集非常简单，只有一个日期字段和两个随机生成的字段--No_(可以看作是产品号)以及Qty(可以看作是销量)，但数据量较大，每天会产生大约几十万行的新数据，部分数据如下所示：

然后我们在右侧Tabular Model Explorer找到我们导入的表，选择"Partitions(分区)"。在弹出的Partition Manager界面，你可以通过修改SQL语句将数据集分区，如下图点击"New"创建新的分区（可能很多PBI用户没用使用过SSDT，因此我特地在此说明），比如本案例将数据集按天分区，因此在原有SQL查询语句基础上增加了WHERE过滤条件。故而通过此方式，我们就可以把90天的数据按天分成90个分区，在每次刷新数据时，只需要刷新最新一天的分区就可以了，这样就实现了增量刷新的目的。

然而，要实现真正动态的增量刷新，这种方式显然行不通。当新的一天到来时，你不可能还回到SSDT，手动删除最早的分区，手动创建最新的分区，再手动执行插入最新一天的数据。在BI的世界，手动这个词是令人反感的，我们必须找到方法让这一切都自动化。

幸运的是，我们可以在SSMS里将这一切操作以脚本方式运行。但首先我们需要发布我们的表格模型项目，这样我们才能在SSMS连接到表格模型实例后看到它：

右键点击表格(Query)选择分区，如下所示, 通过点击"Script Action to New Query Window"，对应的操作脚本会在查询窗口中打开，对于分区的一切操作（新建，修改，处理，删除）都可以通过运行脚本完成。这样我们就可以通过定时运行脚本的方式，让数据集在最新的一天自动创建分区并插入新数据了。