电力数据存储湖泊中的表格数据模型BI

  • Z时代
  • 2024-01-10
  • 分类：问答

我有要求从数据湖泊存储和电力商业智能中显示消费数据。数据大小很大，可能是20 GB或50 GB，我不知道大小会发生什么变化。我也无法使用Azure DW和Azure Analysis服务。电力数据存储湖泊中的表格数据模型BI

现在，我提出了一个解决方案的所有表中的数据连接像商店，我应该建立在湛蓝的数据湖店表格文件（透视表）与聚合的日期

地理名称产品名称Salesyerar2015 Salesyerar2017用户id

我需要在电力商业智能报告中显示两年的数据。

月份水平我有24列的措施。在力量我使用来自数据湖商店的进口数据。

如果数据大小是比较我认为更大的数据文件，所以应该在高速缓存中容纳功率BI高级版（50 GB限制）

现在对于小型数据集，它做工精细，我能不能考大文件。

现在我想知道当我有日期水平表格文件是必需的我如何适应表格模型。

我也想知道这个提议的设计是否正确，或者我们是否有其他方法来处理这个用例。

问候， 马尼什

回答：

我建议你看一看到U-SQL采样功能提供了在Azure的数据湖分析服务箱，以减少你的数据集可以通过消耗大小Power BI。这是我们使用很多技术。

实施例U-SQL：

@Output = 
    SELECT 
     * 
    FROM 
     @ParsedJSON 
    SAMPLE UNIFORM 
     (0.04); //4%

然后输出的文件的数据湖存储用于消费。

希望这会有帮助

以上是 电力数据存储湖泊中的表格数据模型BI 的全部内容， 来源链接： utcz.com/qa/267111.html

回到顶部