如何使用doris进行（分钟，小时和天等级别的）大数据自动聚合以支撑较长时间范围的高性能数据查询？

[wangchong2023]

我们的原始数据规模较大，又需要查询短期（分钟，小时）和长期（天，月，年）的数据统计。想请教一下如何使用Doris的建表模型来实现这一功能？而且尽量避免在上层的业务层感知这种自动聚合？
物化视图可以支持这一功能吗？

[hf200012]

加我微信聊35926237 Constantine ***@***.***>于2023年10月29日 周日16:24写道：

…

我们的原始数据规模较大，又需要查询短期（分钟，小时）和长期（天，月，年）的数据统计。想请教一下如何使用Doris的建表模型来实现这一功能？而且尽量在上层的业务层感知这种自动聚合？ — Reply to this email directly, view it on GitHub <#26077>, or unsubscribe <https://github.com/notifications/unsubscribe-auth/AAGIITLFU44QD7KWMOL5VO3YBYHDNAVCNFSM6AAAAAA6UVVQS6VHI2DSMVQWIX3LMV43ASLTON2WKOZRHE3DMOBZGM2DGMA> . You are receiving this because you are subscribed to this thread.Message ID: ***@***.***>

[wangchong2023]

@hf200012
是不是v2.1版本已经支持Job调度来解决该问题了？

[smallyao]

@wangchong2023 最后用的什么方案解决的？：）

[wangchong2023]

@wangchong2023 最后用的什么方案解决的？：）

@smallyao 业务层代码做调度啊

[smallyao]

@wangchong2023 Doris的聚合模型或者物化视图是不是也可以？你们这边数据量级如何？

[wangchong2023]

@wangchong2023 Doris的聚合模型或者物化视图是不是也可以？你们这边数据量级如何？

应该也可以。我们的原始数据量级比较大。得有百万tps