性能优化-设置数据集缓存-《Python教程》

admin 2025-10-20 00:22:03 编程 来源:ZONE.CI 全球网 0 阅读模式

最近使用 Superset 制作了一些图表,遇到一个性能问题是每次刷新浏览器时,都需要等待很久才能将图表加载出来,原因在于图表所使用的数据集是实时从 Impala 数据库中提取出来的,这个取数的时间其实就很耗时了。

预期的效果:第一次加载后将数据缓存下来,后续打开看板或图表可以秒开,其他人打开时也可以秒开。实现方式:耗时最多的时间是从数据中提数这一步骤,将图表所使用的数据集缓存到数据库中,可以有效地解决这个问题。

1. 数据集缓存

编辑数据集,在设置中配置缓存时间为 36000 秒,也就是 10 个小时。这一步完成之后,并不能实现我们想要的效果,因为缓存数据库还没有配置。image.png

2. 配置Redis缓存

首选确保 Redis Server 服务已经开启了,然后在项目下 superset_config.py 文件配置以下参数:

  1. DATA_CACHE_CONFIG: CacheConfig = {
  2. 'CACHE_TYPE': 'redis',
  3. 'CACHE_DEFAULT_TIMEOUT': 60 * 60 * 24, # 1 day default (in secs)
  4. 'CACHE_KEY_PREFIX': 'superset_results',
  5. 'CACHE_REDIS_URL': 'redis://127.0.0.1:6379/0',
  6. }

配置好之后,重启你的 Superset 就好了,再次查看图表,你会发现就效果如预期那样了。

以太坊cppgolang区别 编程

以太坊cppgolang区别

以太坊是一种去中心化的开源平台,它采用智能合约技术,旨在构建和运行不受干扰的分布式应用程序。作为目前最受欢迎的区块链平台之一,以太坊提供了多种编程语言的支持,其
progolang 编程

progolang

Go语言(Golang)是由Google开发的一门静态类型编程语言。作为一名专业的Golang开发者,我深知这门语言的优势和特点。在本文中,我将介绍Golang
golangn个发送者 编程

golangn个发送者

Golang是一种开源的编程语言,由Google团队开发,旨在提高程序的并发性和简化软件开发过程。在Go语言中,有时需要向多个接收者发送信息。本文将介绍如何在G
golang技能图谱 编程

golang技能图谱

从互联网行业的快速发展到人工智能技术的日益成熟,各种编程语言也应运而生。而在这众多的编程语言中,Golang(即Go)作为一门强大且高效的开发语言备受关注。Go
评论:0   参与:  15