老季博客

标签： Caches缓存

  • Python3 Django 框架中使用脚本预缓存多计算页面

    Python3 Django 框架中使用脚本预缓存多计算页面

    前面几篇文章我们讲述了

    由于我们的数据里已达到百万计，而且页面中有比较多的mysql跨库跨表的计算，在打开页面时会造成时间过长。所以我们需要在Django框架中如何对页面进行预缓存数据。

    本来我们打算使用 request 页面请求的方式，但是项目中需要登录以后才能看到这个页面，所以这条路不考虑。

    但是我们可以将预缓存的数据提前计算好放在Django的缓存中，然后在使用时显示出来。

    注：可以使用文件缓存的方式进行，然后看定期是否自动有新文件生成出来。

    代码实例

    #!/usr/bin/env python
# coding: utf-8
######
#  调用方法  python .\manage.py flushCaches
######
from django.core.cache import cache
from scheduling.views import getIndexResult
import time , datetime , hashlib
from django.core.management.base import BaseCommand, CommandError
class Command(BaseCommand):
    def handle(self, *args, **options):
        date =  time.strftime("%Y-%m-%d %H:%M")
        print('开始预缓存首页数据，时间：%s'%date)
        cache_key = hashlib.md5(('index_'+date).encode(encoding='UTF-8')).hexdigest()
        if not cache.get(cache_key) :
            cache.get_or_set(cache_key, getIndexResult(date) ,60*60)

    调用方法

    python .\manage.py flushCaches

    crontab设置

    */1 * * * * cd /data/wwwroot/scheduling/web/ ; /usr/bin/python manage.py flushCaches >> /tmp/flushCache.log 2>&1

    下次我们打开页面时，速度就很快了。

  • Python3 Django框架中如何使用cache缓存代码实例

    Python3 Django框架中如何使用cache缓存代码实例

    场景描述

    在Django开发中，我们在 views.py 里用到了很多的sql查询，很多的跨表跨库显示，而且数据量已达到百万级，为了加快速度显示，这边启用了缓存。

    一开始我们想使用 @cache_page() 来达到缓存的目的，但是这样的缓存没有找到清除缓存的方法。

    所以我们只好使用cache的方式来缓存，这里用时间（年-月-日 时:分）md5后作为缓存的key。

    而且百度一下以后发现，关于django的cache讲述得很少。我们这里做一下简单的笔记。需要说明一下的是 cache.get_or_set ，我一开始以为是如果有这个值就自动获取，但是发现页面任然很慢。所以查了一下官方手册。 cache.get_or_set 手册里面写的是默认是设置新值。大家使用时一定要防止踩这个坑。

    cache.get_or_set(key, default, timeout=DEFAULT_TIMEOUT, version=None)

    If you want to get a key’s value or set a value if the key isn’t in the cache, there is the get_or_set() method. It takes the same parameters as get() but the default is set as the new cache value for that key, rather than simply returned:

    Python3 Django框架中的缓存机制

    views.py 代码实例

    from django.core.cache import cache
@login_required
def index( request ):
    if request.GET.get('date_joined_0') is None :
        lastDate = SnmpDiff.objects.values('update_time').filter( type = 'computer_room.snmp_95' ).order_by('-id')[1]
        date_joined_0 =  lastDate['update_time'].strftime("%Y-%m-%d")
        date_joined_1 =  lastDate['update_time'].strftime("%H:%M")
    else :
        date_joined_0 = request.GET.get('date_joined_0').replace('/','-')
        date_joined_1 = request.GET.get('date_joined_1')
    date = date_joined_0 + ' ' + date_joined_1
    cache_key = hashlib.md5(('index_'+date).encode(encoding='UTF-8')).hexdigest()
    # result = cache.get_or_set(cache_key, getIndexResult(date),60*60)
    if not cache.get(cache_key) :
        result = cache.get_or_set(cache_key, getIndexResult(date),60*60)
    else:
        result = cache.get(cache_key)

    现在除了第一次打开慢一点之外，其他时间打开飞快。

WeChat
↑