首页 > 编程语言 > 详细

python Decorator

时间:2016-09-01 12:45:33      阅读:228      评论:0      收藏:0      [点我收藏+]

之前在http://python.jobbole.com/86068/,看到关于装饰器的一些知识。

1. 函数式装饰器:

  Decorator是一个函数,它以一个函数对象A为参数,返回另一个函数对象B。对象B定义在Decorator体内,形成一个闭包。函数A和函数B接受的参数相同。每当程序调用函数A时,实际上会转换为对函数B的调用

 1 def func_cache(func):
 2     cache = {}
 3     def inner_deco(*args):
 4         if args in cache:
 5             print(func {} is already cached with arguments {}.format(
 6                 func.__name__, args))
 7             return cache[args]
 8         else:
 9             print(func {} is not cached with arguments {}.format(
10                 func.__name__, args)) 
11             res = func(*args)
12             cache[args] = res
13             return res
14 
15     return inner_deco
16 
17 @func_cache
18 def add_two_number(a, b):
19     return a + b
20  
21 if __name__ == "__main__":
22     print(1. add_two_number(1, 2))
23     add_two_number(1, 2)
24     print(2. add_two_number(2, 3))
25     add_two_number(2, 3)
26     print(3. add_two_number(1, 2))
27     add_two_number(1, 2)

func_cache就是我们实现的Decorator,它以一个函数对象(func)作为参数,返回另一个函数对象(inner_deco),因此,当我们每次调用被func_cache装饰过的函数(add_two_number)时,调用的其实是inner_deco,也即:

    add_two_number(1, 2) --> inner_deco(1, 2)

而inner_deco,它内部实现的就是函数返回值缓存的逻辑,并打印了一些调试信息

但是这里有一个明显的问题:inner_deco只能接受*arg,也就是列表参数,这就限制了这个Decorator的使用范围。下面这个版本就添加了**kwargs的支持。需要注意的是,kwargs不能进行hash,也就不能直接作为python中字典的key值,因此这里现将其转成一个frozenset(frozenset是冻结的集合,它是不可变的,存在哈希值,好处是它可以作为字典的key,也可以作为其它集合的元素。缺点是一旦创建便不能更改,没有add,remove方法)

# -*- coding: utf-8 -*-
def func_cache(func):
    cache = {}
    def inner_deco(*args, **kwargs):
        key = (args, frozenset(kwargs.items()))
        print key
        if key not in cache:
            print "func {0} is not cached with arguments {1}, {2}".format(func.__name__, args, kwargs)
            res = func(*args, **kwargs)
            cache[key] = res
            return cache[key]
        else:
            print "func {0} is alread cached with arguments {1}, {2}".format(func.__name__, args, kwargs)
            return cache[key]
    return inner_deco

@func_cache
def add_two_number(a, b):
    return a + b

@func_cache
def product_two_number(a, b):
    return a * b

if __name__ == "__main__":
   print(‘add_two_number func name is {}‘.format(add_two_number.__name__)) add_two_number(
1, 2) add_two_number(1, b=3) add_two_number(1, 2) product_two_number(2, 3) product_two_number(2, 3)

新增加了一个product_two_number函数,用于测试func_cache中的字典cache是否对于每个被装饰的函数都分配了一个,即不同函数调用是否都会调用func_cache(func)

这里的Decorator还有一个问题,它改变了被装饰函数add_two_number的签名,比如:

print(‘add_two_number func name is {}‘.format(add_two_number.__name__))

# 输出 add_two_number func name is inner_deco

这不是我们想要的,而且在复杂项目中,对于Bug的追踪也将是灾难性的。

好在Python为我们提供了functools模块,其中的wraps装饰器可以帮助我们解决这个问题。

# -*- coding: utf-8 -*-
from functools import wraps
 
def func_cache(func):
    cache = {}
    @wraps(func)
    def inner_deco(*args, **kwargs):
        key = (args, frozenset(kwargs.items()))
        if key not in cache:
            print(func {} is not cached with arguments {} {}.format(
                func.__name__, args, kwargs)) 
            res = func(*args, **kwargs)
            cache[key] = res
        return cache[key]
    return inner_deco

带参数Decorator

目前我们实现的函数缓存装饰器,会缓存所有遇到的函数返回值。我们希望能够对缓存数量上限做一个限制,从而在内存消耗和运行效率上取得折中。但是同时,对于不同的函数,我们希望做到缓存上限不同,例如对于运行一次比较耗时的函数,我们希望缓存上限大一些;反之,则小一些。这时,需要用到带参数的Decorator

# -*- coding: utf-8 -*-
from functools import wraps
import random

def outer_deso(size=10):
    def func_cache(func):
        cache = {}
        @wraps(func)
        def inner_deco(*args, **kwargs):
            key = (args, frozenset(kwargs.items()))
            print key
            if key not in cache:
                print(func {} is not cached with arguments {} {}.format(func.__name__, args, kwargs))
                res = func(*args, **kwargs)
                if len(cache) >= size:
                    luck_key = random.choice(list(cache.keys()))
                    print(func {} cache pop {}.format(func.__name__, luck_key))
                    cache.pop(luck_key, None)
                cache[key] = res
                return cache[key]
            else:
                print "func {0} is alread cached with arguments {1}, {2}".format(func.__name__, args, kwargs)
                return cache[key]
        return inner_deco
    return func_cache



@outer_deso(size=10)
def add_two_number(a, b):
    return a + b


@outer_deso(size=10)
def product_two_number(a, b):
    return a * b


if __name__ == "__main__":
    print(add_two_number func name is {}.format(add_two_number.__name__))
    add_two_number(1, 2)
    add_two_number(1, b=3)
    add_two_number(1, 2)
    product_two_number(2, 3)
    product_two_number(2, 3)

无参数的装饰器,@符号后面接的是一个可做Decorator的函数对象;而有参数的装饰器,@符号后面接的是一个函数调用,此函数调用返回的是一个可做Decorator的函数对象

但是,从上面的代码中也可以看出,到了带参数的Decorator这一步,Decorator的实现已经有了两层的函数嵌套,难于理解且不够优雅。这就需要引用decorator模块。这个模块可以不仅可以减少实现Decorator过程中的函数嵌套,还可以完美的保持函数签名不被更改。

首先实现最简单的无参数Decorator:  

def func_cache(func):
    func._cache = {}
    func._cache_size = 3
    return decorate(func, _cache)

def _cache(func, *args, **kwargs):
    key = (args, frozenset(func.__name__))
    if key not in func._cache:
        print "func {} not in cache".format(func.__name__)
        res = func(*args, **kwargs)
        if len(func._cache)>=func._cache_size:
            lucky_key = random.choice(list(func._cache.keys()))
            func._cache.pop(lucky_key, None)
            print "func {} pop cache key {}".format(func.__name__, lucky_key)
        func._cache[key] = res

    return func._cache[key]

@func_cache
def add_two_number(a, b):
    return a + b

decorator模块实现有参装饰器:

import random
from decorator import decorate
 
def func_cache(size=10):
    def wrapped_cache(func):
        func._cache = {}
        func._cache_size = size
        return decorate(func, _cache)
    return wrapped_cache
 
def _cache(func, *args, **kwargs):
    key = (args, frozenset(kwargs.items()))
    if key not in func._cache:
        print(func {} not hit cache.format(func.__name__))
        res = func(*args, **kwargs)
        if len(func._cache) >= func._cache_size:
            lucky_key = random.choice(list(func._cache.keys()))
            func._cache.pop(lucky_key, None)
            print(func {} pop cache key {}.format(func.__name__, lucky_key))
        func._cache[key] = res
    return func._cache[key]
 
@func_cache(size=3)
def add_two_number(a, b):
    return a + b

实现带参数的装饰器的方式是相同的:在之前不带参数的装饰器外面再包一层函数,通过闭包将参数绑定到装饰器上,并将装饰器返回。

  

 

python Decorator

原文:http://www.cnblogs.com/gcm688/p/5828661.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!