当前位置: 亚洲城ca88 > ca88 > 正文

python 闭包&装饰器(一)

时间:2019-09-22 02:40来源:ca88
一、闭包 在Python这个国家里,装饰器以及后面讲到的迭代器,生成器都是十二分重要的高级函数。   1.举例 如果将装饰器比作取经路上的一个大boss,那么想干掉它必须拿到三件法宝

一、闭包

在Python这个国家里,装饰器以及后面讲到的迭代器,生成器都是十二分重要的高级函数。

 

1.举例

如果将装饰器比作取经路上的一个大boss,那么想干掉它必须拿到三件法宝

简介:装饰器本质上是一个python函数,它可以让其他函数在不需要做任何代码变动的前提下增加额外的功能,装饰器的返回值也是一个函数对象。常用于有切面需求的成精,比如:插入日志、性能测试、事务处理、缓存、权限校验等场景,有了装饰器,就可以抽离大量与函数功能本身无关的雷同代码并继续使用。概括的说,装饰器的作用就是为已存在的对象添加额外的功能。

def outer():    x = 10    def inner():   # 内部函数        print    # 外部函数的一个变量    return inner# 调用inner()函数的方法outer   # 法一f = outer         # 法二

法宝一(作用域):

 

一、在学习装饰器之前需要先了解已下知识点:

注意:inner()是局部变量,在全局范围不可调用(即不能直接调用inner,但是在法二中,在执行完 f = outer() 之后,outer()函数就已经结束,执行f()的时候却可以调用inner()函数,并输出x的值,这是因为outer()里 return 的 inner是一个闭包函数,里面有x这个环境变量

法宝二(函数即对象):

在python的世界里,函数和我们之前的[1,2,3],'abc',8等一样都是对象,而且函数是最高级的对象(对象是类的实例化,可以调用相应的方法,函数是包含变量对象的对象,牛逼!)。

1
2
3
4
5
6
7
8
9
10
def foo():
    print('i am the foo')
    bar()
     
def bar():     
    print('i am the bar')
 
foo()
# def bar():      #报错
#     print('i am the bar')

带着这个问题,我们聊一聊函数在内存的存储情况:

                                  ca88 1

                                                   图1

函数对象的调用仅仅比其它对象多了一个()而已!foo,bar与a,b一样都是个变量名。

那上面的问题也就解决了,只有函数加载到内存才可以被调用。

既然函数是对象,那么自然满足下面两个条件:

1. 其可以被赋给其他变量

1
2
3
4
5
6
def foo():
    print('foo')
bar=foo
bar()
foo()
print(id(foo),id(bar))  #4321123592 4321123592

2. 其可以被定义在另外一个函数内(作为参数&作为返回值),类似于整形,字符串等对象。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
#*******函数名作为参数**********
def foo(func):
    print('foo')
    func()
 
def bar():
    print('bar')
 
foo(bar)
 
#*******函数名作为返回值*********
 
def foo():
    print('foo')
    return bar
 
def bar():
    print('bar')
 
b=foo()
b()

注意:这里说的函数都是指函数名,比如foo;而foo()已经执行函数了,foo()是什么类型取决于return的内容是什么类型!!!

         另外,如果大家理解不了对象,那么就将函数理解成变量,因为函数对象总会由一个或多个变量引用,比如foo,bar。

1、函数的作用域

2.闭包的定义:(闭包 = 内部函数 定义环境时的变量)

法宝三(函数的嵌套以及闭包):

抛一个小问题:

1
2
3
4
5
6
def foo():
    print('foo')
    def bar():
        print('bar')
    # bar()
bar()

是的,bar就是一个变量名,有自己的作用域的。

Python允许创建嵌套函数。通过在函数内部def的关键字再声明一个函数即为嵌套:

1
2
3
4
5
6
7
8
9
10
11
#想执行inner函数,两种方法
def outer():
     = 1
     def inner():
         print (x) # 1
     # inner() # 2
     return inner
 
# outer()
in_func=outer()
in_func()

在这里,你有没有什么疑问?如果没有,那我问你:

1 两种调用方式有区别吗,不都是在外面调用inner吗?

1
2
3
4
in_func=outer() 
in_func()  
###########
inner()(已经加载到内存啦)

ca88 2

ca88 3

def outer():
     x = 1
     def inner():
         b=6
         print (x)
     return inner
#inner()#报错原因:找不到这个引用变量
in_func=outer()#这里其实就是一个变量赋值,将inner的引用对象赋值给in_func,类似于a=5,b=a一样
               #有同学会想直接赋值不行吗:in_func=inner? 哥,inner不还是找不到吗,对吧
in_func()

ca88 4

2  

1
2
3
def outer():
    x=1    #函数outer执行完毕即被销毁
print(x)    

既然这样,i()执行的时候outer函数已经执行完了,为什么inner还可以调用outer里的变量x呢?

 

哈,这就涉及到我们叫讲的闭包啦!

因为:outer里return的inner是一个闭包函数,有x这个环境变量。

 OK,那么什么是闭包呢?

闭包(closure)是函数式编程的重要的语法结构。

定义:如果在一个内部函数里,对在外部作用域(但不是在全局作用域)的变量进行引用,那么内部函数就被认为是闭包(closure).

如上实例,inner就是内部函数,inner里引用了外部作用域的变量x(x在外部作用域outer里面,不是全局作用域),

则这个内部函数inner就是一个闭包。

再稍微讲究一点的解释是,闭包=函数块 定义函数时的环境,inner就是函数块,x就是环境,当然这个环境可以有很多,不止一个简单的x。

1
print(in_func.__closure__[0].cell_contents)  

 用途省略

ca88 5

ca88 6

# 用途1:当闭包执行完后,仍然能够保持住当前的运行环境。
# 比如说,如果你希望函数的每次执行结果,都是基于这个函数上次的运行结果。我以一个类似棋盘游戏的例子
# 来说明。假设棋盘大小为50*50,左上角为坐标系原点(0,0),我需要一个函数,接收2个参数,分别为方向
# (direction),步长(step),该函数控制棋子的运动。棋子运动的新的坐标除了依赖于方向和步长以外,
# 当然还要根据原来所处的坐标点,用闭包就可以保持住这个棋子原来所处的坐标。

origin = [0, 0] # 坐标系统原点
legal_x = [0, 50] # x轴方向的合法坐标
legal_y = [0, 50] # y轴方向的合法坐标
def create(pos=origin):
 def player(direction,step):
  # 这里应该首先判断参数direction,step的合法性,比如direction不能斜着走,step不能为负等
  # 然后还要对新生成的x,y坐标的合法性进行判断处理,这里主要是想介绍闭包,就不详细写了。
  new_x = pos[0]   direction[0]*step
  new_y = pos[1]   direction[1]*step
  pos[0] = new_x
  pos[1] = new_y
  #注意!此处不能写成 pos = [new_x, new_y],原因在上文有说过
  return pos
 return player

player = create() # 创建棋子player,起点为原点
print (player([1,0],10)) # 向x轴正方向移动10步
print (player([0,1],20)) # 向y轴正方向移动20步
print (player([-1,0],10)) # 向x轴负方向移动10步

ca88 7

ca88 8

ca88 9

# 用途2:闭包可以根据外部作用域的局部变量来得到不同的结果,这有点像一种类似配置功能的作用,我们可以
# 修改外部的变量,闭包根据这个变量展现出不同的功能。比如有时我们需要对某些文件的特殊行进行分析,先
# 要提取出这些特殊行。

def make_filter(keep):
 def the_filter(file_name):
  file = open(file_name)
  lines = file.readlines()
  file.close()
  filter_doc = [i for i in lines if keep in i]
  return filter_doc
 return the_filter

# 如果我们需要取得文件"result.txt"中含有"pass"关键字的行,则可以这样使用例子程序
filter = make_filter("pass")
filter_result = filter("result.txt")

ca88 10

1.1、python中的作用域分4种情况: 

  • L:local,局部作用域,即函数中定义的变量;
  • E:enclosing,嵌套的父级函数的局部作用域,即包含此函数的上级函数的局部作用域,但不是全局的;
  • G:globa,全局变量,就是模块级别定义的变量;
  • B:built-in,系统固定模块里面的变量,比如int, bytearray等。 搜索变量的优先级顺序依次是:作用域局部>外层作用域>当前模块中的全局>python内置作用域,也就是LEGB。     

    1 x = int(2.9) # int built-in 2
    3 g_count = 0 # global 4 def outer(): 5 o_count = 1 # enclosing 6 def inner(): 7 i_count = 2 # local 8 print(o_count) 9 # print(i_count) 找不到 10 inner() 11 outer() 12
    13 # print(o_count) #找不到

当然,local和enclosing是相对的,enclosing变量相对上层来说也是local。

如果在一个内部函数里,对在外部作用域的变量(外部环境变量可以有很多)进行引用,那么内部函数就被称为闭包。闭包函数为外部环境变量 在内部函数里引用提供了途径

ca88,装饰器概念

说了这么多,终于到了我们的装饰器了。

装饰器本质上是一个函数,该函数用来处理其他函数,它可以让其他函数在不需要修改代码的前提下增加额外的功能,装饰器的返回值也是一个函数对象。它经常用于有切面需求的场景,比如:插入日志、性能测试、事务处理、缓存、权限校验等应用场景。装饰器是解决这类问题的绝佳设计,有了装饰器,我们就可以抽离出大量与函数功能本身无关的雷同代码并继续重用。概括的讲,装饰器的作用就是为已经存在的对象添加额外的功能。

 

业务生产中大量调用的函数:

1
2
3
def foo():
    print('hello foo')
foo()

现在有一个新的需求,希望可以记录下函数的执行时间,于是在代码中添加日志代码: 

 

1
2
3
4
5
6
7
8
9
import time
def foo():
    start_time=time.time()
    print('hello foo')
    time.sleep(3)
    end_time=time.time()
    print('spend %s'%(end_time-start_time))
 
foo()

bar()、bar2()也有类似的需求,怎么做?再在bar函数里调用时间函数?这样就造成大量雷同的代码,为了减少重复写代码,我们可以这样做,重新定义一个函数:专门设定时间:

1
2
3
4
5
6
7
8
9
10
11
12
13
import time
def show_time(func):
    start_time=time.time()
    func()
    end_time=time.time()
    print('spend %s'%(end_time-start_time))
 
 
def foo():
    print('hello foo')
    time.sleep(3)
 
show_time(foo)

逻辑上不难理解,而且运行正常。 但是这样的话,你基础平台的函数修改了名字,容易被业务线的人投诉的,因为我们每次都要将一个函数作为参数传递给show_time函数。而且这种方式已经破坏了原有的代码逻辑结构,之前执行业务逻辑时,执行运行foo(),但是现在不得不改成show_time(foo)。那么有没有更好的方式的呢?当然有,答案就是装饰器。 

1.2、作用域产生 

在Python中,只有模块(module),类(class)以及函数(def、lambda)才会引入新的作用域,其它的代码块(如if、try、for等)是不会引入新的作用域的,如下代码:

1 if 2>1:
2     x = 1
3 print(x) # 1

这个是没有问题的,if并没有引入一个新的作用域,x仍处在当前作用域中,后面代码可以使用。

1 def test():
2     x = 2
3 print(x) # NameError: name 'x2' is not defined

def、class、lambda是可以引入新作用域的。 

二、装饰器

简单装饰器

if  foo()==show_time(foo) :问题解决!  

   所以,我们需要show_time(foo)返回一个函数对象,而这个函数对象内则是核心业务函数:执行func()与装饰函数时间计算,修改如下:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
import time
 
def show_time(func):
    def wrapper():
        start_time=time.time()
        func()
        end_time=time.time()
        print('spend %s'%(end_time-start_time))
 
    return wrapper
 
 
def foo():
    print('hello foo')
    time.sleep(3)
 
foo=show_time(foo)
foo()

函数show_time就是装饰器,它把真正的业务方法func包裹在函数里面,看起来像foo被上下时间函数装饰了。在这个例子中,函数进入和退出时 ,被称为一个横切面(Aspect),这种编程方式被称为面向切面的编程(Aspect-Oriented Programming)。 

@符号是装饰器的语法糖,在定义函数的时候使用,避免再一次赋值操作

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
import time
 
def show_time(func):
    def wrapper():
        start_time=time.time()
        func()
        end_time=time.time()
        print('spend %s'%(end_time-start_time))
 
    return wrapper
 
@show_time   #foo=show_time(foo)
def foo():
    print('hello foo')
    time.sleep(3)
 
 
@show_time  #bar=show_time(bar)
def bar():
    print('in the bar')
    time.sleep(2)
 
foo()
print('***********')
bar()

      如上所示,这样我们就可以省去bar = show_time(bar)这一句了,直接调用bar()即可得到想要的结果。如果我们有其他的类似函数,我们可以继续调用装饰器来修饰函数,而不用重复修改函数或者增加新的封装。这样,我们就提高了程序的可重复利用性,并增加了程序的可读性。

      这里需要注意的问题:  foo=show_time(foo)其实是把wrapper引用的对象引用给了foo,而wrapper里的变量func之所以可以用,就是因为wrapper是一个闭包函数。

key:

ca88 11

@show_time帮我们做的事情就是当我们执行业务逻辑foo()时,执行的代码由粉框部分转到蓝框部分,仅此而已!

 

装饰器在Python使用如此方便都要归因于Python的函数能像普通的对象一样能作为参数传递给其他函数,可以被赋值给其他变量,可以作为返回值,可以被定义在另外一个函数内。

1.3、变量的修改

 1 #################
 2 x=6
 3 def f2():
 4     print(x)
 5     x=5
 6 f2()
 7   
 8 # 错误的原因在于print(x)时,解释器会在局部作用域找,会找到x=5(函数已经加载到内存),但x使用在声明前了,所以报错:
 9 # local variable 'x' referenced before assignment.如何证明找到了x=5呢?简单:注释掉x=5,x=6
10 # 报错为:name 'x' is not defined
11 #同理
12 x=6
13 def f2():
14     x =1 #local variable 'x' referenced before assignment.
15 f2()

1.装饰器的定义及举例:

带参数的被装饰函数 

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
import time
 
def show_time(func):
 
    def wrapper(a,b):
        start_time=time.time()
        func(a,b)
        end_time=time.time()
        print('spend %s'%(end_time-start_time))
 
    return wrapper
 
@show_time   #add=show_time(add)
def add(a,b):
 
    time.sleep(1)
    print(a b)
 
add(2,4)

ca88 12

ca88 13

import time

def show_time(func):

    def wrapper(a,b):
        start_time=time.time()
        ret=func(a,b)
        end_time=time.time()
        print('spend %s'%(end_time-start_time))
        return ret

    return wrapper

@show_time   #add=show_time(add)
def add(a,b):

    time.sleep(1)
    return a b

print(add(2,5))

ca88 14

不定长参数

ca88 15

#***********************************不定长参数
import time

def show_time(func):

    def wrapper(*args,**kwargs):
        start_time=time.time()
        func(*args,**kwargs)
        end_time=time.time()
        print('spend %s'%(end_time-start_time))

    return wrapper

@show_time   #add=show_time(add)
def add(*args,**kwargs):

    time.sleep(1)
    sum=0
    for i in args:
        sum =i
    print(sum)

add(2,4,8,9)

ca88 16

1.4、global关键字 

当内部作用域想修改外部作用域的变量时,就要用到global和nonlocal关键字了,当修改的变量是在全局作用域(global作用域)上的,就要使用global先声明一下,代码如下:

1 count = 10
2 def outer():
3     global count
4     print(count) 
5     count = 100
6     print(count)
7 outer()
8 #10
9 #100

举例:

带参数的装饰器

装饰器还有更大的灵活性,例如带参数的装饰器:在上面的装饰器调用中,比如@show_time,该装饰器唯一的参数就是执行业务的函数。装饰器的语法允许我们在调用时,提供其它参数,比如@decorator(a)。这样,就为装饰器的编写和使用提供了更大的灵活性。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
import time
 
def time_logger(flag=0):
 
    def show_time(func):
 
            def wrapper(*args,**kwargs):
                start_time=time.time()
                func(*args,**kwargs)
                end_time=time.time()
                print('spend %s'%(end_time-start_time))
 
                if flag:
                    print('将这个操作的时间记录到日志中')
 
            return wrapper
 
    return show_time
 
 
@time_logger(3)
def add(*args,**kwargs):
    time.sleep(1)
    sum=0
    for in args:
        sum =i
    print(sum)
 
add(2,7,5)

@time_logger(3) 做了两件事:

    (1)time_logger(3):得到闭包函数show_time,里面保存环境变量flag

    (2)@show_time   :add=show_time(add)

上面的time_logger是允许带参数的装饰器。它实际上是对原有装饰器的一个函数封装,并返回一个装饰器(一个含有参数的闭包函数)。当我 们使用@time_logger(3)调用的时候,Python能够发现这一层的封装,并把参数传递到装饰器的环境中。

1.5、nonlocal关键字

global关键字声明的变量必须在全局作用域上,不能嵌套作用域上,当要修改嵌套作用域(enclosing作用域,外层非全局作用域)中的变量怎么办呢,这时就需要nonlocal关键字了

 1 def outer():
 2     count = 10
 3     def inner():
 4         nonlocal count
 5         count = 20
 6         print(count)
 7     inner()
 8     print(count)
 9 outer()
10 #20
11 #20 

假如我们现在写一个函数f():

多层装饰器

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
def makebold(fn):
    def wrapper():
        return "<b>"   fn()   "</b>"
    return wrapper
 
def makeitalic(fn):
    def wrapper():
        return "<i>"   fn()   "</i>"
    return wrapper
 
@makebold
@makeitalic
def hello():
    return "hello alvin"
 
hello()

过程:

ca88 17

1.6、作用域小结:

(1)变量查找顺序:LEGB,作用域局部>外层作用域>当前模块中的全局>python内置作用域;

(2)只有模块、类、及函数才能引入新作用域;

(3)对于一个变量,内部作用域先声明就会覆盖外部变量,不声明直接使用,就会使用外部作用域的变量;

(4)内部作用域要修改外部作用域变量的值时,全局变量要使用global关键字,嵌套作用域变量要使用nonlocal关键字。nonlocal是python3新增的关键字,有了这个 关键字,就能完美的实现闭包了。 

def f():    print('你是天才吗')

类装饰器

再来看看类装饰器,相比函数装饰器,类装饰器具有灵活度大、高内聚、封装性等优点。使用类装饰器还可以依靠类内部的__call__方法,当使用 @ 形式将装饰器附加到函数上时,就会调用此方法。

ca88 18

import time

class Foo(object):
    def __init__(self, func):
        self._func = func

    def __call__(self):
        start_time=time.time()
        self._func()
        end_time=time.time()
        print('spend %s'%(end_time-start_time))

@Foo  #bar=Foo(bar)

def bar():

    print ('bar')
    time.sleep(2)

bar()    #bar=Foo(bar)()>>>>>>>没有嵌套关系了,直接active Foo的 __call__方法

ca88 19

2、高阶函数(函数即对象)

在python的世界里,函数和我们之前的[1,2,3],'abc',8等一样都是对象,而且函数是最高级的对象(对象是类的实例化,可以调用相应的方法,函数是包含变量对象的对象,牛逼!)。

 1 def foo():
 2     print('i am the foo')
 3     bar()
 4      
 5 def bar():     
 6     print('i am the bar')
 7  
 8 foo()
 9 # def bar():      #报错
10 #     print('i am the bar')

带着这个问题,我们聊一聊函数在内存的存储情况:

ca88 20

函数对象的调用仅仅比其它对象多了一个()而已!foo,bar与a,b一样都是个变量名。

那上面的问题也就解决了,只有函数加载到内存才可以被调用。

既然函数是对象,那么自然满足下面两个条件:

但是后来客户要求在调用f()函数的同时,要显示执行f()函数花费的多长时间,然后我们写了如下的显示函数:

functools.wraps

使用装饰器极大地复用了代码,但是他有一个缺点就是原函数的元信息不见了,比如函数的docstring、__name__、参数列表,先看例子:

ca88 21

def foo():
    print("hello foo")

print(foo.__name__)
#####################

def logged(func):
    def wrapper(*args, **kwargs):

        print (func.__name__   " was called")
        return func(*args, **kwargs)

    return wrapper


@logged
def cal(x):
   return x   x * x


print(cal.__name__)

########
# foo
# wrapper

ca88 22

解释:
1
2
3
@logged
def f(x):
   return   * x

等价于:

1
2
3
def f(x):
    return   * x
= logged(f)
不难发现,函数f被wrapper取代了,当然它的docstring,__name__就是变成了wrapper函数的信息了。
1
2
print f.__name__    # prints 'wrapper'
print f.__doc__     # prints None
这个问题就比较严重的,好在我们有functools.wraps,wraps本身也是一个装饰器,它能把原函数的元信息拷贝到装饰器函数中,这使得装饰器函数也有和原函数一样的元信息了。
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
from functools import wraps
 
 
def logged(func):
 
    @wraps(func)
 
    def wrapper(*args, **kwargs):
        print (func.__name__   " was called")
        return func(*args, **kwargs)
    return wrapper
 
@logged
def cal(x):
   return   * x
 
print(cal.__name__)  #cal

2.1. 其可以被赋给其他变量

1 def foo():
2 
3     print('foo')
4 bar=foo
5 bar()
6 foo()
7 print(id(foo),id(bar))  #4321123592 4321123592
import timedef show_time():    start = time.time()   # 显示计算机此刻的时间(不是传统的时间,而是linux自诞生至今所经过的时间)    f()    time.sleep    # 执行完f()之后停留一秒再执行下面的语句,因为f()的执行时间太短显示不出    end = time.time()    print("spend %s" % (end - start))def f():    print('你是天才吗')show_time()

内置装饰器

@staticmathod

@classmethod

@property

学习类的时候我们详细介绍的...

2.2. 其可以被定义在另外一个函数内(作为参数&作为返回值),类似于整型,字符串等对象。

 1 #*******函数名作为参数**********
 2 def foo(func):
 3     print('foo')
 4     func()
 5  
 6 def bar():
 7     print('bar')
 8  
 9 foo(bar)
10  
11 #*******函数名作为返回值*********
12  
13 def foo():
14     print('foo')
15     return bar
16  
17 def bar():
18     print('bar')
19  
20 b=foo()
21 b()

注意:这里说的函数都是指函数名,比如foo;而foo()已经执行函数了,foo()是什么类型取决于return的内容是什么类型!!!

         另外,如果大家理解不了对象,那么就将函数理解成变量,因为函数对象总会由一个或多个变量引用,比如foo,bar。

我们通过执行show_time函数,并且返回了执行f()函数所花费的时间,但是却改变了调用方式,以前是直接调用f(),现在是调用show_time() ,这样做对于应用 此函数的人员影响很大,因为他们要把所有用f()函数的都改过来,而且如果要计算其他函数的执行时间,就要修改show_time()函数内部或者另外写一个函数,代码的重复率高,所以我们再做一个改进:

补充 

ca88 23

ca88 24

##----------------------------------------foo函数先加载到内存,然后foo变量指向新的引用,所以递归里的foo是wrapper函数对象
# def show_time(func):
#
#     def wrapper(n):
#         ret=func(n)
#         print("hello,world")
#         return ret
#     return wrapper
#
# @show_time# foo=show_time(foo)
# def foo(n):
#     if n==1:
#         return 1
#     return n*foo(n-1)
# print(foo(6))


########################
def show_time(func):

    def wrapper(n):
        ret=func(n)
        print("hello,world")
        return ret
    return wrapper

@show_time# foo=show_time(foo)
def foo(n):
    def _foo(n):
        if n==1:
            return 1
        return n*_foo(n-1)
    return _foo(n)
print(foo(6))

ca88 25

 

http://stackoverflow.com/questions/739654/how-can-i-make-a-chain-of-function-decorators-in-python/1594484#1594484

 

  

3、函数的嵌套以及闭包

抛一个小问题:

1 def foo():
2     print('foo')
3     def bar():
4         print('bar')
5     # bar()
6 bar()

是的,bar就是一个变量名,有自己的作用域的。

Python允许创建嵌套函数。通过在函数内部def的关键字再声明一个函数即为嵌套:

 1 #想执行inner函数,两种方法
 2 def outer():
 3      x = 1
 4      def inner():
 5          print (x) # 1
 6      # inner() # 2
 7      return inner
 8  
 9 # outer()
10 in_func=outer()
11 in_func()

在这里,你有没有什么疑问?如果没有,那我问你:

 两种调用方式有区别吗,不都是在外面调用inner吗?

1 in_func=outer() 
2 in_func()  
3 ###########
4 inner()(已经加载到内存啦)

 1 def outer():
 2      x = 1
 3      def inner():
 4          b=6
 5          print (x)
 6      return inner
 7 #inner()#报错原因:找不到这个引用变量
 8 in_func=outer()#这里其实就是一个变量赋值,将inner的引用对象赋值给in_func,类似于a=5,b=a一样
 9                #有同学会想直接赋值不行吗:in_func=inner? 哥,inner不还是找不到吗,对吧
10 in_func()
11 
12 原因

1 def outer():
2     x=1    #函数outer执行完毕即被销毁
3 print(x) 

既然这样,i()执行的时候outer函数已经执行完了,为什么inner还可以调用outer里的变量x呢?

这就涉及到了闭包的用法!因为:outer里return的inner是一个闭包函数,有x这个环境变量。OK,那么什么是闭包呢?

闭包(closure)是函数式编程的重要的语法结构。

定义:如果在一个内部函数里,对在外部作用域(但不是在全局作用域)的变量进行引用,那么内部函数就被认为是闭包(closure).

如上实例,inner就是内部函数,inner里引用了外部作用域的变量x(x在外部作用域outer里面,不是全局作用域),

则这个内部函数inner就是一个闭包。

再稍微讲究一点的解释是,闭包=函数块 定义函数时的环境,inner就是函数块,x就是环境,当然这个环境可以有很多,不止一个简单的x。

 1 # 用途1:当闭包执行完后,仍然能够保持住当前的运行环境。
 2 # 比如说,如果你希望函数的每次执行结果,都是基于这个函数上次的运行结果。我以一个类似棋盘游戏的例子
 3 # 来说明。假设棋盘大小为50*50,左上角为坐标系原点(0,0),我需要一个函数,接收2个参数,分别为方向
 4 # (direction),步长(step),该函数控制棋子的运动。棋子运动的新的坐标除了依赖于方向和步长以外,
 5 # 当然还要根据原来所处的坐标点,用闭包就可以保持住这个棋子原来所处的坐标。
 6 
 7 origin = [0, 0] # 坐标系统原点
 8 legal_x = [0, 50] # x轴方向的合法坐标
 9 legal_y = [0, 50] # y轴方向的合法坐标
10 def create(pos=origin):
11  def player(direction,step):
12   # 这里应该首先判断参数direction,step的合法性,比如direction不能斜着走,step不能为负等
13   # 然后还要对新生成的x,y坐标的合法性进行判断处理,这里主要是想介绍闭包,就不详细写了。
14   new_x = pos[0]   direction[0]*step
15   new_y = pos[1]   direction[1]*step
16   pos[0] = new_x
17   pos[1] = new_y
18   #注意!此处不能写成 pos = [new_x, new_y],原因在上文有说过
19   return pos
20  return player
21 
22 player = create() # 创建棋子player,起点为原点
23 print (player([1,0],10)) # 向x轴正方向移动10步
24 print (player([0,1],20)) # 向y轴正方向移动20步
25 print (player([-1,0],10)) # 向x轴负方向移动10步
26 
27 用途1

 1 # 用途2:闭包可以根据外部作用域的局部变量来得到不同的结果,这有点像一种类似配置功能的作用,我们可以
 2 # 修改外部的变量,闭包根据这个变量展现出不同的功能。比如有时我们需要对某些文件的特殊行进行分析,先
 3 # 要提取出这些特殊行。
 4 
 5 def make_filter(keep):
 6  def the_filter(file_name):
 7   file = open(file_name)
 8   lines = file.readlines()
 9   file.close()
10   filter_doc = [i for i in lines if keep in i]
11   return filter_doc
12  return the_filter
13 
14 # 如果我们需要取得文件"result.txt"中含有"pass"关键字的行,则可以这样使用例子程序
15 filter = make_filter("pass")
16 filter_result = filter("result.txt")
import timedef show_time:    def inner():      #定义一个外部函数

        start = time.time()   # 显示计算机此刻的时间(不是传统的时间,而是linux自诞生至今所经过的时间)        func()        time.sleep    # 执行完f()之后停留一秒再执行下面的语句,因为f()的执行时间太短显示不出        end = time.time()        print("spend %s" % (end - start))    return innerdef f():    print('你是天才吗')f = show_time  # 此后我们不管需要那个函数的执行时间,只需要把 f 修改为对应的函数名即可f()

二、装饰器:

对于 f = show_time 还有一种写法:

1、装饰器概念:

装饰器本质上是一个函数,该函数用来处理其他函数,它可以让其他函数在不需要修改代码的前提下增加额外的功能,装饰器的返回值也是一个函数对象。它经常用于有切面需求的场景,比如:插入日志、性能测试、事务处理、缓存、权限校验等应用场景。装饰器是解决这类问题的绝佳设计,有了装饰器,我们就可以抽离出大量与函数功能本身无关的雷同代码并继续重用。概括的讲,装饰器的作用就是为已经存在的对象添加额外的功能。

分析:业务生产中大量调用的函数:

1 def foo():
2     print('hello foo')
3 foo()

现在有一个新的需求,希望可以记录下函数的执行时间,于是在代码中添加日志代码:

1 import time
2 def foo():
3     start_time=time.time()
4     print('hello foo')
5     time.sleep(3)
6     end_time=time.time()
7     print('spend %s'%(end_time-start_time))
8  
9 foo()

bar()、bar2()也有类似的需求,怎么做?再在bar函数里调用时间函数?这样就造成大量雷同的代码,为了减少重复写代码,我们可以这样做,重新定义一个函数:专门设定时间:

 1 import time
 2 def show_time(func):
 3     start_time=time.time()
 4     func()
 5     end_time=time.time()
 6     print('spend %s'%(end_time-start_time))
 7  
 8  
 9 def foo():
10     print('hello foo')
11     time.sleep(3)
12  
13 show_time(foo)

逻辑上不难理解,而且运行正常。 但是这样的话,你基础平台的函数修改了名字,容易被业务线的人投诉的,因为我们每次都要将一个函数作为参数传递给show_time函数。而且这种方式已经破坏了原有的代码逻辑结构,之前执行业务逻辑时,执行运行foo(),但是现在不得不改成show_time(foo)。那么有没有更好的方式的呢?当然有,答案就是装饰器。

import timedef show_time:    def inner():      #定义一个外部函数        

        start = time.time()   # 显示计算机此刻的时间(不是传统的时间,而是linux自诞生至今所经过的时间)        func()        time.sleep    # 执行完f()之后停留一秒再执行下面的语句,因为f()的执行时间太短显示不出        end = time.time()        print("spend %s" % (end - start))    return inner@show_time   #  相当于 f = show_time def f():    print('你是天才吗') f()

2、一个简单的装饰器:

if  foo()==show_time(foo) :问题解决!  

所以,我们需要show_time(foo)返回一个函数对象,而这个函数对象内则是核心业务函数:执行func()与装饰函数时间计算,修改如下:

 1 import time
 2  
 3 def show_time(func):
 4     def wrapper():
 5         start_time=time.time()
 6         func()
 7         end_time=time.time()
 8         print('spend %s'%(end_time-start_time))
 9  
10     return wrapper
11  
12  
13 def foo():
14     print('hello foo')
15     time.sleep(3)
16  
17 foo=show_time(foo)
18 foo()

函数show_time就是装饰器,它把真正的业务方法func包裹在函数里面,看起来像foo被上下时间函数装饰了。在这个例子中,函数进入和退出时 ,被称为一个横切面(Aspect),这种编程方式被称为面向切面的编程(Aspect-Oriented Programming)。

@符号是装饰器的语法糖,在定义函数的时候使用,避免再一次赋值操作

 1 import time
 2  
 3 def show_time(func):
 4     def wrapper():
 5         start_time=time.time()
 6         func()
 7         end_time=time.time()
 8         print('spend %s'%(end_time-start_time))
 9  
10     return wrapper
11  
12 @show_time   #foo=show_time(foo)
13 def foo():
14     print('hello foo')
15     time.sleep(3)
16  
17  
18 @show_time  #bar=show_time(bar)
19 def bar():
20     print('in the bar')
21     time.sleep(2)
22  
23 foo()
24 print('***********')
25 bar()

如上所示,这样我们就可以省去bar = show_time(bar)这一句了,直接调用bar()即可得到想要的结果。如果我们有其他的类似函数,我们可以继续调用装饰器来修饰函数,而不用重复修改函数或者增加新的封装。这样,我们就提高了程序的可重复利用性,并增加了程序的可读性。

这里需要注意的问题:  foo=show_time(foo)其实是把wrapper引用的对象引用给了foo,而wrapper里的变量func之所以可以用,就是因为wrapper是一个闭包函数。

ca88 26

@show_time帮我们做的事情就是当我们执行业务逻辑foo()时,执行的代码由粉框部分转到蓝框部分,仅此而已!

装饰器在Python使用如此方便都要归因于Python的函数能像普通的对象一样能作为参数传递给其他函数,可以被赋值给其他变量,可以作为返回值,可以被定义在另外一个函数内。

定义:函数show_time() 就是一个装饰器,它把真正的方法func包在了函数里面,看起来像func()被上下的时间函数装饰了, @符号是装饰器的语法,在定义函数的时候使用,避免再一次赋值

 3、带参数的被装饰器函数:

 1 import time
 2  
 3 def show_time(func):
 4  
 5     def wrapper(a,b):
 6         start_time=time.time()
 7         func(a,b)
 8         end_time=time.time()
 9         print('spend %s'%(end_time-start_time))
10  
11     return wrapper
12  
13 @show_time   #add=show_time(add)
14 def add(a,b):
15  
16     time.sleep(1)
17     print(a b)
18  
19 add(2,4)

 1 import time
 2 
 3 def show_time(func):
 4 
 5     def wrapper(a,b):
 6         start_time=time.time()
 7         ret=func(a,b)
 8         end_time=time.time()
 9         print('spend %s'%(end_time-start_time))
10         return ret
11 
12     return wrapper
13 
14 @show_time   #add=show_time(add)
15 def add(a,b):
16 
17     time.sleep(1)
18     return a b
19 
20 print(add(2,5))
21 
22 注意点

ca88 27

4、不定长参数被装饰器:

 1 #***********************************不定长参数
 2 import time
 3 
 4 def show_time(func):
 5 
 6     def wrapper(*args,**kwargs):
 7         start_time=time.time()
 8         func(*args,**kwargs)
 9         end_time=time.time()
10         print('spend %s'%(end_time-start_time))
11 
12     return wrapper
13 
14 @show_time   #add=show_time(add)
15 def add(*args,**kwargs):
16 
17     time.sleep(1)
18     sum=0
19     for i in args:
20         sum =i
21     print(sum)
22 
23 add(2,4,8,9)

当程序运行时先执行@show_time,@show_time 帮我们做的就是当执行f() 时,执行的代码从黄框转向红框部分,相当于给了inner()一个执行的参数,仅此而已

5、带参数的装饰器:

装饰器还有更大的灵活性,例如带参数的装饰器:在上面的装饰器调用中,比如@show_time,该装饰器唯一的参数就是执行业务的函数。装饰器的语法允许我们在调用时,提供其它参数,比如@decorator(a)。这样,就为装饰器的编写和使用提供了更大的灵活性。

 1 import time
 2  
 3 def time_logger(flag=0):
 4  
 5     def show_time(func):
 6  
 7             def wrapper(*args,**kwargs):
 8                 start_time=time.time()
 9                 func(*args,**kwargs)
10                 end_time=time.time()
11                 print('spend %s'%(end_time-start_time))
12  
13                 if flag:
14                     print('将这个操作的时间记录到日志中')
15  
16             return wrapper
17  
18     return show_time
19  
20  
21 @time_logger(3)
22 def add(*args,**kwargs):
23     time.sleep(1)
24     sum=0
25     for i in args:
26         sum =i
27     print(sum)
28  
29 add(2,7,5)

@time_logger(3) 做了两件事:

    (1)time_logger(3):得到闭包函数show_time,里面保存环境变量flag

    (2)@show_time   :add=show_time(add)

上面的time_logger是允许带参数的装饰器。它实际上是对原有装饰器的一个函数封装,并返回一个装饰器(一个含有参数的闭包函数)。当我 们使用@time_logger(3)调用的时候,Python能够发现这一层的封装,并把参数传递到装饰器的环境中。

6、多层装饰器:

 1 def makebold(fn):
 2     def wrapper():
 3         return "<b>"   fn()   "</b>"
 4     return wrapper
 5  
 6 def makeitalic(fn):
 7     def wrapper():
 8         return "<i>"   fn()   "</i>"
 9     return wrapper
10  
11 @makebold
12 @makeitalic
13 def hello():
14     return "hello alvin"
15  
16 hello()

过程:

ca88 28

7、类装饰器:

再来看看类装饰器,相比函数装饰器,类装饰器具有灵活度大、高内聚、封装性等优点。使用类装饰器还可以依靠类内部的__call__方法,当使用 @ 形式将装饰器附加到函数上时,就会调用此方法。

 1 import time
 2 
 3 class Foo(object):
 4     def __init__(self, func):
 5         self._func = func
 6 
 7     def __call__(self):
 8         start_time=time.time()
 9         self._func()
10         end_time=time.time()
11         print('spend %s'%(end_time-start_time))
12 
13 @Foo  #bar=Foo(bar)
14 
15 def bar():
16 
17     print ('bar')
18     time.sleep(2)
19 
20 bar()    #bar=Foo(bar)()>>>>>>>没有嵌套关系了,直接active Foo的 __call__方法

 

编辑:ca88 本文来源:python 闭包&amp;装饰器(一)

关键词: 亚洲城ca88