濮阳杆衣贸易有限公司

主頁 > 知識庫 > 淺談python中的@以及@在tensorflow中的作用說明

淺談python中的@以及@在tensorflow中的作用說明

熱門標簽:電銷機器人系統(tǒng)廠家鄭州 地圖地圖標注有嘆號 舉辦過冬奧會的城市地圖標注 正安縣地圖標注app 阿里電話機器人對話 400電話申請資格 遼寧智能外呼系統(tǒng)需要多少錢 qt百度地圖標注 螳螂科技外呼系統(tǒng)怎么用

雖然用python用了很久了,但是主要還是寫一些模型或者算子,對于python中的高級特性用的不多,但是時常閱讀大牛的代碼或者框架源碼,其中python特性應用的非常流暢,所以今天決定與python中的裝飾器@,做個了斷??!

Python中的@:

援引廖雪峰老師對裝飾器的解釋以及一些自己對裝飾器的理解:

python中在代碼運行期間動態(tài)增加功能的方式,稱之為“裝飾器”(Decorator)。@是裝飾器的語法。裝飾器是在函數(shù)調(diào)用之上的修飾,這些修飾僅是當聲明一個函數(shù)或者方法的時候,才會應用的額外調(diào)用。 我們可以用裝飾器來增加計時邏輯來檢測性能,或者引入日志等等。

函數(shù)也是一個對象,而且函數(shù)對象可以被賦值給變量,所以,通過變量也能調(diào)用該函數(shù)。

>>> def now():
...   print('2015-3-25')
...
>>> f = now
>>> f()
2015-3-25

函數(shù)對象有一個__name__屬性,可以拿到函數(shù)的名字:

>>> now.__name__
'now'
>>> f.__name__
'now'

現(xiàn)在,假設我們要增強now()函數(shù)的功能,比如,在函數(shù)調(diào)用前后自動打印日志,但又不希望修改now()函數(shù)的定義。本質(zhì)上,decorator就是一個返回函數(shù)的高階函數(shù)。所以,我們要定義一個能打印日志的decorator,可以定義如下:

def log(func):
  def wrapper(*args, **kw):
    print('call %s():' % func.__name__)
    return func(*args, **kw)
  return wrapper

觀察上面的log,因為它是一個decorator,所以接受一個函數(shù)作為參數(shù),并返回一個函數(shù)。我們要借助Python的@語法,把decorator置于函數(shù)的定義處:

@log
def now():
  print('2015-3-25')

調(diào)用now()函數(shù),不僅會運行now()函數(shù)本身,還會在運行now()函數(shù)前打印一行日志:

>>> now()
call now():
2015-3-25

把@log放到now()函數(shù)的定義處,相當于執(zhí)行了語句:

now = log(now)

由于log()是一個decorator,返回一個函數(shù),所以,原來的now()函數(shù)仍然存在,只是現(xiàn)在同名的now變量指向了新的函數(shù),于是調(diào)用now()將執(zhí)行新函數(shù),即在log()函數(shù)中返回的wrapper()函數(shù)。

wrapper()函數(shù)的參數(shù)定義是(*args, **kw),因此,wrapper()函數(shù)可以接受任意參數(shù)的調(diào)用。在wrapper()函數(shù)內(nèi),首先打印日志,再緊接著調(diào)用原始函數(shù)。

如果decorator本身需要傳入?yún)?shù),那就需要編寫一個返回decorator的高階函數(shù),寫出來會更復雜。比如,要自定義log的文本:

def log(text):
  def decorator(func):
    def wrapper(*args, **kw):
      print('%s %s():' % (text, func.__name__))
      return func(*args, **kw)
    return wrapper
  return decorator

這個3層嵌套的decorator用法如下:

@log('execute')
def now():
  print('2015-3-25')

執(zhí)行結(jié)果如下:

>>> now()
execute now():
2015-3-25

和兩層嵌套的decorator相比,3層嵌套的效果是這樣的:

>>> now = log('execute')(now)

我們來剖析上面的語句,首先執(zhí)行l(wèi)og('execute'),返回的是decorator函數(shù),再調(diào)用返回的函數(shù),參數(shù)是now函數(shù),返回值最終是wrapper函數(shù)。

以上兩種decorator的定義都沒有問題,但還差最后一步。因為我們講了函數(shù)也是對象,它有__name__等屬性,但你去看經(jīng)過decorator裝飾之后的函數(shù),它們的__name__已經(jīng)從原來的'now'變成了'wrapper':

>>> now.__name__
'wrapper'

因為返回的那個wrapper()函數(shù)名字就是'wrapper',所以,需要把原始函數(shù)的__name__等屬性復制到wrapper()函數(shù)中,否則,有些依賴函數(shù)簽名的代碼執(zhí)行就會出錯。

不需要編寫wrapper.__name__ = func.__name__這樣的代碼,Python內(nèi)置的functools.wraps就是干這個事的,所以,一個完整的decorator的寫法如下:

import functools 
def log(func):
  @functools.wraps(func)
  def wrapper(*args, **kw):
    print('call %s():' % func.__name__)
    return func(*args, **kw)
  return wrapper

或者針對帶參數(shù)的decorator:

import functools 
def log(text):
  def decorator(func):
    @functools.wraps(func)
    def wrapper(*args, **kw):
      print('%s %s():' % (text, func.__name__))
      return func(*args, **kw)
    return wrapper
  return decorator

import functools是導入functools模塊。模塊的概念稍候講解?,F(xiàn)在,只需記住在定義wrapper()的前面加上@functools.wraps(func)即可。

python中常見的@:

@property :對于類的方法,裝飾器一樣起作用,Python內(nèi)置的@property裝飾器就是負責把一個方法變成屬性調(diào)用的.廣泛應用在類的定義中,可以讓調(diào)用者寫出簡短的代碼,同時保證對參數(shù)進行必要的檢查,這樣,程序運行時就減少了出錯的可能性。

class Student(object): 
  @property
  def score(self):
    return self._score 
  @score.setter
  def score(self, value):
    if not isinstance(value, int):
      raise ValueError('score must be an integer!')
    if value  0 or value > 100:
      raise ValueError('score must between 0 ~ 100!')
    self._score = value

@property的實現(xiàn)比較復雜,我們先考察如何使用。把一個getter方法變成屬性,只需要加上@property就可以了,此時,@property本身又創(chuàng)建了另一個裝飾器@score.setter,負責把一個setter方法變成屬性賦值,于是,我們就擁有一個可控的屬性操作:

>>> s = Student()
>>> s.score = 60 # OK,實際轉(zhuǎn)化為s.set_score(60)
>>> s.score # OK,實際轉(zhuǎn)化為s.get_score()
60
>>> s.score = 9999
Traceback (most recent call last):
 ...
ValueError: score must between 0 ~ 100!

注意到這個神奇的@property,我們在對實例屬性操作的時候,就知道該屬性很可能不是直接暴露的,而是通過getter和setter方法來實現(xiàn)的。

@staticmethod,@classmethod:@staticmethod返回的是一個staticmethod類對象,而@classmethod返回的是一個classmethod類對象。他們都是調(diào)用的是各自的__init__()構造函數(shù)。

當然應用裝飾器不當也會帶來一些問題:

1、位置錯誤的代碼

​ 讓我們直接看示例代碼。

def html_tags(tag_name):
  print 'begin outer function.'
  def wrapper_(func):
    print "begin of inner wrapper function."
    def wrapper(*args, **kwargs):
      content = func(*args, **kwargs)
      print "{tag}>{content}/{tag}>".format(tag=tag_name, content=content)
    print 'end of inner wrapper function.'
    return wrapper
  print 'end of outer function'
  return wrapper_ 
@html_tags('b')
def hello(name='Toby'):
  return 'Hello {}!'.format(name)
 
hello()
hello()

在裝飾器中我在各個可能的位置都加上了print語句,用于記錄被調(diào)用的情況。你知道他們最后打印出來的順序嗎?如果你心里沒底,那么最好不要在裝飾器函數(shù)之外添加邏輯功能,否則這個裝飾器就不受你控制了。以下是輸出結(jié)果:

begin outer function.
end of outer function
begin of inner wrapper function.
end of inner wrapper function.
b>Hello Toby!/b>
b>Hello Toby!/b>

2、錯誤的函數(shù)簽名和文檔

裝飾器裝飾過的函數(shù)看上去名字沒變,其實已經(jīng)變了。

def logging(func):
  def wrapper(*args, **kwargs):
    """print log before a function."""
    print "[DEBUG] {}: enter {}()".format(datetime.now(), func.__name__)
    return func(*args, **kwargs)
  return wrapper
@logging
def say(something):
  """say something"""
  print "say {}!".format(something) 
print say.__name__ # wrapper

為什么會這樣呢?想想裝飾器的語法@代替的東西就明白了。@等同于這樣的寫法。

say = logging(say)

logging其實返回的函數(shù)名字剛好是wrapper,那么上面的這個語句剛好就是把這個結(jié)果賦值給say,say的__name__自然也就是wrapper了,不僅僅是name,其他屬性也都是來自wrapper,比如doc,source等等。

使用標準庫里的functools.wraps,可以基本解決這個問題。

from functools import wraps
 
def logging(func):
  @wraps(func)
  def wrapper(*args, **kwargs):
    """print log before a function."""
    print "[DEBUG] {}: enter {}()".format(datetime.now(), func.__name__)
    return func(*args, **kwargs)
  return wrapper
 
@logging
def say(something):
  """say something"""
  print "say {}!".format(something)
 
print say.__name__ # say
print say.__doc__ # say something

看上去不錯!主要問題解決了,但其實還不太完美。因為函數(shù)的簽名和源碼還是拿不到的。

import inspect
print inspect.getargspec(say) # failed
print inspect.getsource(say) # failed

如果要徹底解決這個問題可以借用第三方包,比如wrapt。

3、不能裝飾@staticmethod或者 @classmethod

當你想把裝飾器用在一個靜態(tài)方法或者類方法時,不好意思,報錯了。

class Car(object):
  def __init__(self, model):
    self.model = model
 
  @logging # 裝飾實例方法,OK
  def run(self):
    print "{} is running!".format(self.model)
 
  @logging # 裝飾靜態(tài)方法,F(xiàn)ailed
  @staticmethod
  def check_model_for(obj):
    if isinstance(obj, Car):
      print "The model of your car is {}".format(obj.model)
    else:
      print "{} is not a car!".format(obj) 
"""
Traceback (most recent call last):
...
 File "example_4.py", line 10, in logging
  @wraps(func)
 File "C:\Python27\lib\functools.py", line 33, in update_wrapper
  setattr(wrapper, attr, getattr(wrapped, attr))
AttributeError: 'staticmethod' object has no attribute '__module__'
"""

前面已經(jīng)解釋了@staticmethod這個裝飾器,其實它返回的并不是一個callable對象,而是一個staticmethod對象,那么它是不符合裝飾器要求的(比如傳入一個callable對象),你自然不能在它之上再加別的裝飾器。要解決這個問題很簡單,只要把你的裝飾器放在@staticmethod之前就好了,因為你的裝飾器返回的還是一個正常的函數(shù),然后再加上一個@staticmethod是不會出問題的。

class Car(object):
  def __init__(self, model):
    self.model = model 
  @staticmethod
  @logging # 在@staticmethod之前裝飾,OK
  def check_model_for(obj):
    pass

如何優(yōu)化你的裝飾器:

嵌套的裝飾函數(shù)不太直觀,我們可以使用第三方包類改進這樣的情況,讓裝飾器函數(shù)可讀性更好。

decorator.py

decorator.py是一個非常簡單的裝飾器加強包。你可以很直觀的先定義包裝函數(shù)wrapper(),再使用decorate(func, wrapper)方法就可以完成一個裝飾器。

from decorator import decorate 
def wrapper(func, *args, **kwargs):
  """print log before a function."""
  print "[DEBUG] {}: enter {}()".format(datetime.now(), func.__name__)
  return func(*args, **kwargs) 
def logging(func):
  return decorate(func, wrapper) # 用wrapper裝飾func

你也可以使用它自帶的@decorator裝飾器來完成你的裝飾器。

from decorator import decorator 
@decorator
def logging(func, *args, **kwargs):
  print "[DEBUG] {}: enter {}()".format(datetime.now(), func.__name__)
  return func(*args, **kwargs)

decorator.py實現(xiàn)的裝飾器能完整保留原函數(shù)的name,doc和args,唯一有問題的就是inspect.getsource(func)返回的還是裝飾器的源代碼,你需要改成inspect.getsource(func.__wrapped__)。

wrapt

wrapt是一個功能非常完善的包,用于實現(xiàn)各種你想到或者你沒想到的裝飾器。使用wrapt實現(xiàn)的裝飾器你不需要擔心之前inspect中遇到的所有問題,因為它都幫你處理了,甚至inspect.getsource(func)也準確無誤。

import wrapt
# without argument in decorator
@wrapt.decorator
def logging(wrapped, instance, args, kwargs): # instance is must
  print "[DEBUG]: enter {}()".format(wrapped.__name__)
  return wrapped(*args, **kwargs) 
@logging
def say(something): pass

使用wrapt你只需要定義一個裝飾器函數(shù),但是函數(shù)簽名是固定的,必須是(wrapped, instance, args, kwargs),注意第二個參數(shù)instance是必須的,就算你不用它。當裝飾器裝飾在不同位置時它將得到不同的值,比如裝飾在類實例方法時你可以拿到這個類實例。根據(jù)instance的值你能夠更加靈活的調(diào)整你的裝飾器。另外,args和kwargs也是固定的,注意前面沒有星號。在裝飾器內(nèi)部調(diào)用原函數(shù)時才帶星號。

如果你需要使用wrapt寫一個帶參數(shù)的裝飾器,可以這樣寫。

def logging(level):
  @wrapt.decorator
  def wrapper(wrapped, instance, args, kwargs):
    print "[{}]: enter {}()".format(level, wrapped.__name__)
    return wrapped(*args, **kwargs)
  return wrapper 
@logging(level="INFO")
def do(work): pass

Tensorflow中的@:

tensorflow就巧妙應用的python的裝飾器,提高了代碼的動態(tài)性,也使代碼變得精簡。

@tf_export 的作用是:Provides ways to export symbols to the TensorFlow API.

@tf_contextlib的作用是:A tf_decorator-aware wrapper for `contextlib.contextmanager`.

還有@tf_inspect、@tf_should_use等。

以上為個人經(jīng)驗,希望能給大家一個參考,也希望大家多多支持腳本之家。如有錯誤或未考慮完全的地方,望不吝賜教。

您可能感興趣的文章:
  • 解決pip安裝tensorflow中出現(xiàn)的no module named tensorflow.python 問題方法
  • Tensorflow卷積實現(xiàn)原理+手寫python代碼實現(xiàn)卷積教程
  • python用TensorFlow做圖像識別的實現(xiàn)
  • Python3.6 + TensorFlow 安裝配置圖文教程(Windows 64 bit)
  • Tensorflow tf.dynamic_partition矩陣拆分示例(Python3)
  • 運行tensorflow python程序,限制對GPU和CPU的占用操作
  • keras tensorflow 實現(xiàn)在python下多進程運行

標簽:合肥 濟源 阜新 昭通 隨州 淘寶好評回訪 信陽 興安盟

巨人網(wǎng)絡通訊聲明:本文標題《淺談python中的@以及@在tensorflow中的作用說明》,本文關鍵詞  淺談,python,中的,以及,在,;如發(fā)現(xiàn)本文內(nèi)容存在版權問題,煩請?zhí)峁┫嚓P信息告之我們,我們將及時溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡,涉及言論、版權與本站無關。
  • 相關文章
  • 下面列出與本文章《淺談python中的@以及@在tensorflow中的作用說明》相關的同類信息!
  • 本頁收集關于淺談python中的@以及@在tensorflow中的作用說明的相關信息資訊供網(wǎng)民參考!
  • 推薦文章
    盱眙县| 乌兰县| 湟源县| 西平县| 宁陵县| 庄浪县| 岳阳县| 凤阳县| 卓资县| 洛川县| 鹤岗市| 富宁县| 顺昌县| 建昌县| 天柱县| 太谷县| 信丰县| 明溪县| 罗江县| 淮安市| 临颍县| 大关县| 五家渠市| 龙州县| 鲁甸县| 庆城县| 西贡区| 绥滨县| 平阳县| 九龙城区| 麦盖提县| 饶河县| 健康| 信宜市| 邯郸县| 霍城县| 腾冲县| 龙井市| 公安县| 正定县| 黄浦区|