Pythonでリファラーやユーザーエイジェントを設定

urllib2を用いてRefererやUserAgentを指定します。

import urllib2
opener=urllib2.build_opener()
# 複数ヘッダ指定する場合はタプルのリストにする
opener.addheaders=[('Referer','http://mydomain.com/'), ('User-Agent','original-UA')]
url='http://target-url.com/'
f=opener.open(url)