Hatena Blog Tags
はてなブログ トップ
urllib
このタグでブログを書く
言葉の解説
ネットで話題
関連ブログ

urllib

このタグの解説についてこの解説文は、すでに終了したサービス「はてなキーワード」内で有志のユーザーが作成・編集した内容に基づいています。その正確性や網羅性をはてなが保証するものではありません。問題のある記述を発見した場合には、お問い合わせフォームよりご連絡ください。
PyDocument•2年前

PythonでAPIを呼び出す4つの方法と比較（サンプルコードあり）

PythonでAPIを呼び出すには複数の方法があり、それぞれに特徴があります。この記事では、代表的な4つの方法（requests、urllib、PyCurl、aiohttp）を比較し、適切な方法を選択し、利用できるよう解説していきます。 1. requests モジュール 2. urllib モジュール 3. PyCurl モジュール 4. aiohttp モジュール まとめと使い分け 1. requests モジュール requestsモジュールは、PythonでHTTPリクエストを送信するためのライブラリです。APIの呼び出しにおいて最もよく使われます。 外部ライブラリ（pip insta…

#Python#API#urllib#PyCurl#aiohttp

ネットで話題

もっと見る
70ブックマークPythonの基礎　WebAPIを使ってみる　YahooAPI(ショッピング、カテゴリランキング編)その2 urllib - Pythonの学習の過程とかpeaceandhilightandpython.hatenablog.com
49ブックマークurllib2モジュール - ひきメモyumimue.hatenadiary.org
46ブックマーク日本語リファレンスには書いてない話：urllibとurllib2の違いってなんだ - hylom's‐ programming, open source, os, and a handful of tips Pythonでは、HTTPやFTPなどでファイルの送受信をするモジュールとして「urllib」と「urllib2」が用意されている。使い方も似ていて、どちらも引数としてURLを与えてurlopen()関数を呼び出すと自動的に対応したプロトコルでURLにアクセスしてデータを読み出せる、...hylom.net
45ブックマークurllib2でCookieを使う - ひきメモyumimue.hatenadiary.org
37ブックマークurllib, urllib2を使ってGET/POST - YAMAGUCHI::weblogymotongpoo.hatenablog.com
28ブックマークPython の HTTP クライアントは urllib.request で十分 - Qiitaqiita.com
22ブックマークurllib2 - The Missing ManualIntroduction Related Articles You may also find useful the following articles on fetching web resources with Python : Basic Authentication A tutorial on Basic Authentication, with examples in Python. cookielib and ClientCookie How to handle cookies when fetching web-pages with urllib2. urllib2 is...www.voidspace.org.uk
21ブックマークHOWTO Fetch Internet Resources Using urllib2 — Python 2.7.18 documentationurllib2 is a Python module for fetching URLs (Uniform Resource Locators). It offers a very simple interface, in the form of the urlopen function. This is capable of fetching URLs using a variety of different protocols. It also offers a slightly more complex interface for handling common situation...docs.python.org
16ブックマークurllib2でproxyを使うにはurllib2を使ったpythonのスクリプトは結構便利なのが多い。 でも、プロキシ使ってると通らないのが多い。 以下のコードを加えると、特に手を加えなくてもproxy使えるので、メモ。 proxy = {'http':'http://hogehoge.com:8080/'} proxy_handler = urllib2.ProxyHandler(proxy) opener = urllib2.build_opener(proxy_handl...mogawa.blogspot.com

関連ブログ

YuRAN-HIKO•3年前

python で XML を取得・パースするサンプルコード

python で XML ファイルを扱う際のライブラリはいくつか存在します。本記事では備忘録の意もかねて、そのなかのいくつかのライブラリを用いて XML ファイルの取得、パース処理のサンプルコードをまとめることにしました。 TEI (Text Encoding Initiative) フォーマットでの XML 処理のハマりどころはXML/TEIを python の lxml で処理する際のハマりどころと解決策 - YuRAN-HIKOに起こしています。合わせて参照ください。 XML ファイルの取得 requests ライブラリを使用し URL から取得 urllib ライブラリを使用し URL…

#XML#urllib#lxml
日記•3年前

Pythonのurllib.requestでリダイレクトをさせない

urllib.request.urlopenメソッドはレスポンスが300番台だった場合、リダイレクトを実行してそのレスポンスを結果とする。 HTTPのステータスコード302のレスポンスを返すAPIを作ってるときに、リダイレクトを実行せずに、最初に返ってきた302レスポンスを取得したかった。 既定のオープナーではレスポンスが200以外のステータスコードのときHTTPErrorProcessorによって各ハンドラーに振り分けられる。 docs.python.org urllib.request.HTTPErrorProcessor 今回は何か処理をしたいのではなくてレスポンスを結果として取得したい…

#urllib
高見知英の技術ログ•4年前

Let's EncryptのルートCA期限切れに対応する

昨日から、Pythonで作ったプログラムのurllib.request.urlopenがなにやら以下のエラーで失敗するようになっていました。 <urlopen error [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed: certificate has expired (_ssl.c:1129)> なんでだろう と考えていて思い立って気付いた結果が、Let's EncryptのルートCA期限切れ。 jp.techcrunch.com 最近のブラウザなどは大抵問題ないようになっていますが、urllibモジュールは普通に影響を受…

#Python#urllib
t-matsu200のブログ•4年前

【Python】urllibでプロキシ設定

urllibで社内のプロキシサーバーを経由して外部接続という処理を実装しました。 外部接続先のAPIでBasic認証が必要で、少し詰まったのでメモ。 requestsモジュールだと、プロキシ設定 + 接続先でBasic認証が上手く動かなかった為、urllibモジュールを使用しています。 上手いやり方などあれば、教えてください😊 実装 import os import base64 import json import urllib.request def exec_proxy_request(usename: str, passwd: str, token: str): user_pass =…

#Python#urllib#Proxy
nikkie-ftnextの日記•2年前

Python標準ライブラリのurllibでだけ403 Forbiddenとなる

現時点の理解 Pythonの標準ライブラリurllib.request.urlopenを使ってHTTP通信すると、403 Forbiddenが返る urllib.error.HTTPError: HTTP Error 403: Forbidden 同じURLにrequestsを使うと、403は発生しない（正常に扱える） CloudflareがurllibのデフォルトのUser-Agentヘッダのリクエストを弾いているらしい urllibでヘッダのUser-Agentを指定すると、403は発生せず正常に扱えた 目次 現時点の理解 目次 Webhookを使ってDiscordにPythonで投稿する…

#urllib#HTTP通信#403#Cloudflare#user-agent