【Python】Requests ライブラリを使って Web ページを取得してみた。
公開日:
:
Python apt-get, has no attribute, pip, Requests
python の標準ライブラリ urllib を使っても Web ページの取得はできるのですが、Requests ライブラリを使うともっと簡単に Web ページを取得できるということで、試してみました。
ちなみに、今回は以前紹介した、Windows10 上に仮想的にインストールした Linux 環境で行いました。
Contents
pip のインストール
python のライブラリを簡単にインストールするために pip をインストールします。
root ユーザで以下を実行しました。
|
1 |
# apt install python-pip |
完了するまでに結構時間がかかりました(約15分くらい?)
apt-get を update
python-pip インストール中に固まってしまったので、apt-get を update しました。
|
1 |
# apt-get update |
Requests のインストール
|
1 |
# pip install requests |
Web ページの取得
以下のようなコードを実行すると、Web ページを取得して、表示することができます。
|
1 2 3 4 5 6 7 8 |
import requests url = "https://www.sejuku.net/blog/" response = requests.get(url) response.encoding = response.apparent_encoding print(response.text) |
ここで、注意しないといけないことがあります。
Python のモジュール名と同じファイル名にしてしまうと「has no attribute」とエラーになってしまいます。
私も実際にはまってしまい、requests.py というファイル名で保存・実行すると、以下のようなエラーが出てしまいました。
Traceback (most recent call last):
File “requests.py”, line 1, in <module>
import requests
File “/home/shion/requests.py”, line 5, in <module>
response = requests.get(url)
AttributeError: module ‘requests’ has no attribute ‘get’
なので、ファイル名をモジュール名以外に変更してから実行すると、うまくいきました。
関連記事
-
-
【Python】Windows で ライブラリ(NumPy) をインストールする方法。
Windows の Python(2.X系)で NumPy をインストールしようと思ったら、そもそも
-
-
【Pandas】 DataFrame のインデックスを置き換える方法【Python】
今回は、Pandas の DataFrame型で、インデックス(index)を分かりやすいものに置き
-
-
【Spyder】引数のあるスクリプトを実行する方法。
Python の統合開発環境(IDE)である Spyder では、簡単にスクリプトを実行できます。
-
-
【Pandas】 DataFrame と Series のデータ構造について【Python】
今回は、Python でデータ分析を行っていると必ず使う Pandas の DataFrame と
-
-
【OpenCV】検出した顔画像部分を切り出す方法【Python】
OpenCV を使って、Python で画像の中から顔部分を切り出したときのメモです。 顔部分
-
-
【Pandas】 DataFrame の行を抽出する方法【Python】
今回は、Python の Pandas で、DataFrame 型の行を抽出する方法を紹介します。
-
-
【matplotlib】 Python でヒストグラムの横軸と棒(ビン)の数を調整する方法。
Python の matplotlib を使ってヒストグラムを描画し、横軸の目盛りと棒(ビン)がそろ
-
-
【Python】API を使って Amazon の商品情報を収集する方法。
AmazonAPI ライブラリをインストール 以下のコマンドで python-amazon-sim
-
-
【Python】時系列データ(為替データ)をグラフ表示してみた。
今回は、pandas・matplotlib ライブラリを使って、時系列データ(為替データ)をグラフ表
-
-
【Python】Wikipedia のデータセットを取得し、文章を抽出する方法。
Wikipedia のデータセットを取得し、Python のライブラリを用いて文章を抽出する方法を紹




















