PythonのRequestsモジュールの使い方【初心者向け】現役エンジニアが解説
初心者向けにPythonのRequestsモジュールの使い方について解説しています。HTTP通信ライブラリRequestsの導入と、それを使ったWeb上のデータ収集の方法について見ていきましょう。
テックアカデミーマガジンは受講者数No.1のプログラミングスクール「テックアカデミー」が運営。初心者向けにプロが解説した記事を公開中。現役エンジニアの方はこちらをご覧ください。 ※ アンケートモニター提供元:GMOリサーチ株式会社 調査期間:2021年8月12日~8月16日 調査対象:2020年8月以降にプログラミングスクールを受講した18~80歳の男女1,000名 調査手法:インターネット調査
PythonのRequestsモジュールの使い方について解説します。
テックアカデミーのメンター(現役エンジニア)が実際のコードを使って初心者向けに解説します。
目次
そもそもPythonについてよく分からないという方は、Pythonとは何なのか解説した記事を読むとさらに理解が深まります。
今回は、Pythonに関する内容だね!
どういう内容でしょうか?
Requestsモジュールの使い方について詳しく説明していくね!
お願いします!
Requestsモジュールとは
Requestsは、PythonのHTTP通信ライブラリです。
Requestsを使うとWebサイトの情報取得や画像の収集などを簡単に行えます。
Python には標準で urllib というライブラリが存在しますが、 Requests はそれよりもシンプルに、人が直感的に分かりやすいプログラムを記述できます。
Requests ライブラリは、他のライブラリと組み合わせて使用できます。
例えば Beautiful Soup と組み合わせると、Webサイトを解析して必要な情報だけを抜き出すことができます。
また、BytesIO と Pillow と組み合わせて、Webサイト上の画像URLをもとに、画像ファイルを取得することもできます。
Requestsモジュールの使い方
まずは Requests ライブラリをインストールしましょう。
パソコンが MacやLinuxならターミナル、Windowsならコマンドプロンプトから以下のコマンドでインストールします。
なお、事前に Python のインストールが必要です。
また、AnacondaからPythonをインストールしている場合には、conda installを使用することが推奨されています。
#requestsをpipからインストール pip install requests
Requests の利用方法は以下の通りです。
requests.request(method, url, オプション)
methodには”get”や”post”などを指定しますが、あらかじめmethodが指定されているメソッドも用意されています。
requests.get(url,オプション) requests.post(url,オプション) requests.put(url,オプション) requests.delete(url,オプション) requests.head(url,オプション) requests.options(url,オプション)
urlには情報を収集するWebサイトのURLを指定します。
オプションの指定方法などは、HTTPを通してどの部分の情報を取得するかによって異なります。
例えば get の場合には、情報を取得する相手のサーバからテキストなどのデータを取得します。
詳しくは公式ドキュメントを参考にしてください。
実際に書いてみよう
今回のサンプルプログラムでは、 Requests ライブラリを使用してWebサイトから情報を取得する方法を確認します。
今回はYahooニュースから情報を取得してみます。
# resuests モジュールをインポート import requests # Webサイトの情報を変数rに格納し、そのうちのテキスト部分を出力 r = requests.get("https://news.yahoo.co.jp/") print(r.text)
実行結果は以下のようになります(一部抜粋)。
<!DOCTYPE html> <html lang="ja" xmlns:og="http://ogp.me/ns#" xmlns:fb="http://ogp.me/ns/fb#"> <head> <meta http-equiv="Content-Type" content="text/html; charset=utf-8"> <meta http-equiv="Content-Style-Type" content="text/css"> <meta http-equiv="Content-Script-Type" content="text/javascript"> <title>Yahoo!ニュース</title> <meta name="description" content="Yahoo!ニュースは、新聞・通信社が配信するニュースのほか、映像、雑誌や個人の書き手が執筆する記事など多種多様なニュースを掲載しています。"> <meta name="keywords" content="ニュース,ヤフー,新着"> <meta name="robots" content="noarchive"> <meta name="format-detection" content="telephone=no"> <meta name="google-site-verification" content="dVyTbsDzUrUAjCE1aCH9hKwZ8sOsCsvi2uhuBvasrp8" /> <link rel="apple-touch-icon-precomposed" href="https://s.yimg.jp/c/icon/s/bsc/2.0/news120.png"/> <meta name="msapplication-TileImage" content="https://s.yimg.jp/c/icon/s/bsc/2.0/news144.png"/> <meta name="msapplication-TileColor" content="#FFFFFF"/>
Webサイトの情報が取得できていますね。
ただし、このままでは情報が多すぎますので、実際の処理ではBeautiful SoupなどでWebサイトの必要な情報だけを適宜選択します。
まとめ
この記事ではPythonのRequestsモジュールの使い方を学びました。
Webサイトなどから情報を取得する代表的な手法ですので、ぜひ使い方を覚えましょう。
スクレイピングなどを行う場合にも、Requestsを使って簡単にプログラムを書くことができます。
執筆してくれたメンター
太田和樹(おおたかずき) ITベンチャー企業のPM兼エンジニア普段は主に、Web系アプリケーション開発のプロジェクトマネージャーとプログラミング講師を行っている。守備範囲はフロントエンド、モバイル、サーバサイド、データサイエンティストと幅広い。その幅広い知見を生かして、複数の領域を組み合わせた新しい提案をするのが得意。開発実績:画像認識技術を活用した駐車場混雑状況把握(実証実験)、音声認識を活用したヘルプデスク支援システム、Pepperを遠隔操作するアプリの開発、大規模基幹系システムの開発・導入マネジメント地方在住。仕事のほとんどをリモートオフィスで行う。通勤で消耗する代わりに趣味のDIYや家庭菜園、家族との時間を楽しんでいる。 |
内容が分かりやすくて良かったです!
ゆかりちゃんも分からないことがあったら質問してね!
分かりました。ありがとうございます!
Pythonを学習中の方へ
これで解説は終了です、お疲れさまでした。
- つまずかず「効率的に」学びたい
- 副業や転職後の「現場で使える」知識やスキルを身につけたい
プログラミングを学習していて、このように思ったことはありませんか?
テックアカデミーのPythonコースでは、第一線で活躍する「プロのエンジニア」が教えているので、効率的に実践的なスキルを完全オンラインでしっかり習得できます。
合格率10%の選考を通過した、選ばれたエンジニアの手厚いサポートを受けながら、人工知能(AI)や機械学習の基礎を学べます。
まずは一度、無料体験で学習の悩みや今後のキャリアについて話してみて、「現役エンジニアから教わること」を実感してみてください。
時間がない方、深く知ってから体験してみたい方は、今スグ見られる説明動画から先に視聴することをおすすめします!