ノンプロ研初心者向けプログラミング講座第9期【Python コース】 第5回
スクレイピングによる、トラブルの例 ・著作権の侵害 ・利用規約違反 ・サーバー負荷による業務妨害 #ノンプロ研 #Python講座
2022-08-22 20:15:50スクレイピングの注意点 〜法令遵守で行うために〜 ・著作権侵害 →著作権で守られているデータの商業利用は基本NG ・利用規約違反 ・サーバー負荷による業務妨害 →過度なアクセスをせず、負荷がかからない処理を検討 #ノンプロ研 #Python講座
2022-08-22 20:15:56スクレイピングを行う際の指針 ●許可を得る ●利用条件を確認する ●公開情報に限定する ●損害を与えない ●著作権で保護されたコンテンツを商用利用しない #ノンプロ研 #Python講座
2022-08-22 20:16:39スクレイピングを行う際には? ・許可を得る ・利用条件を確認する ・公開情報に限定する ・損害を与えない ・著作権保護コンテンツを商用利用しない #ノンプロ研 #Python講座
2022-08-22 20:16:46スクレイピングの指針 1)許可をとる 2)利用条件を確認 3)公開情報に限定する 4)損害を与えない 5)著作権保護コンテンツを商用利用しない #ノンプロ研 #Python講座
2022-08-22 20:16:54スクレイピングの指針 ・許可を得る ・利用条件を確認する ・公開情報に限定 ・損害を与えない ・著作権で保護されたコンテンツを商用利用しない 相手の立場に立って節度のあるスクレイピングをしましょう。 #ノンプロ研 #Python講座
2022-08-22 20:17:26ホームページを見るときに、パソコンで巻き起こっていること #ノンプロ研 #Python講座 pic.twitter.com/Cn683MNfZN
2022-08-22 20:18:52HTTPリクエスト ←→ HTTPレスポンス このやり取りを、ブラウザ と WEBサーバー で行う #ノンプロ研 #Python講座
2022-08-22 20:19:54HTTPレスポンスには、「HTML」が含まれる これを、人間に見やすいように表示してくれるのがブラウザ #ノンプロ研 #Python講座
2022-08-22 20:20:19HTTPリクエストに対してWebサーバーはHTTPレスポンスを返す。HTMLをブラウザが解析して人が見やすいように表示してくれる。 #ノンプロ研 #Python講座
2022-08-22 20:20:33スクレイピングの手順 requestsモジュールというのを使うそうです #ノンプロ研 #Python講座 pic.twitter.com/bTWrhndsvk
2022-08-22 20:20:48requestsモジュールは、anacondaに同梱されているので、インストールをする必要がない #ノンプロ研 #Python講座
2022-08-22 20:21:07requestsモジュールはAnacondaに同梱されている requests-docs-ja.readthedocs.io/en/latest/ #ノンプロ研 #Python講座
2022-08-22 20:21:36●requestsモジュール PythonからHTTP通信を行うための Anacondaの同梱ライブラリ ブラウザのような機能をやってくれるモジュールだそうです! #ノンプロ研 #Python
2022-08-22 20:21:47Pythonでrequestsモジュールを使用したときにパソコンで巻き起こっていること さっきの画像の、パソコンが、Pythonに置き換わっていますね #ノンプロ研 #Python講座 pic.twitter.com/hzurF9xSNy
2022-08-22 20:22:36requests.get(URL)で、WEBサーバーから、Responseオブジェクトを取得できる #ノンプロ研 #Python講座
2022-08-22 20:23:36rewuestsモジュールによるGETメソッドのHTTPリクエスト ⇒ rewuests.get(url) 戻り値はResponseオブジェクト #ノンプロ研 #Python講座
2022-08-22 20:23:41Amazonでも買えるように! サングラスのようなARグラス Nreal Air(エンリアルエアー)/ARグラス/スマートグラス/どこにでも持ち歩ける最大201インチ大画面/TUV認証取得(目に優しい)/ステレオサウンドのデュアルスピーカー/ノイズキャンセリングマイク amzn.to/3QITc8f @amazonより
2022-08-22 20:25:06