ノンプロ研初心者向けプログラミング講座第8期【Python コース】第5回
本日20:00から、初心者向けプログラミング講座【Pythonコース】第5回目です! 本日のアジェンダは、「スクレイピング基礎」になります。 いよいよ今回から、実務にぐっと近づいた内容になっていきます。 よろしくお願いします~ #ノンプロ研 #Python講座 pic.twitter.com/mj19oxluzH
2022-05-02 19:15:59直前までTAツールのGASで苦戦しているTA #ノンプロ研 #Python講座 Exception: 無効な引数: id なんだろうエラー👀
2022-05-02 19:34:37輪読会もきになる👀 #ノンプロ研 #Python講座 今日は参加できませんが、ぜひ、動画も見てみてくださいね✨ なんなら輪読会をしてみても!
2022-05-02 20:00:05後半戦に向けて研修ゴールを再確認。 「Pythonで実務で使える簡単なツールを作る」 スクレイピングで実現したいもの、できそうなものを想像していきましょう。 #ノンプロ研 #Python講座
2022-05-02 20:11:148つの約束 1⃣実務で使うがでてきます。 スクレイピングの難易度は、サイトによって違ってきます。 講座で、全部のサイトのスクレイピングができるようにというのは難しいかもしれませんが、実務で使っていくことで、レベルアップしていきましょう! 4⃣調べるのも大切 #ノンプロ研 #Python講座
2022-05-02 20:12:48プログラミング上達の8つの約束。 難しい宿題で④調べる、機会も多かったのでは。 最初は大変ですが、調べる癖がつき、自分で解決できる力につながります。 ⑦読みやすいコードを書く、宿題の中で実践できていて素晴らしいですね。 #ノンプロ研 #Python講座
2022-05-02 20:13:42スクレイピングとは、Web上のデータを収集すること。 文字データだけではなく、画像データなども含めます。 スクレイピングの処理は、Python以外でもできますが、ライブラリが豊富なので、Pythonで行うのが最適と言われています~ #ノンプロ研 #Python講座
2022-05-02 20:14:33Pythonはスクレイピングするのに最適 スクレイピングやデータ加工などのライブラリが豊富 #ノンプロ研 #Python講座
2022-05-02 20:15:05必要な知識 HTTP通信:Webサーバーとやり取りをする規約。 HTML:Webページを構成する言語。取得したデータからほしいデータを取り出す。 #ノンプロ研 #Python講座
2022-05-02 20:15:34スクレイピングって法的にどう? 法令遵守で行うために ・著作件の侵害:著作権で守られているデータの商用利用は基本NG ・利用規約違反:スクレイピングはおやめくださいと書いてあるものはNG ・サーバー負荷による業務妨害:相手側のサーバーに負荷がかかり過ぎてしまう #ノンプロ研 #Python講座
2022-05-02 20:18:38サイト管理者に許可を得る 利用条件を確認する 非公開情報はしない。公開情報に限定する 損害を与えない 著作権で保護されたコンテンツは商用利用しない #ノンプロ研 #Python講座
2022-05-02 20:20:03スクレイピング 「こすること、削ること」を意味する英語「scraping」がその語源。 そこから転じて、「インターネット上のデータから余分な情報を削り、抽出し、解析・加工処理を施し、新たな情報を生成すること」の意味で使われる。 削って・抽出するか・・・ #ノンプロ研 #Python講座
2022-05-02 20:21:28