pythonでwebスクレイピングしてみたよ

pythonでwebスクレイピングしてみた

Daiさんが販売しているnote教材を使ってwebスクレイピングしてみました。

背景

pythonのレベルはprogate2周したのとudemyの機械学習の講座のnumpy, pandasとかライブラリどう使うの?みたいなところだけやってる状態でした。でも正直そこで得た知識を日常(例えば自分のやってるリサーチ業務)の最適化・効率化、に使えるのかがわからずという感じ。「スクレイピング使えるよ!」とは聞くものの後回しにしてました。(本一冊読むと長くて)

実行してみる

実際にnoteにしたがって勉強しつつ、教材内のサイトではなく、よく読んでいるtechcrunchのサイトからスクレイピングしてみることにしました。実行すると、こんな感じに出力されて、

最後にcsvに出力するようにしました。

結果

できた!!

シェアする

  • このエントリーをはてなブックマークに追加

フォローする