くろおーかみ*てっく

しがないくろおーかみの勉強記

# 100DaysOfCode #28: 自動でページをめくって取得する(BeautifulSoup + requests)

やったこと

  • すべてのユーザーを取得する(1h)

今日の進捗のコードはコチラ。

github.com

とりあえず1ページ目を取り出してから、パラパラと次のページをめくって気づいたことをまとめましょう。
次のページへ遷移するページネーションを見ると rel 属性で「次のページを表示するボタン」が示されています。

BeautifulSoupでは find() で要素が見つからなかったら None が返ってくるので、 ページを取得するたびに「次のページを表示するボタン」を探してすべてのユーザーの名前を取り出します。