- すべて
- 画像・動画
自動更新
並べ替え:新着順
メニューを開く
手持ちのスクレイピング術。PHPで正規表現、node.jsでpuppeteerでquerySelector、PythonでSeleniumでBeautifulSoup、そしてここにGASが追加される予定です。GASはスプレッドシートと組み合わせれるのでサーバも要らんし最強っぽいな。データベースに保存したい時はサーバですることになるか
メニューを開く
reactでできているサイトとかのレンダリングを待つ仕組みとかもSeleniumなら入れれましたね。BeautifulSoupで要素全部取得できなくてどうしたと思ったらWebDriverWaitとか入れてやれば良いのね。とりあえずこれでpythonでスクレイピングできるよと言えるかな。