2019
5
2
スクレイピングと一言に言っても実際は結構なロジックとモジュールなどを組み合わせて作り上げます。 ・requestsモジュールでサイトにhttpでアクセス ・seleniumなどUIテストツールで自動的にwebページ内を操 ...
2019
5
2
スクレイピングと一言に言っても実際は結構なロジックとモジュールなどを組み合わせて作り上げます。 ・requestsモジュールでサイトにhttpでアクセス ・seleniumなどUIテストツールで自動的にwebページ内を操作・遷移 ・BeautifulSoupなどのライブラリでソースコードを取得して必要な情報をパース・整形 ・MySQLなどのデータベースまたはファイルに書き込んで保存