Macでのスクレイピングに時間がかかったときに試した方法

MacでWindowsと同じスクレイピングプログラムを動かしたら倍以上の時間がかかったので、そのときの状況と対処について記録を残しておきます。

状況と対処

状況

某証券会社のサイトから評価損益を引っ張ってくるだけの簡単なプログラムを組みました。

MacのOSはVenturaで、seleniumのバージョンは4.1.0です。

いざ実行してみるとエラーもなく意図した結果が得られたものの、実行時間が微妙に長い。待てないほどじゃないけど画面遷移の度に10秒くらい待たされました。

Windowsで同じプログラムを実行すると普通に動いていたので、やはりMacの場合だけ時間がかかるようです。

対処

大したことはしていませんが次の2つを並行して？試したら直りました。

• Mac本体の再起動
• seleniumのバージョンアップ（selenium4.10.0にバージョンアップ）

こんなことは試したわ！という声も聞こえてきそうですが、私の場合はこれで直ったという点とネットで調べても同じような情報もなかったので参考程度に記録として残しておきます。

まとめ

短いですが、今回はMacでスクレイピングに時間がかかったときの状況と対処法についてまとめました。

この記事で不明な点や気になるところがあれば下のコメント欄までお願いします。それではまた！