VBA×ChromeでWebスクレイピング難しい初期設定を分かりやすく解説

Webからテキストや画像などの情報を取得する方法の1つにWebスクレイピングがあります。

特定の手法でWebにアクセスし情報を取得したりWeb内のテキストボックスに情報を入力することができます。

このWebスクレイピングですが数年前までは作業を実行する際に使用される主なブラウザはIEでした。

しかしMicrosoftさんは2022年6月をもってInternetExplorerのサポートを終了しています。

この事からEdgeやChromeなど他のブラウザを使った別の方法が求められるようになってきました。

本記事では今後定番となるSeleniumbasicを使ったWeb情報を取得する方法について紹介、解説していきます。

WebスクレイピングやSeleniumbasicとは何かを間単に説明してから初期設定（環境構築）を説明します。

初期設定（環境構築）は非常に手間がかかります。よって丁寧に解説していきます。

最後に出来るだけ間単にコードを書く為のヒントになる記事を何点か用意しています。

継続して読んでいただくとWebスクレイピングができる様になります。

Webスクレイピングに興味があったのですがどうやって勉強したら良いのか分かりませんでした。

色々調べてく中でWebスクレイピングについて分かりやすく書いている本を見つけました。

Webスクレイピングについて書かれているのは約20ページほどですがかなり充実しています。

初期設定やWeb上の値を取得する為のメソッドがリスト化されている等非常に見易いです。

簡単に言いますと「ExcelからWebブラウザを操作するためのツール」です。

Webスクレイピングと絡めて会話で使う際には以下のような使い方をします。

ExcelからみたSeleniumの位置付けとしては一般的にはライブラリと言われるものに該当します。

ライブラリがイメージ出来ない方は以下引用をご覧ください。

さらにライブラリを具体的に表現します。VBAでSeleniumを使う際は参照設定を使います。

インストールするとVBAの参照設定でSelenium Type Libraryが選択出来る様になります。

参照設定で使えるとライブラリとはどんなものかイメージできる方も出てくるかもしれません。

連想配列で使うMicrosoft Scripting Runtime等と同じ様な位置付けです。

後付けで出来る事が増えるツールといった感じです。

Seleniumbasicは後付けでExcelからWebブラウザが操作できるライブラリという事になります。

端的に申し上げますと「ExcelからSeleniumbasic経由でWebスクレイピング」をする事になります。

マクロのプロシージャからSeleniumbasic経由で各ブラウザのドライバーに指示を出します。

ドライバーがマクロからのリクエスト（コード）に対応した操作をブラウザに対して行います。

ドライバーがWeb環境との橋渡し役になり必要な情報を取り出してくるという仕組みです。

スクレイピングはWebサイトから情報を抽出する為の方法、行為と書きましたがこんな使い方もできます。

Webサイトに設置してあるボタンをクリックしたり検索窓に文字を入力する事も出来ます。

私のブログ内の記事から情報をスクレイピングした動画を用意しました。

簡単ですがスクレイピングがどういったものか分かる様になっています。

Webスクレイピングは1度で複数のURLにアクセスして情報を取る事が出来ます。

コードが書ける人であればWeb上にある情報の掴み方だけ覚えれば何でも出来る様になります。

予想通りかもしれませんがVBA初心者で知識がまだ定着してない方には難しいです。

しかし必要最低限の機能さえおさえれば比較的簡単にWebの情報を取得出来るようなツールになっています。

無料で登録も不要、Seleniumbasic用の特殊な学習も不要というメリットも多いツールです。

しかしデメリットも何点かあります。

デメリットとして1番大きいのは「環境構築とメンテナンスの手間」が挙げられます。

Seleniumbasicにおける環境構築はかなり手間がかかります。

コードを書くところまで進めずに断念してしまう人が多いです。

加えて1回設定したらOKというわけにはいきません。

一定のタイミングでメンテナンスが必要という非常に手間のかかる環境の中作業をする必要があります。

「面倒だから避けよう」ではなく「面倒だからこそしっかり解説」していきます。

以降の記事を読んでいただければ環境面の心配はありません。

5番のVBEの参照設定はコーディング時に「実行時バインディング」にする事でマストではなくなります。

基本は上記4点は必須だと思って下さい。

実行時バインディングが分からない人は作業内容の1から5までもれなく準備してください。

続いて私のPC環境について情報展開しておきます。

重要なのは自動で動かすことを想定しているブラウザの種類と自PCに搭載されているOSの種類です。

これをふまえて作業を紹介していきます。

次の画面では中断よりやや下AssetsからSeleniumBasic-2.0.9.0.exeを選択。

これはダウンロード時のバージョンで最新のものを選択してください。

インストーラーをダウンロード出来る様になります。作業し易い様にデスクトップにダウンロードしましょう。

インストーラーをClickすると以下のような画面が起動してきます。Nextを押下。

既にインストール済みだとこのようなダイアログボックスが立ち上がります。

通常は出ませんが一応お見せしました。スルーして次の画面に進みます。

インストールが終了するとその旨を伝えるダイアログボックスが立ち上がります。

Finishボタンを押下してください。インストールはこれで終了です。

Chromeのダウンロード、インストールは難しくないので省略します。

Chromeのダウンロード先のリンクだけ用意しておきます。必要に応じてダウンロードとインストールをお願い致します。

一番上の値を確認。私は　105.0.・・・という数値です。

先頭の3文字だけでおおよそ大丈夫ですが画像の赤枠にある程度の桁まで数値を控えておきましょう。

上に用意したURLに進むと以下画面が表示されます。赤枠で囲んだ部分がリンクになっています。

こちらをクリックしましょう。

最新のChromeドライバーのラインナップを見ることができます。

私は125.0.6422.112でしたのでStableをクリックしました。

するとStableで選択できる要素が並んだ画面に遷移します。

少し色が濃くなっているwin64仕様のドライバーをダウンロードしたところ操作が繋がりました。

先程Seleniumbasicをインストールしました。その中にChromeのドライバーが居るのですが最新ではないです。

まずは最新のドライバーをインストールしましょう。

その後Seleniumbasicがデフォルトで持っているドライバーと入れ替えてください。

理由はSeleniumbasicに備えてあるドライバーがかなり古いものだからです。

2024年02月に以下画像を追加Seleniumをインストールした際の周辺データの画像です。

Chromeについては2024年02月にドライバーを入れ替えましたので最新ですがEdgeのドライバーは2015年のままです。

この様にSeleniumbasicをインストールした際はどのブラウザのドライバーも古いドライバーが備付けられています。

インストール後は各自が使用するブラウザに対して最新のドライバーを用意する必要があります。

具体的に何をやるかと言いますと単純に置き換えて（上書き）ください。

先程ダウンロードしたドライバーを上記フォルダにドラッグアンドドロップしましょう。

EdgeでWebスクレイピングを検討されている方はEdge用のドライバーをインストールしましょう。

Chromeと違ってドライバーにひと手間加える必要があります。詳細はこちらをご覧ください。

やっとExcelの話になりましたね。お馴染みのVBEを開きます。

参照設定から　Selenium Type Library　を見つけてレ点を入れてからOKボタンを押下しましょう。

参照設定はライブラリの解説時に説明済です。文字に用意されたリンクで説明している場所にジャンプします。

あくまで希望ですがスクレイピングをやる人はスキルとして参照設定の意味は分かっていてほしいです。

各ブラウザは不定期でバージョンアップします。

その時にSeleniumbasicに備えたドライバーもインストールする必要があります。

メンテナンス時は再度先程の設定と同じようにドライバーをダウンロードしましょう。

Seleniumbasicが持っているドライバーを上書きしてください。

この様に定期的にメンテナンスが必要です。環境を最新に保つ必要があります。

加えて見ていただいた様に非常に手間がかかります。

記事を用意した私自身も実際にこのURLに来て都度ドライバーをインストールしています。

ドライバーのバージョンアップに合わせて作業をするので不定期になります。

コードの書き方については別記事で紹介しています。

出来るだけ身近なケースを用意して簡単なコードでスクレイピングしていますのでご覧ください。

スクレイピングに慣れてくると色々なWeb画面と対峙する事になります。

複数のURLに対応する為にコードのアレンジが必要になります。

よってコードの事を考える比率が多くなり上記の様な比率に至ります。

簡単かつ最短距離でWebスクレイピングを解説してきました。難しかった人も居るはずです。

分かりにくい時は分かっている人に聞きましょう。以下リンクをご覧ください。