Booking.comは、世界最大規模の旅行ECサイトです。オランダ・アムステルダムに本拠地を置き、世界70カ国・198の支社を展開しているOTAの世界最大手。日本では楽天トラベルと2016年2月より海外ホテル予約サービスに関して提携し、一部地域に対する在庫提供を開始しています。旅館やバケーションレンタルを含む合計2,904万件ものリスティングを掲載しており、宿泊予約コンテンツとしては世界最大級の利用実績があります。世界最大規模の旅行ECサイトです。
スクレイピングツールの概要
ScrapeStormは、AIを使用した視覚的なWebスクレイピングツールです。プログラミングが必要なく、ほぼすべてのWebサイトからデータを抽出できます。強い機能を持って、使いやすいです。 URLを入力だけで、自動的に抽出するデータと次のページボタンを識別できます。複雑なルール設定が必要ないし、ただクリックしてスクレイピングができます。
ScrapeStormにより、大量のWebデータを素早く正確的に取得できます。手動でデータ抽出が直面するさまざまな問題を完全に解決し、情報取得のコストを削減し、作業効率を向上させます。
1.タスクを新規作成する
(1)BookingのURLをコピーする
今回は東京のホテル情報ページを例として、データクローラの手順を紹介します。まず、東京のホテル情報ページのURLをコピーしてください。
(2)スマートモードタスクを新規作成する
ソフトウェアのホムページ画面に新規作成できます。持っているタスクをインポートすることもできます。
詳細には下記のチュートリアルをご参照ください。
2.タスクを構成する
(1)事前操作
チェックインの日付、人数などの条件を絞り込むのは事前操作機能を利用してください。右上の緑色ボタンをクリックして、事前操作画面にコンポーネントを生成できます。ScrapeStormはこちらの設定を優先的に実行します。
(2)ページボタンを選択
ScrapeStormは自動的にリスト要素とページボタンを識別できます。今回、スクロールローディングを識別しました。
ページボタンの設定詳細には下記のチュートリアルをご参照ください。
(3)詳細ページに行く
詳細ページに行くと、より多くのホテル情報を収集できます。「詳細ページに行く」機能を利用してください。
詳細は下記のチュートリアルをご参照ください。
(4)フィールドの追加と編集
フィールドの追加には、「フィールドを追加」ボタンをクリックして、画面に抽出する要素を選択、データが自動的に抽出されます。また、必要に応じてフィールド名の変更、削除、結合などの編集もできます。フィールドの設定の詳細には下記のチュートリアルをご参照ください。
3.タスクの設定と起動
(1)起動の設定
必要に応じて、スケジュール、アンチブロック、自動エクスポート、画像のダウンロード、スピードブーストを設定できます。
今回は画像のダウンロードをチェックしてください。また、抽出された写真を店名によって、ファイルに保存することもできます。
スクレイピングタスクを配置する方法については、下記のチュートリアルをご参照ください。
(2)しばらくすると、データがスクレイピングされる。
4.抽出されたデータのエクスポートと表示
(1)エクスポートをクリックして、データをダウンロードする
(2)必要に応じてエクスポートする形式を選択します。
ScrapeStormは、Excel、csv、html、txt、データベース、ローカルなどさまざまなエクスポート方法を提供します。ライトプラン以上のユーザーは、WordPressに直接投稿することもできます。
抽出結果を表示し、抽出されたデータを消去する方法の詳細には下記のチュートリアルをご参照ください。
抽出結果のエクスポート方法の詳細には下記のチュートリアルをご参照ください。