概要 Octoparse AI
Octoparseについて
Octoparseとは？
Octoparseはプログラミング知識不要でWebサイトからデータ抽出を行えるノーコードスクレイピングツールです。ECサイトの商品情報、ニュース記事、SNSの投稿、求人サイトの情報など、多様なWebサイトのデータを直感的な操作で抽出し、構造化されたデータとして出力できます。
世界で50万人以上のユーザーに利用されており、マーケティング調査、競合分析、価格比較、市場動向調査などの用途で活用されています。複雑な動的サイトにも対応し、反クローリング対策機能も標準搭載しているため、安定したデータ取得を実現します。
Octoparseを使う理由
一般的なスクレイピングツールと異なり、XPathやプログラミングの知識がなくても、ドラッグ&ドロップで抽出したい箇所を指定するだけでデータを取得できるため、IT部門に依存することなく現場の担当者が必要なデータを自ら入手できる点が大きな特徴です。
IPローテーション、CAPTCHA自動解決、アクセス間隔調整などの反クローリング対策機能が標準搭載されているため、サイトからアクセスを禁止されるリスクを大幅に低減できます。また、クラウド上での自動実行にも対応しており、PCを起動していなくても指定した時間にデータを自動取得することが可能です。
対象となるユーザー
- マーケティング担当者、市場調査員
- EC事業者の商品価格調査、競合分析担当者
- プログラミング知識がなくてもWebデータを活用したいビジネスパーソン
- データアナリスト、リサーチャー
- 求人動向、業界動向の調査を行う人事・経営企画担当者
- 大量のWebデータを効率的に収集する必要がある企業の担当者
価格体系
Octoparseは利用頻度、必要機能に応じた複数のプランを提供しています。公式サイトに記載された価格体系を以下に掲載します。
- Freeプラン 完全無料、データセットあたり最大1000レコード、同時実行1タスクまで、基本的なデータ抽出機能、コミュニティサポート、学習用コンテンツへのアクセス
- Standardプラン（月額払い） 月額89ドル、月間最大10万レコード、同時実行2タスク、ローカルIPローテーション、CAPTCHA自動解決100回/月、メールサポート
- Standardプラン（年額払い） 年額900ドル（月額換算75ドル、約16%割引）、月額Standardプランの全機能、追加のCAPTCHAクレジット付与
- Professionalプラン（月額払い） 月額209ドル、レコード数無制限、同時実行4タスク、クラウドIPローテーション、CAPTCHA自動解決1000回/月、スケジュール実行無制限、優先メールサポート
- Professionalプラン（年額払い） 年額2268ドル（月額換算189ドル、約10%割引）、月額Professionalプランの全機能、追加のトレーニングサポート
- Enterpriseプラン カスタム見積もり、同時実行タスク数無制限、専用IPアドレス提供、カスタムAPI連携、専任カスタマーサクセス、個別トレーニング、SLA保証、高度なセキュリティ機能
主な機能
ノーコードによるデータ抽出機能
ドラッグ&ドロップの直感的な操作で、抽出したいデータ箇所を指定するだけでスクレイピング設定が完了します。ECサイト、SNS、求人サイトなどの人気サイト向けに事前に用意されたテンプレートも多数搭載しており、最短数分でデータ取得を開始できます。
反クローリング対応機能
- IPローテーション機能により、アクセス元IPを自動で切り替え、アクセス禁止を回避
- CAPTCHA自動解決機能で、人が手動で入力することなく認証を突破
- アクセス間隔の自動調整、User-Agentの偽装、ポップアップへの自動対応
- クラウド上からのアクセスにより、自社IPがブロックされるリスクを排除
動的サイト対応機能
JavaScriptで動的にコンテンツが生成されるページ、無限スクロールページ、ログインが必要なページ、複数ページにまたがるコンテンツにも対応しており、通常のスクレイピングツールでは取得が難しいデータも安定して抽出できます。
スケジュール・クラウド実行機能
取得したい日時を指定することで、スクレイピングを自動で実行するスケジュール設定が可能です。クラウドサーバー上で実行されるため、自身のPCを起動していなくても指定した時間にデータを自動取得し、保存することができます。
データ出力・外部連携機能
抽出したデータはCSV、Excel、JSON、XMLなどの形式で出力可能です。Googleスプレッドシート、Dropbox、AWS S3、データベースなどとも連携でき、取得したデータを他の業務ツールで直接活用することが可能です。
まとめ
Octoparseはプログラミング知識不要でWebデータ抽出を実現するノーコードスクレイピングツールです。直感的な操作性に加え、反クローリング対策機能、動的サイト対応、クラウド自動実行などの機能が充実しており、安定したデータ取得を実現します。無料プランから利用可能で、利用頻度や必要機能に応じてプランを選択できるため、個人利用から大企業の業務利用まで幅広く対応できます。Webデータを活用した調査・分析に課題を抱える方にとって、非常に有用なツールと言えます。
