プロキシサービスを利用したいと考えたとき、bright data(ブライトデータ)が選択肢の1つとして挙がるかと思います。しかし、いざbright data(ブライトデータ)を始めたいと思っても、どのように始めたら良いのかわからず尻込みしてしまう方も多くいらっしゃるのではないのでしょうか。
そこでこの記事では、bright data(ブライトデータ)の始め方をはじめ、料金体系やよくあるQ&Aなどについてもご紹介していきます。
目次
bright data(ブライトデータ)とは
まずはじめに、bright data(ブライトデータ)について、おさらいしておきましょう。
bright data(ブライトデータ)とは、世界No.1を誇るWebデータプラットフォームのことであり、データ収集インフラから既成のデータセットに至るまで、気になる公開Webデータをスムーズに取得することができます。
bright data(ブライトデータ)は、金融業界を始め、小売業界や旅行業界、ソーシャルメディアやサイバーセキュリティ、さらにはアドテクノロジーにいたるまで、様々な領域で活用されています。
ちなみに以前はLuminati(ルミナティ)という名称であったため、そちらの名称を聞いたことがあるという方もいらっしゃるかもしれません。
bright data(ブライトデータ)では、後述するように複数のIPアドレスを自然な形で利用するためScraping(スクレイピング)をブロックされずに、高確率で実行することが可能となっています。
bright data(ブライトデータ)の始め方
まず最初にbright data(ブライトデータ)を始める方法についてわかりやすく解説していきます。
アカウント登録
まずは下記画像のように公式ホームページ(https://brightdata.com)の右上にある「sign up(サインアップ)」もしくは画面真ん中にある「Start now(今すぐ開始)」をクリックします。
続いて下記画像のようにsign up(サインアップ)のダイアログ画面が表示されますので、氏名、7日間のフリートライアル用の社用emailアドレス、電話番号を入力し、所属企業の従業員数と所属企業の業界をプルダウンメニューから該当のものを選択した上で、bright data(ブライトデータ)のライセンス契約とプライバシーポリシーに同意し、チェックを付けて「Create Account(アカウント作成)」をクリックします。
これでアカウントの登録は完了です。
Bright Dataは、ユーザーに役立つツールと情報を開発・提供しています。インターネット上の情報をビジネスに活用したい人は、是非ともBright Dataと契約してください。
コンプライアンス認証
アカウント登録の後、下記画像のようにトップページの右上にある「Log in(ログイン)」をクリックします。
続いて下記画像のようにLog in(ログイン)のダイアログ画面が表示されるので、アカウント登録時に設定した社内emailアドレスとパスワードを入力して「Log in(ログイン)」をクリックします。なお、画像下部をご覧いただくとわかるように、GoogleアカウントやOktaアカウントと連携してログインすることも可能です。
ログインしたら左側にサイドバーが表示されます。その中からダッシュボードを選択してクリックし、さらに「ローテーション型プロキシネットワーク Inactive-requires further indemtification クリックしてアクティブ化させる」をクリックします。
「コンプライアンス認証の完了後に、7日間の無料トライアルに参加することができます!」というダイアログ画面が表示されるので、読み進めながら、指示に従ってコンプライアンス認証を進めましょう。
無料トライアル
これまでの流れで、アカウント登録し、コンプライアンス認証を行うと、法人であれば7日間の無料トライアルを利用することができます。
ちなみに無料トライアルでは下記のサービスが利用できます。
- Data Collector(データコレクター)
- Web Unlocker(ウェブ アンロッカー)
- Residential proxies(レジデンシャルプロキシ)
- Mobile proxies(モバイルプロキシ)
上記以外のサービスを利用する場合には、最初から課金が必要となりますので、注意が必要です。
支払方法の登録
アカウント登録後にログインし、ダッシュボードに赤文字で表示されている「Suspended(一時停止)」をクリックすることでクレジットカード登録ができます。逆に言うと「Suspended(一時停止)」が表示されている間は支払方法が登録できていないということですので、課金して利用する場合には必ず表示されていないかどうかを確認しましょう。
残高の追加の方法
ログイン後、左側に表示されるサイドバー最下部にある請求アイコンをクリックし、表示される「資金を追加」をクリックすることで残高を追加できます。
料金プランの変更方法
ログイン後、左側に表示されるサイドバー最下部の請求アイコンをクリックし、表示される「プランを変更する」をクリックすると、料金プランを変更可能です。後述するように様々な料金体系がありますので、それぞれのサービスの特徴などをきちんと確認した上で、慎重に選択しましょう。
bright data(ブライトデータ)の料金体系
bright data(ブライトデータ)の始め方がわかったところで、ここからは、bright data(ブライトデータ)の料金体系についてご紹介していきます。
利用するサービスによって料金体系は異なりますが、基本的には従量課金制、月額プラン、年間プランの中から利用状況に合わせて最適なものを選択することが可能です。また、場合によっては個別に見積もりを行わないと金額が出ないものもありますので、注意してください。
Data Collector(データコレクター)
https://brightdata.com/products/data-collector
Data Collector(データコレクター)は、公開されているWebデータを大きな規模で収集するためのbright data(ブライトデータ)の一元管理プラットフォームです。コード不要で自分自身でScraping(スクレイピング)を行うことができるというメリットがあります。
AIアルゴリズムにより、構造化されていないWebサイトのデータをシームレスにクリーニングし、マッチングや合成、処理や構造化することによって、分析可能なデータセットとして配信したり、定期的にページ構造が変更されるようなWebサイトであっても適応し、分析に適した原始的なデータを自動的に抽出したりします。
ターゲットのWebサイトからデータ収集するためのカスタムコレクターを作成する必要があるかないかによって、セルフサービスまたはフルサービスを選択します。
セルフサービス
既存のコレクターまたはユーザー自身でコレクターを作成し利用します。ただしこのサービスでは、コレクターのSLA及びメンテナンスは含まれていないので注意が必要です。
従量課金制 | 月額プラン | 年間プラン | |
料金 | $5.00/1,000ページロード | 最小プラン
$500/月 ※ユーザーによって変動します |
最小プラン
$450/月 ※ユーザーによって変動します |
フルサービス
必要な時に必要なウェブデータを取得することができ、bright data(ブライトデータ)がパフォーマンスをはじめ品質や取得データの納品まで管理してくれます。
年間プラン | ワンタイムプロジェクト | |
料金 | 最小プラン
$1,000/月 |
最小プラン
$1,500/月 |
Search Engine Crawler(サーチエンジンクローラー)
https://brightdata.com/products/search-engine-crawler
Search Engine Crawler(サーチエンジンクローラー)では、ユーザーが作成したデータセットをもとに、簡単な操作でユーザーのデバイスを使用して、ジオターゲティングを行いながら、主要検索エンジンから正確なSERPデータを収集することができます。
検索エンジンのクローラーは、リクエストボリュームに関係なく、高性能なSEOツールを提供しています。
応答時間が非常に早いというだけでなく(およそ3秒以下)、1ページに表示される結果の数をはじめ、表示言語やジオロケーション、リクエストのタイプ(検索、ショッピング、画像など)やセーフモードのフィルターなど、様々にカスタマイズされたパラメーターをサポートしているため、使いやすいサービスとなっています。
また、UULEや国(都市)パラメーターを使用する場合には、自動的にGEO固有リクエストを起動してくれ、各リクエストは異なるIPから送信されるため、フラグ及び禁止されたIPはなく、全世界で7,200万以上ものリアルユーザーIPを保有しているという特徴を持ちます。
PAY AS YOU GO(従量課金制)
個人 | ENTERPRISE(法人) | |
料金 | $5.00/CPM | 個別に見積もり |
Monthly subscription(月額プラン)
STARTER(スターター) | ADVANCED(上級) | ADVANCED+(上級+) | ENTERPRISE(法人) | |
料金 | $500/月
$2.50/CPM |
$1,000/月
$2.00/CPM |
$2.000/月
$1.85/CPM |
個別に見積もり |
Yearly subscription(年間プラン)
STARTER(スターター) | ADVANCED(上級) | ADVANCED+(上級+) | ENTERPRISE(法人) | |
料金 | $450/月
$2.50/CPM |
$900/月
$2.00/CPM |
$1,800/月
$1.85/CPM |
個別に見積もり |
Web Unlocker(ウェブアンロッカー)
https://brightdata.com/products/web-unlocker
Web Unlocker(ウェブアンロッカー)では、あらゆるWebサイトのブロックを克服し、円滑にScraping(スクレイピング)を行うことが可能です。Webサイト固有のブラウザのユーザーエージェントやクッキーにも対処でき、ライブサポートスタッフによるサポートも受けることができます。
各Webサイトのbotはブロックするための新しい方法を開発しますが、Web Unlocker(ウェブアンロッカー)であれば、リアルタイムで調整することで検出されないようにするためにデータセンターまたは固有IPアドレスを使用しています。
また、IPの使用率も緻密に管理しているため1つのIPから不審に思われるようなデータを要求することはなく、ターゲットのWebサイトにおいて人間のようなマウス操作を実現し、リクエストの間隔をランダムに設定することで、自動で遅延させ、不自然さを出さずにScraping(スクレイピング)することができます。
PAY AS YOU GO(従量課金制)
個人 | ENTERPRISE(法人) | |
料金 | $5.00/CPM | 個別に見積もり |
Monthly subscription(月額プラン)
STARTER(スターター) | ADVANCED(上級) | ADVANCED+(上級+) | ENTERPRISE(法人) | |
料金 | $500/月
$2.50/CPM |
$1,000/月
$2.00/CPM |
$2.000/月
$1.85/CPM |
個別に見積もり |
Yearly subscription(年間プラン)
STARTER(スターター) | ADVANCED(上級) | ADVANCED+(上級+) | ENTERPRISE(法人) | |
料金 | $450/月
$2.50/CPM |
$900/月
$2.00/CPM |
$1,800/月
$1.85/CPM |
個別に見積もり |
Proxy Network(プロキシネットワーク)
https://brightdata.com/proxy-types
Proxy Network(プロキシネットワーク)では、業界最大を誇る地域エリアを網羅しており、最高のパフォーマンスが提供されます。
Datacenter Proxies(データセンタープロキシ)
https://brightdata.com/proxy-types/datacenter-proxies
bright data(ブライトデータ)のDatacenter Proxies(データセンタープロキシ)は、プロキシインフラのリーダーとして広く知られていますが、その理由としては、ネットワークの信頼性をはじめ、包括的なグローバルカバレッジやコンプライアンス、さらには最高品質のサービスなどが挙げられます。
膨大な量の公開Webデータを完全な匿名で99.99%の成功率で収集することができ、プロキシ統合を行う開発者においては、初めて利用する場合であっても、簡単なドキュメンテーションが用意されており、プロキシ管理自体は開発者に人気のbright data(ブライトデータ) Proxy Managerによって行われるという特徴があります。
世界において150,000以上もの企業で採用されているだけでなく、プロキシ技術に関連する特許を実に2,200以上も取得しており、さらには世界の主要大学トップ10のうちおよそ70%以上にサービスを提供している実績があるサービスです。
年間サブスクリプション
PAY AS YOU GO(従量課金制) | STARTER(スターター) | ADVANCED(上級) | ADVANCED+(上級+) | ENTERPRISE(法人) | |
料金 | $0.80/IP+$0.110/GB | $0.60/IP+$0.083/GB | $0.56/IP+$0.077/GB | $0.52/IP+$0.072/GB | 個別に見積もり |
月額サブスクリプション
PAY AS YOU GO(従量課金制) | STARTER(スターター) | ADVANCED(上級) | ADVANCED+(上級+) | ENTERPRISE(法人) | |
料金 | $0.80/IP+$0.110/GB | $0.68/IP+$0.094/GB | $0.64/IP+$0.088/GB | $0.60/IP+$0.083/GB | 個別に見積もり |
Residential Proxies(レジデンシャルプロキシ)
https://brightdata.com/proxy-types/residential-proxies
Residential Proxies(レジデンシャルプロキシ)は、簡単な統合で簡単に使用することができ、bright data(ブライトデータ)のコントロールパネルまたはAPIからIPを管理することが可能です。
世界中の国及び都市にある7,200万以上もの実際の家庭用IPで構成され、ユーザーの地理的位置に関係なく、実際のユーザーのようにScraping(スクレイピング)を行うことができます。
Datacenter Proxies(データセンタープロキシ)同様、世界において150,000以上もの企業で採用されているだけでなく、さらには世界の主要大学トップ10のうちおよそ70%以上にサービスを提供している実績があるサービスです。
年間サブスクリプション
PAY AS YOU GO(従量課金制) | STARTER(スターター) | ADVANCED(上級) | ADVANCED+(上級+) | ENTERPRISE(法人) | |
料金 | $15.00/GB | $11.25/GB | $10.05/GB | $9.75/GB | 個別に見積もり |
月額サブスクリプション
PAY AS YOU GO(従量課金制) | STARTER(スターター) | ADVANCED(上級) | ADVANCED+(上級+) | ENTERPRISE(法人) | |
料金 | $15.00/GB | $12.75/GB | $11.25/GB | $10.50/GB | 個別に見積もり |
ISP Proxies(ISPプロキシ)
https://brightdata.com/proxy-types/isp-proxies
ISP Proxies(ISPプロキシ)とは、600,000以上の完全準拠の静的住宅用プロキシを誇り、業界最速の応答時間でストレスなく利用できるため、150,000以上もの企業で採用されているサービスです。
ユーザーが世界中のどこにいたとしても、本物のISP IPを利用でき、信頼性の高いなおかつ最高の成功率を誇ります。
ターゲットWebサイトは、実際にはサーバーにホストされていることに気づかず、ISP IPをまるで住宅用IPであるかのように識別します。
年間サブスクリプション
PAY AS YOU GO(従量課金制) | STARTER(スターター) | ADVANCED(上級) | ADVANCED+(上級+) | ENTERPRISE(法人) | |
料金 | $0.50/IP+$15.00/GB | $0.50/IP+$11.25/GB | $0.50/IP+$10.05/GB | $0.50/IP+$9.75/GB | 個別に見積もり |
月額サブスクリプション
PAY AS YOU GO(従量課金制) | STARTER(スターター) | ADVANCED(上級) | ADVANCED+(上級+) | ENTERPRISE(法人) | |
料金 | $0.50/IP+$15.00/GB | $0.50/IP+$12.75/GB | $0.50/IP+$11.25/GB | $0.50/IP+$10.50/GB | 個別に見積もり |
Mobile Proxies(モバイルプロキシ)
https://brightdata.com/proxy-types/mobile-proxies
Mobile Proxies(モバイルプロキシ)では、何百もの携帯電話の3G及び4G IPを活用することで、任意の国及び都市などをターゲットとして、ブロックを削除し、自動モバイルIPs回転とCAPTCHAを回避することができます。
トラフィック及びデータ、さらに同時接続は無制限となっており、IPロケーションブロックとCAPTCHAとは無縁となります。
毎日650TBものパブリックデータが収集され、7,000,000以上もの実際のモバイルIP及びピアによって共有、さらに世界の主要大学トップ10のうちおよそ70%にサービスを提供している実績を誇ります。
年間サブスクリプション
PAY AS YOU GO(従量課金制) | STARTER(スターター) | ADVANCED(上級) | ADVANCED+(上級+) | ENTERPRISE(法人) | |
料金 | $40.00/GB | $30.00/GB | $28.00/GB | $26.00/GB | 個別に見積もり |
月額サブスクリプション
PAY AS YOU GO(従量課金制) | STARTER(スターター) | ADVANCED(上級) | ADVANCED+(上級+) | ENTERPRISE(法人) | |
料金 | $40.00/GB | $34.00/GB | $32.00/GB | $30.00/GB | 個別に見積もり |
bright data(ブライトデータ)に関するよくあるQ&A
https://pixabay.com/ja/vectors/質疑応答-質問と回答-q-a-7247900/
bright data(ブライトデータ)の始め方から、料金体系まで理解したところで、bright data(ブライトデータ)に関するよくあるQ&Aについても確認しておき、さらに不安を軽減しておきましょう。
Q1.ホワイトリストできるIPに制限はある?
A1.bright data(ブライトデータ)では、ホワイトリストに設定可能なIPの数に制限はありません。
bright data(ブライトデータ)以外のプロキシサービスにおいては、ホワイトリストに設定可能なIPの数に制限がかかっている場合があるため、この点ではbright data(ブライトデータ)のメリットであると言えます。
Q2.APIはあるの?
A2.bright data(ブライトデータ)には、下記の表のように様々なAPIが搭載されています。
APIの種類 | 概要 |
Statistics API(統計API) |
|
Proxy IPs management API(プロキシIP管理API) |
|
Account management API(アカウント管理API) |
|
Proxy Manager API(プロキシマネージャーAPI) |
|
Data Collector API(データコレクターAPI) |
|
Others(その他) |
|
Q3.得ることができるSERPってなに?
A3.SERPとは、英語表記で「Search Engine Result Page」の頭文字を取ったものであり、検索エンジンにおいて検索したキーワードの検索結果を表示するページを指します。
このことからbright data(ブライトデータ)における得られるSERPとは、検索エンジンが返すデータのことです。
まとめ
bright data(ブライトデータ)はどうやって始めるの?料金体系やよくあるQ&Aなどについて、ご紹介してきました。
ストレスなくScraping(スクレイピング)を成功させたいと考えた時、bright data(ブライトデータ)はとても有能でありながら、とても使いやすいサービスとなっていることがご理解いただけたのではないでしょうか。
記事内でご紹介した通り、bright data(ブライトデータ)では一部のサービスは法人であれば7日間トライアルで使用してみることも可能です。いきなり課金して利用するのはハードルが高いと言う場合でもトライアル利用であれば、実際に使用してみて課金して本格的に使用するかどうかをジャッジすることもできます。
まずは、早速bright data(ブライトデータ)にアカウント登録して、様々な機能に実際に触れてみることをおすすめします。
Bright Dataは、ユーザーに役立つツールと情報を開発・提供しています。インターネット上の情報をビジネスに活用したい人は、是非ともBright Dataと契約してください。
<参考資料>
https://brightdata.com/products/data-collector
https://brightdata.jp/pricing/data-collector
https://brightdata.jp/pricing/serp
https://brightdata.jp/pricing/proxy-network
https://brightdata.jp/pricing/web-unlocker
https://saas-navi.com/proxy/bright-data-about/
https://saas-navi.com/proxy/bright-data-search-engine-crawler/
https://help.brightdata.com/hc/en-us/categories/4419564135825-API-documentation
https://brightdata.com/products/web-unlocker
https://brightdata.com/proxy-types
https://brightdata.com/proxy-types/datacenter-proxies
https://brightdata.com/proxy-types/residential-proxies
https://brightdata.com/proxy-types/isp-proxies
https://brightdata.com/proxy-types/mobile-proxies