BrightDataの魅力を徹底解説

大島孝明

2年前

BrightDataって一体どんなサービスですか？

BrightDataとは、Webデータ収集業界を世界でリードしている企業です。
イスラエルにある企業ですが、この分野では圧倒的にシェアを持ってまして、
GAFAの殆どが利用しているサービスになります。

主要な利用方法

Amazonを始めとする大手ECサイトのweb情報の収集（価格調査ほか）
大手ホテルの予約サイトのweb情報の収集（予約情報の収集）
リクルートを始めとするサイトの情報収集
AI開発やSNSマーケティング会社がweb上の情報収集

BrightDataの凄いところは、web上でログインが必要なところ以外は、SNSでもwebでもアプリでも情報の収集が可能という点です。

サービス提供している会社も10,000社をゆうに超えており、ホテル関連の大手サイトやEC関連の大手サイトも利用してます。またAIなどでwebデーターを集めているところ、SNS等のトレンド傾向を掴むためにデーター収集している会社等、国内でも多数のデーター会社はこの会社のサービスを裏で利用しております。

元々はLuminatiという名前で、リブランディングでBrightDataに名前が変わりました。

基本的には、プロキシサーバーを提供して、世界各国の様々なIPアドレスを利用して、web上のデーターをスクレイピングして集めてくることができるサービスが基本となっております。

どんなふうに使われるかイメージを持ってもらえるようにまずは漫画を載せてみますね。Luminatiの時の名前でやってますが、今はBrightdaに名前は変わっております。

漫画ですと、ほんのさわりの部分だけですが、情報収集では非常に便利なツールになります。

著者は米国Amazonの物販やBUYMAの物販をよくしておりますが、これらのサイトからwebスクレイピングでデーターを集めてくるのは、至難の業でありますが、Brightdataでは、指定しておくだけで、後は勝手に集めてくれるサービスまでありますので、まさに至れり尽くせりのサービスと言えます。

Bright Dataは世界の有名企業も使っているプロキシサーバーサービスで、顧客管理もセキュリティ管理も申し分ありません。審査もしっかりしているので、悪い利用者が紛れ込む可能性は低いです。そして有人監視をしているので、突発的なアクシデントにもすぐに対応してくれます。

Bright Dataの公式サイト

日本人の担当が確実に着くのは本ブログ経由の方のみになりますので、ご注意ください。こちらのサイトからお申し込みいただければ、間違いなく日本人担当がつきます

BrightDataの主なサービス内容について解説します

上記の図が、わかりやすいBrightDataのサービス内容になります。

大まかに説明しますと以下の通りです。

プロキシインフラストラクチャー

レジデンシャルプロキシと呼ばれるいわゆる一般の我々がwebにアクセスしてる時と同じ種類のIPアドレスを提供してくれます。圧倒的にすごいのはその数の多さと全世界のIPアドレスを保有している点です。まさにwebの利用者と同じ立場でweb上のデーター収集をするのに適してるサービスになります。これらのサービスはIPを貸してくれるだけになりますので、実際の収集プログラムは自身で作る必要があります。

データー抽出

・・・特定の条件下において、自動で指定したwebの情報を収集してくれます。スクレイピングで収集するのが難しいサイトも全く問題なく収集できるのが本当にすごいです。

データーコレクター

自分で何かを作る必要がないのが大きな特徴です。このサービスだけで必要な情報を集めることができます。実際に、すでに決まったサイトについてデーター集めてくれますが、その数の多さは半端ないです。有名どころは大体抑えてます。以下の通りwebサイトを指定するだけですが、指定先の数も多いのが特徴で、必要な情報はこのデーターコレクターを上手に使えば、手間なく労力なく収集が可能です。

データーセット

こちらは全ての上位概念になりまして、ウェブ上の公開データ全てを対象に、大規模に収集することを可能にしたサービスです。欲しいデータを事前にご指定いただくだけで、CSVなどのフォーマットにて納品されます。オンライン上の企業動向から人材、ソーシャルメディアのインフルエンサーの発見、Eコマースの価格、在庫情報など幅広いジャンルのデータの収集が可能というサービスです。

欲しいものを指定したら後は全部を見てきて取ってきてくれるという恐ろしいサービスですね。

データーの収集を丸投げしたい人にはとても良いサービスです。