クローラーの輪はこれからシャッフルされるかもしれない。 Firecrawlを使ったことがある人なら、このアップグレードが確かに少し冷酷であることを知っています。

過去の古い方法―環境設定、ルール作成、反クロール対策、検証コードの破解など、一連のプロセスは数時間で完了できませんでした。 今は違う考え方をしています。必要なものを任せれば、あとは任せてくれます。 検索、自動スクレイピング、データクリーニング、ワンストップサービス。

一番良いのは、この作品の包摂性です。 PDFやDOCXのような文書は問題なく、画像の内容も直接解析可能です。 つまり、データソースのフォーマットに関わらず、処理は行われます。 データの集約や情報抽出を行う開発者にとっては、これは本当に大きな問題です。 Web3プロジェクトがオンチェーンのデータ分析やオフチェーン情報を収集する際、これらのツールの利点はさらに明らかになります。