機械学習を使ってWebサイトをAPIに変えるアプリ「Dashblock」

「Dashblock」は、インタラクティブに操作しながら、Webサイトの必要なデータだけをカスタムAPIとして保存することができるアプリケーションです。機械学習によって同一の要素をフォーカスし、Webサイトの更新にも動的に対応してくれます。

◆ Dashblock
https://dashblock.com/

紹介

Mac、Windows向けのアプリケーションとして提供されています。

インストール

インストールが完了したら、Googleアカウントで認証してセットアップ完了です。

使ってみる

まずは、APIを作成するWebサイトを指定して

画面がロードされるのを待ちます。

APIを利用したい要素を右クリックすると、このようなポップアップが表示されます。

次は、ラベルの要素名を指定します。これが後でAPIのKey名になります。

正常に登録ができると、要素がこのようにハイライトされます。

同じ手順で、他の要素もしていきます。

今回は、新着ニュース1件目のタイトルと出典先を取得するAPIを作成します。

メニューバーのSaveを押して保存。

すると、このように先ほど入力した要素と取得した値がJSONで受け取れます。

curlでのコールの他、JavaScript/Pythonのチートコードも完備。

$ curl -X POST -d '{"url": "https://www.anypicks.jp/", "modelId": "vqf5rXUJv"}'  -H "Content-Type: application/json" https://api.dashblock.io/data?api_key=32f85d20-ba48-11e9-baa7-a573576772fc

{"entities":[{"latest_news_title1":"アップル、セキュリティ研究者向けに特別な「iPhone...","latest_news_domain":"ZDNet Japan / 24分前"}]}

このように、JSONデータとして取得することができます。

インタラクティブに組めることで構築が簡単な一方、スクレイプした情報をDashblock経由で取得するため、APIのレスポンスはあまり良くはありません。

◆ Dashblock
https://dashblock.com/