機械学習を使ってWebサイトをAPIに変えるアプリ「Dashblock」

2019/08/10 08:33

「Dashblock」は、インタラクティブに操作しながら、Webサイトの必要なデータだけをカスタムAPIとして保存することができるアプリケーションです。機械学習によって同一の要素をフォーカスし、Webサイトの更新にも動的に対応してくれます。

◆ Dashblock
https://dashblock.com/

紹介

Mac、Windows向けのアプリケーションとして提供されています。

インストール

インストールが完了したら、Googleアカウントで認証してセットアップ完了です。

使ってみる

まずは、APIを作成するWebサイトを指定して

画面がロードされるのを待ちます。

APIを利用したい要素を右クリックすると、このようなポップアップが表示されます。

次は、ラベルの要素名を指定します。これが後でAPIのKey名になります。

正常に登録ができると、要素がこのようにハイライトされます。

同じ手順で、他の要素もしていきます。

今回は、新着ニュース1件目のタイトルと出典先を取得するAPIを作成します。

メニューバーのSaveを押して保存。

すると、このように先ほど入力した要素と取得した値がJSONで受け取れます。

curlでのコールの他、JavaScript/Pythonのチートコードも完備。

$ curl -X POST -d '{"url": "https://www.anypicks.jp/", "modelId": "vqf5rXUJv"}'  -H "Content-Type: application/json" https://api.dashblock.io/data?api_key=32f85d20-ba48-11e9-baa7-a573576772fc

{"entities":[{"latest_news_title1":"アップル、セキュリティ研究者向けに特別な「iPhone...","latest_news_domain":"ZDNet Japan / 24分前"}]}

このように、JSONデータとして取得することができます。

インタラクティブに組めることで構築が簡単な一方、スクレイプした情報をDashblock経由で取得するため、APIのレスポンスはあまり良くはありません。

◆ Dashblock
https://dashblock.com/

新着ピック  






















新着ニュース

初心者向けチュートリアル『例 1: バケット所有者がユーザーにバケットのアクセス許可を付与』をやってみた | DevelopersIO

アップルのLightningと一般的なUSB-Cの両方で使えるセキュリティキーをYubicoが発売 | TechCrunch Japan

Microsoftが開発中のChromiumベースの新しいEdgeブラウザがベータ版に | TechCrunch Japan

大学スポーツ協会、KDDIらと5GやIoTを活用した選手育成やファン拡大

LINE「OpenChat」、違反行為の取り締まり強化 ユーザーには「通報」呼び掛け

iOS 13のプライバシー強化が競争を阻害するとアップルを非難するデベロッパー | TechCrunch Japan

AWS運用かんたん自動化ツール「opswitch」(オプスウィッチ)を使ってみよう! | DevelopersIO

今まで誰もやってなかった自律運転車から車酔いを追放するための研究 | TechCrunch Japan

AI利用のハードルを下げるH2O.aiがゴールドマンサックスのリードで約77億円調達 | TechCrunch Japan

仮想通貨でEdyやnanacoに入金--ディーカレット、「電子マネーチャージ」を提供開始

MITは色々なデバイスに同時に高品質のビデオストリームを配信する方法を開発 | TechCrunch Japan

グーグルの軽量版アプリGoogle Goが全世界で使えるように | TechCrunch Japan

【DataPipelineを触ってみる】DynamoDBからS3へのエクスポートをやってみた | DevelopersIO

デュアル画面のモンスターノート「ASUS ZenBook Pro Duo」が日本上陸--「Zenfone 6」も

[小ネタ] Gitのエイリアス設定を晒してみる(19個) | DevelopersIO

設定なしでデプロイできるZeit Now | DevelopersIO

園児のお昼寝をセンサーで見守り、体調の変化をAIでチェック 埼玉の保育園で実験

ダイソン、日本の住環境を考えたコードレスクリーナーを発売

ドコモ、KDDI、ソフトバンクが取扱再開--ファーウェイ「P30シリーズ」を写真で見る

窓の代わりにディスプレイ ソニーのクルマ、実用化へ ヤマハ発と共同開発

もっと見る
記事をPICKする
ログイン
会員登録
Register
記事をPICKする

会員登録すると、もっと便利に利用できます。