FIG 3.1 · 自動ブラウザ
自ら操作する本物のブラウザ。
スクレイピング用のライブラリでもなく、利用者のふりをしたヘッドレスのシェルでもありません。エージェントの制御下にある本物のブラウザセッションが、ローカルで動き、システムの他のアプリケーションと同じように閉じ込められています。
FIG 3.2 · セッションを、ライブで
移動し、抽出し、行を返すまでを見てください。
4社の1席あたりの料金を比べて
試す
00:00
セッション開始
新しいプロファイル、引き継いだCookieなし
00:04
同意バナーを拒否
任意のものはすべて拒否
00:11
料金表を発見
プラン4種、うち2つは年額のみ
00:19
最低席数は脚注から読み取り
表にはなく、細かい字の中にあった
00:26
あと3社が順番待ち
並行実行、最大4件まで
1席の実際の値段
| ベンダー | 入門 | チーム | 最低席数 | 年額のみ |
|---|---|---|---|---|
| Northwind | $0 | $24 | 5 | いいえ |
| Aperture | $12 | $39 | 3 | はい |
| Cogent | $0 | $29 | 10 | いいえ |
| Bellweather | $19 | $45 | 1 | はい |
このうち2つは比較にならない
ApertureとBellweatherは月額表示だが請求は年額。最低3席なので、入門プランは$12ではなく前払い$432になる。
出典
northwind.example
aperture.example
cogent.example
bellweather.example
FIG 3.2b · サーフェス
そしてこれが、出荷される姿のブラウザです。
本物のURLバーを備えた、本物のブラウザウィンドウ。エージェントは右側のレールからそれを操作し、開いたページはすべてあなたの目に入ります。
Automated Browser
example-store.com/laptops
Laptop pricing
Comparing 3 sources
| Source | Price | Availability |
|---|---|---|
| Vendor A | $1,299 | In stock |
| Vendor B | $1,349 | In stock |
| Vendor C | $1,249 | 2 left |
Reading the third source…
インターフェースをページ上で再現 · v0.1.10
FIG 3.3 · ここでローカルであることが効く理由
それが開くのは、あなたがすでに見る権限を持つページだけです。
クラウドのブラウザエージェントには資格情報を渡さなければならず、しかも他人のネットワークから閲覧します。こちらはあなたのマシンで、あなたのセッションで、あなたのVPNの内側で動きます。だから社内ツールも、ログインが必要なダッシュボードも、イントラネットのページも、ただ普通に動きます。そしてそれらについて何かがどこかへ送られることはありません。
- VPNやイントラネットを含め、いまのネットワーク上の立ち位置をそのまま使う
- 資格情報が端末から出ることはない。送る先がないからです
- セッションは閲覧に限られ、あなたのファイルや他のアプリには手が届かない
- 取り消せない操作は立ち止まり、まずあなたに尋ねる
指示なしには行わないこと
- 支払いの実行や送金
- あなたの名義でメッセージを送ること
- 規約への同意やOAuth権限の付与
- 何かを恒久的に削除すること
- CAPTCHAを解くこと
いずれもセッションを止めて尋ねます。承認は操作ごとで、一度入れたら忘れていられるモードではありません。
FIG 3.4 · 真価を発揮する場面
実際に何に使われているか。
表で終わる調査
いくつかの情報源を指定すれば、構造化された行が返ってきます。まだ読まなければならないリンクの一覧ではありません。
APIのないサイト
社内ツールの多くと、ウェブの半分にはプログラム用の窓口がありません。ブラウザは最後の手段のAPIであり、これは意図によって動かせます。
長いフォームとポータル
人間を前提とした複数段階の手続きを、提出し、追跡し、報告します。取り消せないものはすべてあなたが承認します。
変わったものを見張る
同じセッションを定期的に走らせ、結果を比べます。だから見に行くのではなく、ページが変わったときに知ることになります。