このツールについて
Machine Sightは、機械が読むように画像を見せます。静止画か短い動画をドロップすると、特徴点を見つけ、Lucas–Kanade法のオプティカルフローでフレームからフレームへ追いかけ、見たものを上に描きます。点と点をつなぐ線、ブラケット、引き出し線の先の数値ラベル、表面を別の読み方で映すレンズ、そしてビートに合わせて現れる言葉です。すべてをビートで数えるので、マークは閉じたループになり、PNGやMP4で保存できます。曲があれば一緒に入れられます。WebGPUを使ってグラフィックカードの上で動き、ドロップしたものがこの端末の外に出ることはありません。
使い方
- パネル上部の「画像A」を押すか、ステージに画像や動画をドロップするか、「開く」を押します。機械が読み取り、マークが現れます。
- 右の「見え方」から選ぶか、サイコロで新しい見え方を出します。下に並ぶ工程を開くと、読み取るものや描くものを変えられます。
- テンポを決め、ステージ上のバーから、この瞬間をPNGで、ループ全体をMP4で保存します。
用語（英語）： Lucas–Kanade · 特徴点 · オプティカルフロー · WebGPU