SAOS-3624/dsh-see-now

See Now は DeepSeek Harness(DSH)のコミュニティプラグインで、画面、カメラ、または動画ファイルを、変化量に基づいてフィルタリングされたフレームシーケンスに変換します。各フレームにまず変化スコアを付け、画面の急な切り替えや継続的な動きが一定量蓄積された場合のみフレームを保持し、保持された数フレームを1枚の画像に合成してモデルに渡します。静止状態では約 20 秒ごとにフォールバックフレームを提供します。モデルが say 経由で発話した内容はフローティングウィンドウに表示され、読み上げられます。/seenow スラッシュコマンドでキャプチャのオン/オフを切り替えます。

See Now は DeepSeek Harness(DSH)のコミュニティプラグインで、画面、カメラ、または動画ファイルを、変化量に基づいてフィルタリングされたフレームシーケンスに変換します。各フレームにまず変化スコアを付け、画面の急な切り替えや継続的な動きが一定量蓄積された場合のみフレームを保持し、保持された数フレームを1枚の画像に合成してモデルに渡します。静止状態では約 20 秒ごとにフォールバックフレームを提供します。モデルが say 経由で発話した内容はフローティングウィンドウに表示され、読み上げられます。/seenow スラッシュコマンドでキャプチャのオン/オフを切り替えます。

なぜ重要か AI が画面を監視する際、数秒ごとにフルスクリーンをキャプチャする必要がなくなり、静止画ではほぼトークンを消費せず、画面切り替えも見逃しません。

スター数 576(+47 / 24h)

理由

  • 24 時間で新たに 47 スター増加(注目度のみを示す)
  • README では DeepSeek-V4 の画像チャンク化方式に基づき、各キャンバスサイズのトークンコストを明確に記載

使い方

  • dsh plugin --profile web add dsh-see-now(デスクトップ版では --profile desktop に変更)、インストール後に DSH を再起動し、セッション内で /seenow と入力して開始

リスク

  • プラグインは画面やカメラの映像を継続的にキャプチャしてモデルに送信するため、プライバシーに注意が必要です。リアルタイムのガラス風フローティングウィンドウは CPU 負荷が高めです
  • DSH でのみ利用可能です

開く

GitHub

最新の AI ニュースを見る