ScreenMind
オープンソースでプライバシー優先のAI画面メモリーツール。画面アクティビティをローカルでキャプチャ・分析し、検索やチャットが可能。
ScreenMind
ScreenMindとは
ScreenMindはAI搭載の画面メモリーアプリケーションで、画面を継続的にキャプチャし、Gemma 4(ローカルAIモデル)で分析、検索・チャット可能なデジタルアクティビティの履歴を構築します。完全に自機上で動作し、クラウド依存はありません。
ScreenMindの使い方
- 1リポジトリをクローンし、依存関係をインストール。
- 2`python main.py` でアプリケーションを実行。
- 3ブラウザで `http://127.0.0.1:7777` を開く。
- 4初回実行時、UIのModel HubからGemma 4モデルをダウンロード。
- 5ツールが画面のキャプチャと分析を開始。
- 6ダッシュボードでタイムラインの閲覧、検索、チャット、分析表示。
- 7ホットキーで即時ブックマーク、一時停止、ボイスメモ。
ScreenMindの主な機能
- コンテンツ変更検出によるスマートキャプチャ
- Gemma 4ビジョン分析(アプリ検出、アクティビティ分類、ムード、シーン説明)
- ハイブリッド検索(セマンティック埋め込み+FTS5キーワード)
- メモリとのチャット(会話型RAG)
- Gemma 4音声エンコーダーによるボイスメモ
- 自動検出と要約付き会議文字起こし
- 分析ダッシュボード(カテゴリ内訳、トップアプリ、時間別ヒートマップ)
- デイリーワインドタイムラプス再生
- マルチモデルAIパイプライン(EasyOCR、Gemma 4、MiniLM、FTS5)
- エージェントプラットフォーム(MarkdownおよびPythonプラグイン)
- Claude/Cursor/VS Code用MCPサーバー
- 連携:Obsidian、Notion、Webhooks
- 保存時暗号化(Fernet + OSキーリング)
- 機密データフィルター(PII、APIキーを編集)
- シークレットモード
ScreenMindのユースケース
- 個人の生産性追跡と分析
- 自動会議メモと要約
- 過去の画面情報の迅速な取得
- 集中力と気散じの分析
- 画面データに基づくカスタム自動化の構築
ScreenMindの料金と無料枠
ScreenMind の料金モデルは 無料 です。
このツールは完全に無料で利用できます
ScreenMindのメリット・注意点
メリット
- 100%プライベートでローカル、クラウド依存ゼロ
- オープンソース(MITライセンス)で完全無料
- 4GB以上のVRAMを持つGPU、またはCPUのみで動作
- クロスプラットフォーム(Windows、macOS、Linux)
- 音声や会議文字起こしを含む包括的な機能
- エージェント、MCP、連携による拡張性
注意点
- Pythonと多少のセットアップ手間が必要
- 初期モデルのダウンロードは約5GB
- パフォーマンスはGPU性能に大きく依存
- 専用の商用サポートなし
ScreenMind はどんな用途に向いていますか?
- ローカル画面メモリを求めるプライバシー重視のユーザー
- 画面データで自動化を構築する開発者
- 検索可能な画面履歴が必要なプロフェッショナル
- クラウド不要のローカル会議文字起こしを求めるユーザー