ScreenMind

オープンソースでプライバシー優先のAI画面メモリーツール。画面アクティビティをローカルでキャプチャ・分析し、検索やチャットが可能。

ScreenMindとは

ScreenMindはAI搭載の画面メモリーアプリケーションで、画面を継続的にキャプチャし、Gemma 4(ローカルAIモデル)で分析、検索・チャット可能なデジタルアクティビティの履歴を構築します。完全に自機上で動作し、クラウド依存はありません。

ScreenMindの使い方

  1. 1リポジトリをクローンし、依存関係をインストール。
  2. 2`python main.py` でアプリケーションを実行。
  3. 3ブラウザで `http://127.0.0.1:7777` を開く。
  4. 4初回実行時、UIのModel HubからGemma 4モデルをダウンロード。
  5. 5ツールが画面のキャプチャと分析を開始。
  6. 6ダッシュボードでタイムラインの閲覧、検索、チャット、分析表示。
  7. 7ホットキーで即時ブックマーク、一時停止、ボイスメモ。

ScreenMindの主な機能

  • コンテンツ変更検出によるスマートキャプチャ
  • Gemma 4ビジョン分析(アプリ検出、アクティビティ分類、ムード、シーン説明)
  • ハイブリッド検索(セマンティック埋め込み+FTS5キーワード)
  • メモリとのチャット(会話型RAG)
  • Gemma 4音声エンコーダーによるボイスメモ
  • 自動検出と要約付き会議文字起こし
  • 分析ダッシュボード(カテゴリ内訳、トップアプリ、時間別ヒートマップ)
  • デイリーワインドタイムラプス再生
  • マルチモデルAIパイプライン(EasyOCR、Gemma 4、MiniLM、FTS5)
  • エージェントプラットフォーム(MarkdownおよびPythonプラグイン)
  • Claude/Cursor/VS Code用MCPサーバー
  • 連携:Obsidian、Notion、Webhooks
  • 保存時暗号化(Fernet + OSキーリング)
  • 機密データフィルター(PII、APIキーを編集)
  • シークレットモード

ScreenMindのユースケース

  • 個人の生産性追跡と分析
  • 自動会議メモと要約
  • 過去の画面情報の迅速な取得
  • 集中力と気散じの分析
  • 画面データに基づくカスタム自動化の構築

ScreenMindの料金と無料枠

ScreenMind の料金モデルは 無料 です。

このツールは完全に無料で利用できます

無料

$0

全機能を備えたオープンソース版(MITライセンス)。

ScreenMindのメリット・注意点

メリット

  • 100%プライベートでローカル、クラウド依存ゼロ
  • オープンソース(MITライセンス)で完全無料
  • 4GB以上のVRAMを持つGPU、またはCPUのみで動作
  • クロスプラットフォーム(Windows、macOS、Linux)
  • 音声や会議文字起こしを含む包括的な機能
  • エージェント、MCP、連携による拡張性

注意点

  • Pythonと多少のセットアップ手間が必要
  • 初期モデルのダウンロードは約5GB
  • パフォーマンスはGPU性能に大きく依存
  • 専用の商用サポートなし

ScreenMind はどんな用途に向いていますか?

  • ローカル画面メモリを求めるプライバシー重視のユーザー
  • 画面データで自動化を構築する開発者
  • 検索可能な画面履歴が必要なプロフェッショナル
  • クラウド不要のローカル会議文字起こしを求めるユーザー

ScreenMindのよくある質問