screenpipe - デスクトップのあらゆるデータを取得するAPI
(github.com/mediar-ai)- ユーザーのデスクトップのコンテキストとアクティビティを理解し、強化するAIエージェントを簡単に開発可能
- デスクトップの画面、音声、キーボード、マウス、カメラをすべて録画
- 100%ローカルで実行され、クロスプラットフォーム対応で、24時間365日あらゆる活動を記録
- 画面からテキストを抽出し、音声を文字起こしし、ユーザーのアクションをすべてSQLiteに保存
- 埋め込み、RAGパイプライン、Ollamaを使ったローカルLLM、OpenAI/Anthropicプロキシを提供
- サンドボックス化されたJSプラグインシステムを提供
7件のコメント
「every second you are not recording is a missing context for AGI」 うわ……
いつか必要になる存在ではあるけれど、あまりにも怖い存在ですね……
AnthropicのComputer-Use API以降、このような試みが増えてきているのを見ると、ありがたくもあり、他の方々と同じように少し不安でもありますね(笑)。ただ、全体的には発展していく過程なのだと思います。
こういうのをどう活用できるのか気になりますね..
ウイルス??
お、面白いプロジェクトですね。
MSのような大企業よりオープンソースのほうが良さそうですね。
セキュリティ上の問題が起きそうですね。