AI知识库

53AI知识库

学习大模型的前沿技术与行业应用场景


构建个性化AI,由您所见、所说、所听驱动,支持Ollama
发布日期:2024-09-06 09:02:09 浏览次数: 1689 来源:GitHubStore


项目简介

构建一个可靠的数据流,其中包括音频和截图信息,用户只需点击按钮,脚本便全天候在后台运行,收集并提取屏幕和音频输入/输出的数据,这可能会让人感到沮丧。

在这一层之上可以构建出无数的应用场景。为了简化其他开发者的任务,我们决定解决这个问题。它还处于早期阶段,但已经可以端到端运行。我们全职在做这个项目,非常希望听到您的反馈和建议。

开始

安装 screenpipe 的方法有多种:Translated Text:

  • 作为命令行界面(继续阅读),针对较为技术性的用户

  • 作为一款付费桌面应用,包含一年更新,优先支持和优先功能

  • 作为一款永久免费的桌面应用(但你需要自己构建),我们是 100%开源软件。

  • 作为一款永久免费的桌面应用 - 通过提交 PR(示例)(或向朋友提供免费应用)

  • 作为 Rust 或 WASM 库(文档待更新)

  • 作为企业 - 查看用例并联系 DM 路易斯


PS:我们投资了付费应用收入的 80%在赏金上,发布 PR,赚钱!

这是安装命令行界面的说明。

努力让它运行起来吗?我将在 15 分钟的通话中与你一起安装它。


默认情况下,数据存储在 $HOME/.screenpipe (在 Windows 上为 C:\AppData\Users\<user>\.screenpipe )中,您可以使用 --data-dir <mydir> 进行更改


使用方法

您可以使用终端命令查询和查看如下的数据。同时,我们推荐使用 Tableplus.com 来查看数据库,它提供免费版本。

Here's a pseudo code to illustrate how to use screenpipe, after a meeting for example (automatically with our webhooks):
以下是用于说明如何使用 screenpipe 的伪代码示例,例如会议之后(通过我们的 Webhooks 自动执行):```python # 引入 screenpipe 库 import screenpipe # 初始化 screenpipe screenpipe.init() # 定义 Webhooks 事件处理函数 def webhook_event_handler(event): # 根据事件类型执行相应的操作 if event.type == 'meeting_end': # 在会议结束时执行的操作 print("会议结束,执行相关操作...") else: # 其他事件类型 print("其他事件类型:", event.type) # 注册 Webhooks 事件处理函数 screenpipe.register_webhook_event_handler(webhook_event_handler) # 开始监听 Webhooks 事件 screenpipe.start_listening() ``` 请注意,上述代码是一个示例,实际使用时需要根据 screenpipe 库的具体 API 和功能进行调整


    // 1h agoconst startDate = "<some time 1h ago..>"// 10m agoconst endDate = "<some time 10m ago..>"
    // get all the screen & mic data from roughly last hour const results = fetchScreenpipe(startDate, endDate)
    // send it to an LLM and ask for a summaryconst summary = fetchOllama("{results} create a summary from these transcriptions")// or const summary = fetchOpenai(results)
    // add the meeting summary to your notesaddToNotion(summary)// or your favourite note taking app

    或者成千上万种其他使用方式,利用你所有的屏幕和麦克风数据!


    应用场景: 

    搜索

      • 语义和关键词搜索。找到你忘记或放置的信息

      • 您在搜索特定信息时,桌面的播放历史记录

    • 自动化:

      • 自动生成文档

      • 填充 CRM 系统以包含相关数据

      • 在各个平台上同步公司知识

      • 根据屏幕内容自动化重复任务

    • 分析:

      • 跟踪个人生产力指标

      • 组织和分析教育材料

      • 深入了解个人提升的领域

      • 分析工作模式并优化工作流程

    • 个人助理:

      • 总结长文档或视频

      • 提供情境相关的提醒和建议

      • 协助研究,通过聚合相关的信息

      • 实时字幕,翻译支持

    • 合作: 

      • 与团队成员共享并注释屏幕截图

      • 创建可搜索的会议和演示文稿档案

    • 合规性和安全性:

      • 追踪你的员工到底在做什么

      • 监控和记录系统活动以供审计使用

      • 根据屏幕内容检测潜在的安全威胁


    53AI,企业落地应用大模型首选服务商

    产品:大模型应用平台+智能体定制开发+落地咨询服务

    承诺:先做场景POC验证,看到效果再签署服务协议。零风险落地应用大模型,已交付160+中大型企业

    联系我们

    售前咨询
    186 6662 7370
    预约演示
    185 8882 0121

    微信扫码

    与创始人交个朋友

    回到顶部

     
    扫码咨询