免费下载 Mac 版

查看广告以免费下载

Softonic 评论

Jan:一个以隐私为首的本地助手,用于设备上的 LLM 工作

Jan,由Jan团队手册开发,是一个注重隐私的桌面助手,能够在用户的Mac上运行大型语言模型,以便进行私密的离线互动。它作为一个本地执行环境,配备了内置模型浏览器和文档查询支持,并与外部客户端兼容。该应用程序针对注重隐私的个人、研究人员和开发人员,他们需要本地AI进行文档提问、草拟、编码和实验工作流程。

该工具为用户处理哪些实际任务?

该应用程序通过可选择的开源模型生成对话输出、文档问答、代码协助和短格式内容生成。支持的模型名称包括 Llama 3MistralPhi-3DeepSeek,界面从内置中心公开模型选择,以便用户可以尝试多个模型以完成特定任务。典型工作流程包括起草文本、总结笔记、调试代码片段和搜索私人文件以获取答案。

其输出在实际工作中有多可靠?

输出质量取决于所选模型和提示的具体性;不同模型在简洁性和事实性之间存在不同的权衡。该工具使用标准格式的社区模型,因此生成的响应反映了每个模型的训练数据和行为。对于高风险的事实、法律或技术决策,计划通过独立来源验证结果,并将生成的答案视为起点,而不是权威声明。

它需要什么输入、格式和硬件?

该应用程序接受常见开放格式的模型包,并从与公共库关联的集成模型中心提取模型。它支持如 GGUF 兼容运行时和包括 Apple M 系列的 Metal 以及 NVIDIA 加速器的 TensorRT 等 GPU 加速路径。初始下载后,该工具可以在没有网络访问的情况下运行,聊天记录和导入的文档存储在用户控制的文件夹中。

它在现有开发者和研究工作流程中适应得如何?

本地服务器组件提供一个 API 兼容的端点,其他应用程序可以查询,因此该工具可以作为脚本和本地服务的私有后端。扩展使用模型上下文协议来添加代理操作和代码执行等任务,AGPLv3 许可证使其内部结构可审计。社区报告强调其安装比许多本地 LLM 系统更容易,尽管管理员需要处理模型更新和兼容性检查。

谁应该选择这个工具以及接下来可以期待什么

Jan是一个实用的选择,适合优先考虑数据控制的人和团队,他们接受动手模型管理和偶尔的兼容性维护。期待测试模型和硬件组合,以找到速度和输出质量之间的可接受折衷;独立验证关键输出。该应用程序适合那些更喜欢本地AI并能投入时间进行模型选择和维护的研究人员和工程师。

  • 赞成

    • 所有数据和聊天记录存储在用户控制的文件夹中
    • 内置模型中心提供许多开源模型供实验使用
    • 开源 AGPLv3 许可证允许社区检查和贡献
    • 针对 Apple Metal 和 NVIDIA TensorRT 加速器的优化运行时间
  • 反对

    • 离线使用需要初始模型下载和本地存储
    • 大型模型的性能取决于兼容的GPU或M系列芯片
    • 准确性因所选的开源模型和提示的具体性而异
    • 该项目正在积极开发中,因此接口可能会发生变化。

应用参数

  • 许可证

    免费

  • 版本

    0.8.0

  • 更新日期

  • 平台

    Mac

  • OS

    macOS 10.15

  • 开发者

应用程式 提供其他语言版本


免费下载 Mac 版

查看广告以免费下载


用户对 Jan 的评分

您是否尝试过 Jan?成为第一个离开您的意见!

添加评论
有关使用此软件的法律因国家/地区而异。 如果违反这些法律,我们不鼓励或纵容此程序的使用。