Ertas 助力独立开发者与氛围编码应用

    构建 AI 驱动应用的独立开发者和氛围编码者可以通过在应用特定数据上微调更小的模型来逃脱 API 成本悬崖。Ertas 将昂贵的 API 依赖转变为便宜的自托管模型,该模型实际上比 GPT 更好地理解您的领域——无需 ML 经验。

    The Challenge

    氛围编码革命使构建 AI 驱动应用变得极其简单。Cursor、Bolt.new、Lovable 和 Replit Agent 等工具让独立开发者和小型团队在数天内就能发布生产应用,几乎每个应用都包含 AI 功能——写作助手、智能搜索、自动分类器、对话界面。在开发和早期发布阶段,这些功能很便宜:每天几百次 API 调用,每次只需几分之一美分。但成本曲线是指数级的,而非线性的。一个在 100 个用户时每月 OpenAI API 费用为 12 美元的应用,在 8,000 个用户时可能达到 600 美元/月,在 40,000 个用户时达到 3,000 美元/月。大多数独立开发者在已经发布后才发现这个悬崖,当他们的 Stripe 收入仍以百元计而 API 账单以千元计时。

    问题比成本更深。通用基础模型在领域特定任务上产生平庸的结果,因为它们是在整个互联网上训练的,而不是在您应用的特定利基上。面向学术研究人员的写作助手需要与面向营销文案撰写人的不同输出,但除非您花数小时精心设计系统提示和少量示例,GPT-4 给两者相同的通用语调——而且这些在模型更新时还会不可预测地失效。供应商锁定加剧了风险:当 OpenAI 弃用一个模型版本或更改定价时,您的应用就会崩溃,利润一夜之间蒸发。独立开发者没有谈判筹码也没有替代方案——他们在没有租约的租来的土地上构建。

    The Solution

    Ertas 为独立开发者提供从昂贵 API 依赖到便宜自托管推理的无代码路径。Studio 的可视化微调界面不需要任何 ML 专业知识——上传应用的对话日志、用户交互或领域特定内容作为训练数据,从 Hub 选择一个紧凑的基础模型(3B–7B 参数),然后启动 LoRA 微调运行。整个过程所花时间比配置新的 CI/CD 流水线还少。生成的模型原生理解您应用的领域,因为它是在您的实际数据上训练的,而非被提示去近似。响应质量提高的同时,模型大小——从而推理成本——与商业 API 相比大幅下降。

    部署同样简单。将微调后的模型导出为 GGUF 文件,放到任何运行 Ollama 的 VPS 上,将应用的 API 调用指向 localhost 而非 api.openai.com。一台每月 30 美元的 Hetzner 或 DigitalOcean 机器配备足够的 RAM,可以为 7B 量化模型每天处理数千个请求。加上 Ertas 每月 14.50 澳元的持续训练迭代费用,无论用户增长如何,您的 AI 基础设施总成本保持在每月 50 美元以下——相比之下商业 API 需要 600 美元以上且还在增长。您拥有模型权重,所以没有意外弃用、没有速率限制、关键路径上也没有第三方依赖。当您需要改进模型时,将新的应用日志导入 Vault,在 Studio 中运行另一次微调迭代,零停机热交换 GGUF 文件。

    Key Features

    Studio

    无代码微调

    Studio 的可视化界面专为构建产品而非 ML 流水线的开发者设计。拖入训练数据,选择基础模型,调整少量直观参数,然后开始训练。无需 Python 脚本,无需 CUDA 调试,无需 Hugging Face Trainer 样板代码——只需一个简洁的界面即可生成生产就绪的模型。

    Hub

    合适大小的模型选择

    Hub 帮助独立开发者选择解决其特定问题的最小模型。按任务类型、参数数量、量化格式和社区基准筛选。一个完美解决您用例的 3B 模型将始终优于一个勉强可用的 70B 模型——而且它能在您实际负担得起的硬件上运行。

    Cloud

    托管训练基础设施

    Cloud 消除了 GPU 采购难题。在 Ertas 托管的训练基础设施上微调,无需购买、租赁或配置 GPU 实例。按训练时间付费,而非为闲置硬件付费——然后将完成的模型部署到您自己便宜的 CPU VPS 上进行推理。

    Vault

    应用日志导入与版本管理

    Vault 让您将应用的真实使用数据作为训练材料导入——API 调用日志、用户对话、反馈信号和修正数据。为数据集进行版本管理,以便跟踪模型质量如何随每次训练迭代改进,如果新批次引入噪声则可回滚到之前的数据集。

    Example Workflow

    一位独立开发者使用 Cursor 和 Next.js 构建了一个面向学术研究人员的 AI 写作助手,通过 OpenAI API 用 GPT-4o 处理文本建议、引用格式化和摘要生成。发布时有 200 名测试用户,API 成本为可控的 45 美元/月。六个月后,应用已增长到 8,000 名月活用户,每月产生 95,000 次 API 调用,OpenAI 账单已达到 620 美元/月——吞噬了应用 480 美元/月订阅收入的全部。开发者注册 Ertas 并从应用数据库导出 3 个月的脱敏 API 调用日志(输入提示和首选输出),生成 28,000 个示例的 JSONL 训练集。他们上传到 Vault 并使用 Studio 以 LoRA 适配器微调 Phi-3 Mini 3.8B 模型,针对三个核心任务:文本建议、引用格式化和摘要生成。经过 2 个 epoch 在 Cloud 上的训练后,微调模型在保留评估集上所有三个任务的得分与 GPT-4o 相差不超过 3%——在引用格式化上实际优于它,因为它是在真实的学术引用模式而非通用文本上训练的。开发者将模型导出为 Q5_K_M GGUF 文件,部署在 Hetzner CAX31 ARM VPS(14 澳元/月)上运行 Ollama,位于现有 API 网关后面。每月总成本:Ertas 14.50 澳元 + VPS 14 澳元 = 28.50 澳元,从 620 澳元大幅下降。硬件以 340 毫秒的中位延迟处理全部 95,000 个月度请求——对写作助手来说完全可接受。开发者现在拥有正向的单位经济效益和一个每月通过 Studio 回馈新使用数据就能不断改进的模型。

    Related Resources

    Ship AI that runs on your users' devices.

    Early bird pricing starts at $14.50/mo — locked in for life. Plans for builders and agencies.