互联
互联网遗民楼主
Prompt A/B 测试的方法:准备 20-30 个测试输入,用两个 Prompt 版本分别生成,人工评分或用自动化指标(如代码通过率)。统计显著性需要至少 30 个样本,否则可能是噪音。 RAG + Prompt 工程是让 AI 基于私有文档回答的标准方案。关键在于检索质量:chunk 大小设 500-1000 字符,重叠 100 字符,用语义检索而非关键词匹配。Prompt 里告诉 AI「只基于提供的上下文回答,不确定时说不知道」,能大幅减少幻觉。 用 Prompt 驱动 Prisma Schema 设计效果不错。告诉 AI 业务需求(如「用户有多个订阅,订阅有多个订单」),让它生成包含关系、索引、级联删除的完整 Schema。但要检查索引是否合理,AI 偶尔会漏掉查询频繁字段的索引。 AI 生成生产级代码的 Prompt 要点:明确技术栈版本、给出代码规范链接、要求错误处理、要求类型安全、要求添加注释。最重要的是给一个高质量的参考实现作为 few-shot 示例。