Tags

2 个页面

提示词工程

博客翻译项目碎碎念:历史会话

博客翻译项目最初设计过于复杂——先解析 Markdown 格式,再用占位符保护内容,最后送给大模型翻译。其实这完全是多此一举,大模型本身就具备识别 Markdown 语法的能力,可以直接处理原始内容并在翻译时保持格式完整。

我们的工作就从调试代码,切换到调试大模型的提示词

模型:google/gemma-3-4b 硬件:Nvdia 3060 12GB

没错,选的非思考模型,思考模型在执行翻译任务时,效率不够高,对比了 4b 参数和 12b 参数的效果,针对翻译任务来说 gemma3 的 4b 参数已经足够了,12b 的参数在翻译任务上并没有明显的优势。

12b 参数的速度:11.32 tok/sec,4b 参数的速度:75.21 tok/sec

Prompt 工程师

就如当年学习搜索引擎的技巧,我们也需要学习一些和AI沟通的技巧,给出合理且充分的限定条件,高效的获取需要的答案。

如果你换个角度呢,当前的AI属于一个记忆力很好的小孩子,它拥有过目不忘的能力,有抄作业的能力。我们需要做的是学会如何正确、有效的和AI沟通,精准的描述需求,帮助AI生成预期的结果。