一文搞懂大语言模型微调(Fine-tuning)技术
背景随着大型语言模型(LLM)的迅猛发展,如何有效利用这些强大的预训练模型来解决特定领域问题已成为生成式 AI 领域的热门话题。微调(Fine-tuning)作为一种关键技术,使我们能够在保留模型通用能力的同时,针对性地提升其在特定任务上的表现。
【大模型专题】之三十一:Fine-tuning模型微调基础知识
欢迎您访问【曹小曹】头条号,很高兴能够与您分享有价值的信息和观点。衷心希望您能在我的头条号上找到您感兴趣的内容,并在评论区留下您的宝贵意见和反馈。大模型微调(Fine-tuning)是指在已经预训练好的大语言模型基础上,使用特定的数据集进行进一步的训练,使模型适应特定任务或领域。
提示词的终极秘密:它考的不是技巧,而是表达
真正高质量的提示词,来自清晰的目标、精准的表达和对场景的深刻理解。这篇文章将帮你跳出“技巧陷阱”,构建一套可迁移的提示词思维框架,让AI真正成为你的表达放大器。AI世界的探险家们,集合了!咱们在AI这片广袤新大陆上探险,手中都握着一把叫“提示词”的万能钥匙。
AI产品经理必修课:从“半成品”到“杀手级应用”——深度解析后训练(Post-training)
2025年AI领域最深刻的变化,不是算力的军备竞赛,而是后训练技术的战略崛起。从SFT塑造产品人格、RLHF量化用户体验,到推理模型实现System 2思考,本文以卡帕西的经典理论为框架,揭示AI产品经理如何将原始模型雕琢成商业产品。
中国科学家训练语言模型用于单细胞测序技术,助力破译肿瘤微环境
而最近,一组中国科研团队受大规模预训练模型 BERT 的通过预训练和微调范式来提高 AI 模型泛化性的启发,开发出了用于对 scRNA-seq 数据进行细胞注释的 scBERT模型。
瞭望 | 直面“价值对齐”挑战
从安全角度考虑,在推动对AI的价值对齐之前,应先就对齐的价值观进行协调统一,但大到生死观,小到对美丑的认知,全球的多元文化背景和价值体系使得价值对齐的标准统一进程难以推进随着人工智能开始承担更复杂的任务,人类开展对齐工作甚至是简单评估,都将变得难以想象地复杂文 | 王焕超过去一年
提示词的终极秘密:它考的不是技巧,而是表达
在AI时代,提示词不只是“指令”,而是表达的延伸。真正高效的提示词,源于对意图的精准传达与语境的深度理解。本文将从表达逻辑出发,拆解提示词的底层机制,帮助内容创作者、产品人、运营者构建更具控制力的AI协作方式。AI世界的探险家们,集合啦!
不用考生实测就知道题难不难:这个AI试题评测框架把考试难度“量化”了
论文标题:Cognitive Episodes in LLM Reasoning Traces Enable Interpretable Human Item Difficulty Prediction。
训练一个”懂事”的 AI:SFT 和 RLHF 到底在做什么?
“为什么这个 AI 感觉不太对劲?”你懂那种感觉吗?它能回答你的问题,但回答得很奇怪。你问它”帮我写一封请假邮件”,它给你洋洋洒洒写了一大段关于请假制度的分析。
训练LLMs的过程就像写教科书
大模型都是通过数据进行训练的,对不懂的人来说,以为大模型的训练过程很神秘。其实不然,作者的观点是:其实就和写教科书一样,有背景、例题和练习题。这篇文章,我们就来学习一下。看到推上Karpathy的比喻真的有趣且非常贴切。