文章列表-AI魔法学院

文章列表

大模型高效微调：🤗 PEFT 使用案例

✅ ✅ Token

大模型

大模型实践总结

种编程语言 250680 从表格中可以看到，对于像ChatGLM-6B、LLaMA、Bloom这类大模型，要保证基座模型有比较好的效果，至少需要保证上千亿、万亿级的Token

大模型训练

prompt提示工程最佳实践课程笔记分享

它们主要是生成 Token/文字，而不是计算数字。

prompt 提示词

2023检索增强生成技术（RAG）研究进展

通过检索数万亿 Token (Token) 来改善语言模型 https://arxiv.org

RAG 检索增强

10个具有代表性的AI-Agents，将如何改变互联网/重塑Web3

尽管有很多人诟病Auto-GPT存在巨大的token消耗且没有稳定的结果，但是Auto-GTP作为一种基于LLM的自动化案例，极大地挑起开发者的好奇心，类似的

开源模型

RAG检索增强技术在知识库智能检索场景下的应用实践

检索的粒度可以从最小的词元（Token）扩展到词组、句子、段落，甚至是结构化的实体和知识图谱。

知识库 RAG检索增强

万字长文，AI大模型的应用实践总结

从表格中可以看到，对于像ChatGLM-6B、LLaMA、Bloom这类大模型，要保证基座模型有比较好的效果，至少需要保证上千亿、万亿级的Token量。

大模型

硬核Prompt赏析：HuggingGPT告诉你Prompt可以有多“工程”

比如文本生成类的模型，有10000+个，gpt-3.5-turbo的token限制是4096，显然不能包含这个类别的所有模型描述。

提示词 prompt

九问中国大模型掌门人，万字长文详解大模型进度趋势

Ilya（Ilya Sutskever，OpenAI 首席科学家）说如果能做到预测 Next Token，就离通用人工智能不远了。

大模型详解

对于AI，我们现阶段可以有的态度

【Claude：】作为ChatGPT3.5类似级别的大语言模型，基本能力差不多，据说最近有了个新能力，就是一口气能吃10w个token的数据量，这是目前其他大语言模型还做不到的。

文生图

OpenAI Sora视频生成模型技术报告中英全文+总结+影响分析

这种范式的成功在一定程度上得益于使用词元编码/令牌（token），它们巧妙地统一了文本的多种形式——代码、数学和各种自然语言。

sora openai 视频生成

语言大模型100K上下文窗口的秘诀

上下文窗口（context window）是指语言模型在进行预测或生成文本时，所考虑的前一个词元（token）或文本片段的大小范围。

大模型

9个范例带你入门langchain

close and it was really, really big. 2，长文本总结对于文本长度较短的文本我们可以直接这样执行summary操作但是对于文本长度超过lLM支持的max token

大模型

如何用大语言模型构建一个知识问答系统

分片要使用 tokenizer，原始文本经过分词然后再进行 embedding，分片大小需要考虑分词之后生成的 token 数量。

知识库

宁德核电推出全球参数量最大的核工业大模型｜InfoQ 独家

此外，「锦书」拥有中国最大的核工业大模型语料库，训练语料超过 20 亿 token，涵盖了核运行、核物理、核燃料、水化学十余类通用核工业语料以及规程、系统设计书、经验反馈单等十余种工作文件语料。

宁德核电大模型

<...6 7 8 91011 12 13 14 15 >

汇聚AI资讯，网罗AI文档，详解AI工具！

关于我们用户协议隐私条款商务合作：skillupvip

© 2023-2025 AI魔法学院

京ICP备20027199号-1