文章列表-AI魔法学院

文章列表

来自Microsoft Build 2023：大语言模型是如何被训练出来的

如下图所示：这里以最大的输入长度10为例，尽管似乎这段视频截断了，但是也可以看到右下角那个表格就是我们数据的输入，大量的文本数据变成整数之后按照行接起来，不同文档之间用<|endoftext

大模型

深入探讨GPTs和AI Assistant

创建一个AI Assistant 对象创建一个AI 助手对象非常简单，只需要指定使用的语言 model，然后通过instruction 指令规定AI 助手的性格以及能力

GPTs AI Assistant

一旦参透「第一性原理」，便洞悉所有事的本质

这样可以降低风险，同时更快地获取反馈和见解。

第一性原理大模型

AI数字人：重构人货场的新力量

消费者可以通过与AI数字人的对话直接获取商品信息、查询价格、下单购买等，无需经过中介环节，实现人与货的直接连接。

数字人 AI 商业

LLM微调经验&认知

实测chatGLM的tokenizer中文分词其实做的挺一般的，如果想做第4点，数据处理时需要格外注意，它有可能把拼接的位置切错 6.

LLM 大模型

新测试基准发布，最强开源Llama 3尴尬了

比如GPT-4来打分非常严格，如果回答中有错误会狠狠扣分；而Claude 3即使识别出小错误也会宽大处理。

Llama 3 大模型开源

大语言模型综述<演进，技术路线，区别，微调，实践，潜在问题与讨论>

attention mask不同，前者的prefix部分的token互相能看到，后者严格遵守只有后面的token才能看到前面的token的规则。

大模型

【开源看AI】4.2K star！Reor：AI自动帮你发现知识之间的连接

其中Reor要求导入的笔记是markdown（.md）文件，它是现在的主流笔记软件Obsidian、Logseq、Typora等默认的文件格式，非常通用。

Reor 开源工具知识管理

微软Phi-3、Mixtral 8x22B等小模型过拟合，三分之二存在数据污染

因此，以与样本不符的格式生成「正确」答案的模型响应将被标记为不正确。

过拟合小模型

国内法律类大模型介绍

* 基础模型：Chinese-Alpaca-Plus-13B * 数据：中国国家统一法律职业资格考试题库

法律大模型

大模型应用中大部分人真正需要去关心的核心——Embedding

为了解释为什么Embedding提供了这样的实用程序，让我们看一下以前处理文本数据(如表格数据中的分类值)的方法。

大模型

46.6k星星！最强开源AI集合系统，一键部署全网AI工具都能直接用，UI简直是视觉盛宴！

Novita AI：以最低价格接入Llama、Mistral等领先的开源模型。

AI开源集合

超越Claude-2.1和GPT-3.5-Turbo，Qwen1.5还藏了哪些黑科技？32K Tokens上下文支持只是开胃菜！

从语言理解到代码、推理，每一项基础能力都经过严格测试。

Qwen1.5 开源模型

星标破万！小钢炮2.6登顶GitHub，Hugging Face TOP3，燃爆开源社区！

(1) llama.cpp 和 ollama 支持在本地设备上进行高效的 CPU 推理，(2) int4 和 GGUF 格式的量化模型

MiniCPM-V 2.6 大模型

最详细的文本分块(Chunking)方法——可以直接影响基于LLM应用效果

ensp;20 ) docs = text_splitter.create_documents([text]) 专门的分块 Markdown和LaTeX是您可能遇到的结构化和格式化内容的两个例子

RAG 大模型

<...54 55 56 575859 60 61 62 63 ...>

汇聚AI资讯，网罗AI文档，详解AI工具！

关于我们用户协议隐私条款商务合作：skillupvip

© 2023-2025 AI魔法学院

京ICP备20027199号-1