文章列表-AI魔法学院

文章列表

大模型压缩首篇综述来啦~

ZeroQuant [Yao等，2022]将硬件友好的量化方案、逐层知识蒸馏和优化的量化支持整合在一起，将Transformer-based模型的权重和激活精度减少到最小的INT8，并且对准确性几乎没有影响

大模型

栩栩如生,音色克隆,Bert-vits2文字转语音打造鬼畜视频实践

BERT的模型结构基于Transformer，它由多个编码器层组成。

Bert-vits 语音

揭秘DeepSeek:一个更极致的中国技术理想主义故事

「暗涌」: transformer诞生在谷歌的AI Lab，ChatGPT诞生在OpenAI,你觉得大公司的AILab 和一个创业公司对于创新产生的价值有什么不同？

DeepSeek 大模型

「长文」可能是目前最全的LangChain AI资源库之一

#8226;LlamaIndex[204]：提供将LLM（语言模型）与外部数据连接的中心接口•Botpress[205]：构建聊天机器人的基本模块•Haystack[206]: 使用Transformer

工作

阿里&字节发表VividTalk，只需单张照片即可根据音频生成栩栩如生的人物说话头像视频

然后，将音频特征A和嵌入个人风格的z风格添加并馈送到基于多分支Transformer的体系结构中，其中两个分支生成混合形状，在粗粒度上建模面部表情运动，第三个分支生成唇部相关的顶点偏移，在细粒度上补充唇部运动

VividTalk 视频

被低估的面壁：打造出不输 OpenAI 的 Scaling Law 曲线

还有一些关键问题，比如当大模型在某个任务上已经超越人类，是否有办法能让它继续提升，即 OpenAI 提的 Super Alignment；也包括长文本 Transformer 是否仍是下一代的架构等问题

Grok-1 开源模型

一文带你看懂OpenAI-Sora生成视频的原理

在人工智能的语境下，变换器(transformer)是一种特殊的算法结构，它能处理序列化的信息。

视频生成 sora

CMU华人打破大模型黑盒，Llama 2撒谎被一眼看穿！脑电波惨遭曝光，LLM矩阵全破解

步骤2：收集神经活动研究人员关注Transformer模型，它们在输入的不同位置存储不同的表征以用于不同的目的。

大模型

从0到1基于ChatGLM-6B使用LoRA进行参数高效微调

datasets==2.10.1 安装PEFT，PEFT 是一个库（LoRA 是其支持的技术之一，除此之外还有Prefix Tuning、P-Tuning、Prompt Tuning），可以让你使用各种基于 Transformer

大模型

Elasticsearch Relevance Engine---为AI变革提供高级搜索能力[ES向量搜索、常用配置参数]

将待检索的数据转换成向量表示，比如将 “有商品曝光的 query” 通过 transformer 转换成 query embing 向量，

大模型 AI编程

达摩院SPACE对话大模型：知识注入与知识利用

但是，本质上都还是语言模型，如上图右边的流程图所示，输入基本上为网络上的自由文本，模型基本上都是 Transformer 结构，优化的目标基本上都是 MLM（掩码语言模型）。

大模型

投资人逃离大模型

依图科技：“天问”大模型是上海依图网络科技有限公司在2023年底首发的一款多模态大模型，是视频监控领域内第一个商用发布的大模型产品，基于先进的Transformer架构，具有会思考、可对话、能进化的三大特点

大模型

一文看懂RAG：大语言模型落地应用的未来

在2017年的创始阶段，与Transformer架构的出现相一致，主要重点是通过预训练模型（PTM）来吸收额外的知识以增强语言模型。

rag 检索增强

从0到1谈谈智能客服系统的设计与实现

这种方案通常使用循环神经网络（RNN）或变换器（Transformer）等结构，能够处理序列数据并生成新的序列。

智能客服

AI Agent / 智能体观察笔记（下）

它是短暂和有限的，因为它受到Transformer的有限上下文窗口长度的限制。

大模型

<...5 6 7 8 9 10 11 121314 >

汇聚AI资讯，网罗AI文档，详解AI工具！

关于我们用户协议隐私条款商务合作：skillupvip

© 2023-2025 AI魔法学院

京ICP备20027199号-1