训练魔法-AI魔法学院

OpenCV：OpenCV（Open Source Computer Vision Library）是一个广泛使用的计算机视觉库，提供了许多人脸识别算法和工具。它支持多种编程语言，包括Python、C++、Java等。

人脸识别开源项目 2023-12-07

作为程序员，在日常工作中，需要借助一些工具来提高我们工作效率，鄙人日常用得最多的工具，有JSON格式化,SQL格式化,XML格式化,JSON转Execl等等。虽然有一些开发工具也具有一些常用的格式化功能，有时候，我们可能也需要一些其它轻量级的工具。一般，我们可能就去百度搜索在线xxx来达到我们的目的，而且，这类在线工具类的网站也很多。那么，作为程序员，你就不想拥有一个自己的工具网站吗？如果对此有兴趣的朋友就有福了，这儿有一款开源项目-it-tools可以满足我们的需求。

开源项目工具类 2023-12-06

人工智能

Gartner：2024年人工智能渗透的十大战略技术趋势

Gartner提供了对未来十年的IT前沿预测，同时探讨了生成式AI如何改变高管对每个主题的思维方式。 Gartner已经确定了2024年的十大战略技术趋势，生成式和其他类型的AI解决方案占据了中心舞台，广泛的采用和风险是主要关注领域。

Gartner 人工智能 2023-12-06

PDFTriage:面向长篇结构化文档的问答

大型语言模型(LLM)在文档问答(QA)中存在一个问题,那就是当文档无法适应LLM的小范围上下文长度时。为了解决这个问题,现有的大多数工作都专注于从文档中检索相关上下文,并将它们表示为纯文本。然而,诸如PDF、网页和演示文稿等文档本质上是结构化的,具有不同的页面、表格、章节等。将这些结构化文档表示为纯文本与用户对具有丰富结构的文档的心智模型是不协调的。当系统需要查询文档以获取上下文时,这种不协调就凸显出来了,看似无关紧要的问题也可能让QA系统困惑。为了弥合处理结构化文档中的这一根本差距,我们提出了一种称为PDFTriage的方法,使模型既可以根据结构 ...

大语言模型 PDF 文档 2023-12-05

Prompt

自动优化Prompt：Automatic Prompt Engineering的3种方法

记得Zero-Shot COT[1]里的那句Let's think step by step吗？最近谷歌通过OPRO[2]找到了更好的一句：Take a deep breath and work on this problem step-by-step，让GSM8K的结果直接从71.8% -> 80.2%。好的prompt可以激发LLM的最大潜能，从而在下游任务取得好的效果。 Prompt的魅（玄）力（学）就在这里。在LLM还不够“聪明”之前，人类通过prompt engineering来驯服LLM。本文介绍3种automatic prom ...

prompt 大模型 2023-12-05

大模型

大模型与游戏结合的一个思路

关于人工智能与游戏的结合，笔者曾写过一篇文章，《真正的人工智能应用于游戏》。该篇文章写于2019年，当时还没有ChatGPT这样的大模型，所以那时的思路主要是让游戏能够根据玩家水平的逐步提高，游戏的难度也相应提高，使得玩家始终有一种棋逢对手的感觉，从而增加游戏的可玩性，即笔者在文章中所说的：游戏中真正的人工智能应该是这样，一开始玩的时候，与现在一般的游戏完全是一样的，但随着游戏时间的增长，电脑会从对战中学习，一方面找出人类玩家的弱点，加强对弱点的进攻，同时避开人类的强项；另一方面，学习人类好的战术、战法，以此不断提高电脑自身的战斗水平。

人工智能游戏 2023-12-04

pdf2htmlEX：效果相当好的一个PDF转HTML程序，和原始PDF几乎一模一样。

这应该是效果相当好的一个PDF转HTML程序，生成的结果和原始PDF几乎一模一样。其背后是利用的Chrome Headless，让Chrome渲染PDF，再导出成HTML，甚至图片都转成了 base64 字符，所以一个网页就可以包含完整的文本、字体和图片等内容

PDF转换 2023-12-04

图文详解丨iOS App上架全流程及审核避坑指南

App Store作为苹果官方的应用商店，审核严格周期长一直让用户头疼不已，很多app都“死”在了审核这一关，那我们就要放弃iOS用户了吗？当然不是！本期我们从iOS app上架流程开始梳理，详细了解下iOS app上架的那些事。

iOS 苹果市场 2023-12-04

RAG

简单提升RAG的10种方法

LLM是一项了不起的发明，但容易出现一个关键问题就是编造一些东西。RAG（检索增强）通过为LLM提供回答查询时使用的事实背景，使LLM变得更加实用。

RAG 大模型 2023-11-30

CodeGeeX2来了!效果超LLaMA2-70B

清华唐杰团队升级推出CodeGeeX2～效果超过LLaMA2-70B和StarCoder-15B。开源了模型和插件，欢迎大家一起玩玩。

CodeGeeX2 开源模型 2023-11-30

数据库

向量数据库不是一个单独的数据库分类

在不久的将来，我们会看到：每个数据库都会提供某种形式的向量搜索。其中包括图数据库、关系数据库、文档数据库以及键值数据库，甚至还包括缓存。

大模型向量数据库 2023-11-30

ChatGLM

完整ChatGLM3部署教程，支持手机和车载平台部署

ChatGLM3 是智谱AI和清华大学 KEG 实验室联合发布的新一代对话预训练模型。

ChatGLM3 大模型 2023-11-29

大模型

基于大模型（LLM）的Agent 应用开发

目前，业界一般认为基于大模型的应用集中在两个方向上：RAG 和 Agent，无论哪一种应用，设计、实现和优化能够充分利用大模型(LLM)潜力的应用都需要大量的努力和专业知识。随着开发人员开始创建日益复杂的LLM应用程序，开发流程不可避免地变得更加复杂。这种流程的潜在设计空间可能是巨大而复杂的，《如何构建基于大模型的App》一文给出了一种探索中的大模型应用开发基础框架，基本可以适用于RAG 和Agent。但是，对于面向Agent的大模型应用开发，有没有其独特之处呢？有没有聚焦于Agent的大模型应用开发框架呢？那么，什么又是Agent 呢？

大模型 Agent 2023-11-29

大模型

姜子牙大模型系列 | 为知识检索而生，Ziya-Reader开源，多个长文本中文任务第一

我们几乎每天都使用搜索引擎，搜索是大模型需求最多的落地应用之一。另外，大模型本身有着幻觉问题，检索增强也是最直接的解决方案。此外，基于大模型进行知识库问答、基于大模型的智能客服也是火热的创业项目。因此，关于检索增强的大模型的研究如火如荼，为了能从多个文档或超长文档中找到答案，各种超长上下文窗口的模型已经陆续发布。

大模型 Ziya 2023-11-28

RAG

LangChain - RAG: 拿什么「降伏」PDF 中的 Table 类型数据

时间过得真快，写上一篇文到现在已经过去半个月之多！LangChain 和 RAG 领域不出意外的又出了不少新思路：

大模型 LangChain RAG 2023-11-28