Python&LLM

使用 DPO 微调 Llama 2

简介基于人类反馈的强化学习(ReinforcementLearningfromHumanFeedback，RLHF)事实上已成为GPT-4或Claude等LLM训练的最后一步，它可以确保语言模型的输出符合人类在闲聊或安全性等方面的期望
Hugging Face·2023-08-24 12:57

TARS-RPA-Agent破解RPA与LLM融合难题

文/王吉伟大语言模型（LLM，LargeLanguageModel）的持续爆发，让AIGC一直处于这股AI风暴最中央，不停席卷各个领域。
王吉伟·2023-08-24 12:24

关于 LLM 和图数据库、知识图谱的那些事

本文整理自NebulaGraph布道师wey在「夜谈LLM」主题分享上的演讲，主要包括以下内容：背景LLMRAGGraph知识抽取Text2CypherGraphRAG未来规划技术背景LLM是什么这里简单
图数据库NebulaGraph·2023-08-24 09:41

搭建基于LangChain + ChatGLM2-6B 的个人知识库

文章目录一、简介1、LangChain2、ChatGLM2-6B二、准备工作三、项目部署1、本地环境2、Embeddin部署3、LLM部署4、LangChain部署5、运行四、项目测试一、简介这个例子使用现成的
奋斗的哆啦·2023-08-24 08:31

LangChain+LLM做知识库时，参数如何调优(4)

目前很多企业都开始做知识库或客服。通过开源项目里的issue去看，碰到的问题也是大同小异。例如：[BUG]关于答案胡乱生成的问题·Issue#886·imClumsyPanda/langchain-ChatGLM(github.com)。如何文本分割的时候，按照每行进行分割？因为我的本地TXT文件知识库是按照Q，A的形式组织的。也就是文本切片的时候按照每行进行切片。·Issue#893·imClu
架构安利师·2023-08-24 08:01

LLM低成本微调方法

LLM日益流行，已经渗透到各个领域，比如生物医学，但是模型的规模导致微调LLM对普通用户不够友好，因此，我们需要借助一些低成本方法，通过更新少量参数也达到与LLM全参数更新一样的效果。
tzc_fly·2023-08-24 08:01

LangChain+LLM做知识库时，参数如何调优(3)

如何文本分割的时候，按照每行进行分割？因为我的本地TXT文件知识库是按照Q，A的形式组织的。也就是文本切片的时候按照每行进行切片。·Issue#893·imClumsyPanda/langchain-ChatGLM(github.com)建议：其实FAQ最好的实现是不用大模型。只做AQ里的Q的文本切割（一般用\n对内容简单的split即可）、向量化，AQ成对存放在数据库里。这样达到的效果是：用户提
架构安利师·2023-08-24 08:31

Langchain+LLM

LangChain是一个开源框架，允许开发人员在与人工智能（AI）一起工作时将大型语言模型（如GPT4）与外部计算和数据源相结合（它提供了一套工具、组件和接口，可简化创建由LLM提供支持的应用程序）。
tzc_fly·2023-08-24 08:00

langchain ChatGPT AI私有知识库

它提供了一套工具、组件和接口，可简化创建由大型语言模型(LLM)和聊天模型提供支持的应用程序的过程。Lang
路长且阻·2023-08-24 07:27

WordArt Designer：基于用户驱动与大语言模型的艺术字生成

该系统包含四个关键模块:LLM引擎、SemTypo、Stlytypo和TextTypo模块。由gpt-3.5turbo驱动的LLM引擎可以解释用户输入，并为其他模块生成可操作的提示，从而将抽象
AI记忆·2023-08-24 06:51

使用大型语言模型进行自主视觉信息搜索

我们的方法将LLM与三种类型的工具集成在一起：（i）用于从图像中提取视觉信息的计算机视觉工具，（ii）用于检索开放世界知识和事实的网络搜索工具
ygtu2018·2023-08-24 05:31

02__models

LangChain提供两种封装的模型接口1.大规模语言模型（LLM）：输入文本字符串，返回文本字符串2.聊天模型：基于一个语言模型，输入聊天消息列表，返回聊天消息Langchain的支持OpenAI、ChatGLM
Spielberg_1·2023-08-24 00:02

A Survey on Large Language Models for Recommendation

本文是LLM系列的文章，针对《ASurveyonLargeLanguageModelsforRecommendation》的翻译。
UnknownBody·2023-08-23 22:15

Blockwise Parallel Transformer for Long Context Large Models

本文是LLM系列文章，针对《BlockwiseParallelTransformerforLongContextLargeModels》的翻译。
UnknownBody·2023-08-23 22:15

Tree of Thoughts: Deliberate Problem Solving with Large Language Models

本文是LLM系列的文章，针对《TreeofThoughts:DeliberateProblemSolvingwithLargeLanguageModels》的翻译。
UnknownBody·2023-08-23 22:15

Birth of a Transformer: A Memory Viewpoint

本文是LLM系列的文章，针对《BirthofaTransformer:AMemoryViewpoint》的翻译。
UnknownBody·2023-08-23 22:44

TARS-RPA-Agent破解RPA与LLM融合难题

文/王吉伟大语言模型（LLM，LargeLanguageModel）的持续爆发，让AIGC一直处于这股AI风暴最中央，不停席卷各个领域。
·2023-08-23 20:58

LLM-Rec:基于提示大语言模型的个性化推荐

1.基本信息论文题目:LLM-Rec:PersonalizedRecommendationviaPromptingLargeLanguageModels作者:HanjiaLyu,SongJiang,HanqingZeng
qq_41771998·2023-08-23 20:23

Pandas字符串操作的各种方法速度测试

由于LLM的发展，很多的数据集都是以DF的形式发布的，所以通过Pandas操作字符串的要求变得越来越高了，所以本文将对字符串操作方法进行基准测试，看看它们是如何影响pandas的性能的。
deephub·2023-08-23 19:42

解锁ChatGLM-6B的潜力：优化大语言模型训练，突破任务困难与答案解析难题

解锁ChatGLM-6B的潜力：优化大语言模型训练，突破任务困难与答案解析难题LLM（LargeLanguageModel）通常拥有大量的先验知识，使得其在许多自然语言处理任务上都有着不错的性能。
·2023-08-23 18:55

解锁ChatGLM-6B的潜力：优化大语言模型训练，突破任务困难与答案解析难题

解锁ChatGLM-6B的潜力：优化大语言模型训练，突破任务困难与答案解析难题LLM（LargeLanguageModel）通常拥有大量的先验知识，使得其在许多自然语言处理任务上都有着不错的性能。
·2023-08-23 18:53

精进语言模型：探索LLM Training微调与奖励模型技术的新途径

有关LLM训练流程的更多细节可以参考【LLM】从零开始训练大模型。
·2023-08-23 18:22

联发科雄起，生成式AI将可在手机本地运行，天玑9300“大放异彩”

高通选择与Meta合作，将其最新的语言模型Llama2（LLM）引入他们的设备，而联发科则计划与Meta合作，为其下一代旗舰处理器提供更好的支持。
博学的轮船Y·2023-08-23 17:12

ModaHub魔搭社区：AI Agent在 知识图谱场景下的AgentBench基准测试

近日，来自清华大学、俄亥俄州立大学和加州大学伯克利分校的研究者设计了一个测试工具——AgentBench，用于评估LLM在多维度开放式生成环境中的推理能力和决策能力。
LCHub低代码社区·2023-08-23 15:53

ModaHub魔搭社区：AI Agent在网络购物场景下的AgentBench基准测试

近日，来自清华大学、俄亥俄州立大学和加州大学伯克利分校的研究者设计了一个测试工具——AgentBench，用于评估LLM在多维度开放式生成环境中的推理能力和决策能力。
LCHub低代码社区·2023-08-23 15:52

阿里云大语言模型（LLM）实战训练营，火热开营中！

完成课程学习任务更有机会领取LAMY钢笔、小米充电宝、双肩包等精美礼品，快来一起学习体验吧~大语言模型（LLM）实战训练营入口：立即参与一、课程介绍介绍当下热门的大语言模型技术原理、发展历程及模型特性，
·2023-08-23 14:02

Smartbi：大模型+ABI在企业数字化浪潮中“推波助澜”？

随之而来的，是一场属于所有行业的科技盛宴，一个个行业大模型涌现，几乎所有科技企业都在计划或已经发布了自己的大语言模型（LLM）。问题是，如何把一个大模型投入到具体的商业环境中，真正提升企业生产效率？
·2023-08-23 12:56

关于 LLM 和图数据库、知识图谱的那些事

本文整理自NebulaGraph布道师wey在「夜谈LLM」主题分享上的演讲，主要包括以下内容：背景LLMRAGGraph知识抽取Text2CypherGraphRAG未来规划技术背景LLM是什么这里简单
·2023-08-23 12:55

[NLP]LLM--transformer模型的参数量

1.前言最近，OpenAI推出的ChatGPT展现出了卓越的性能，引发了大规模语言模型(LargeLanguageModel,LLM)的研究热潮。
舒克与贝克·2023-08-23 12:09

技术速览｜Meta Llama 2 下一代开源大型语言模型

AI使用大型语言模型（LLM）来理解和生成自然语言。LLM可以从大量文本中学习并创建有关各种主题的文本，并可以完成比如编写代码、生成歌词、总结文章等任务。
·2023-08-23 11:44

Star History 月度开源精选｜Llama 2 及周边生态特辑

LlamaLlama本身是个开源的基础大语言模型(LLM)，由网上公开可获取到的数据训练完成。它于今年2月正式开源，五个月之后就发布了新一代版本，Llama2。相比原版，L
·2023-08-23 10:36

Pandas字符串操作的各种方法速度测试

由于LLM的发展，很多的数据集都是以DF的形式发布的，所以通过Pandas操作字符串的要求变得越来越高了，所以本文将对字符串操作方法进行基准测试，看看它们是如何影响pandas的性能的。
·2023-08-23 10:05

python的tril，pad，block_diag在LLM上的使用

最近需要对position_ids和attention_mask进行重构，所以需要掌握numpy的一些操作，以下是一些示例，多个下三角矩阵拼接：importnumpyasnpfromscipy.linalgimportblock_diagA=np.ones((2,2))B=np.ones((3,3))b=[A,B]print(np.tril(block_diag(*b)))[[1.0.0.0.0.
农民小飞侠·2023-08-23 06:51

RAVEN: In-Context Learning with Retrieval Augmented Encoder-Decoder Language Models

本文是LLM系列的文章，针对《RAVEN:In-ContextLearningwithRetrievalAugmentedEncoderRAVEN:带检索的上下文学习增强的编码器-解码器语言模型摘要1引言
UnknownBody·2023-08-23 03:00

Graph of Thoughts: Solving Elaborate Problems with Large Language Models

本文是LLM系列文章，针对《GraphofThoughts:SolvingElaborateProblemswithLargeLanguageModels》的翻译。
UnknownBody·2023-08-23 03:00

Exploring the Intersection of Large Language Models and Agent-Based Modeling via Prompt Engineering

本文是LLM系列文章，针对《ExploringtheIntersectionofLargeLanguageModelsandAgent-BasedModelingviaPromptEngineering
UnknownBody·2023-08-23 03:29

A Survey on Model Compression for Large Language Models

本文是LLM系列文章，关于模型压缩相关综述，针对《ASurveyonModelCompressionforLargeLanguageModels》的翻译。
UnknownBody·2023-08-23 03:28

AI Agent在家务场景下的AgentBench基准测试

近日，来自清华大学、俄亥俄州立大学和加州大学伯克利分校的研究者设计了一个测试工具——AgentBench，用于评估LLM在多维度开放式生成环境中的推理能力和决策能力。
LCHub低代码社区·2023-08-23 02:44

ModaHub魔搭社区：AI Agent在数据库场景下的AgentBench基准测试

近日，来自清华大学、俄亥俄州立大学和加州大学伯克利分校的研究者设计了一个测试工具——AgentBench，用于评估LLM在多维度开放式生成环境中的推理能力和决策能力。
LCHub低代码社区·2023-08-23 02:13

AI Agent在情景猜谜场景下的AgentBench基准测试

近日，来自清华大学、俄亥俄州立大学和加州大学伯克利分校的研究者设计了一个测试工具——AgentBench，用于评估LLM在多维度开放式生成环境中的推理能力和决策能力。
LCHub低代码社区·2023-08-23 02:43

使用 DPO 微调 Llama 2

简介基于人类反馈的强化学习(ReinforcementLearningfromHumanFeedback，RLHF)事实上已成为GPT-4或Claude等LLM训练的最后一步，它可以确保语言模型的输出符合人类在闲聊或安全性等方面的期望
·2023-08-22 23:51

中文医疗大模型汇总

【写在前面】随着大语言模型的发展，越来越多的垂直领域的LLM发不出来，针对医学这一垂直领域的LLM进行整理，放在这里，希望对大家有一定的帮助吧。还会继续更新，大家有兴趣的话可以持续关注。
FutureForMe@·2023-08-22 21:35

LLM提示词工程和提示词工程师Prompting and prompt engineering

你输入模型的文本被称为提示，生成文本的行为被称为推断，输出文本被称为完成。用于提示的文本或可用的内存的全部量被称为上下文窗口。尽管这里的示例显示模型表现良好，但你经常会遇到模型在第一次尝试时无法产生你想要的结果的情况。你可能需要多次修改提示中的语言或其编写方式，以使模型按照你想要的方式行为。这种开发和改进提示的工作被称为提示工程。这是一个大话题。但是，一种强大的策略是在提示中包括你希望模型执行的任
AI架构师易筋·2023-08-22 19:56

[译] 创建高质量俱乐部

Howtohelpyourclubthrive.MelanieKlinghoffer,CC,ALBMaryNesfieldFromtheToastmastermagazineOctober2015.会员入会仪式MelanieKlinghofferCC,ALB,J.D.,LLM
Amiya阿米娅·2023-08-22 18:09

论文阅读：DIN-SQL: Decomposed In-Context Learning of Text-to-SQL withSelf-Correction

是将自然语言转化为SQL的任务，该任务隶属于NLP的子任务，NL2SQL在AIGC时代之前，以seq2seq、BERT等系列的模型在NL2SQL的主流数据集上取得了不错的效果，2022年底，ChatGPT爆火，凭借LLM
城南皮卡丘·2023-08-22 17:46

langchain源码阅读系列（三）之Chain模块

原文首发于博客文章langchain源码阅读本节是langchian源码阅读系列第三篇，下面进入Chain模块：LLM应用构建实践笔记Chain链定义链定义为对组件的一系列调用，也可以包括其他链，这种在链中将组件组合在一起的想法很简单但功能强大
骑猪兜风233·2023-08-22 15:48

LLM生成式 AI 项目生命周期Generative AI project lifecycle

在本课程的其余部分中，您将学习开发和部署LLM驱动应用所需的技巧。在这个视频中，您将了解一个能帮助您完成此工作的生成式AI项目生命周期。此框架列出了从构思到启动项目所需的任务。
AI架构师易筋·2023-08-22 12:29

自然语言处理从入门到应用——LangChain：链（Chains）-[通用功能：LLMChain、RouterChain和SequentialChain]

分类目录：《自然语言处理从入门到应用》总目录LLMChainLLMChain是查询LLM对象最流行的方式之一。
von Neumann·2023-08-22 09:57

基于大语言模型知识问答应用落地实践 – 知识库构建（上）

其中一种比较被广泛关注的技术路线是大语言模型（LLM）+知识召回（KnowledgeRetrieval）的方式，在私域知识问答方面可以很好的弥补通用大语言模型的一些短板，解决通用大语言模型在专业领域回答缺乏依据
亚马逊云开发者·2023-08-22 09:18

Adapting Language Models to Compress Contexts

本文是LLM系列文章，针对《AdaptingLanguageModelstoCompressContexts》的翻译。
UnknownBody·2023-08-22 08:31
上一页 88 89 90 91 92 93 94 95 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他