E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Python&LLM
大型语言模型在实体关系提取中的应用探索
如今
LLM
(大语言模型)的问答与生成能力已被大家所熟知,很多用户已经亲身体会到了
LLM
为工作、生活带来的变革。其实,作为NLP(自然语言处理)的集大成者,
LLM
能为我们提供的能力不限于此。
colorknight
·
2023-12-03 14:33
数据科学计算
语言模型
人工智能
自然语言处理
LLM
知识图谱
实体关系抽取
翻译: GPT4等大型语言模型的原理解析和未来预测慢思考和模型自我迭代和
LLM
安全
YouTube:IntrotoLargeLanguageModels-YouTube1.LargeLanguageModelLLM大家好,最近我做了一个关于大型语言模型的30分钟演讲,有点像介绍性演讲,不幸的是,那个演讲没有被录制下来,但很多人在演讲结束后来找我,他们告诉我,呃,他们真的很喜欢这个演讲,所以我会,我想我会重新录制它,基本上把它放在YouTube上,所以我们来了,忙碌的人的大型语言模
AI架构师易筋
·
2023-12-03 13:51
GPT-4
语言模型
人工智能
自然语言处理
LLM
chatgpt
prompt
为什么说 AI Agents 是 AGI 时代新的应用形态?
▼最近直播超级多,预约保你有收获今晚直播:《基于
LLM
大模型构建AIAgents案例实战》—1—为什么说AIAgent是AI智能时代的新应用形态?
musicml
·
2023-12-03 03:15
人工智能
agi
AI AIgents时代-(六.)OpenAgents
OpenAgents开发的
LLM
-powered代理XLang集成了三个功能强大的代理。数据代理(DataAgent)对于表格这种结构性数据高度可用,并提供数据的直接显
NaiveCode
·
2023-12-02 10:14
AI系列
人工智能
如何在 LangChain 中调用 OpenVINO™ 加速大语言模型
.♪..LangChain简介LangChain是一个高层级的开源的框架,从字面意义理解,LangChain可以被用来构建“语言处理任务的链条”,它可以让AI开发人员把大型语言模型(
LLM
)的能力和外部数据结合起来
OpenVINO 中文社区
·
2023-12-02 10:39
langchain
openvino
语言模型
人工智能
自然语言处理
Agent举例与应用
什么是AgentOpenAI应用研究主管LilianWeng在一篇长文中提出了Agent=
LLM
(大型语言模型)+记忆+规划技能+工具使用这一概念,并详细解释了Agent的每个模块的功能。
Peter_Gao_
·
2023-12-02 10:07
AIGC
NLP
CV
AIGC
AI
人工智能
LLM
Agent
用上这个工具包,大模型推理性能加速达40倍
作者:英特尔公司沈海豪、罗屿、孟恒宇、董波、林俊编者按:只需不到9行代码,就能在CPU上实现出色的
LLM
推理性能。
QbitAl
·
2023-12-02 10:29
大模型没有自我改进能力?苏黎世理工联合Meta AI提出小模型架构,显著提升大模型表现
自我改进之所以不奏效,是因为
LLM
并不能准确判断原答案是否错误以及是否需要改进。
夕小瑶
·
2023-12-02 07:05
深度学习
机器学习
人工智能
清华提出 SoRA,参数量只有 LoRA 的 70%,表现更好!
现在有很多关于大型语言模型(
LLM
)的研究,都围绕着如何高效微调展开。微调是利用模型在大规模通用数据上学到的知识,通过有针对性的小规模下游任务数据,使模型更好地适应具体任务的训练方法。
夕小瑶
·
2023-12-02 07:34
人工智能
论文阅读——Img2
LLM
(cvpr2023)
arxiv:[2212.10846]FromImagestoTextualPrompts:Zero-shotVQAwithFrozenLargeLanguageModels(arxiv.org)一、介绍使用大语言模解决VQA任务的方法大概两种:multi-modalpretrainingandlanguage-mediatedVQA,即多模态预训练的方法和以语言模型为媒介的VQA。Multi-mo
じんじん
·
2023-12-02 07:11
论文
深度学习
人工智能
吴恩达《ChatGPT Prompt Engineering for Developers》学习笔记
1引言总的来说,当前有两类大语言模型(
LLM
):「基础
LLM
」和「指令微调
LLM
」。基础
LLM
基于大量文本数据训练而成,核心思想为预测一句话的下一个单词(即词语接龙)。
stay_foolish12
·
2023-12-02 02:50
人工智能
LangChain(0.0.339)官方文档一:快速入门
LangChain官网、LangChain官方文档、langchainGithub、langchainAPI文档、
llm
-universe文章目录一、LangChain简介(v0.0.338)1.1整体框架
神洛华
·
2023-12-02 00:59
LLMs
langchain
【AIGC】用货拉拉拉不拉拉布拉多的梗调(ce)戏(shi)AI大模型,3.5和4.0的反应差别巨大!
目录一、调戏
LLM
大模型(一)制造陷阱——货拉拉拉拉布拉多的梗1.看看3.5的表现2.看看4.0的表现(二)用简单推理调戏大模型1.看看3.5的表现2.看看4.0的表现3.看看3.5的表现4.看看4.0
giszz
·
2023-12-01 23:53
人工智能
技巧分享
AIGC
人工智能
Evaluation and Analysis of Hallucination in Large Vision-Language Models----大视觉语言模型中幻觉的评估与分析
在本文中,我们提出了基于大型语言模型(HaELM)的幻觉评估,这是一种基于
LLM
的幻觉评估框架。HaELM实现了与ChatGPT相当的约95%的性能,并具有低成本、
Mars_prime
·
2023-12-01 19:11
语言模型
人工智能
自然语言处理
LVLM幻觉
Gartner发布风险和安全管理领域的生成式人工智能创新指南
主要发现在企业应用中集成大型语言模型(
LLM
)和其他生成人工智能(GenAI)模型会带来三类新风险:内容异常、数据保护和人工智能应用安全。
galaxylove
·
2023-12-01 17:14
信安前沿资讯
安全
人工智能
拥抱未来:大语言模型解锁平台工程的无限可能
01了解大型语言模型(
LLM
)大型语言模型(
LLM
)是一种人工智能(AI)算法,它使用深度学习技术和海量数据集来理解、总结、生成和预测新内容。
平台工程社区
·
2023-12-01 10:16
语言模型
人工智能
自然语言处理
Jetson orin部署大模型示例教程
一、
LLM
介绍
LLM
指的是LargeLanguageModel(大型语言模型),是一类基于深度学习的自然语言处理技术,其主要目的是让机器能够更好地理解和生成人类的自然语言文本,如文章、对话、搜索等。
无证驾驶梁嗖嗖
·
2023-12-01 08:48
大模型
LangChain+
LLM
实战---文本分块(Chunking)方法
这个流程依然无法描述RAG的复杂性RAG涉及的内容其实广泛,包括Embedding、分词分块、检索召回(相似度匹配)、chat系统、ReAct和Prompt优化等,最后还有与
LLM
的交互,整个过程技术复杂度很高
lichunericli
·
2023-12-01 04:43
LangChain-LLM
langchain
人工智能
玄学调参实践篇 | 深度学习模型 + 预训练模型 + 大模型
LLM
这篇主要简单记录一些调参实践,无聊时会不定期更新~文章目录0、学习率与batch_size判断1、Epoch数判断2、判断模型架构是否有问题3、大模型-计算量、模型、和数据大小的关系4、大模型调参相关论文经验总结5、训练时模型的保存0、学习率与batch_size判断batch_size:这不用多说,一般按2的指数设置如:2、4、8、16…。设多大基本看你的显卡显存能不能hold得住咯。学习率:常
#苦行僧
·
2023-12-01 00:37
NLP
#
LLM微调
机器学习理论知识
深度学习
人工智能
大模型
llm
自然语言处理
计算机视觉
LLM
分布式训练框架 | DeepSpeed与Accelerate
简单记录下根据网上资料(如Reference中所列)所学到的一些知识,这里主要介绍的是deepspeed分布式训练框架相关概念。小日记:今天太舒服了,早上跑了6km,晚上吃了养生菌菇火锅~文章目录1、Accelerate和deepspeed的联系2、基本概念3、通信策略4、Zero(ZeRO-Stage3、ZeRO-Offload)4.1、ZeRO中不同stage的区别4.2、ZeRO-Offlo
#苦行僧
·
2023-11-30 23:40
#
LLM分布式训练框架
大模型
分布式
deepspeed
accelerate
llm
人工智能
自然语言处理
纯干货——《面向开发者的 ChatGPT Prompt工程》学习笔记
其实接触过
llm
的同学应该都很清楚,想要开发一款强大的
llm
应用,优秀的prompt是至关重要的,熟练掌握prompt编写的人,就可
MonsterQy
·
2023-11-30 19:55
AI
chatgpt
prompt
学习
人工智能
万字长文——这次彻底了解
LLM
大语言模型
文章目录前言一、浅析语言模型中的核心概念1.1分词:1.2词向量:1.3神经概率语言模型二、大语言模型发展历程三、
LLM
基本结构3.1预训练阶段工作步骤3.2预训练阶段模型结构3.3Fine-tuning
MonsterQy
·
2023-11-30 19:54
AI
语言模型
人工智能
自然语言处理
LOGIC-LM:使用符号求解器为大型语言模型提供忠实的逻辑推理11.22
使用符号求解器为大型语言模型提供忠实的逻辑推理摘要1引言2相关工作3LOGIC-LM3.1ProblemFormulator3.2SymbolicReasoner3.3Self-Refiner3.4结果解释器4实验摘要大型语言模型(
LLM
露葵025
·
2023-11-30 11:32
语言模型
人工智能
自然语言处理
图推理:忠实且可解释的大型语言模型推理11.29
忠实且可解释的大型语言模型推理摘要1引言2相关工作3准备工作4方法4.1图推理:规划-检索-推理4.2优化框架4.3规划模块4.4检索推理模块5实验5.1实验设置5.2RQ1:KGQA性能比较摘要大型语言模型(
LLM
露葵025
·
2023-11-30 11:28
论文
语言模型
人工智能
自然语言处理
大模型的实践应用8-利用PEFT和LoRa技术微调大模型(
LLM
)的原理介绍与指南
大家好,我是微学AI,今天给大家介绍一下大模型的实践应用8-利用PEFT和LoRa技术微调大模型(
LLM
)的原理介绍与指南,2023年是大语言模型爆发的元年,在我国大语言模型分布就有上百种,随着人工智能技术的不断发展
微学AI
·
2023-11-30 09:28
大模型的实践应用
pytorch
大模型
lora
peft
手把手教你Autodl平台Qwen-7B-Chat FastApi 部署调用
手把手带你在AutoDL上部署Qwen-7B-ChatFastApi调用项目地址:https://github.com/datawhalechina/self-
llm
.git如果大家有其他模型想要部署教程
Unicornlyy
·
2023-11-29 23:44
大模型
fastapi
Qwen
人工智能
语言模型
手把手教你在AutoDL上Qwen-7B-Chat WebDemo Qwen-7B-Chat 网络演示
手把手带你在AutoDL上Qwen-7B-ChatWebDemoQwen-7B-Chat网络演示项目地址:https://github.com/datawhalechina/self-
llm
.git如果大家有其他模型想要部署教程
Unicornlyy
·
2023-11-29 23:44
大模型
人工智能
webdemo
Qwen
大模型
手把手教你在AutoDL上部署Qwen-7B-hat Transformers 部署调用
手把手带你在AutoDL上部署Qwen-7B-hatTransformers调用项目地址:https://github.com/datawhalechina/self-
llm
.git如果大家有其他模型想要部署教程
Unicornlyy
·
2023-11-29 23:10
大模型
人工智能
LLM
transformer
从零详细地梳理一个完整的
LLM
训练流程
1.预训练阶段(PretrainingStage)工欲善其事,必先利其器。当前,不少工作选择在一个较强的基座模型上进行微调,且通常效果不错(如:[alpaca]、[vicuna]等)。这种成功的前提在于:预训练模型和下游任务的差距不大,预训练模型中通常已经包含微调任务中所需要的知识。但在实际情况中,我们通常会遇到一些问题,使得我们无法直接使用一些开源backbone:语言不匹配:大多数开源基座对中
大数据AI人工智能培训专家培训讲师叶梓
·
2023-11-29 22:23
人工智能
chatgpt
LLM
综述全新出炉:51页论文带你盘点
LLM
领域专业化技术
来自:机器之心进NLP群—>加入大模型与NLP交流群本文提供了关于大型语言模型领域专业化技术的全面概览,这是大型语言模型应用的一个关键的新兴方向。大语言模型(LLMs)在自然语言处理(NLP)领域取得了显著的进步,为广泛的应用提供了一种非常有用的、与任务无关的基础。然而,直接应用LLMs去解决特定领域的复杂问题会遇到许多障碍,这些障碍源于领域数据的异质性、领域知识的复杂性、领域目标的独特性以及约束
zenRRan
·
2023-11-29 22:51
LLM
大规模语言模型综述
来源:中国人民大学人工智能学院和信息学院github地址:RUCAIBox/LLMSurvey论文:ASurveyofLargeLanguageModels时间:2023年3月31日一、摘要语言本质上是一个复杂、错综复杂的人类表达系统,受语法规则支配。开发用于理解和掌握语言的有能力的AI算法是一项重大挑战。作为一种主要方法,语言建模在过去二十年中被广泛研究用于语言理解和生成,从统计语言模型发展到神
be_humble
·
2023-11-29 19:35
语言模型
人工智能
自然语言处理
【官方】Claude
LLM
大语言模型使用文档中文版
目录1介绍1.1开始使用Claude什么是Claude获取Claude访问权限与Claude的第一次聊天把Claude当作是一个外包员工一样交谈Claude“记得”整个线程需要记住的限制术语词典上下文窗口微调HHHLLMRLHF温度Token2提示词(Prompt)设计2.1设计提示词提示词响应“把内容喂到Claude的嘴里”提示长度2.2避免歧义2.2.1明确描述需求:2.2.2提供示例2.2.
ALLinLLM
·
2023-11-29 19:35
大模型落地
Claude
LLM
大模型
自然语言处理
LLM
大语言模型学习资料整理2308
2333331、吴恩达与OpenAI合作系列课程(中文版)《面向开发者的
LLM
入门课程》在线阅读地址:https://datawhalechina.github.io/prompt-engineering-for-developers
Mango_Holi
·
2023-11-29 19:05
语言模型
人工智能
自然语言处理
LLM
大语言模型
大语言模型的定义大语言模型(英文:LargeLanguageModel,缩写
LLM
),也称大型语言模型,是一种人工智能模型,旨在理解和生成人类语言。
summer_west_fish
·
2023-11-29 19:04
人工智能
语言模型
人工智能
自然语言处理
Langchain-Chatchat学习
参考:Langchain-Chatchat+阿里通义千问Qwen保姆级教程|次世代知识管理解决方案-知乎(zhihu.com)中文
LLM
生态观察模型就开源的部分而言,从一开始的MOSS[1]ChatGLM
wangqiaowq
·
2023-11-29 16:17
langchain
学习
通义千问 Qwen-7B-Chat-Int4 模型本地化部署
如需在本地或离线环境下运行本项目,需要首先将项目所需的模型下载至本地,通常开源
LLM
与Embedding模型可以从HuggingFace下载。
wangqiaowq
·
2023-11-29 16:46
人工智能
自然语言处理
Table-GPT:让大语言模型理解表格数据
llm
对文本指令非常有用,但是如果我们尝试向模型提供某种文本格式的表格数据和该表格上的问题,
LLM
更有可能产生不准确的响应。
天青色等烟雨..
·
2023-11-29 15:57
GPT
人工智能
gpt
TS版LangChain实战:基于文档的增强检索(RAG) | 京东云技术团队
LangChainLangChain是一个以
LLM
(大语言模型)模型为核心的开发框架,LangChain的主要特性:可以连接多种数据源,比如网页链接、本地PDF文件、向量数据库等允许语言模型与其环境交互封装了
京东云技术团队
·
2023-11-29 13:50
人工智能
前端
硬核干货
langchain
京东云
typescript
前端
RAG
深入解析:Peft Adapter与
LLM
融合
相关代码将全部上传到github:https://github.com/hjandlm/
LLM
_Train欢迎关注公众号代码解读导入包importargparsefromloguruimportloggerimporttor
hj_caas
·
2023-11-29 11:30
领域模型三阶段训练
人工智能
深度学习
LLM
Fine-Tuning大模型FT方法
Herewediscussfine-tuningLlama2withacoupleofdifferentrecipes.Wewillcovertwoscenarioshere:1.ParameterEfficientModelFine-TuningThishelpsmakethefine-tuningprocessmoreaffordableevenon1consumergradeGPU.Thes
WitsMakeMen
·
2023-11-29 11:20
人工智能
FlagEmbedding目前最好的sentence编码工具
FlagEmbedding专注于检索增强
llm
领域,目前包括以下项目:Fine-tuningofLM:LM-CocktailDenseRetrieval:LLMEmbedder,BGEEmbedding
WitsMakeMen
·
2023-11-29 11:49
人工智能
深度学习
机器学习
Encoder、Decoder和Encoder-Decoder
首先
LLM
有3种架构:Encoder-only、Decoder-only、encode-decode整体情况1、Encoder将可变长度的输入序列编码成一个固定长度的向量,比如在bert中应用的encoder
lanmengyiyu
·
2023-11-29 08:38
一点一滴NLP
解码器
编码器
encoder
decoder
nlp
Long-Context下
LLM
模型架构全面介绍
深度学习自然语言处理原创作者:cola随着ChatGPT的快速发展,基于Transformer的大型语言模型(
LLM
)为人工通用智能(AGI)铺平了一条革命性的道路,并已应用于知识库、人机界面和动态代理等不同领域
zenRRan
·
2023-11-29 07:24
LLM
、ChatGPT与多模态必读论文150篇
为了写本ChatGPT笔记,我和10来位博士、业界大佬,在过去半年翻了大量中英文资料/paper,读完ChatGPT相关技术的150篇论文,当然还在不断深入。由此而感慨:读的论文越多,你会发现大部分人对ChatGPT的技术解读都是不够准确或全面的,毕竟很多人没有那个工作需要或研究需要,去深入了解各种细节因为半年内150篇这个任务,让自己有史以来一篇一篇一行一行读,之前看的比较散、不系统,抠的也不细
机器学习社区
·
2023-11-29 05:41
机器学习
chatgpt
大模型
人工智能
算法
语言模型
大模型中的各种模型名词概念
目录一、模型TransformerGPT(GPT-3、GPT-3.5、GPT-4)BERTRoBERTaT5XlNetGShardSwitchTransformerInstrucGPTChatGPT大模型
LLM
小湘西
·
2023-11-29 04:06
AI
语言模型
人工智能
机器学习
自然语言处理
基于LangChain的
LLM
应用开发7——代理
君子性非异也,善假于物也。普通人使用大语言模型,很容易就把大语言模型当作百科全书。的确,使用ChatGPT的时候,很容易让我们有错觉,感觉它已经记忆并且学会了大量从互联网上获取的信息:无论你问任何问题,几乎总能得到一个看似合理的答案(偶尔会装死说不懂某个问题,其实是程序拦截,由于某些原因不方便回答而已。)其实就目前大语言模型的水平而言,把大语言模型作为推理引擎更有用:给它提供一些文本或者其他信息来
fireshort
·
2023-11-29 04:30
ai
langchain
人工智能
python
基于LangChain的
LLM
应用开发6——评估
吾日三省吾身。前AI时代的应用程序,大多数语言都支持进行单元测试。单元测试是一种软件测试方法,它验证程序中的单独的代码单元是否按预期工作。代码单元是软件的最小可测试部分。在面向对象编程中,这通常是一个方法,无论是在基类(超类)、抽象类还是派生类(子类)中。单元测试通常由软件开发人员编写,用于确保他们所写的代码符合软件需求和遵循开发目标。AI时代单元测试可能会由GithubCopilot和Curso
fireshort
·
2023-11-29 04:00
ai
langchain
人工智能
万字详解,和你用RAG+LangChain实现chatpdf
像chatgpt这样的大语言模型(
LLM
)可以回答很多类型的问题,但是,如果只依赖
LLM
,它只知道训练过的内容,不知道你的私有数据:如公司内部没有联网的企业文档,或者在
LLM
训练完成后新产生的数据。
fireshort
·
2023-11-29 04:58
ai
langchain
人工智能
洛谷P3301 [SDOI2013]方程
欲求Cmnmodp如果p是比较小的素数,直接lucas定理求llC(lln,
llm
,llp){if(m>n)return0;returnfact[n]*inv(fact[n-m],p)%p*inv(fact
*ACoder*
·
2023-11-28 18:54
#
中国剩余定理
#
排列组合
LangChain 12调用模型HuggingFace中的Llama2和Google Flan t5
系列文章LangChain实现给动物取名字,LangChain2模块化prompttemplate并用streamlit生成网站实现给动物取名字LangChain3使用Agent访问Wikipedia和
llm
-math
AI架构师易筋
·
2023-11-28 15:51
LLM-Large
Language
Models
langchain
chatgpt
LLM
prompt
上一页
64
65
66
67
68
69
70
71
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他