自然语言处理
-
GPT3.5, InstructGPT和ChatGPT的关系
GPT-3.5 GPT-3.5 系列是一系列模型,从 2021 年第四季度开始就使用文本和代一起进行训练。以下模型属于 GPT-3.5 系列: code-davinci-002 是…
-
使用langchain打造自己的大型语言模型(LLMs)
我们知道Openai的聊天机器人可以回答用户提出的绝大多数问题,它几乎无所不知,无所不能,但是由于有机器人所学习到的是截止到2021年9月以前的知识,所以当用户询问机器人关于202…
-
数据分析之jieba分词使用详解
在所有人类语言中,一句话、一段文本、一篇文章都是有一个个的词组成的。词是包含独立意义的最小文本单元,将长文本拆分成单个独立的词汇的过程叫做分词。分词之后,文本原本的语义将被拆分到在…
-
一文读懂“大语言模型”
1、背景 本文基于谷歌云的官方视频:《Introduction to Large Language Models》 ,使用 ChatGPT4 整理而成,希望对大家入门大语言模型有帮…
-
elasticsearch 内网下如何以离线的方式上传任意的huggingFace上的NLP模型(国内避坑指南)
es自2020年的8.x版本以来,就提供了机器学习的能力。我们可以使用es官方提供的工具eland,将hugging face上的NLP模型,上传到es集群中。利用…
-
Word2Vec模型——将文本转换成向量的方法
在美赛的时候,用了一下这个模型,发一下。 Word2Vec是一种用于将文本转换为向量表示的技术。它是Google在2013年开发的一种工具,主要用于…
-
语言模型在人工智能能源领域的应用
1.背景介绍 1. 背景介绍 人工智能(AI)能源领域的应用正在逐渐成为一个热门话题。随着计算能力的不断提高和数据的不断积累,人工智能技术已经开始应用于能源领域,为我们的生活带来了…
-
【Tensorflow+自然语言处理+LSTM】搭建智能聊天客服机器人实战(附源码、数据集和演示 超详细)
需要源码和数据集请点赞关注收藏后评论区留言私信~~~ 一、自然语言处理与智能 自然语言处理技术是智能客服应用的基础,在自然语言处理过程中,首先需要进行分词处理,这个过程通常基于统计…
-
Meta最新模型LLaMA细节与代码详解
Meta最新模型LLaMA细节与代码详解 0. 简介 1. 项目环境依赖 2. 模型细节 2.1 RMS Pre-Norm 2.2 SwiGLU激活函数 2.3 RoPE旋转位置编…
-
BERT详解
什么是BERT BERT是一种预训练语言模型(pre-trained language model, PLM),其全称是Bidirectional Encoder Represen…
-
短剧时代即将来临?AI 自动生成剧本和多场景长视频
近年来随着扩散模型(diffusion models)的进步和发展,给定文本提示进行高质量视频生成技术有着显著的提升。这些技术方案大多针对已有的二维图像扩散模型进行拓展,将图像二维…
-
基于Python+WaveNet+CTC+Tensorflow智能语音识别与方言分类—深度学习算法应用(含全部工程源码)
目录 前言 总体设计 系统整体结构图 系统流程图 运行环境 Python 环境 Tensorflow 环境 模块实现 1. 方言分类 数据下载及预处理 模型构建 模型训练及保存 2…
-
Rabbit R1是一款AI驱动的小工具,可以代替你使用应用程序
每周跟踪AI热点新闻动向和震撼发展 想要探索生成式人工智能的前沿进展吗?订阅我们的简报,深入解析最新的技术突破、实际应用案例和未来的趋势。与全球数同行一同,从行业内部的深度分析…
-
【ChatGPT】使用 GPT-4 探索大模型在“智能数据应用”领域的应用思路:NLP —> DSL —> SQL(ChatGPT DSL 能力挖掘) 2
【ChatGPT】使用 GPT-4 探索大模型在“智能数据应用”领域的应用思路:NLP —> DSL —> SQL(ChatGPT DSL 能力挖掘) 2 user: 这是SQL …
-
探索图文处理的未来:知名学府与合合信息团队分享NLP实践经验,人工智能引领技术革新
相信最近很多朋友关注的公众号和短视频号都有关于ChatGPT的文章或者视频,对此我就不再过多描述“生成式人工智能”是促成ChatGPT落地的重要技术,“ChatGPT之父”阿尔特曼…
