【pre】在看一篇公众号推文的时候,里面有这么一句话: 诶,看这意思,CV,NLP,RL,GNN是DL的纵向领域?其他三个尚且眼熟,但RL是什么呢?于是我去阅读了1、2,把我觉得有用的简单整理一下。【content】1、AI、ML、RL、DL的关系(1)AI:人工智能(ArtificialIntelligence,AI)是研发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系统的一门新的技术科学。(2)ML:机器学习(MachineLearning,ML)通过算法、使用历史数据进行训练,训练完成之后会产生模型。当提供新的数据时,将使用训练产生的模型进行预测。(3)RL:表示学习(Repre
【NLP文章阅读】Zero-ShotInformationExtractionviaChattingwithChatGPT1模型创新2前期调研2.1难以解决的问题3Method3.1方法3.2数据集3.2.1RE3.2.2NER3.2.3EE3.3评价指标3.3.1RE3.3.2NER3.3.3EE4效果转载和使用规则:更多论文解读请关注:NLP_paper,如需转载文章需要为我的github项目star,并声明文章来源1模型创新零样本信息提取(InformationExtraction)旨在从未注释的文本中构建IE系统。由于很少涉及人类干预,这是一项具有挑战性的工作。零样本IE具有挑战性但值
【NLP文章阅读】Zero-ShotInformationExtractionviaChattingwithChatGPT1模型创新2前期调研2.1难以解决的问题3Method3.1方法3.2数据集3.2.1RE3.2.2NER3.2.3EE3.3评价指标3.3.1RE3.3.2NER3.3.3EE4效果转载和使用规则:更多论文解读请关注:NLP_paper,如需转载文章需要为我的github项目star,并声明文章来源1模型创新零样本信息提取(InformationExtraction)旨在从未注释的文本中构建IE系统。由于很少涉及人类干预,这是一项具有挑战性的工作。零样本IE具有挑战性但值
引言本文是七月在线《NLP中的对话机器人》的视频笔记,主要介绍FAQ问答型聊天机器人的实现。FAQ问答机器人FAQ就是一些常见问题与回答,比如https://letsencrypt.org/docs/faq/。但是我们要做的不是一问一答形式的,而是类似stackoverflow那种一问多答,即包括用户提问、网友回答和最佳答案。有人提问,然后会有人在上面回复,每个问题可能有多个回答。数据集仓库地址:https://github.com/SophonPlus/ChineseNlpCorpus数据集我们先来了解下数据集。可以看到,有4个字段,其中标题和问题类似发帖时的标题和正文,问题可以为空。剩下的
一些群友写的文档,干货很多有关GPT/AIGC/LLM/NLP/ChatGPT,干货很多,原幕布的产品负责。https://gofurther.feishu.cn/docx/Enofdl25BotoVrxth8ec4rNBn5c?scene=multi_page&sub_scene=messageAIGC交流工具沉淀整理,群主整理的https://bytedance.feishu.cn/base/AIMAbnJxQaNgSGsBAtwcdAkLnvf?table=tblmZTd8VuUOOONh&view=
分类目录:《人工智能与大数据面试指南》总目录《人工智能与大数据面试指南》系列下的内容会持续更新,有需要的读者可以收藏文章,以及时获取文章的最新内容。自然语言处理(NLP)领域有哪些常见任务?基础任务中文分词:将一串连续的字符构成的句子分割成词语序列子词切分:将一个单词切分为若干连续的片段词性标注(Part-Of-Speech,POS):标注词语在句子中扮演的语法角色命名实体识别(NamedEntityRecognition,NER):识别文本中具有特定意义的实体,主要包括人名、地名、机构名、专有名词等句法分析(SyntacticParsing):给定一个句子,分析句子的句法成分信息,例如主谓宾
常见的对话系统个人助手•AppleSiri,AmazonAlexa,BaiduXiaodu客户服务•餐厅预定、商品咨询、债务催收休闲娱乐•MicrosoftXiaoIce,Replika放域对话系统检索式系统生成式系统检索式系统生成模型Sequence-to-sequenceGenerativePre-trainingModelsSequence-to-sequenceGenerativePre-trainingModelsBERT使用了双向注意力机制,每个token可以向左向右看到各个tokenGPT使用了单向注意力机制(从左到右),是一个生成模型,每个token只能看到自己和前他面的词,只
什么是任务型对话:任务型:用于帮助用户完成某领域的特定任务,例如订餐、查天气、订票等闲聊型:也称作开放域对话系统,目标是让用户持续的参与到交互过程,提供情感陪伴问答型:提供知识满足,具体类型比较多,如图谱问答、表格问答、文档问答等Pipeline型任务型对话系统什么是NLU?NLU(自然语言理解):是指将用户表述映射为结构化的语义表示,典型的结构化语义表示是意图+词槽的形式。意图:是指对话中用户想要表达的目的,比如订票,查天气等词槽:是指用户表述中,与任务相关的核心语义元素意图分类+词槽识别==>文本分类+序列标注什么是DST?DS(对话状态):是指将t时刻的对话表示为可供系统选择下一时刻动作
视频:https://aistudio.baidu.com/aistudio/course/introduce/24177?sharedLesson=1490529&sharedType=2&sharedUserId=2631487&ts=1687144071539课件:https://aistudio.baidu.com/aistudio/course/introduce/24177?sharedLesson=1567917&sharedType=2&sharedUserId=2631487&ts=1687144083956机器同传技术及应用从机器翻译到机器同传同传关键问题与解决方案中英语音
什么是机器翻译机器翻译质量的自动评价从统计机器翻译到神经网络机器翻译多语言/多领域/多模态的翻译应用神经网络机器翻译面临的挑战视频:https://aistudio.baidu.com/aistudio/course/introduce/24177?sharedLesson=1480611&sharedType=2&sharedUserId=2631487&ts=1687143971537课件:https://aistudio.baidu.com/aistudio/course/introduce/24177?sharedLesson=1718790&sharedType=2&sharedUs