草庐IT

paddle-pipelines

全部标签

深入浅出PaddlePaddle函数——paddle.zeros

分类目录:《深入浅出PaddlePaddle函数》总目录相关文章:·深入浅出PaddlePaddle函数——paddle.Tensor·深入浅出PaddlePaddle函数——paddle.ones·深入浅出PaddlePaddle函数——paddle.zeros·深入浅出PaddlePaddle函数——paddle.full·深入浅出PaddlePaddle函数——paddle.ones_like·深入浅出PaddlePaddle函数——paddle.zeros_like·深入浅出PaddlePaddle函数——paddle.full_like创建一个形状为shape、数据类型为dtype且

自然语言处理 Paddle NLP - 信息抽取技术及应用

1.什么是信息抽取即自动从无结构或半结构的文本中抽取出结构化信息的任务(病历抽取)2.实体抽取3.关系抽取4.事件抽取信息抽取和知识图谱是一个上下游的关系。抽取的结果,可以组装成知识图谱(一种存储知识的结构)医疗、金融、法律,三大行业用得比较多从问诊中抽取信息贷款审核,大量的纸质、DPF文件,需要将里面的信息进行匹配审核根据抽取结果在不在原文中对信息抽取分类这次我们只关注抽取式,不在原文中的情况需要参考生成方法抽取式:结果在原文中生成式:结果不在原文中,如果生成的结果需要一个知识做为辅助,就需要知识图谱,很多时候不需要知识图谱抽取式分类实体抽取关系抽取事件抽取信息抽取的通用评测指标,所有的信息

ValueError: The device should not be ‘gpu‘, since PaddlePaddle is not compiled with CUDA问题解决(Paddle)

一、问题描述两个问题一并解决:Traceback(mostrecentcalllast): File"run_trainer_ernie_gen.py",line120,in  paddle.set_device(trainer_params.get("PADDLE_PLACE_TYPE","cpu")) File"/opt/conda/envs/ERNIE-GEN/lib/python3.7/site-packages/paddle/device/__init__.py",line204,inset_device  place=_convert_to_place(device) File"/

ValueError: The device should not be ‘gpu‘, since PaddlePaddle is not compiled with CUDA问题解决(Paddle)

一、问题描述两个问题一并解决:Traceback(mostrecentcalllast): File"run_trainer_ernie_gen.py",line120,in  paddle.set_device(trainer_params.get("PADDLE_PLACE_TYPE","cpu")) File"/opt/conda/envs/ERNIE-GEN/lib/python3.7/site-packages/paddle/device/__init__.py",line204,inset_device  place=_convert_to_place(device) File"/

自然语言处理 Paddle NLP - 快递单信息抽取 (ERNIE 1.0)

文档检索:需要把业务问题拆解成子任务。文本分类->文本匹配->等任务->PanddleAPI完成子任务->子任务再拼起来介绍在2017年之前,工业界和学术界对文本处理依赖于序列模型RecurrentNeuralNetwork(RNN).图1:RNN示意图基于BiGRU+CRF的快递单信息抽取项目介绍了如何使用序列模型完成快递单信息抽取任务。近年来随着深度学习的发展,模型参数的数量飞速增长。为了训练这些参数,需要更大的数据集来避免过拟合。然而,对于大部分NLP任务来说,构建大规模的标注数据集非常困难(成本过高),特别是对于句法和语义相关的任务。相比之下,大规模的未标注语料库的构建则相对容易。为了

jenkins pipeline(脚本式)

jenkinspipeline(脚本式)1.pipeline定义变量Groovy中的变量可以通过两种方式定义-使用数据类型(包括byte、short、int、long、float、double、char、Boolean和String)的本地语法,或者使用def关键字注意:使用数据类型的本地语法后期不能更改成其他类型Goovy中的变量作用域绑定域:脚本内的全局作用域,相当于该脚本对象的成员变量。如果没有定义过变量(可以直接使用或仅仅初始化但未声明),其作用域即是绑定域。本地域:脚本内的代码块。如果是定义过的变量,其作用域就是本地域,脚本中声明的方法访问不了本地域defstr1="hello1"/

anaconda安装paddle(安装CUDA,CUDNN)

前言为什么会写这样一篇呢,应该早晚会用到paddlelite,所以paddle还是要学的,与其在飞桨平台上跑,不如在自己电脑上跑。我以为安装paddle只需要三行代码:#打开AnacondaPromptcondacreate-npaddlepython=3.9condaactivatepaddlepython-mpipinstallpaddlepaddle-gpu==2.4.0.post116-fhttps://www.paddlepaddle.org.cn/whl/windows/mkl/avx/stable.html然后就可以快乐地荡起飞桨……实则1.安装paddle前两步不变,pytho

anaconda安装paddle(安装CUDA,CUDNN)

前言为什么会写这样一篇呢,应该早晚会用到paddlelite,所以paddle还是要学的,与其在飞桨平台上跑,不如在自己电脑上跑。我以为安装paddle只需要三行代码:#打开AnacondaPromptcondacreate-npaddlepython=3.9condaactivatepaddlepython-mpipinstallpaddlepaddle-gpu==2.4.0.post116-fhttps://www.paddlepaddle.org.cn/whl/windows/mkl/avx/stable.html然后就可以快乐地荡起飞桨……实则1.安装paddle前两步不变,pytho

自然语言处理 Paddle NLP - 文本语义相似度计算(ERNIE-Gram)

基于预训练模型ERNIE-Gram实现语义匹配1.背景介绍文本语义匹配任务,简单来说就是给定两段文本,让模型来判断两段文本是不是语义相似。在本案例中以权威的语义匹配数据集LCQMC为例,LCQMC数据集是基于百度知道相似问题推荐构造的通问句语义匹配数据集。训练集中的每两段文本都会被标记为1(语义相似)或者0(语义不相似)。更多数据集可访问千言获取哦。例如百度知道场景下,用户搜索一个问题,模型会计算这个问题与候选问题是否语义相似,语义匹配模型会找出与问题语义相似的候选问题返回给用户,加快用户提问-获取答案的效率。例如,当某用户在搜索引擎中搜索“深度学习的教材有哪些?”,模型就自动找到了一些语义相

自然语言处理 Paddle NLP - 词向量应用展示

词向量(Wordembedding),即把词语表示成实数向量。“好”的词向量能体现词语直接的相近关系。词向量已经被证明可以提高NLP任务的性能,例如语法分析和情感分析。PaddleNLP已预置多个公开的预训练Embedding,您可以通过使用paddlenlp.embeddings.TokenEmbedding接口加载各种预训练Embedding。本篇教程将介绍paddlenlp.embeddings.TokenEmbedding的使用方法,计算词与词之间的语义距离,并结合词袋模型获取句子的语义表示。字典:有字,有索引(位置编码),就构成了一个字典,如下表调词向量,是通过编码,去查词向量矩阵,