草庐IT

帮你卷赢同行!2023年顶级NLP技能、框架、平台和语言汇总

新智元 2023-03-28 原文
老板们正在寻找特定的技能组合、专业知识和工作流程,而这些技能与平台无关。

下图显示了20种需求技能,包括NLP基础知识和更广泛的数据科学专业知识。

自然语言处理基础(NLP)

如图表所示,老板最看重的NLP技能是NLP基础知识。与去年相比,雇主对具有数据分析技能的人需求激增。

这意味着我们不能只是了解平台,而要了解NLP是如何作为一项核心技能运作的。如果你不知道如何应用Transformer、分类、语言学、问题回答、情感分析、主题建模、机器翻译、语音识别、命名实体识别等核心NLP技能,那么知道光是知道spaCy如何工作,也没有什么意义。

机器学习与深度学习

机器学习是基本的数据科学技能,而深度学习是NLP的基础。

掌握这两者将证明您了解数据科学,进而了解NLP。因为雇主大多希望人才可以使用预训练模型和Transformer。

研究

NLP需要与最新的论文和模型保持同步。公司发现NLP是AI的最佳应用之一,无论是什么行业的公司都如此。

因此,了解或找到正确的模型、工具和框架来应用于 NLP 的许多不同用例,这需要一个强大的研究重心。

数据科学基础

在了解机器学习这一核心技能之后,了解编程和计算机科学基础知识,会表明你在该领域有坚实的基础。计算机科学、数学、统计学、编程和软件开发都是NLP项目中所需的技能。

云计算、API 和数据工程

NLP专家不会直接在他们的个人笔记本电脑上进行情感分析。雇主们正在寻找能够处理更多数据工程全栈的NLP专家,像是能够使用API,建立数据管道,构建工作流程管理,并在基于云的平台上完成这一切的人才。

NLP平台和工具

除了技能和专业知识之外,还有一些特定的平台、工具和语言是老板们特别看重的。下面的图表显示了现在流行的平台。这个名单并没有囊括所有平台,所以大家最好是随时更新、查找一下流行的新工具和框架。

机器学习框架

除了一般的机器学习和深度学习之外,还有一些框架是NLP项目的核心。

TensorFlow因其在ML和神经网络的灵活性而受到青睐,PyTorch因其在NLP方面的易用性和先天设计而受到欢迎,scikit-learn则广泛用于分类和聚类。

虽然只知道一个平台已经很厉害了,但通过了解这三个或更多的平台,我们可以变得更灵活,更具适应性,这样也就会更有竞争力。

与去年相比,PyTorch现在是最受欢迎的机器学习框架,并且已经慢慢超过TensorFlow/Keras,成为ML任务的首选。

自然语言处理框架

为了更具体地了解NLP,这里有几个框架,对于想要成为NLP的专业人员很有用。

NLTK因其更广泛的性质而受到赞赏,因为它能够为几乎所有工作提取正确的算法。

同时,spaCy因其处理多种语言的能力和支持词向量的能力而受到赞赏。

新加入的是Apache OpenNLP,主要用于常见的NLP任务和简易操作,CoreNLP用于Java。

令人惊讶的是,有着深度学习架构的HuggingFace transformers并不在去年的列表上。

在过去的几年里,BERT仍然非常受欢迎,尽管谷歌的最后一次更新是在2019年底,但它仍然被广泛应用。

BERT之所以能够脱颖而出,是因为其对问答和基于上下文的相似性搜索有强大亲和力,这样它在聊天机器人以及其他相关应用程序中也能表现得相当可靠。

BERT甚至考虑了单词的上下文,从而可以得到与各个查询和任务相关的更准确的结果。

数据工程平台

数据管道有助于文本数据的流动,特别是对于实时数据流和基于云的应用。而在这个领域,尽管其他平台还在壮大,Spark仍然是数据管道的领导者。

它甚至还有一个更具体的版本,Spark NLP。它是一个专门用于语言任务的库。尤其是在医疗保健领域,Spark NLP得到了大量应用——这是一个拥有大量数据的领域,含有很多医疗记录和医学数据。

NLP编程语言

Python作为NLP的首选编程语言,一直遥遥领先,这一点应该不出大家所料。

许多流行的NLP框架,如NLTK和spaCy,都是基于Python的,所以成为Python配套语言的专家是很有意义的。

了解一些SQL也是必不可少的。Java有许多为该语言设计的库,包括CoreNLP、OpenNLP等。

自然语言处理云平台

云服务是2022年的常态,所以我们看到一些服务提供商变得越来越受欢迎。

AWS云、Azure云和其他都与许多其他框架和语言兼容,它们也就因此成为所有NLP技能的必要条件。与此同时,谷歌云也开始崭露头角。

总的来说,如果你想点亮一个新的技能点,获得一项稀缺的、永不过时的、广泛使用的技能,那么也许现在是时候学习NLP或其他核心数据科学技能了!

有关帮你卷赢同行!2023年顶级NLP技能、框架、平台和语言汇总的更多相关文章

  1. ruby - 如何将脚本文件的末尾读取为数据文件(Perl 或任何其他语言) - 2

    我正在寻找执行以下操作的正确语法(在Perl、Shell或Ruby中):#variabletoaccessthedatalinesappendedasafileEND_OF_SCRIPT_MARKERrawdatastartshereanditcontinues. 最佳答案 Perl用__DATA__做这个:#!/usr/bin/perlusestrict;usewarnings;while(){print;}__DATA__Texttoprintgoeshere 关于ruby-如何将脚

  2. ruby - 寻找通过阅读代码确定编程语言的ruby gem? - 2

    几个月前,我读了一篇关于ruby​​gem的博客文章,它可以通过阅读代码本身来确定编程语言。对于我的生活,我不记得博客或gem的名称。谷歌搜索“ruby编程语言猜测”及其变体也无济于事。有人碰巧知道相关gem的名称吗? 最佳答案 是这个吗:http://github.com/chrislo/sourceclassifier/tree/master 关于ruby-寻找通过阅读代码确定编程语言的rubygem?,我们在StackOverflow上找到一个类似的问题:

  3. 华为OD机试用Python实现 -【明明的随机数】 2023Q1A - 2

    华为OD机试题本篇题目:明明的随机数题目输入描述输出描述:示例1输入输出说明代码编写思路最近更新的博客华为od2023|什么是华为od,od薪资待遇,od机试题清单华为OD机试真题大全,用Python解华为机试题|机试宝典【华为OD机试】全流程解析+经验分享,题型分享,防作弊指南华为o

  4. Unity 热更新技术 | (三) Lua语言基本介绍及下载安装 - 2

    ?博客主页:https://xiaoy.blog.csdn.net?本文由呆呆敲代码的小Y原创,首发于CSDN??学习专栏推荐:Unity系统学习专栏?游戏制作专栏推荐:游戏制作?Unity实战100例专栏推荐:Unity实战100例教程?欢迎点赞?收藏⭐留言?如有错误敬请指正!?未来很长,值得我们全力奔赴更美好的生活✨------------------❤️分割线❤️-------------------------

  5. 7个大一C语言必学的程序 / C语言经典代码大全 - 2

    嗨~大家好,这里是可莉!今天给大家带来的是7个C语言的经典基础代码~那一起往下看下去把【程序一】打印100到200之间的素数#includeintmain(){ inti; for(i=100;i 【程序二】输出乘法口诀表#includeintmain(){inti;for(i=1;i 【程序三】判断1000年---2000年之间的闰年#includeintmain(){intyear;for(year=1000;year 【程序四】给定两个整形变量的值,将两个值的内容进行交换。这里提供两种方法来进行交换,第一种为创建临时变量来进行交换,第二种是不创建临时变量而直接进行交换。1.创建临时变量来

  6. TimeSformer:抛弃CNN的Transformer视频理解框架 - 2

    Transformers开始在视频识别领域的“猪突猛进”,各种改进和魔改层出不穷。由此作者将开启VideoTransformer系列的讲解,本篇主要介绍了FBAI团队的TimeSformer,这也是第一篇使用纯Transformer结构在视频识别上的文章。如果觉得有用,就请点赞、收藏、关注!paper:https://arxiv.org/abs/2102.05095code(offical):https://github.com/facebookresearch/TimeSformeraccept:ICML2021author:FacebookAI一、前言Transformers(VIT)在图

  7. ruby - sinatra 框架的 MVC 模式 - 2

    我想开始使用“Sinatra”框架进行编码,但我找不到该框架的“MVC”模式。是“MVC-Sinatra”模式或框架吗? 最佳答案 您可能想查看Padrino这是一个围绕Sinatra构建的框架,可为您的项目提供更“类似Rails”的感觉,但没有那么多隐藏的魔法。这是使用Sinatra可以做什么的一个很好的例子。虽然如果您需要开始使用这很好,但我个人建议您将它用作学习工具,以对您来说最有意义的方式使用Sinatra构建您自己的应用程序。写一些测试/期望,写一些代码,通过测试-重复:)至于ORM,你还应该结帐Sequel其中(imho

  8. ruby - 如何保持我不常用的编程语言技能 - 2

    关闭。这个问题是off-topic.它目前不接受答案。想改进这个问题吗?Updatethequestion所以它是on-topic用于堆栈溢出。关闭11年前。Improvethisquestion我不经常使用ruby​​-通常它加起来相当于每两个月或更长时间编写一次脚本。我的大部分编程都是使用C++进行的,这与ruby​​有很大不同。由于我与ruby​​之间的差距如此之大,我总是忘记语言的基本方面(比如解析文本文件和其他简单的东西)。我想每天练习一些基本的东西,我想知道是否有一些我可以订阅的网站,并且会向我发送当天的Ruby问题或类似的东西。有人知道这样的站点/Internet服务吗?

  9. ruby-on-rails - 如果特定语言环境中缺少翻译,如何配置 i18n 以使用 en 语言环境? - 2

    如果特定语言环境中缺少翻译,如何配置i18n以使用en语言环境翻译?当前已插入翻译缺失消息。我正在使用RoR3.1。 最佳答案 找到相似的question这里是答案:#application.rb#railswillfallbacktoconfig.i18n.default_localetranslationconfig.i18n.fallbacks=true#railswillfallbacktoen,nomatterwhatissetasconfig.i18n.default_localeconfig.i18n.fallback

  10. ruby-on-rails - 如何通过 URL 更改语言环境? - 2

    在我的双语Rails4应用程序中,我有一个像这样的LocalesController:classLocalesController用户可以通过此表单更改其语言环境:deflocale_switcherform_tagurl_for(:controller=>'locales',:action=>'change_locale'),:method=>'get',:id=>'locale_switcher'doselect_tag'set_locale',options_for_select(LANGUAGES,I18n.locale.to_s)end这有效。但是,目前用户无法通过URL更改

随机推荐