帮你卷赢偕行！2023年顶级NLP技能、框架、平台和语言汇总

新智元报道

编辑：Britta

【新智元导读】在已往几年中，自然语言处理处罚 (NLP) 的着名度不绝进步，我们检察了高出 25,000 个与 NLP 相干的工作形貌，这里是您在 NLP 职业中应该相识的最告急的技能、框架、编程语言和云服务。

老板们正在探求特定的技能组合、专业知识和工作流程，而这些技能与平台无关。

下图体现了20种需求技能，包罗NLP根本知识和更广泛的数据科学专业知识。

自然语言处理处罚根本（NLP）

如图表所示，老板最看重的NLP技能是NLP根本知识。与客岁相比，雇主对具有数据分析技能的人需求激增。

这意味着我们不能只是相识平台，而要相识NLP是怎样作为一项核心技能运作的。如果你不知道怎样应用Transformer、分类、语言学、标题回复、感情分析、主题建模、呆板翻译、语音辨认、定名实体辨认等核心NLP技能，那么知道光是知道spaCy怎样工作，也没有什么意义。

呆板学习与深度学习

呆板学习是根本的数据科学技能，而深度学习是NLP的根本。

把握这两者将证明您相识数据科学，进而相识NLP。由于雇主大多盼望人才可以利用预练习模子和Transformer。

研究

NLP必要与最新的论文和模子保持同步。公司发现NLP是AI的最佳应用之一，无论是什么行业的公司都云云。

因此，相识或找到精确的模子、工具和框架来应用于 NLP 的许多差别用例，这必要一个强大的研究重心。

数据科学根本

在相识呆板学习这一核心技能之后，相识编程和盘算机科学根本知识，会表明你在该范畴有坚固的根本。盘算机科学、数学、统计学、编程和软件开发都是NLP项目中所需的技能。

云盘算、API 和数据工程

NLP专家不会直接在他们的个人条记本电脑上举行感情分析。雇主们正在探求可以或许处理处罚更多数据工程全栈的NLP专家，像是可以或许利用API，创建数据管道，构建工作流程管理，并在基于云的平台上完成这齐备的人才。

NLP平台和工具

除了技能和专业知识之外，另有一些特定的平台、工具和语言是老板们特殊看重的。下面的图表体现了现在盛行的平台。这个名单并没有席卷全部平台，以是各人最好是随时更新、查找一下盛行的新工具和框架。

呆板学习框架

除了一样寻常的呆板学习和深度学习之外，另有一些框架是NLP项目标核心。

TensorFlow因其在ML和神经网络的机动性而受到青睐，PyTorch因其在NLP方面的易用性和天赋计划而受到接待，scikit-learn则广泛用于分类和聚类。

固然只知道一个平台已经很锋利了，但通过相识这三个或更多的平台，我们可以变得更机动，更具顺应性，如许也就会更有竞争力。

与客岁相比，PyTorch现在是最受接待的呆板学习框架，而且已经逐步高出TensorFlow/Keras，成为ML任务的首选。

自然语言处理处罚框架

为了更详细地相识NLP，这里有几个框架，对于想要成为NLP的专业职员很有效。

NLTK因其更广泛的性子而受到赞赏，由于它可以或许为险些全部工作提取精确的算法。

同时，spaCy因其处理处罚多种语言的本领和支持词向量的本领而受到赞赏。

新加入的是Apache OpenNLP，告急用于常见的NLP任务和浅显利用，CoreNLP用于Java。

令人惊讶的是，有着深度学习架构的HuggingFace transformers并不在客岁的列表上。

在已往的几年里，BERT仍然非常受接待，只管谷歌的末了一次更新是在2019年底，但它仍然被广泛应用。

BERT之以是可以或许脱颖而出，是由于其对问答和基于上下文的相似性搜索有强大亲和力，如许它在谈天呆板人以及其他相干应用步伐中也能体现得相称可靠。

BERT以致思量了单词的上下文，从而可以得到与各个查询和任务相干的更正确的结果。

数据工程平台

数据管道有助于文本数据的运动，特殊是对于实时数据流和基于云的应用。而在这个范畴，只管其他平台还在强大，Spark仍然是数据管道的向导者。

它以致另有一个更详细的版本，Spark NLP。它是一个专门用于语言任务的库。尤其是在医疗保健范畴，Spark NLP得到了大量应用——这是一个拥有大量数据的范畴，含有许多医疗记录和医学数据。

NLP编程语言

Python作为NLP的首选编程语言，不绝遥遥领先，这一点应该不出各人所料。

许多盛行的NLP框架，如NLTK和spaCy，都是基于Python的，以是成为Python配套语言的专家是很故意义的。

相识一些SQL也是必不可少的。Java有许多为该语言计划的库，包罗CoreNLP、OpenNLP等。

自然语言处理处罚云平台

云服务是2022年的常态，以是我们看到一些服务提供商变得越来越受接待。

AWS云、Azure云和其他都与许多其他框架和语言兼容，它们也就因此成为全部NLP技能的须要条件。与此同时，谷歌云也开始崭露锋芒。

总的来说，如果你想点亮一个新的技能点，得到一项稀缺的、永不外期的、广泛利用的技能，那么大概现在是时间学习NLP或其他核心数据科学技能了！

参考资料：

https://odsc.medium.com/top-nlp-skills-frameworks-platforms-and-languages-for-2023-cb05b8b5624b