6个高效的语言处理Python库,你用过几个?

开发 后端
最近一段时间Python已经成为数据科学行业中大火的编程语言,今天技术学派收集了一些较为高效的语言处理Python库。下面分享给大家。

最近一段时间Python已经成为数据科学行业中大火的编程语言,今天技术学派收集了一些较为高效的语言处理Python库。下面分享给大家。

1.NLTK

NLTK是构建Python程序以处理人类语言数据的领先平台。它提供了易于使用的界面,以及用于分类、标记化、词干化、标记、分析和语义推理的一套文本处理库。用于工业强度NLP库的包装器。

6个***效的语言处理Python库,你用过几个? 

项目地址:http://www.nltk.org/

2.Pattern

Pattern是Python编程语言的Web挖掘模块。它多有用于数据挖掘、自然语言处理、机器学习网络分析和<canvas>可视化。

6个***效的语言处理Python库,你用过几个? 

项目地址:https://pypi.org/project/pattern3/3.0.0/

3.Jieba

“结巴”中文分词:做***的 Python 中文分词组件。精确模式,试图将句子最精确地切开,适合文本分析;全模式,把句子中所有的可以成词的词语都扫描出来, 速度非常快,但是不能解决歧义;搜索引擎模式,在精确模式的基础上,对长词再次切分,提高召回率,适合用于搜索引擎分词。

6个***效的语言处理Python库,你用过几个? 

项目地址:https://github.com/fxsjy/jieba

4.TextBlob

TextBlob是一个用于处理文本数据的Python库。它提供了一个简单的API用于常见的自然语言处理(NLP)任务,如词性标注,名词短语提取,情感分析,分类,翻译等。

 

 

项目地址:http://textblob.readthedocs.io/en/dev/

5.SnowNLP

SnowNLP是一个python写的类库,可以方便的处理中文文本内容,是受到了TextBlob的启发而写的,由于现在大部分的自然语言处理库基本都是针对英文的,于是写了一个方便处理中文的类库,并且和TextBlob不同的是,这里没有用NLTK,所有的算法都是自己实现的,并且自带了一些训练好的字典。注意本程序都是处理的unicode编码,所以使用时请自行decode成unicode。

6个***效的语言处理Python库,你用过几个? 

项目地址:https://github.com/isnowfy/snownlp

6.TextGrocery

TextGrocery是一个基于LibLinear和结巴分词的短文本分类工具,特点是高效易用,同时支持中文和英文语料。

6个***效的语言处理Python库,你用过几个? 

项目地址:https://github.com/2shou/TextGrocery 

责任编辑:庞桂玉 来源: 今日头条
相关推荐

2021-04-15 11:28:55

微信技巧语言

2019-10-09 08:24:33

爬虫框架Python

2020-05-14 10:27:33

PythonGUI开发

2022-04-08 14:45:23

JavaScript框架/前端

2024-03-12 10:02:31

Python内存编程

2021-05-08 23:22:01

Python工具开发

2023-11-10 10:39:58

2018-05-24 14:15:06

Python 开源GitHub

2020-07-01 07:52:07

Java并发容器

2020-08-16 10:58:20

Pandaspython开发

2020-08-23 09:18:30

Pandas函数数据分析

2023-10-10 08:33:40

编程范式命令式编程

2023-06-27 07:31:02

动画库React参数

2021-03-16 09:48:51

FaustPython数据流

2023-11-22 07:42:01

2019-08-27 15:12:12

Linux操作系统Windows

2018-07-18 09:12:05

开发者Java工具

2016-10-27 13:37:18

开发语言编程

2019-10-17 16:02:44

高并发缓存浏览器

2019-10-28 09:53:42

Java开发结构
点赞
收藏

51CTO技术栈公众号