原

《自然语言处理实战入门》 ---- 第5课 ：分词评测及语料库简介

VIP文章 2019年07月13日 19:00:30 阅读数 32
本文为VIP专属文章，单击开通VIP

自动作文评分与自然语言处理

07-06 阅读数 0

自动作文评分与自然语言处理　　前些天一个学弟发邮件咨询有关自动作文评分的问题，在了解了这是他们导师布置的一个任务后，出于做统计机器翻译的惯性思维，我马上想到的是利用语言模型对作文进行流利度方面的打分，... 博文 来自： weixin_30905981的博客

还能输入1000个字符

《自然语言处理实战入门》---- 第1课：自然语言处理简介

04-01 阅读数 282

文章大纲个人简介自然语言处理简介1.Nlp技术体系简介1.1基础技术1.2Nlp核心技术1.3NlP+（高端技术）2.知名NLP服务系统简介2.1汉语分词系统ICTCLAS2.2哈工大语言云（Lang... 博文 来自： shiter编写程序的艺术

自然语言处理---语料库

03-13
上学期自己下载的新闻，新闻时间是在2009年12月末
下载

自然语言处理语料库

03-22 阅读数 752

搜狗实验室数据资源http://www.sogou.com/labs/resource/list_pingce.php自然语言处理与信息检索共享平台http://www.nlpir.org/?acti... 博文 来自： 张大鹏(朋)的专栏

《自然语言处理实战入门》 ---- 第4课 ：中文分词原理及相关组件简介 之 语言学与分词技术简介

07-13 阅读数 126

本节课程《中文分词原理及相关组件简介》1.汉语语言学简介2.主要分词服务手段及方法（传统的，深度学习的，云厂商的）3.分词原理最佳实践（以jieba为例）... 博文 来自： shiter编写程序的艺术

自然语言处理基础技术之分词实战

11-24 阅读数 1289

声明：转载请注明出处：https://blog.csdn.net/m0_37306360/article/details/84404130更多学习笔记关注：公众号:StudyForAI知乎专栏:htt... 博文 来自： yuquanle的博客

《自然语言处理实战入门》 ---- 第2课 ：网络爬虫简介

04-14 阅读数 212

我们平时做自然语言处理，机器学习，都是希望能够有丰富的训练数据集，这样才能获取质量上乘的模型。在大数据时代，处理数据已经不再是是问题了，spark，hadoop，Elasticsearch提供了海量甚... 博文 来自： shiter编写程序的艺术

自然语言处理-分词

04-17
自然语言处理 分词 北邮 将一段没有空格的文本就行分词 效果很好
下载

搜狗语料库（已分词）

11-07
搜狗语料库，自己用结巴分词分好的。（为什么摘要必须大于50个字）
下载

汉语分词语料库

05-23
CTB6汉语分词语料库，可以拿来做分词任务。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。
下载

自然语言处理 之 语料库相关（三）

11-10 阅读数 1333

一：针对nltk语料库的相关处理函数      1、导入语料库的方法    1）一步到位导入语料库如：导入gutenberg的语料库     nltk.corpus.gutenberg.fileids... 博文 来自： Richard7412的博客

搜狗分类分词语料库

12-02
里面是2015年搜狗新闻，根据12大学科分类的中文分词资源，包含1127万字。
下载

【自然语言处理】浅谈语料库

11-05 阅读数 2754

文章目录【自然语言处理】浅谈语料库前言一、浅谈语料库1、语料和语料库2、语料库语言学3、建议语料库的意义二、语料库深入了解1、语料库划分与种类2、语料库构建原则3、语料标注的优缺点三、自然语言处理工具... 博文 来自： 贾继康的博客

网易新闻语料库 文本分类 自然语言处理

12-11
网易新闻语料库 文本分类 自然语言处理 网上基本找不到哦~~
下载

python自然语言处理-就职演说语料库

04-13 阅读数 826

python自然语言处理-就职演说语料库，小程序统计词汇america和citizen随时间推移的使用情况这个小程序有点小bug... 博文 来自： Coder的不平凡

自然语言处理语料库--网易新闻

03-13
自己提取的，纯度比较高，欢迎大家下载使用
下载

自然语言处理之中英语料库

08-11 阅读数 1050

国内可用免费语料库（凡没有标注不可用的链接均可用）(一)国家语委1.国家语委现代汉语语料库http://www.cncorpus.org/现代汉语通用平衡语料库现在重新开放网络查询了。重开后的在线检索... 博文 来自： ZenG的博客

自然语言处理中语料库的理解

07-24 阅读数 928

    语料库中存放的是在语言实际使用中真实出现过的语言材料；语料库是以电子计算机为载体承载语言知识的基础资源；真实语料需要经过加工(分析和处理)，才能成为有用的资源。语料库(corpus，复数cor... 博文 来自： 默默耕耘，阶段爆发，取长补短，修炼身心

中文自然语言处理入门实战

07-03 阅读数 1万+

课程介绍NLP作为AI技术领域中重要的分支，随着其技术应用范围不断扩大，在数据处理领域占有越来越重要的地位。本达人课，作为中文自然语言处理边学边实战的入门级教程，以小数据量的“简易版”实例，通过实战带... 博文 来自： GitChat

(废弃)JOGL入门 第5课

09-13 阅读数 53

[size=large][color=red]声明：[/color][/size][color=blue]本来是想写点东西，记录学习的过程，并希望能帮助同我一样刚刚学习JOGL的朋友们可是由于没有明确... 博文 来自： MakerMyself的专栏

自然语言处理实战入门

03-15

随着人工智能的快速发展，自然语言处理和机器学习技术的应用愈加广泛。要想快速入门这些前沿技术总是存在着各种各样的困难，本教程力求为同学们对该领域整体概况有一个明晰的认识，并选择网络爬虫，汉语分词，可视化，文本分类等几个常见的应用领域和场景进行基于python语言的实战化入门介绍。<br />

《自然语言处理实战入门》 ---- 第4课 ：中文分词原理及相关组件简介 之 汉语分词主要分词服务手段及方法

07-24 阅读数 70

分词算法介绍HMMCRF条件随机场（ConditionalRandomField，CRF）是在给定一组输入随机变量的条件下另一组输出随机变量的条件概率分布模型，其特点是假设输出随机变量构成马尔科夫随机... 博文 来自： shiter编写程序的艺术

第5课

08-29 阅读数 1

123131转载于:https://www.cnblogs.com/ZHONGZHENHUA/p/7446751.html 博文 来自： weixin_30487701的博客

小黄鸡语料库（分词以及未分词）

03-08
小黄鸡语料库，包含分词以及未分词，可以用于自然语言处理。
下载

第4第5课

03-11 阅读数 595

主要是学习了韩国数字和一些发音 下星期听课我们开始用交作业的形式学习韩文CSDN多了这个编辑器后出了好多问题郁闷... 博文

分词评测工具(bakeoff08)

12-08
bakeoff08评测系统, 可以对中文分词, 命名实体识别, 词性标注 进行评测
下载

《自然语言处理实战入门》 第4课 ：中文分词原理及相关组件简介 之 语言学与分词技术简介 参考资料.zip

07-30
《自然语言处理实战入门》 第4课 ：中文分词原理及相关组件简介的 主要内容 有如下三个部分： 博客链接：https://blog.csdn.net/wangyaninglm/article/details/90587705 汉语语言学简介...
下载

第1周第5课

12-15 阅读数 3

2019独角兽企业重金招聘Python工程师标准&gt;&gt;&gt;... 博文 来自： weixin_34163553的博客

自然语言处理入门（4）——中文分词原理及分词工具介绍

06-30 阅读数 5万+

本文首先介绍下中文分词的基本原理，然后介绍下国内比较流行的中文分词工具，如jieba、SnowNLP、THULAC、NLPIR，上述分词工具都已经在github上开源，后续也会附上github链接，以... 博文 来自： FlySky1991的专栏

自然语言处理入门——中文分词原理及分词工具介绍

07-17 阅读数 262

本文首先介绍下中文分词的基本原理，然后介绍下国内比较流行的中文分词工具，如jieba、SnowNLP、THULAC、NLPIR，上述分词工具都已经在github上开源，后续也会附上github链接，以... 博文 来自： myy_1314的博客

人民日报 语料库 分词 中文.zip

04-29
人民日报 语料库 分词 中文.zip 人民日报 语料库 分词 中文.zip 人民日报 语料库 分词 中文.zip
下载

统计自然语言处理（基于语料库的工作）

05-31 阅读数 877

编程技巧文字编码采用将文字映射到数字的方法，我们把文字类型，每个类型都有一个特定的数字对应（这里类型指什么？），可以使用一个很大的哈希表来维护，如果把字数限制到65000或者更少，效率会特别高，因为用... 博文 来自： continueOo的博客

小黄鸡-未分词-语料库

01-15
来源于人人网小黄鸡语料库，经过一部分处理后，但是并没有分词，可以用于对于中文的常用对话系统训练，也可以进行普通的中文自然语言处理。
下载

Fast.ai 深度学习实战课程第5课：NLP

06-15

本课程由 Jeremy Howard 教授开设，共8节。目的是让大家在不需要深入研究高水平数学问题的情况下，学习如何建立先进的深度学习模型。nJeremy Howard 教授结合自己参加 Kaggle 大赛并夺魁的经验认为，传统学院派的教学方式对于大多数学习者来说已经不适用，应该以问题为引导，以实践为驱动，尽快切入到核心理论和核心工具的使用上，掌握深度学习优模型的构建方法。

python自然语言处理之加载本地语料库

06-20 阅读数 887

python自然语言处理之加载本地语料库fromnltk.corpusimportPlaintextCorpusReader#语料库本地目录coupus_root="E:\\guoby\\temp\\... 博文 来自： 脚步丈量世界

用于自然语言处理的语料库——新浪新闻

03-13
我自己写的新闻解析器从网页中提取的，支持多页新闻，效果不错。
下载

自然语言处理第一讲：简介和概述

02-26 阅读数 1

这堂课将要回答的问题：1、什么是自然语言处理?2、为什么自然语言处理比较难?3、我们能够构建一个可以从文本中学习的程序吗?4、这门课程将包含哪些内容?一、什么是自然语言处理1、计算机将自然语言作为输入... 博文 来自： weixin_30565327的博客

Python自然语言处理之分词原理

06-17 阅读数 209

写在前面入坑自然语言处理，最基本的就是要做文本挖掘，而首先要做的就是文本的预处理。自然语言处理的主要流程可以表示为： 文本-&amp;gt;分句-&amp;gt;分词-&amp;gt;词性标注-&am... 博文 来自： Kaiyuan_sjtu的博客

自然语言处理1---分词

05-07 阅读数 106

1概述分词是自然语言处理的基础，分词准确度直接决定了后面的词性标注、句法分析、词向量以及文本分析的质量。英文语句使用空格将单词进行分隔，除了某些特定词，如howmany，NewYork等外，大部分情况... 博文 来自： 一米阳光-的博客

自然语言处理（一）规则分词

07-02 阅读数 31

一、中文分词技术简介在英语中，单词本身就是词的表达，一篇英语文章就是“单词”加分隔符（空格）来表示的，在汉语中，词以字为基本单位的，但是一篇文章的语义表达却依然是以词来划分的。因此，在处理中文文本时，... 博文 来自： curry3030的博客

自然语言处理--分词与特征提取

06-24 阅读数 21

1.基本文本处理技能分词的概念（分词的正向最大、逆向最大、双向最大匹配法）；词、字符频率统计；（可以使用Python中的collections.Counter模块，也可以自己寻找其他好用的库）语言模型... 博文 来自： qq_38290604的博客

常用的自然语言处理分词工具

09-06 阅读数 1366

中科院ICTCLAS分词东北大学NIUPARSER清华大学THULAC复旦大学FUNLPHanLPMMSEGJCSEGAnsjLTPLingPipeWORDMMSEG4JIK-ANALYZERSMAR... 博文 来自： 搬砖小工053

自然语言处理：汉语分词

05-18 阅读数 15

NLPIR/ICTCLAS汉语分词系统（http://ictclas.nlpir.org）PyNLPIR是该汉语分词系统的python封装版（http://pynlpir.readthedocs.io... 博文 来自： weixin_33901926的博客

自然语言处理之分词技术

08-01 阅读数 18

分词作为自然语言处理中的一项基本内容，是很多任务的基础，任何一门自然语言，分词难度参差不齐。比如中文分词与英文分词就存在很大的差别。在英文中，使用空格来进行分词，可以完成大部分的英文文本的分词任务；然... 博文 来自： CSAIWQYB

自然语言处理:分词方法

03-29 阅读数 443

正向最大匹配分词最大正向匹配(FMM)的基本思想是:假设自动分词词典中的最长词条所含汉字个数为Ｌ,则从左往右取被处理材料S1的前L个字作为匹配字段,查找分词词典。若词典中有这样的一个长度为L的相同词,... 博文 来自： wxb247217的博客

自然语言处理之_SentencePiece分词

05-26 阅读数 1689

1、说明 SentencePiece是一个google开源的自然语言处理工具包。网上是这么描述它的：数据驱动、跨语言、高性能、轻量级——面向神经网络文本生成系统的无监督文本词条化工具。 那么它究竟是干... 博文 来自： 谢彦的技术博客

自然语言处理-分词实验报告+源码

06-21
自然语言处理-分词实验报告+源码 自然语言处理-分词实验报告+源码
下载

自然语言处理--中文分词之机械分词

10-05 阅读数 2317

说到自然语言处理，对于中文首当其冲的就是分词。    和西方语言不同，中文句子中不像英语，每个单词间有空格隔开，而是全部连在一起，词间没有明显的界限。这就为我们的翻译、检索等等更高级的信息处理带来了不... 博文 来自： 吴家齐的专栏

自然语言处理——jieba分词

04-07 阅读数 24

1.基本分词函数与用法jieba.cut以及jieba.cut_for_search返回的结构都是一个可迭代的generator，可以使用for循环来获得分词后得到的每一个词语(unicode)jie... 博文 来自： 小可爱666的博客

没有更多推荐了，返回首页