https://index.zshipu.com/geek/tags/%E8%87%AA%E7%84%B6%E8%AF%AD%E8%A8%80%E5%A4%84%E7%90%86/ Recent content in 自然语言处理 on 知识铺的博客 Hugo -- gohugo.io zh-CN Tue, 15 Mar 2022 10:42:30 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E5%8C%BB%E7%96%97%E5%81%A5%E5%BA%B7%E9%A2%86%E5%9F%9F%E7%9A%84%E7%9F%AD%E6%96%87%E6%9C%AC%E8%A7%A3%E6%9E%90%E6%8E%A2%E7%B4%A2%E4%BA%8C/ Tue, 15 Mar 2022 10:42:30 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E5%8C%BB%E7%96%97%E5%81%A5%E5%BA%B7%E9%A2%86%E5%9F%9F%E7%9A%84%E7%9F%AD%E6%96%87%E6%9C%AC%E8%A7%A3%E6%9E%90%E6%8E%A2%E7%B4%A2%E4%BA%8C/ 丁香园大数据 NLP 文章发表于： 2019-12-31 医疗健康领域的短文本解析探索（一） 谈谈医疗健康领域的 Phrase Mining 前言 再来简单回顾一下之前内容，上一篇《 医疗健康领域的短文本解析探索（一）》我们简单的介绍了目前工业界常用的 concept/phrase 的自动化抽取和评估的方法，之后我们又介绍了两种结构化电子病历的方法，第一种构建 MeSH 语义树， https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E6%B7%B1%E5%BA%A6%E5%A5%BD%E6%96%87%E5%B9%B4%E5%BA%94%E7%94%A8%E5%92%8C%E5%95%86%E4%B8%9A%E5%8C%96%E8%B0%83%E6%9F%A5%E6%8A%A5%E5%91%8A/ Tue, 15 Mar 2022 09:28:47 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E6%B7%B1%E5%BA%A6%E5%A5%BD%E6%96%87%E5%B9%B4%E5%BA%94%E7%94%A8%E5%92%8C%E5%95%86%E4%B8%9A%E5%8C%96%E8%B0%83%E6%9F%A5%E6%8A%A5%E5%91%8A/ 近年来，自然语言处理技术已经取得了长足进步，成为应用范围最广泛，也是最为成熟的 AI 技术之一。但实际上，自然语言处理技术在商业化应用上却鲜有突破性进展，真正成功或者能够完美满足人们日常生活需求的产品并不多。 回首 2018 年，自然语言处理领域不乏进展和惊喜，比如谷歌提出的 BERT 模型打破 11 项世界纪录 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E7%AE%97%E6%B3%95%E5%B7%A5%E7%A8%8B%E5%B8%88%E8%82%A9%E4%B8%8A%E6%89%9B%E6%98%AF%E8%84%91%E5%AD%90%E4%B8%8D%E6%98%AF%E7%9A%AE%E7%90%83%E6%9C%80%E6%96%B0%E9%9D%A2%E8%AF%95%E9%A2%98/ Tue, 15 Mar 2022 09:24:26 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E7%AE%97%E6%B3%95%E5%B7%A5%E7%A8%8B%E5%B8%88%E8%82%A9%E4%B8%8A%E6%89%9B%E6%98%AF%E8%84%91%E5%AD%90%E4%B8%8D%E6%98%AF%E7%9A%AE%E7%90%83%E6%9C%80%E6%96%B0%E9%9D%A2%E8%AF%95%E9%A2%98/ 文末彩蛋：七月在线干货组最新升级的《名企AI面试100题》免费送！ 01 个人情况 本人是非计算机专业，毕业之后机缘巧合进入算法岗位， 跟七月结缘是计算机专业的学长推荐的七月的题库。 原工作中主要接触的是传统的机器学习算法，NLP也只是浅层了解，面试时发现仅有传统机器学习算法是不够的， 所以报 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E8%B0%88%E4%B8%80%E8%B0%88%E4%B8%AD%E8%AF%AD%E8%A8%80%E6%A8%A1%E5%9E%8B%E7%9A%84%E5%8F%91%E5%B1%95/ Tue, 15 Mar 2022 09:19:02 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E8%B0%88%E4%B8%80%E8%B0%88%E4%B8%AD%E8%AF%AD%E8%A8%80%E6%A8%A1%E5%9E%8B%E7%9A%84%E5%8F%91%E5%B1%95/ 作者：章立 美团算法工程师 未经作者允许 严禁转载！ 问题定义 一段文字，例如：今夜月色真美。代表的是什么含义？如果在春天温度适宜的 9、10 点站在阳台的人对你脱口而出地说出这句话，你会怎么理解这句话，亦或者你会怎么回应他(她)呢？ 这句话是十九世纪末的文学家 夏目漱石对 I love you 的英译日标注结果（ https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E5%B9%B4%E6%9C%88%E4%B8%AD%E6%97%AC%E8%85%BE%E8%AE%AF%E7%AE%97%E6%B3%95%E9%9D%A2%E8%AF%95%E9%A2%98%E9%81%93/ Tue, 15 Mar 2022 09:18:08 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E5%B9%B4%E6%9C%88%E4%B8%AD%E6%97%AC%E8%85%BE%E8%AE%AF%E7%AE%97%E6%B3%95%E9%9D%A2%E8%AF%95%E9%A2%98%E9%81%93/ 文末免费送电子书：七月在线干货组最新 升级的《名企AI面试100题》免费送！ 问题1：SVM 的 优化函数公式怎么写，代价函数是什么？ 线性可分支持向量机的最优化问题函数公式： 引入拉格朗日乘子，由拉格朗日对偶性可得代价函数如下： 问题2：随机森林是怎么回事，为什么树模型好用，为什么要发明随机 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E9%98%BF%E9%87%8C%E8%87%AA%E7%84%B6%E8%AF%AD%E8%A8%80%E5%A4%84%E7%90%86%E5%9C%A8%E5%BC%80%E6%94%BE%E6%90%9C%E7%B4%A2%E4%B8%AD%E7%9A%84%E5%BA%94%E7%94%A8/ Tue, 15 Mar 2022 09:17:59 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E9%98%BF%E9%87%8C%E8%87%AA%E7%84%B6%E8%AF%AD%E8%A8%80%E5%A4%84%E7%90%86%E5%9C%A8%E5%BC%80%E6%94%BE%E6%90%9C%E7%B4%A2%E4%B8%AD%E7%9A%84%E5%BA%94%E7%94%A8/ 阿里云 云栖社区 自然语言智能（NLP） 自然语言智能研究实现人与计算机之间用语言进行有效通信。它是融合语言学、心理学、计算机科学、数学、统计学于一体的科学。它涉及到自然语言和形式化语言的分析、抽取、理解、转换和产生等多个课题。 人工智能可以分为几个阶段 计算智能，指依靠计算强大的算力和海 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E7%99%BE%E5%88%86%E7%82%B9%E8%AE%A4%E7%9F%A5%E6%99%BA%E8%83%BD%E5%AE%9E%E9%AA%8C%E5%AE%A4%E6%99%BA%E8%83%BD%E6%A0%A1%E5%AF%B9%E7%9A%84%E6%8A%80%E6%9C%AF%E5%8E%9F%E7%90%86%E5%92%8C%E5%AE%9E%E8%B7%B5/ Tue, 15 Mar 2022 09:13:30 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E7%99%BE%E5%88%86%E7%82%B9%E8%AE%A4%E7%9F%A5%E6%99%BA%E8%83%BD%E5%AE%9E%E9%AA%8C%E5%AE%A4%E6%99%BA%E8%83%BD%E6%A0%A1%E5%AF%B9%E7%9A%84%E6%8A%80%E6%9C%AF%E5%8E%9F%E7%90%86%E5%92%8C%E5%AE%9E%E8%B7%B5/ 认知智能实验室 百分点科技稿 编者按: 大数据时代下各种文本信息爆炸，传统的文本分析处理工作逐渐被计算机取代。文本数据量越大，其中所包含的错误的总数也越多，通过校对工作来纠正文本中的错误显得尤其重要。传统的校对主要依赖人工，通过人来发现和纠正文本中的错误，人工校对效率低、强度大、周期长 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E5%85%B3%E9%94%AE%E7%9F%AD%E8%AF%AD%E6%8A%BD%E5%8F%96%E5%8F%8A%E4%BD%BF%E7%94%A8%E7%9A%84%E6%8A%80%E6%9C%AF%E5%AE%9E%E8%B7%B5/ Tue, 15 Mar 2022 09:08:33 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E5%85%B3%E9%94%AE%E7%9F%AD%E8%AF%AD%E6%8A%BD%E5%8F%96%E5%8F%8A%E4%BD%BF%E7%94%A8%E7%9A%84%E6%8A%80%E6%9C%AF%E5%AE%9E%E8%B7%B5/ AI 算法团队 zacbai 平安寿险 PAI 一、 全文框架概览 一、关键短语抽取简介 关键短语抽取 (keyphrase extraction)，指从文章中提取典型的、有代表性的短语，期望能够表达文章的关键内容。 关键短语抽取对于文章理解、搜索、分类、聚类都很重要。而高质量的关键短语抽取算法，还能有效助力构建知识图谱。 常见的关键短 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E5%8C%BB%E7%96%97%E5%81%A5%E5%BA%B7%E9%A2%86%E5%9F%9F%E7%9A%84%E7%9F%AD%E6%96%87%E6%9C%AC%E8%A7%A3%E6%9E%90%E6%8E%A2%E7%B4%A2%E4%B8%80/ Tue, 15 Mar 2022 09:08:27 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E5%8C%BB%E7%96%97%E5%81%A5%E5%BA%B7%E9%A2%86%E5%9F%9F%E7%9A%84%E7%9F%AD%E6%96%87%E6%9C%AC%E8%A7%A3%E6%9E%90%E6%8E%A2%E7%B4%A2%E4%B8%80/ 丁香园大数据 NLP 文章发表于： 2019-09-02 前言 简单的回顾一下，上一回我们说到短语挖掘（Phrase Mining），对非结构化文本中抽取出高质量的名词短语，用于解决专业领域的专业词典不足的问题。我们提到了韩家炜老师的三部曲 TopMine，segphrase 和 AutoPhrase，其用到的主要方法 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E8%87%AA%E7%84%B6%E8%AF%AD%E8%A8%80%E7%90%86%E8%A7%A3%E9%9A%BE%E5%9C%A8%E5%93%AA%E5%84%BF/ Tue, 15 Mar 2022 09:08:23 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E8%87%AA%E7%84%B6%E8%AF%AD%E8%A8%80%E7%90%86%E8%A7%A3%E9%9A%BE%E5%9C%A8%E5%93%AA%E5%84%BF/ 文章作者：刘知远 清华大学 副教授 内容来源：NLP日知录@知乎专栏 导读： 在微博和知乎上关注自然语言处理（NLP）技术的朋友，应该都对#NLP太难了#、#自然语言理解太难了#两个话题标签不陌生，其下汇集了各种不仅难煞计算机、甚至让人也发懵的费解句子或歧义引起的笑话。然而，这些例子只是让 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E5%B0%8F%E7%B1%B3%E5%9C%A8%E7%9F%A5%E8%AF%86%E8%A1%A8%E7%A4%BA%E5%AD%A6%E4%B9%A0%E7%9A%84%E6%8E%A2%E7%B4%A2%E4%B8%8E%E5%AE%9E%E8%B7%B5/ Tue, 15 Mar 2022 09:06:37 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E5%B0%8F%E7%B1%B3%E5%9C%A8%E7%9F%A5%E8%AF%86%E8%A1%A8%E7%A4%BA%E5%AD%A6%E4%B9%A0%E7%9A%84%E6%8E%A2%E7%B4%A2%E4%B8%8E%E5%AE%9E%E8%B7%B5/ 分享嘉宾：吕荣荣 小米 算法工程师 编辑整理：孟航程 出品平台：DataFunTalk 导读： 知识表示是知识获取与应用的基础，贯穿了小米知识图谱的构建与应用。本文将结合小米知识图谱的构建及小爱问答场景，介绍融合文本和知识图谱的知识表示学习方法，以及知识表示在知识图谱补全、实体链接、实体推荐 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E5%BC%80%E6%BA%90%E9%A1%B9%E7%9B%AE%E7%B2%BE%E9%80%89%E6%BF%80%E6%B4%BB%E5%8F%AF%E8%A7%86%E5%8C%96%E5%85%A8%E9%9D%A2%E5%9F%BA%E6%9C%AC%E9%9D%A2%E5%88%86%E6%9E%90%E5%8C%85/ Tue, 15 Mar 2022 09:06:27 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E5%BC%80%E6%BA%90%E9%A1%B9%E7%9B%AE%E7%B2%BE%E9%80%89%E6%BF%80%E6%B4%BB%E5%8F%AF%E8%A7%86%E5%8C%96%E5%85%A8%E9%9D%A2%E5%9F%BA%E6%9C%AC%E9%9D%A2%E5%88%86%E6%9E%90%E5%8C%85/ 文末免费送电子书：七月在线干货组最新 升级的《名企AI面试100题》免费送！ 项目一：EssayKiller_V2 基于开源GPT2.0的初代创作型人工智能 EssayKiller是基于OCR、NLP领域的最新模型所构建的生成式文本创作AI框架，目前第一版finetune模型针对高考作文 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E6%96%B0%E7%A7%80%E7%9A%84%E4%BC%98%E9%9B%85%E8%A7%A3%E8%AF%BB/ Tue, 15 Mar 2022 09:05:46 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E6%96%B0%E7%A7%80%E7%9A%84%E4%BC%98%E9%9B%85%E8%A7%A3%E8%AF%BB/ 作为2018年自然语言处理领域的新秀，BERT做到了过去几年NLP重大进展的集大成，一出场就技惊四座碾压竞争对手，刷新了11项NLP测试的最高纪录，甚至超越了人类的表现，相信会是未来NLP研究和工业应用最主流的语言模型之一。本文尝试由浅入深，为各位看客带来优雅的BERT解读。 NL https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E9%AB%98%E9%A2%91%E9%9D%A2%E8%AF%95%E9%A2%98%E5%8F%82%E6%95%B0%E6%9B%B4%E6%96%B0%E8%AE%AD%E7%BB%83%E6%89%A9%E5%85%85%E6%A0%B7%E6%9C%AC%E7%AD%89/ Tue, 15 Mar 2022 09:05:45 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E9%AB%98%E9%A2%91%E9%9D%A2%E8%AF%95%E9%A2%98%E5%8F%82%E6%95%B0%E6%9B%B4%E6%96%B0%E8%AE%AD%E7%BB%83%E6%89%A9%E5%85%85%E6%A0%B7%E6%9C%AC%E7%AD%89/ 请介绍几种常用的参数更新方法。 梯度下降：在一个方向上更新和调整模型的参数，来最小化损失函数。 随机梯度下降（Stochastic gradient descent，SGD）对每个训练样本进行参数更新，每次执行都进行一次更新，且执行速度更快。 为了避免SGD和标准梯度下降中存在的问题，一个改进方法为小批 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E4%B8%AD%E6%96%87%E7%94%A8%E4%BB%80%E4%B9%88%E4%B8%AD%E6%96%87%E8%87%AA%E7%84%B6%E8%AF%AD%E8%A8%80%E5%A4%84%E7%90%86%E7%9A%84%E5%AE%8C%E6%95%B4%E6%9C%BA%E5%99%A8%E5%A4%84%E7%90%86%E6%B5%81%E7%A8%8B/ Tue, 15 Mar 2022 09:05:18 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E4%B8%AD%E6%96%87%E7%94%A8%E4%BB%80%E4%B9%88%E4%B8%AD%E6%96%87%E8%87%AA%E7%84%B6%E8%AF%AD%E8%A8%80%E5%A4%84%E7%90%86%E7%9A%84%E5%AE%8C%E6%95%B4%E6%9C%BA%E5%99%A8%E5%A4%84%E7%90%86%E6%B5%81%E7%A8%8B/ 虽然同为人类自然语言，但是由于英文和中文其语言自身的特点，导致中文和英文分词是有差别的。 很多读者在后台留言，提到了结巴分词，并要求我们出一些关于中文自然语言处理的内容。所以本禅师就找到了这方面很有研究的宿永杰。 宿永杰现就职于某知名互联网公司担任数据挖掘工程师，CSDN 博客专家，P https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E5%8C%BB%E7%96%97%E5%81%A5%E5%BA%B7%E9%A2%86%E5%9F%9F%E7%9A%84%E7%9F%AD%E6%96%87%E6%9C%AC%E8%A7%A3%E6%9E%90%E6%8E%A2%E7%B4%A2%E4%B8%89%E6%96%87%E6%9C%AC%E7%BA%A0%E9%94%99/ Tue, 15 Mar 2022 09:05:14 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E5%8C%BB%E7%96%97%E5%81%A5%E5%BA%B7%E9%A2%86%E5%9F%9F%E7%9A%84%E7%9F%AD%E6%96%87%E6%9C%AC%E8%A7%A3%E6%9E%90%E6%8E%A2%E7%B4%A2%E4%B8%89%E6%96%87%E6%9C%AC%E7%BA%A0%E9%94%99/ 医疗健康领域的短文本解析探索（二） 医疗健康领域的短文本解析探索（一） 谈谈医疗健康领域的 Phrase Mining 前言 最近在优化 dxy 帖子召回问题，我们之前在 医疗健康领域的短文本解析探索（一） 提到了 phrase mining 抽取粗粒度名词，在 医疗健康领域的短文本解析探索（二） 提到实体链接相关方案，但是用户在输入搜索内容时，很可能 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E6%9C%88%E6%97%A5%E6%9C%88%E6%97%A5%E8%85%BE%E8%AE%AF%E7%AE%97%E6%B3%95%E5%AE%9E%E4%B9%A0%E9%9D%A2%E8%AF%95%E9%A2%98/ Tue, 15 Mar 2022 09:04:40 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E6%9C%88%E6%97%A5%E6%9C%88%E6%97%A5%E8%85%BE%E8%AE%AF%E7%AE%97%E6%B3%95%E5%AE%9E%E4%B9%A0%E9%9D%A2%E8%AF%95%E9%A2%98/ 添加微信：julyedufu77，回复 “ 7 ”，领取最新升级版《名企AI面试100题》电子书！！ 本文目录： 问题8：介绍下bert位置编码和transformer的区别，哪个好，为什么？ 问题9：sigmod函数的缺点，为什么会产生梯度消失？不是以0为中心的话，为什么会收敛慢。 问题10 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E8%B0%88%E8%B0%88%E5%8C%BB%E7%96%97%E5%81%A5%E5%BA%B7%E9%A2%86%E5%9F%9F%E7%9A%84/ Tue, 15 Mar 2022 08:59:53 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E8%B0%88%E8%B0%88%E5%8C%BB%E7%96%97%E5%81%A5%E5%BA%B7%E9%A2%86%E5%9F%9F%E7%9A%84/ 丁香园大数据 NLP。发表日期： 2019-05-05 前言 短语挖掘（ Phrase Mining）的目的在于从大量的文本语料中提取出高质量的短语，是 NLP 领域中基础任务之一。短语挖掘主要解决专业领域的专业词典不足的问题，减少人工整理成本，如图所示 Phrase Mining 在以下几个任务中非常重要。 jieba 分词是中文分词领域比较好的工具[1,2]， https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E8%B0%B7%E6%AD%8C%E8%87%AA%E7%84%B6%E8%AF%AD%E8%A8%80%E5%A4%84%E7%90%86%E6%A8%A1%E5%9E%8B%E5%9F%BA%E4%BA%8E/ Tue, 15 Mar 2022 08:58:49 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E8%B0%B7%E6%AD%8C%E8%87%AA%E7%84%B6%E8%AF%AD%E8%A8%80%E5%A4%84%E7%90%86%E6%A8%A1%E5%9E%8B%E5%9F%BA%E4%BA%8E/ 一、前言 最近谷歌搞了个大新闻，公司AI团队新发布的BERT模型，在机器阅读理解顶级水平测试SQuAD1.1中表现出惊人的成绩：全部两个衡量指标上全面超越人类，并且还在11种不同NLP测试中创出最佳成绩，包括将GLUE基准推至80.4％（绝对改进7.6％），MultiNLI准确度达 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E6%BB%B4%E6%BB%B4%E6%8A%80%E6%9C%AF%E6%BB%B4%E6%BB%B4%E8%AF%AD%E9%9F%B3%E4%BA%A4%E4%BA%92%E8%87%AA%E7%84%B6%E8%AF%AD%E8%A8%80%E7%90%86%E8%A7%A3%E6%8E%A2%E7%B4%A2%E4%B8%8E%E5%AE%9E%E8%B7%B5/ Tue, 15 Mar 2022 08:54:34 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E6%BB%B4%E6%BB%B4%E6%8A%80%E6%9C%AF%E6%BB%B4%E6%BB%B4%E8%AF%AD%E9%9F%B3%E4%BA%A4%E4%BA%92%E8%87%AA%E7%84%B6%E8%AF%AD%E8%A8%80%E7%90%86%E8%A7%A3%E6%8E%A2%E7%B4%A2%E4%B8%8E%E5%AE%9E%E8%B7%B5/ 桔妹导读： 滴滴是一个让出行变得更美好的公司，语音交互作为出行领域最安全，最自然的交互方式在滴滴内部有着广泛的应用前景，目前滴滴语音交互已经应用在智能外呼，司机端，地图，车机系统多个领域中。语音交互离不开自然语言理解，用户说的每一句话都应该得到正确的理解和反馈，自然语言理解技术让语 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E5%9B%9E%E9%A1%BE%E5%BC%BA%E5%8C%96%E5%AD%A6%E4%B9%A0%E5%9C%A8%E8%87%AA%E7%84%B6%E8%AF%AD%E8%A8%80%E5%A4%84%E7%90%86%E4%B8%AD%E7%9A%84%E5%BA%94%E7%94%A8/ Tue, 15 Mar 2022 01:35:22 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E5%9B%9E%E9%A1%BE%E5%BC%BA%E5%8C%96%E5%AD%A6%E4%B9%A0%E5%9C%A8%E8%87%AA%E7%84%B6%E8%AF%AD%E8%A8%80%E5%A4%84%E7%90%86%E4%B8%AD%E7%9A%84%E5%BA%94%E7%94%A8/ 分享嘉宾： 黄民烈** ** 清华大学计算机系副教授，博士生导师 编辑整理： 邓力 内容来源： 《Reinforcement Learning in Natural Language Processing》 出品社区： DataFun 注：欢迎转载，转载请注明出处。 本文首先介绍了强化学习的概念和相关知识，以及与监督学习的区别，然后就强化学习在自然语言处理应用中的挑 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E4%B8%AD%E6%96%87%E5%88%86%E8%AF%8D%E6%8A%80%E6%9C%AF%E5%8F%8A%E5%9C%A8%E6%90%9C%E7%B4%A2%E7%9A%84%E5%AE%9E%E8%B7%B5/ Tue, 15 Mar 2022 01:29:08 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E4%B8%AD%E6%96%87%E5%88%86%E8%AF%8D%E6%8A%80%E6%9C%AF%E5%8F%8A%E5%9C%A8%E6%90%9C%E7%B4%A2%E7%9A%84%E5%AE%9E%E8%B7%B5/ 文本、语言作为记录和传播信息的重要载体，对它高效的理解一直是人们关注的问题。自现代电子计算机出现后，计算机在很多事情上做得比人还好，计算机与语言处理的相遇就出现了自然语言处理（Natural Language Process, NLP）技术。NLP通俗的理解就是利用计算机对文本进行分析、加工。 中文语言处理则是针对 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E5%9B%9E%E9%A1%BE%E5%9C%A8%E7%BD%91%E7%BB%9C%E6%96%87%E5%AD%A6%E9%A2%86%E5%9F%9F%E7%9A%84%E5%BA%94%E7%94%A8/ Mon, 14 Mar 2022 17:46:14 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E5%9B%9E%E9%A1%BE%E5%9C%A8%E7%BD%91%E7%BB%9C%E6%96%87%E5%AD%A6%E9%A2%86%E5%9F%9F%E7%9A%84%E5%BA%94%E7%94%A8/ 配套PPT下载，请识别底部二维码关注社区公众号，后台回复【 上海NLP 】 分享嘉宾： 马宇峰** 阅文信息 内容挖掘平台技术负责人** 编辑整理： 赵世瑜 内容来源： DataFun AI Talk《NLP在阅文内容挖掘平台的应用场景与落地实践》 出品社区： DataFun 注：欢迎转载，转载请注明出处。 一、业务背景 网络文学的发展已 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E7%B2%BE%E9%80%89%E5%BC%80%E6%BA%90%E9%A1%B9%E7%9B%AE%E5%A4%84%E7%90%86%E6%95%B0%E6%8D%AE%E6%A3%80%E6%B5%8B%E5%8D%AB%E6%98%9F%E5%9B%BE%E5%83%8F%E7%94%9F%E6%88%90%E6%A8%A1%E5%9E%8B/ Mon, 14 Mar 2022 16:48:21 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E7%B2%BE%E9%80%89%E5%BC%80%E6%BA%90%E9%A1%B9%E7%9B%AE%E5%A4%84%E7%90%86%E6%95%B0%E6%8D%AE%E6%A3%80%E6%B5%8B%E5%8D%AB%E6%98%9F%E5%9B%BE%E5%83%8F%E7%94%9F%E6%88%90%E6%A8%A1%E5%9E%8B/ 文末免费送电子书：七月在线干货组最新 升级的《2021最新大厂AI面试题》免费送！ 项目一：fmriprep 用于预处理各种 fMRI 数据的易用pipeline fMRIPrep 是一种功能性磁共振成像 （fMRI） 数据预处理管道，旨在提供易于访问的、最先进的接口，该接口可对扫描采集协议的变化非常可靠，并且需要最 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E5%B9%B4%E6%9C%88%E4%B8%AD%E6%97%AC%E7%99%BE%E5%BA%A6%E5%B2%97%E4%BD%8D%E9%9D%A2%E8%AF%95%E9%A2%98%E5%88%86%E4%BA%AB%E4%BA%8C/ Mon, 14 Mar 2022 16:42:17 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E5%B9%B4%E6%9C%88%E4%B8%AD%E6%97%AC%E7%99%BE%E5%BA%A6%E5%B2%97%E4%BD%8D%E9%9D%A2%E8%AF%95%E9%A2%98%E5%88%86%E4%BA%AB%E4%BA%8C/ 问题6：NLG的评估指标有哪些 BLEU (Bilingual Evaluation Understudy) ROUGE (Recall Oriented Understudy for Gisting Evaluation) BLEU是机器翻译中使用最广泛的评估指标，可以看成是精确率，公式如下： ROUGE可以看作是召回率，有以下几种： ROUGE-N：计算 n-gram 的召回率，即算出候选译文和参考译文重合的 n-gram 个数占参考译文的比例； ROUGE-L：计算最长公共子序 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E8%87%AA%E7%84%B6%E8%AF%AD%E8%A8%80%E5%A4%84%E7%90%86%E5%9F%BA%E7%A1%80%E4%B8%8A%E4%B8%8B%E6%96%87%E8%AF%8D%E8%A1%A8%E5%BE%81%E5%85%A5%E9%97%A8%E8%A7%A3%E8%AF%BB/ Mon, 14 Mar 2022 16:40:38 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E8%87%AA%E7%84%B6%E8%AF%AD%E8%A8%80%E5%A4%84%E7%90%86%E5%9F%BA%E7%A1%80%E4%B8%8A%E4%B8%8B%E6%96%87%E8%AF%8D%E8%A1%A8%E5%BE%81%E5%85%A5%E9%97%A8%E8%A7%A3%E8%AF%BB/ 原文自： 大快搜索 公众号 自然语言处理的基础涉及到对词的表征。华盛顿大学计算机科学与工程教授 Noah Smith（史諾亞）近日在 arXiv 发布了一篇入门介绍论文，由浅入深通俗易懂地介绍了自然语言处理中对词的处理和表示方法。 摘要：这篇介绍论文的目的是讲述如何让计算机处理语言的故事。这是自然语言处理（N