|   登录   |   注册   |   设为首页   |   加入收藏   

用户登录

close

用户名:

密码:

新用户注册

close

用户名:

密码:

密码确认:

电子邮箱:

关注内容:

个人主页:

帮助

close

龙宇网成立于2008年3月,网站进入整体运作于2010年10月1日。

在这里,我们把它做成了一个真正意义上的网站,完全以个人的信息为内容,以网友的需要为主导,全力搜罗各种信息,建立完善的网站功能,使网友在这里可以第一时间找到所需要的信息。

现在,经过三年的努力,网站的资料已经相当丰富,而网站得到了大家的喜爱和认可。

但,我们还是会继续努力下去,让网间的这份快乐继续持续下去,让这份闲暇时的日子,与快乐一并同行。

寻觅快乐,网住快乐,关注网络,是龙宇网的宣言与承诺。

标签:数学之美

资料详情

内容简介:

几年前,“数学之美”系列文章原刊载于谷歌黑板报,获得上百万次点击,并被热情的读者广为传播,得到高度评价。读者说,读了“数学之美”,才发现大学时学的数学知识,比如马尔科夫链、矩阵计算,甚至余弦函数原来都如此亲切,并且栩栩如生,才发现自然语言和信息处理这么有趣,才真正明白“数学是科学的皇后”这句名言。   今年,作者吴军博士几乎把所有的文章都重写了一遍,为的是能把高深的原理讲得更加通俗易懂,让非专业读者也能领略数学的魅力。经过改写和重构后,《数学之美》在整体和细节的度上控制得更好。希望读者通过具体的例子学到的是思考问题的方式,学会如何化繁为简,如何用数学去解决工程问题,如何跳出固有思维不断去思考创新。同时书中也留了很多问题给愿意钻研的人做进一步深入思考。

作者简介:

  吴军,博士,现任腾讯公司主管搜索、在线广告和云计算基础架构的副总裁,毕业于清华大学(本科、硕士)和美国约翰.霍普金斯大学(博士)。在清华大学和约翰.霍普金斯大学期间,吴军博士致力于语音识别、自然语言处理,特别是统计语言模型的研究。他曾获得1995年全国人机语音智能接口会议的最佳论文奖和2000年Eurospeech的最佳论文奖。   吴军博士于2002年加入Google公司。在Google,他和Amit Singhal(美国工程院院士,世界著名搜索专家)、Matt Cutts(Google反zuobi官方发言人)等三位同事一起开创了网络搜索反zuobi的研究领域,并因此获得Google工程奖。2003年,他和Google全球架构的总工程师朱会灿博士等共同成立了中日韩文搜索部门。吴军博士是当前Google中日韩文搜索算法的主要设计者。在Google其间,他还领导了许多研发项目,包括许多与中文相关的产品和自然语言处理的项目,并得到了当时公司首席执行官埃里克.施密特和创始人谢尔盖.布林的高度评价。   吴军博士在国内外发表过数十篇论文,并获得和申请了十余项美国和国际专利。他的《浪潮之巅》一书深受业界的好评。他于2007年起,担任风险投资基金中国世纪基金的董事。2011年起当选为约翰?霍普金斯大学工学院董事会董事,并在该校的国际事务委员会担任顾问。他是国家重大专项“新一代搜索引擎和浏览器”项目的总负责人,从2012年起担任工信部的专家和顾问。

目录:

出版说明 序言1 序言2 前言 第1章 文字和语言 vs 数字和信息 文字和语言与数学,从产生起原本就有相通性,虽然它们的发展一度分道扬镳,但是最终还是能走到一起。 1 信息 2 文字和数字 3 文字和语言背后的数学 4 小结 第2章 自然语言处理 — 从规则到统计人类对机器理解自然语言的认识走了一条大弯路。早期的研究集中采用基于规则的方法,虽然解决了一些简单的问题,但是无法从根本上将自然语言理解实用化。直到?多年后,人们开始尝试用基于统计的方法进行自然语言处理,才有了突破性进展和实用的产品。 1 机器智能 2 从规则到统计 3 小结 第3章 统计语言模型 统计语言模型是自然语言处理的基础,并且被广泛应用于机器翻译、语音识别、印刷体或手写体识别、拼写纠错、汉字输入和文献查询。 1 用数学的方法描述语言规律 2 延伸阅读:统计语言模型的工程诀窍 3 小结 第4章 谈谈中文分词 中文分词是中文信息处理的基础,它同样走过了一段弯路,目前依靠统计语言模型已经基本解决了这个问题。 1 中文分词方法的演变 2 延伸阅读:工程上的细节问题 3 小结 第5章 隐含马尔可夫模型 隐含马尔可夫模型最初应用于通信领域,继而推广到语音和语言处理中,成为连接自然语言处理和通信的桥梁。同时,隐含马尔可夫模型也是机器学习的主要工具之一。 1 通信模型 2 隐含马尔可夫模型 3 延伸阅读:隐含马尔可夫模型的训练 4 小结 第6章 信息的度量和作用 信息是可以量化度量的。信息熵不仅是对信息的量化度量,也是整个信息论的基础。它对于通信、数据压缩、自然语言处理都有很强的指导意义。 1 信息熵 2 信息的作用 3 延伸阅读:信息论在信息处理中的应用 4 小结 第7章 贾里尼克和现代语言处理 作为现代自然语言处理的奠基者,贾里尼克教授成功地将数学原理应用于自然语言处理领域中,他的一生富于传奇色彩。 1 早年生活 2 从水门事件到莫妮卡·莱温斯基 3 一位老人的奇迹 第8章 简单之美 — 布尔代数和搜索引擎的索引布尔代数虽然非常简单,却是计算机科学的基础,它不仅把逻辑和数学合二为一,而且给了我们一个全新的视角看待世界,开创了数字化时代。 1 布尔代数 2 索引 3 小结 第9章 图论和网络爬虫 互联网搜索引擎在建立索引前需要用一个程序自动地将所有的网页下载到服务器上,这个程序称为网络爬虫,它的编写是基于离散数学中图论的原理。 1 图论 2 网络爬虫 3 延伸阅读:图论的两点补充说明 4 小结 第10章 PageRank — Google的民主表决式网名 网页排名技术是早期的杀手锏,它的出现使得网页搜索的质量上了一个大的台阶。它背后的原理是图论和线性代数的矩阵运算。 1 PageRank 算法的原理 2 延伸阅读:PageRank 的计算方法 3 小结 第11章 如何确定网页和查询的相关性确定网页和查询的相关性是网页搜索的根本问题,其中确定查询中每个关键词的重要性有多高是关键。是目前通用的关键词重要性的度量,其背后的原理是信息论。 1 搜索关键词权重的科学度量TF-IDF页排名技术 2 延伸阅读:TF-IDF 的信息论依据 3 小结 第12章 地图和本地搜索的最基本技术 有限划地图和本地服务中要用到有限状态机和动态规划技术。 这两项技术是机器智能和机器学习的工具,它们的应用非常广泛,还包括语音识别、拼写和语法纠错、拼音输入法、工业控制和生物的序列分析等。 1 地址分析和有限状态机 2 全球导航和动态规划 3 延伸阅读:有限状态传感器 4 小结 第13章 Google AK-47 的设计者 — 阿米特·士 在所有轻武器中最有名的是冲锋枪,因为它从不卡壳,不易损坏,可在任何环境下使用,可靠性好,杀伤力大并且操作简单。的产品就是按照上述原 则设计的。 第14章 余弦定理和新闻的分类 计算机虽然读不懂新闻,却可以准确地对新闻进行分类。 其数学工具是看似毫不相干的余弦定理。 1 新闻的特征向量 2 向量距离的度量 3 延伸阅读:计算向量余弦的技巧 4 小结 第15章 矩阵运算和文本处理中的两个分类问题无论是词汇的聚类还是文本的分类,都可以通过线性代数中矩阵的奇异值分解来进行。这样一来,自然语言处理的问题就变成了一个数学问题。 1 文本和词汇的矩阵 2 延伸阅读:奇异值分解的方法和应用场景 3 小结 第16章 信息指纹及其应用 世间万物都有一个唯一标识的特征,信息也是如此。每一条信息都有它特定的指纹,通过这个指纹可以区别不同的信息。 1 信息指纹 2 信息指纹的用途 3 延伸阅读:信息指纹的重复性和相似哈希 4 小结 第17章 由电视剧《暗算》所想到的 — 谈谈原理 密码学的根本是信息论和数学。没有信息论指导的密码是非常容易被破解的。只有在信息论被广泛应用于密码学后,密码才真正变得安全。 1 密码学的自发时代 2 信息论时代的密码学 3 小结 第18章 闪光的不一定是金子 — 谈谈搜索引擎题 闪光的不一定是金子,搜索引擎中排名靠前的网页也未必是有用的网页。消除这些zuobi网页的原理和通信中过滤噪音的原理相同。这说明信息处理和通信的很多原理是相通的。 第19章 谈谈数学模型的重要性 正确的数学模型在科学和工程中至关重要,而发现正确模型的途径常常是曲折的。正确的模型在形式上通常是简单的。 第20章 不要把鸡蛋放到一个篮子里 — 谈谈型 最大熵模型是一个完美的数学模型。它可以将各种信息整合到一个统一的模型中,在信息处理和机器学习中有反zuobi问题着广泛的应用。它在形式上非常简单、优美,而在实现时需要有精深的数学基础和高超的技巧。 1 最大熵原理和最大熵模型 2 最大熵模型的训练 3 小结 第21章 拼音输入法的数学原理 汉字的输入过程本身就是人和计算机之间的通信。好的输入法会自觉或不自觉地遵循通信的数学模型。当然要做出最有效的输入法,应当自觉使用信息论做指导。 1 输入法与编码 2 输入一个汉字需要敲多少个键 — 谈谈香农 3 拼音转汉字的算法 4 延伸阅读:个性化的语言模型 5 小结 第22章 自然语言处理的教父马库斯和他的们 将自然语言处理从基于规则的研究方法转到基于统计的研究方法上,宾夕法尼亚大学的教授米奇·马库斯功不可没。他创立了今天在学术界广泛使用的语料库,同时培养了一大批精英人物。 1 教父马库斯 2 从宾夕法尼亚大学走出的精英们 第23章 布隆过滤器 日常生活中,经常要判断一个元素是否在一个集合中。布隆过滤器是计算机工程中解决这个问题最好的数学工具。 1 布隆过滤器的原理 2 延伸阅读:布隆过滤器的误识别问题 3 小结 第24章 马尔可夫链的扩展 — 贝叶斯网络 贝叶斯网络是一个加权的有向图,是马尔可夫链的扩展。而从认识论的层面看:贝叶斯网络克服了马尔可夫链那种机械的线性约束,它可以把任何有关联的事件统一到它的框架下面。它在生物统计、图像处理、决策支持系统和博弈论中都有广泛的使用。 1 贝叶斯网络 2 贝叶斯网络在词分类中的应用 3 延伸阅读:贝叶斯网络的训练 4 小结 第25章 条件随机场和句法分析 条件随机场是计算联合概率分布的有效模型,而句法分析似乎是英文课上英语老师教的东西,这两者有什么联系呢? 1 句法分析计算机算法的演变 2 条件随机场 3 小结 第26章 维特比和他的维特比算法 维特比算法是现代数字通信中使用最频繁的算法,同时也是很多自然语言处理的解码算法。可以毫不夸张地讲,维特比是对我们今天生活的影响力最大的科学家之一,因为如今基于的移动通信标准主要就是他创办的高通公司制定的。 1 维特比算法 2 CDMA 技术 — 3G 移动通信的基础 3 小结 第27章 再谈文本自动分类问题 — 期望最大化算法 只要有一些训练数据,再定义一个最大化函数,采用算法,利用计算机经过若干次迭代,就可以得到所需要的模型。这实在是太美妙了,这也许是我们的造物主刻意安排的。所以我把它称作上帝的算法。 1 文本的自收敛分类 2 延伸阅读:期望最大化和收敛的必然性 3 小结 第28章 逻辑回归和搜索广告 逻辑回归模型是一种将影响概率的不同因素结合在一起的指数模型,它不仅在搜索广告中起着重要的作用,而且被广泛应用于信息处理和生物统计中。 1 搜索广告的发展 2 逻辑回归模型 3 小结 第29章 各个击破算法和Google 云计算的基础 Google颇为神秘的云计算中最重要的MapReduce工具,其原理就是计算机算法中常用的“各个击破”算法,它的原理原来这么简单 — 将复杂的大问题分解成很多小问题分别求解,然后再把小问题的解合并成原始问题的解。由此可见,在生活中大量用到的、真正有用的方法 常常都是简单朴实的。 1 分治算法的原理 2 从分治算法到MapReduce 3 小结 附录 后记 索引