wangdei
- 浏览: 374313 次
-
最新评论
-
strchi：
这个网站，什么都没有了
做小说搜索网站，这个是不是有可能会侵权的呢？ -
从此醉：
楼主倒是给出解决办法啊
Java虚拟机支持的最大内存限制 -
kjmmlzq19851226：
又要增强客户体验，又要降低伪造攻击的概率，╮(╯▽╰)╭，程序 ...
Web安全测试之跨站请求伪造(CSRF)篇(图) -
zhangxinze：
linux下使用Java获取客户端ip地址?大家有何高见,我现 ...
怎样用Java来获取真实的IP地址 -
k_kid9157：
学习 感谢分享:-)
log4j的ConversionPattern参数的格式含义
文章列表
pacemaker-alarm-delay-in-ms-overall-sum 2341989pacemaker-alarm-delay-in-ms-total-count 7776761cpu-utilization 1.28cpu-speed 2800000000timedout-queries_total 14227num-docinfo_total 10680907avg-latency-ms_total 3545152552num-docinfo_total 10680907num-docinfo-disk_total 2200918queries_total 1229799558e_ ...
- 2008-05-16 17:59
- 浏览 1056
- 评论(0)
参与博客论坛等社区
虽然论坛博客等地方都不允许发广告性的东西或垃圾链接，但只要你能够提供有用的信息，对社区有贡献，比如回答其他人的问题，很多浏览的人会把你当作专家，点击你签名中的链接。搜索引擎也同样。虽 ...
- 2008-05-16 17:32
- 浏览 1153
- 评论(1)
导入链接数目
导入链接本身的重要性，也就是链接向你的网页本身的重要性
(这两点也就形成了Google PR，但后面的这些因素都和PR没有直接关系。)
反向链接增加的速度
反向链接所在网站本身的内容主题
反向链接所在页的内容是否相关
反向链接的链接锚文字
反向链接锚文字前后周围的文字
链接在页面的位置
反向链接所在的域名年龄
反向链接所在的域名是否曾经转手
反向链接所在页第一次被收录的日期
反向链接所在页页面内容是否曾经有变化？有什么样的变化？
反向链接第一次出现在页面上是什么时候
链接文字是否曾经变化？变化是什么？
反向链接所在页还链接向哪些其他网站？这些其他网站 ...
- 2008-05-16 17:23
- 浏览 958
- 评论(0)
数学之美 系列十九 － 马尔可夫链的扩展 贝叶斯网络 (Bayesian Networks)2007年1月28日 下午 09:53:00发表者：Google 研究员，吴军 我们在前面的系列中多次提到马尔可夫链 (MarkovChain)，它描述了一种状态序列，其每个状态值取决于前面有限个状态。这种模型，对很多实际问题来讲是一种很粗略的简化。在现实生活中，很多事物相互的关系并不能用一条链来串起来。它们之间的关系可能是交叉的、错综复杂的。比如在下图中可以看到，心血管疾病和它的成因之间的关系是错综复杂的。显然无法用一个链来表示。
我们可以把上述的有向图看成一个网络，它就是贝叶斯网络。其中每个圆圈表示 ...
- 2008-05-13 19:23
- 浏览 1286
- 评论(0)
我在大学学习线性代数时，实在想不出它除了告诉我们如何解线性方程外，还能有什么别的用途。关于矩阵的许多概念，比如特征值等等，更是脱离日常生活。后来在数值分析中又学了很多矩阵的近似算法，还是看不到可以应用 ...
- 2008-05-13 19:21
- 浏览 2814
- 评论(2)
2006年11月16日 上午 06:50:00发表者：Google 研究员，吴军 我们上次谈到用最大熵模型可以将各种信息综合在一起。我们留下一个问题没有回答，就是如何构造最大熵模型。我们已经所有的最大熵模型都是指数函数的形式，现在只需 ...
- 2008-05-13 19:08
- 浏览 1038
- 评论(0)
2006年10月8日 上午 07:27:00发表者：Google 研究员，吴军 [我们在投资时常常讲不要把所有的鸡蛋放在一个篮子里，这样可以降低风险。在信息处理中，这个原理同样适用。在数学上，这个原理称为最大熵原理(the maximum entropy principle) ...
- 2008-05-13 19:08
- 浏览 1058
- 评论(0)
2006年8月23日 下午 11:22:00发表者：吴军，Google 研究员 我在数学之美系列中一直强调的一个好方法就是简单。但是，事实上，自然语言处理中也有一些特例，比如有些学者将一个问题研究到极致，执著追求完善甚至可以说完美的程度。他们的工作对同行有很大的参考价值，因此我们在科研中很需要这样的学者。在自然语言处理方面新一代的顶级人物麦克尔 · 柯林斯 (Michael Collins) 就是这样的人。柯林斯：追求完美 柯林斯从师于自然语言处理大师马库斯 (Mitch Marcus)（我们以后还会多次提到马库斯），从宾夕法利亚大学获得博士学位，现任麻省理工学院 (MIT) 副教授（别看他是副 ...
- 2008-05-13 19:07
- 浏览 967
- 评论(0)
数学之美 十四 谈谈数学模型的重要性2006年8月9日 上午 09:12:00发表者：吴军，Google 研究员 [注：一直关注数学之美系列的读者可能已经发现，我们对任何问题总是在找相应的准确的数学模型。为了说明模型的重要性，今年七月份我在 Google 中国内部讲课时用了整整一堂课来讲这个问题，下面的内容是我讲座的摘要。］在包括哥白尼、伽利略和牛顿在内的所有天文学家中，我最佩服的是地心说的提出者托勒密。虽然天文学起源于古埃及，并且在古巴比伦时，人们就观测到了五大行星（金、木、水、火、土）运行的轨迹，以及行星在近日点运动比远日点快。（下图是在地球上看到的金星的轨迹，看过达芬奇密码的读者知道金星大 ...
- 2008-05-13 19:07
- 浏览 1253
- 评论(0)
数学之美 系列十三 信息指纹及其应用2006年8月3日 上午 11:17:00发表者：吴军，Google 研究员 任何一段信息文字，都可以对应一个不太长的随机数，作为区别它和其它信息的指纹（Fingerprint)。只要算法设计的好，任何两段信息的指纹都很难重复，就如同人类的指纹一样。信息指纹在加密、信息压缩和处理中有着广泛的应用。我们在图论和网络爬虫一文中提到，为了防止重复下载同一个网页，我们需要在哈希表中纪录已经访问过的网址（URL)。但是在哈希表中以字符串的形式直接存储网址，既费内存空间，又浪费查找时间。现在的网址一般都较长，比如，如果在 Google 或者百度在查找数学之美，对应的网址长 ...
- 2008-05-13 19:07
- 浏览 1025
- 评论(0)
余弦定理和新闻的分类似乎是两件八杆子打不着的事，但是它们确有紧密的联系。具体说，新闻的分类很大程度上依靠余弦定理。Google 的新闻是自动分类和整理的。所谓新闻的分类无非是要把相似的新闻放到一类中。计算机其实读不懂新闻，它只能快速计算。这就要求我们设计一个算法来算出任意两篇新闻的相似性。为了做到这一点，我们需要想办法用一组数字来描述一篇新闻。我们来看看怎样找一组数字，或者说一个向量来描述一篇新闻。回忆一下我们在“如何度量网页相关性”一文中介绍的TF/IDF 的概念。对于一篇新闻中的所有实词，我们可以计算出它们的单文本词汇频率/逆文本频率值（TF/IDF)。不难想象，和新闻主题有关的那些实词频率 ...
- 2008-05-13 19:06
- 浏览 1324
- 评论(1)
地址的识别和分析是本地搜索必不可少的技术，尽管有许多识别和分析地址的方法，最有效的是有限状态机。一个有限状态机是一个特殊的有向图（参见有关图论的系列），它包括一些状态（节点）和连接这些状态的有向弧。下图是一个识别中国地址的有限状态机的简单的例子。
每一个有限状态机都有一个启始状态和一个终止状态和若干中间状态。每一条弧上带有从一个状态进入下一个状态的条件。比如，在上图中，当前的状态是“省”，如果遇到一个词组和（区）县名有关，我们就进入状态“区县”；如果遇到的下一个词组和城市有关，那么我们就进入“市”的状态，如此等等。如果一条地址能从状态机的起始状态经过状态机的若干中间状态，走到终止状态，那么这条 ...
- 2008-05-13 19:06
- 浏览 1074
- 评论(0)
我们已经谈过了如何自动下载网页、如何建立索引、如何衡量网页的质量(Page Rank)。我们今天谈谈如何确定一个网页和某个查询的相关性。了解了这四个方面，一个有一定编程基础的读者应该可以写一个简单的搜索引擎了，比如为您所在的学校或院系建立一个小的搜索引擎。]我们还是看上回的例子，查找关于“原子能的应用”的网页。我们第一步是在索引中找到包含这三个词的网页（详见关于布尔运算的系列）。现在任何一个搜索引擎都包含几十万甚至是上百万个多少有点关系的网页。那么哪个应该排在前面呢？显然我们应该根据网页和查询“原子能的应用”的相关性对这些网页进行排序。因此，这里的关键问题是如何度量网页和查询的相关性。我们知道， ...
- 2008-05-13 19:05
- 浏览 962
- 评论(0)
读者也许注意到了，我们在前面的系列中多次提到了贾里尼克这个名字。事实上，现代语音识别和自然语言处理确实是和它的名字是紧密联系在一起的。我想在这回的系列里，介绍贾里尼克本人。在这里我不想列举他的贡献，而想讲一讲他作为一个普普通通的人的故事。这些事要么是我亲身经历的，要么是他亲口对我讲的。弗莱德里克.贾里尼克(Fred Jelinek)出生于捷克一个富有的犹太家庭。他的父母原本打算送他去英国的公学（私立学校）读书。为了教他德语，还专门请的一位德国的家庭女教师，但是第二次世界大战完全打碎了他们的梦想。他们先是被从家中赶了出去，流浪到布拉格。他的父亲死在了集中营，弗莱德自己成天在街上玩耍，完全荒废了学业 ...
- 2008-05-13 19:05
- 浏览 956
- 评论(0)
我们已经介绍了信息熵，它是信息论的基础，我们这次谈谈信息论在自然语言处理中的应用。先看看信息熵和语言模型的关系。我们在系列一中谈到语言模型时，没有讲如何定量地衡量一个语言模型的好坏，当然，读者会很自然 ...
- 2008-05-13 19:05
- 浏览 1619
- 评论(0)