记得某位前辈曾说过：如果你连自己网站的日志都没有分析过。不知道蜘蛛什么时候来，一天来几次，频率是降低了还是提升了，IP是否变化等情况，你就并不算是一个优秀的SEOER.在2009年新年之际，北京SEO给大家整理下日志分析的基础知识.
下面是访问日志中一个典型的记录：
10.1.1.95 - e800 [18/Mar/2005:12:21:42 +0800] “GET /stats/awstats.pl?config=e800 HTTP/1.1″ 200 899 “http://10.1.1.1/pv/” “Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; Maxthon)”
这行内容由9项构成，上面的例子中有两项空白，但整行内容仍旧分成了9项。
最近在看google、百度、搜狐历史及b2b相关的书，包括《搜索百度李彦宏》《谁认识马云》《搜索张朝阳》《搜主义-google》，对搜索引擎历史略有兴趣，就搜集了资料再次展示，以备以后查看。
1990年12月
蒙特利尔大学的学生Alan Emtage发明了Archie。虽然当时World Wide Web还未出现，但网络中文件传输还是相当频繁的，而且由于大量的文件散布在各个分散的FTP主机中，查询起来非常不便，因此Alan Emtage想到了开发一个可以以文件名查找文件的系统，于是便有了Archie。Archie工作原理与现在的搜索引擎已经很接近，它依靠脚本程序自动搜索网上的文件，然后对有关信息进行索引，供使用者以一定的表达式查询。
搜索引擎发展史（一）—google出现以前。
1990年以前，没有任何人能搜索互联网。
所有搜索引擎的祖先，是1990年由Montreal的McGill University学生Alan Emtage、Peter Deutsch、Bill Wheelan发明的Archie(Archie FAQ)。当时World Wide Web还未出现。Archie是第一个自动索引互联网上匿名FTP网站文件的程序，但它还不是真正的搜索引擎。Archie是一个可搜索的FTP文件名列表，用户必须输入精确的文件名搜索，然后Archie会告诉用户哪一个FTP地址可以下载该文件。
今天让我们来回顾一下google这个2008年9月7日创立的搜索引擎帝国吧！
创始人：Sergey Brin和Larry Page
1995年夏天，当时Sergey Brin还是斯坦福大学计算机系的研究生二年级学生，而Larry Page刚从密歇根大学毕业，他去参观斯坦福，以便决定去哪个研究生院深造，担任向导的正是Brin。
robots:yahoo蜘蛛slurp解析与robots.txt的限制
昨天北京seo博客分析了：《robots：搜索引擎蜘蛛（spider）名字大全》的文章，今天对yahoo蜘蛛slurp的服务器现状以及针对yahoo蜘蛛的robots.txt写法中针对yahoo slurp这个核心词汇的独特命令Crawl-delay进行分析。
目前很多网站存在yahoo蜘蛛slurp爬行过多造成网站访问速度降低的情况。由于目前国内网站主要收录网站是百度蜘蛛、google蜘蛛。就有必要在robots.txt写法中做一些限制。
yahoo slurp为什么会如此频繁的访问网站呢？
北京seo找到的解答是：雅虎美国和雅虎中国有2套蜘蛛在运行，Slurp来源于40多个IP网段，不同网段蜘蛛会分段抓取。
如何如何限制yahoo蜘蛛slurp的访问频率呢？
北京seo给你的解答是：使用robots.txt文件进行限制。robots标准写法是：
robots网站搜索日志分析：搜索引擎蜘蛛（spider）名称大全
北京seo博客曾经写过一篇名为：<北京seo：robots.txt标准写法及实例>的文章,介绍了robots标准写法.提到robots就不得不提spider,认识各大搜索引擎的spider对我们分析网站日志大有帮助, 这里列出世界各大搜索引擎蜘蛛名字,方便大家查看网站日志时查找:
google蜘蛛： googlebot
百度蜘蛛：baiduspider
yahoo蜘蛛：slurp
alexa蜘蛛：ia_archiver
msn蜘蛛：msnbot
小小菜鸟正式SEO工作是在进入慧聪网搜索引擎优化部做SEO工程师，进入了慧聪网（www.hc360.com）才真切的感受到大型网站SEO推广中除了技术，还需要注意更多的技巧，甚至仅仅是需要时间来推进页面搜索引擎友好。今天忙里偷闲，再次阐述一个针对大型网站SEO优化中长尾词的应用的相关理论。
北京seo-略懂的搜索引擎优化博客，曾经写过一篇名为<长尾理论基本原理，SEO中的长尾关键词介绍>的文章介绍了长尾关键词的来源和普通的使用.还曾经就此引发了对”百万关键词“的探讨.在此阐述下大型网站SEO优化策略.
北京seo提醒大家:在大型网站布局中,应注意一下几点：
一、网站首页不用关键词，引带长尾词收录。网站首页提供用户和搜索引擎入口，虽然不供应关键词。但是可以带出长尾词收录。
二、二级页面提供行业词。比如：旅游，读书，博客等行业词。同时汇聚长尾词。
三、终极页面引带长尾关键词。比如北京seo的：百万关键词，facebook中文站，长尾词等。
北京seo-赵志辉博客原创 转载请注明作者和出处.原帖地址：http://www.zhaozhihui.com.cn/seo-keywords/changweichi-seo/
北京SEO：从“千佰媚”的实践看单页面优化
大概在7月10号的时候，在一招商加盟的公司实习，用公司空间做了一个单页面信息的资源站：www.52qianbaimei.cn，很简单的一个单页面。后来在15号的时候来慧聪网就没有再照看了，今天以前的同事问我那个单页面的SEO策略，说排名很好。用百度搜索了下“千佰媚”的关键词，居然在第三名，虽然该词不是热门词，但是短短的十几天，从新域名、新空间到很好的排名，而且日访问独立IP均在20左右。百度优化效果很好。
萌生做单页面的念头来自于自己那篇：从两个”酷狗”站小看HTML静态单页面的SEO（http://www.zhaozhihui.com.cn/bjseo/html-seo/）
总结了一下，北京SEO-赵志辉再提一下单页面优化的要点：
1.域名
2.关键词密度，相似关键词选择
3.原创内容
北京seo-赵志辉博客原创，作者：赵志辉 转载请注明
长尾理论基本原理，SEO中的长尾关键词介绍
长尾理论的基本原理：只要存储和流通的渠道足够大，需求不旺或销量不佳的产品所共同占据的市场份额可以和那些少数热销产品所占据的市场份额相匹敌甚至更大。即众多小市场汇聚成可与主流大市场相匹敌的市场能量。
长尾关键词：是指在搜索引擎中比较生僻、或者非常专业的一些词或者词组。一两个词不能给网站带来什么，但是庞大的长尾词聚集起来就会带来非同寻常的流量。长尾关键词是网站SEO策略，尤其是B2B、B2C、C2C网站seo的基础策略之一。
长尾理论产生于经济学领域，但是其真正的发扬光大确实在网络营销（SEM）领域。不管是亚马逊还是阿里巴巴，慧聪电子商务网，他们的成功都是利用了长尾理论聚集了一大批长尾关键词。进而汇聚起自己的品牌。成就了自我！
Copyright © 2007-2008 北京SEO博客 All rights reserved
