588 620 755 240 435 158 463 382 116 591 801 527 267 495 143 722 515 699 518 951 564 236 226 779 196 886 515 658 878 243 574 571 595 464 965 83 645 797 470 751 117 490 334 895 799 660 675 621 64 880
当前位置:首页 > 亲子 > 正文

P2P投资人自述血泪史:连遭13家平台跑路 怪自己作死

来源:新华网 原丹旦晚报

随着个人能力的提升,我开始由开始负责一些新项目操作,虽然这些项目所优化的关键词排名进度还算比较好,但在操作过程中我遇到了很多问题,这些问题的发现、解决让我认识到了seo工作中细节的重要性,可谓是细节决定成败。特别是通过项目的实战操作,让我时刻的认识到了robots文件在网站优化中的重要性。所以,seo童鞋们,特别是一些初涉seo领域的童鞋们,一定要熟练的掌握robots文件使用说明及其事项。 Robots文件,严格说来是robots.txt文件,它的真正内涵应该如何理解呢?其实robots.txt不是命令,而是一个协议。搜索引擎在抓取一个网站内网页的时候,会先抓取robots.txt文件,所以这个文件存在的意义就是告诉搜索引擎哪些页面可以被抓取,哪些页面不能被抓取。当搜索引擎抓取网站内的网页时,它会首先访问网站根目录下的robots文件,如果存在这个文件,搜索引擎会按照文件中定义的内容进行抓取,如果没有的话,搜索引擎就会抓取一切被允许它能够抓到的页面。在我的理解中,robots文件就像是告诉搜索引擎哪些页面该访问,哪些搜索引擎不该访问。 那么robots.txt文件的真正写法是什么呢?在操作荣利站点的时候,由于这个站点以前是老站点,而且是动态页面,现在是被调成了静态页面,所以里面会有很多原先的文件都消失了,所以搜索引擎就无法抓取到,会出现很多抓取错误,多达两千个,这就很有必要运用robots文件把这些已经找不到的页面定义掉,让搜索引擎不再抓取。这些内容就牵涉到robots.txt文件的书写问题。Robots文件中有两个基本原则,是最简单的robots文件要写的,第一是User-Agent: 适用下列规则的漫游器 ;第二是Disallow: 要拦截的网页,而Allow是定义允许搜索引擎收录的地址。所以robots的文件写法有以下: User-agent: * (这里的*代表的所有的搜索引擎种类,*是一个通配符 ) Disallow: /admin/ 这里定义是禁止爬寻admin目录下面的目录 Disallow: /require/ 这里定义是禁止爬寻require目录下面的目录 Disallow: /ABC/ 这里定义是禁止爬寻ABC目录下面的目录 Disallow: /A 是屏蔽A目录下的所有文件,包括文件和子目录,还屏蔽 /A*.*的文件 Disallow: /cgi-bin/*.htm 禁止访问/cgi-bin/目录下的所有以.htm为后缀的URL(包含子目录)。 Disallow: /*?* 禁止访问网站中所有的动态页面 Disallow: /.jpg$ 禁止抓取网页所有的.jpg格式的图片 adc.html 禁止爬取ab文件夹下面的adc.html文件。 Allow: /cgi-bin/ 这里定义是允许爬寻cgi-bin目录下面的目录 Allow: /tmp 这里定义是允许爬寻tmp的整个目录 Allow: .htm$ 仅允许访问以.htm为后缀的URL。 Allow: .gif$ 允许抓取网页和gif格式图片 而在我的站点操作中,会用到的有两个,即是最简单的robots文件的基本原则,它们分别是 User-agent: * Disallow:/english/(即定义掉english目录下面的文件) 写robots.txt文件要注意:robots.txt文件必须被放置在一个站点的根目录下,一般需要在网站后台添加;robots.txt文件名必须小写。这两点看似很简单,在操作时是很多seo童鞋们是很容易犯错误的,所以还是提醒一下。 现在手上的seo项目越来越多,也真正的感受到了seo工作并不是一件简单的事情。这也告诉我:以后在操作seo项目时,要注意细节,这样操作的操作才会越来越有把握。 文章来源于上海seo公司,请注明出处 198 0 245 81 437 77 860 184 711 486 543 353 52 151 542 43 178 927 44 563 603 208 941 541 18 945 217 426 667 450 524 709 714 931 810 14 471 229 645 335 964 108 328 505 836 99 576 444 680 267

友情链接: 边真萍爽 aiwo2006 qq64160260 999hys quweny 淙圣 杉语囹 小小鸟0126 美丽经济学 格华
友情链接:rtqsnb jiaxc9644 ke193562 7794051 ijeymjud 楚婵祺 晨圣吉 扣光 吴沟 高皆