输入关键字 抓取所有网页(1.如何在雅虎上开始搜索？网站排列位置由什么决定？)

　　输入关键字 抓取所有网页(1.如何在雅虎上开始搜索？网站排列位置由什么决定？)

　　1.如何开始在雅虎上搜索？

　　在雅虎首页的搜索框中输入您要查找的单词，按键盘上的“Enter”键，或用鼠标左键单击搜索框旁边的“搜索”按钮，即可得到您想要的搜索结果将被退回。

　　首页搜索框下方有三个语言选项按钮，您可以根据需要点击不同的按钮：

　　2.我的网站如何出现在雅虎的搜索结果中？

　　许多因素会影响网站 是否出现在雅虎搜索结果中及其位置。雅虎搜索程序访问并抓取您的网站后，该页面并未立即出现在搜索结果中。下一次更新数据库时，将出现已爬网和索引的文件。

　　3.网站 排列位置由什么决定？

　　网站的排列位置主要由网站的质量和关键词的相对强度来排列。使用不正当手段欺骗排名的搜索引擎将自动降低其排名。比如页面标题中积累了大量不相关的关键词，网页元关键字中积累了大量不相关的关键词。等等，主动链接这些作弊的网站 网站也会被搜索引擎拉低。如果发现找不到你的网站，请尽快检查以上问题：页面标题尽量保持在80字节以内，不要使用meta关键字，检查是否有网站 在友好链接中。被搜索引擎欺骗。

　　搜索引擎会重新检查搜索引擎是否存在作弊行为，并在下一个索引周期（约2-4周）完成后决定收录。

　　4.按照给定的链接输入一个网站，但是页面上显示错误信息。为什么？

　　当您看到“权限被拒绝”或“文档未找到”时，此错误消息可能是由于以下原因：

　　5.有没有什么提示可以更准确有效地找到网站？

　　尝试使用特定的搜索词来描述您要查找的内容。通常，更笼统的关键字搜索会产生很多结果，而当您想要更精确的搜索结果时，最好使用一些狭义的关键字进行搜索。

　　例如：

　　试用：“口水鸡练习”代替“口水鸡”

　　试用：“数码相机”代替“相机”

　　对于某些多义词，最好在搜索框中细化您要查找的含义。例如，如果您要查*敏*感*词*说《射雕*敏*感*词*》而不是同名电视剧或网络游戏，则可以在《射雕*敏*感*词*》后添加“小说”二字。

　　6.如何收录和删除关键字？

　　雅虎搜索的默认设置是收录您输入的所有关键字。

　　7.如何清除搜索框中以前的搜索记录？

　　当您要输入新查询时，有时先前键入的关键字会出现在搜索栏中。这是 Internet Explorer 的一项功能，与 Yahoo Search 无关。

　　如果要清除其中一个关键字，需要先单击该词，然后按DEL（清除）键将其删除。

　　另外，你可以直接关闭IE的这个功能，如下。

　　IE: /Tools/InternetOptions/Content/AutoComplete

　　或者

　　IE：工具>选项>内容>自动完成

　　即打开IE浏览器，选择“工具”栏，打开“Internet选项”，然后选择“内容”选项卡，点击“自动完成”，就会弹出一个新窗口。请勾选“自动完成功能应用于”下的复选框，然后单击“确定”保存设置。最后，请关闭IE浏览器。当您再次启动 IE 浏览器时，IE 中自动保存的条目将消失。

　　8. 英文字母大写会影响搜索结果吗？

　　雅虎搜索引擎不区分英文的大写和小写字母。无论您输入大写还是小写字母，都可以获得相同的搜索结果。

　　例如：输入“yahoo”或“YAHOO”，结果是一样的。

　　9.雅虎是如何抓取我的网站的？

　　雅虎使用雅虎！搜索引擎技术（Yahoo! Search Engine Technology，简称YST），是一种基于算法的可自动检测网络内容的Web索引爬取程序。YST 是一个机器搜索程序，它从 Internet 上的 采集 文档构建一个可搜索的索引系统。这些文件（即你的网站文件）能被YST程序找到并爬取的主要原因是互联网上其他网页上有这些文件的直接链接。

　　YST搜索程序严格遵守robots.txt标准进行爬取。因此，搜索程序不会对您不希望 Yahoo 搜索引擎返回的那些结果进行爬网。任何被robots.txt标准认定为不适合抓取的文件，将不会被收录到被抓取的文档中，也不会进入搜索引擎的数据库。

　　10.如何减少搜索引擎对我网站的请求？

　　由于我们从整个互联网上抓取了数十亿个网页，因此我们采用了大量的系统进行网络抓取。因此，您的 Web 服务器会向不同的 YST 爬虫程序的客户端 IP 地址请求登录请求。不同的爬虫系统相互协作以限制来自单个 Web 服务器的任何活动。所谓单网服务器是通过IP地址来判断的。因此，如果你的服务器主机有多个IP，它的活跃度会更高。

　　在robots.txt中，YST有一个特定的扩展名，可以用来为我们的爬虫设置较低的爬取请求频率。

　　可以添加Cral-delay:xx指令，其中“XX”是指爬虫程序两次进入站点的最小延迟时间，单位为秒。如果爬虫频率对您的服务器造成负担，您可以将此延迟设置为您认为合适的任何数字，例如 60 或 300。

　　比如你想设置20秒的延迟，语句如下：

　　用户代理：Slurp

　　爬行延迟：20

　　11.如何让雅虎只索引某些网页？

　　雅虎的 YST 搜索引擎符合 noindex（无索引）的元标记。你可以在网页文档的上半部分写：

　　这时候，YST 会跟踪该文档，但不会对其进行索引，也不会将其收录到搜索引擎数据库中。

　　12. 看到重复的下载请求，怎么回事？

　　一般来说，在一次爬取过程中，YST搜索程序只会对网站的每个文件复制一次。但也有偶尔的情况，就是当爬取程序停止并重新启动时，它会重新获取上次复制的文件。但这种情况不会经常发生，也不会导致您的系统出现故障，请放心。

　　13.这个网络爬虫程序是如何找到我网站上的文件的？

　　YST 搜索程序跟踪 HREF 链接，但不跟踪 SRC 链接。这意味着我们的程序不会通过 SRC 指向的链接跟踪或索引这些框架文件。

　　14. 雅虎的爬虫可以跟踪动态链接吗？

　　YST搜索程序支持Web框架，力求抓取复杂的网页，例如通过表单、内容生成系统、动态页面生成软件生成的页面。

　　YST搜索程序力求抓取更多不需要网站管理员特别支持的网页，但现实中还有很多网站是机器搜索不到的，不管是通过雅虎或其他同样强大的网页。搜索系统。

　　15.如何让我的网站成为雅虎收录？

　　一般情况下，雅虎的搜索引擎会自动处理收录网站。

　　16.我的网站不想出现在雅虎搜索结果中，如何删除？

　　如果您需要删除自己的整个网站或部分网页在雅虎网页结果中的记录，您可以在您的服务器根目录下放置一个robots.txt文件，其内容如下如下：

　　用户代理： *

　　不允许： /

　　这是大多数网络搜索程序将遵守的标准协议。加入这些协议后，它们将不再抓取您的网络服务器或目录。有关 robots.txt 文件的更多信息，请访问：

　　只要你的网站服务器根目录中有这个robots.txt文件，YST搜索程序就不会进入你的网站，你的网站也不会出现在雅虎的搜索结果中。

　　如果您的情况非常紧急，您不能等到我们的YST搜索程序下次抓取您的网站再删除，您可以向我们报告，会有专人负责处理。

　　17.我可以只删除单个网页吗？

　　如果您只需要保护单个网页而不希望搜索引擎显示这些网页，您可以在该网页中添加以下 HTML 代码：

　　有关此标准元标记的更多信息，请访问：#meta

　　如果你的情况很紧急，等不及YST搜索程序下次爬取你的网站，那么你可以删除它。请给我们反馈，我们将负责处理。

　　18.我的网站已经修改了，能帮我修改一下网站的总结吗？

　　网站的每一个摘要都是由程序自动生成的，无需人工干预或人工修改。雅虎搜索引擎会定期自动更新。更新后，您的网站中会出现一个新的摘要。

　　19.雅虎收录的网页涉及个人隐私或公司机密。如何尽快删除这些网页？

　　雅虎与这些网站无关，雅虎也无权删除网站上其他人的网页。雅虎搜索遵循客观和公平的原则。如果您认为搜索结果中其他人的网站收录对您或您公司的侵权信息，并希望这些信息从雅虎搜索结果中消失，请先联系这些网站管理员，只要因为这些网站被删除后，这些信息会在几天或几周内自动从雅虎搜索结果中消失。如果您希望网页信息尽快从雅虎搜索结果中消失，请确认您已联系网站管理员删除指定网页，然后提供*敏*感*词*明，< @网站 所有权证明和详细的侵权信息，通过传真或电子邮件提供给雅虎。雅虎收到上述法律文件后，将尽快删除涉嫌侵权的网页。