主要搜索引擎机器人用户代理

2020-04-07

以下是热门搜索引擎及其蜘蛛网名称的列表。

  • AltaVista-踏板车
  • AllTheWeb / Fast-快速
  • Google-Googlebot
  • Inktomi-Slurp
  • 莱科斯-莱科斯

为什么黑客喜欢Robots.txt文件

您是否知道,除非隐瞒(隐藏)robots.txt文件,否则任何人都可以通过在网络浏览器中输入robots.txt文件地址来访问该文件。我读过有关不道德的人搜索robots.txt文件以发现隐藏的私人文件的故事。因此,请注意robots.txt文件中包含的内容。

2个免费的Robots.txt文件管理工具

这里有2个免费工具,可帮助您管理robots.txt文件:

    • Search Engine Promotion帮助-分析您的robots.txt文件,并报告有关尚未广泛部署的新功能的使用的语法错误和警告。

http://www.searchenginepromotionhelp.com/m/robots-text-tester/robots-checker.php

    • Web机器人数据库-具有描述和联系方式的当前已知机器人的数据库。

http://www.robotstxt.org/db.html

如何使用元刷新标记和JavaScript重定向

如果要自动将访问者重定向或转发到另一个网页或站点,请使用元刷新标记或JavaScript重定向。

如何使用元刷新标签

在指定的时间过去之后,元刷新标记将指示Web浏览器使用相同或不同的URL刷新(重新加载)页面。要将元刷新标签添加到页面,请将标签放在页面的HEAD部分之间。

这是一个示例刷新标记,该标记在3秒后用“ new-page.html”重新加载页面:

<META HTTP-EQUIV =“刷新” CONTENT =“ 3; url = new-page.html”>

这是一个刷新标记示例,用于在5秒后重新加载网页的网站URL:

<META HTTP-EQUIV =“刷新” CONTENT =“ 5; url = http://www.google.com”>

如果要刷新同一页面,只需忽略CONTENT属性的第二部分。

例如:

<META HTTP-EQUIV =“刷新” CONTENT =“ 30'>

如果要在一段时间后刷新页面,我建议您将时间设置为30秒或更长,因为大多数搜索引擎都将少于30秒的时间视为垃圾邮件。

如何使用JavaScript重定向

如果您确实必须在30秒内将访客转发或重定向到新页面或网站,建议您使用JavaScript重定向而不是Meta refresh标签,以使搜索引擎满意。

搜索引擎不太可能检测到使用JavaScript重定向来重定向用户,因为JavaScript有很多用途。元刷新标签的问题在于它只有一种用途。

要将JavaScript重定向添加到页面,请将标签放置在页面的HEAD部分之间。

示例JavaScript重定向以将当前页面替换为新页面:

<SCRIPT LANGUAGE =“ javascript”>
<!-
location.replace(“ http://www.google.com”);
//->
</ SCRIPT>

如果用户已关闭JavaScript或正在使用不支持JavaScript的较旧的浏览器,则还应包含一个meta refresh标签。大约10%的互联网用户使用手动关闭了JavaScript或不支持JavaScript的网络浏览器。

应将Meta refresh标签放置在“ noscript”元素中,以便浏览器不会同时执行JavaScript重定向和Meta refresh。

这是“ NOSCRIPT”元素内的示例元刷新标签:

<NOSCRIPT>
<META HTTP-EQUIV =“ refresh” CONTENT =“ 30; url = http://www.google.com”>
</ NOSCRIPT>

如何使用CSS更改标题字体大小

CSS的一种常见用途是更改标头标记和链接的属性。当您要突出显示页面中的重要关键字短语,但又不想在页面上有很大的标题时,此功能很有用。

例如,这将标题文本的大小减小到中等。

<H1 STYLE =“ font-size:medium”>搜索引擎优化</ H1>

--- END ---