以下是热门搜索引擎及其蜘蛛网名称的列表。
您是否知道,除非隐瞒(隐藏)robots.txt文件,否则任何人都可以通过在网络浏览器中输入robots.txt文件地址来访问该文件。我读过有关不道德的人搜索robots.txt文件以发现隐藏的私人文件的故事。因此,请注意robots.txt文件中包含的内容。
这里有2个免费工具,可帮助您管理robots.txt文件:
如果要自动将访问者重定向或转发到另一个网页或站点,请使用元刷新标记或JavaScript重定向。
在指定的时间过去之后,元刷新标记将指示Web浏览器使用相同或不同的URL刷新(重新加载)页面。要将元刷新标签添加到页面,请将标签放在页面的HEAD部分之间。
这是一个示例刷新标记,该标记在3秒后用“ new-page.html”重新加载页面:
<META HTTP-EQUIV =“刷新” CONTENT =“ 3; url = new-page.html”>
这是一个刷新标记示例,用于在5秒后重新加载网页的网站URL:
<META HTTP-EQUIV =“刷新” CONTENT =“ 5; url = http://www.google.com”>
如果要刷新同一页面,只需忽略CONTENT属性的第二部分。
例如:
<META HTTP-EQUIV =“刷新” CONTENT =“ 30′>
如果要在一段时间后刷新页面,我建议您将时间设置为30秒或更长,因为大多数搜索引擎都将少于30秒的时间视为垃圾邮件。
如果您确实必须在30秒内将访客转发或重定向到新页面或网站,建议您使用JavaScript重定向而不是Meta refresh标签,以使搜索引擎满意。
搜索引擎不太可能检测到使用JavaScript重定向来重定向用户,因为JavaScript有很多用途。元刷新标签的问题在于它只有一种用途。
要将JavaScript重定向添加到页面,请将标签放置在页面的HEAD部分之间。
示例JavaScript重定向以将当前页面替换为新页面:
<SCRIPT LANGUAGE =“ javascript”>
<!-
location.replace(“ http://www.google.com”);
//->
</ SCRIPT>
如果用户已关闭JavaScript或正在使用不支持JavaScript的较旧的浏览器,则还应包含一个meta refresh标签。大约10%的互联网用户使用手动关闭了JavaScript或不支持JavaScript的网络浏览器。
应将Meta refresh标签放置在“ noscript”元素中,以便浏览器不会同时执行JavaScript重定向和Meta refresh。
这是“ NOSCRIPT”元素内的示例元刷新标签:
<NOSCRIPT>
<META HTTP-EQUIV =“ refresh” CONTENT =“ 30; url = http://www.google.com”>
</ NOSCRIPT>
CSS的一种常见用途是更改标头标记和链接的属性。当您要突出显示页面中的重要关键字短语,但又不想在页面上有很大的标题时,此功能很有用。
例如,这将标题文本的大小减小到中等。
<H1 STYLE =“ font-size:medium”>搜索引擎优化</ H1>