如何用PHP检测搜索引擎机器人？
要检测搜索引擎机器人，可以通过分析用户代理（User-Agent）和IP地址来判断。以下是一个简单的PHP示例，用于检测搜索引擎机器人并输出相应的信息。
<?php
function is_bot($user_agent) {
$bots = array(
'Googlebot',
'Bingbot',
'Yahoo',
'Slurp',
'DuckDuckBot',
'Baiduspider',
'YandexBot',
'Sogou',
'Exabot',
'Facebot',
'ia_archiver'
);
foreach($bots as $bot) {
if (strpos($user_agent, $bot) !== false) {
return true;
}
}
return false;
}
if (isset($_SERVER['HTTP_USER_AGENT'])) {
$user_agent = $_SERVER['HTTP_USER_AGENT'];
if (is_bot($user_agent)) {
echo "搜索引擎机器人已检测到。";
} else {
echo "这不是一个搜索引擎机器人。";
}
} else {
echo "无法检测到用户代理。";
}
?>此代码首先定义了一个名为is_bot的函数，该函数用于检测用户代理字符串中是否包含已知的搜索引擎机器人关键词。然后，代码检查$_SERVER['HTTP_USER_AGENT']是否存在，如果存在，则调用is_bot函数并输出相应的信息。如果不存在，则输出无法检测到用户代理的信息。
请注意，此代码仅用于检测已知的搜索引擎机器人，可能无法检测到所有搜索引擎机器人。此外，搜索引擎机器人可能会伪装成其他用户代理，因此不能完全依赖此方法来阻止机器人访问。
相关·内容
1回答
我正在用西班牙语实现一个搜索引擎。为了确保性别中立，我需要得到西班牙语名词的性别--例如"pintora“(画家，女性)和"pintor”(画家，男性)。我目前正在使用 --这对于西班牙语的NER来说真的很棒。然而，在西班牙语名词中，我找不到任何用于性别检测的良好的实现/库。你能帮我一下吗？
预先感谢您的帮助
浏览 4提问于2022-10-13得票数 0
回答已采纳
如果html，在这种情况下是alt标签，是通过php编写的，php获取两个数据库字段的值，将它们放入变量中，然后用echo显示它们，机器人可以看到alt标签的值在浏览器中显示或代码在这里吗？
echo (...... alt=\"".$fld['name'] . " " . $fld['description']."\".....)
我的意思是，如果name = "apples“和description = "red and果汁”
搜索机器人看到的是alt =“苹果红色多汁的”还是上面的代码？
我怀
浏览 1提问于2015-02-10得票数 0
我不想让机器人知道应该解析{any_num} uri。
下面是我的站点地图代码的当前部分。
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
<url>
<loc>https://my-site.com/example/</loc>
<lastmod>2016-12-14</lastmod>
<changefreq>weekly</changefreq&g
浏览 2提问于2016-12-14得票数 1
回答已采纳
如何用htaccess阻止所有的机器人。所有的机器人意味着所有的机器人，甚至谷歌或任何机器人都不应该访问我的网站。我在我的站点中使用自定义的index.html页面，并且在后端还安装了Wordpress。
浏览 4提问于2016-03-03得票数 1
回答已采纳
有没有办法在我的网站上发现搜索引擎或爬虫。我在phpBB上看到过，我们可以看到并允许搜索引擎，也可以看到机器人的最后一次访问(比如Google )。
PHP中有脚本吗？不是谷歌分析或同类应用程序。我需要为我的博客站点实现这一点，我认为有一些方法可以找到答案吗？
浏览 7提问于2009-07-20得票数 5
回答已采纳
1回答
我有一个在一个文件结构下处理多个域的系统，每个域需要不同的站点地图和robots.txt。
对于sitemap，我已经设置了一个重定向，并且我知道它运行良好。我想确认一下，robots.txt也可以吗？
我在.htaccess中添加了一个重写规则，它将person重定向到php页面。在这个php页面上，我找到了域用户拥有的内容，并用文本头打印出了正确的信息。
允许这样做吗？
额外信息：
我有一个由domainA和domainB使用的代码点火器应用程序。domainA应该看到用于domainA的机器人，而domainB应该看到用于domainB的机器人。如果我要在站点根目录中创建robots.t
浏览 0提问于2015-05-26得票数 0
1回答
基本上，我希望使用.htaccess文件将机器人从常规站点重定向到静态版本。
情况如下:我的站点中的URL采用以下格式：
http://example.com/?p=something
http://example.com/index.html?p=something
http://example.com/basic.php?p=something
我想使用.htaccess文件来重定向机器人，通过用basic.php替换index.html或者在不存在的情况下添加它，将前两个URL中的一个重定向到第三个URL。根目录也应该变成basic.php而不是index.html。
这是我当前的.ht
浏览 2提问于2015-07-30得票数 1
回答已采纳
我正在考虑使用mod_evasive和/或mod_throttle来防止对我的网站的滥用访问(运行Apache2.4)。例如，我的意思是使用wget或HTTtrack下载整个网站。mod_evasive和mod_throttle都有方法限制用户在单位时间内访问页面的次数。因此，例如，我可以将IP地址限制为每10分钟5页或类似的内容。
然而，我想让搜索机器人超过极限。
因此，似乎有两种选择：
(1)我可以以某种方式向搜索引擎提交网页。因此，我阻止机器人离开站点，但只要页面更新时就显式地发送页面(我可以这样做吗？)
(2)白名单机器人。这里的问题是我无法提前知道机器人的IP地址。
应该采用什么方法
浏览 0提问于2018-01-12得票数 0
4回答
我有一些地理目标代码，如果网站被机器人蜘蛛，我想以一种特殊的方式行为，例如谷歌等。
有什么方法可以推断出这一点吗？
浏览 0提问于2010-02-16得票数 3
回答已采纳
2回答
我使用AJAX构建了我的整个站点(实际上是GWT)。我还实现了由Google提出的AJAX爬行。然而，在实施之后，我发现雅虎、必应和百度都没有实施那个方案！
我想知道是否有一种方法来识别网络客户端是一个搜索机器人。如果是，它们将显示我创建的HTML快照。
如果我能够在APACHE级别上识别它们，那么我就可以只做一个mod_rewrite。但是，如果我可以在PHP或GWT中做到这一点，还是可以的。
浏览 0提问于2010-12-01得票数 2
回答已采纳
1回答
我有一个PHP网站，目前没有使用AngularJS。我想改变一下它的设计，在此期间，开始使用AngularJS来创建一个SPA网站。该网站包含编程教程，因此它在google搜索结果中的位置至关重要。我最近一直在搜索，看看在这种情况下是否可以使用AngularJS，我找到的最有趣的帖子是这个：
我想知道如果我使用AngularsJS，我的网站是否仍然会被引用。我会注意到URL保持不变，但是Google机器人能够像现在一样爬行我的网站吗？我需要确定，因为我不想失去我所有的流量，因为谷歌不再能够爬行我的网站。
浏览 1提问于2015-06-29得票数 0
2回答
我正在尝试找到创建动态元机器人部分的最佳方法。我有一个搜索引擎，只希望由谷歌和其他人索引的主搜索“与所有类别一起搜索”。我希望任何类别搜索没有索引，这样我就不会因为可能在不同的搜索页面上显示大量相同的文本而受到重复惩罚。我这样做，如果“类别”是在url，使它没有索引，像这样。
<?php if (!isset($_GET['category'])) echo "<meta name='robots' content='all'>"; if (isset($_GET['category'])) ec
浏览 0提问于2011-07-18得票数 1
回答已采纳
1回答
我在谷歌里有很多链接，比如：
www.domain.com/wpsite/galleries/ www.domain.com/wpsite/hello-world/
如果用户来自谷歌，我如何用.htaccess文件删除这个WPSITE？我需要这样的链接: www.domain.com/galleries/ www.domain.com/hello-world/
我的.htaccess代码：
<IfModule mod_rewrite.c>
RewriteEngine On
RewriteBase /
RewriteRule ^index\.php$ - [L]
RewriteCon
浏览 2提问于2013-05-31得票数 0
我想不允许机器人索引我的网站的一些页面。例如，我不允许使用以下页面：
/category/name1/page/1
/category/name1/page/2
/category/etc/page/3
但我想让这几页：
/category/name1/
/category/name1/
/category/etc/
我如何用robots.txt来表达这一点呢？
User-agent: *
Disallow: /category/*/page/*
对不对？
浏览 0提问于2015-12-02得票数 4
回答已采纳
7回答
我见过用于机器人的新API可以创建立方体机器人，我已经看到了一些源代码，比如和，我还读过关于@fatherbot (注册机器人)的文章，我还搜索了一些关于电报机器人(如 one )的例子，我知道如何用php和python编写代码，但不知道如何调用api方法，从哪里得到start.Does
浏览 7提问于2015-06-25得票数 7
回答已采纳
我设置了我的站点，以便用户可以键入栏的名称作为URI，并且我的站点中的链接是以相同的方式构建的。
例如，我将链接设置为triadbarspecials.com/somebarname，而不是triadbarspecials.com/bars.php?id=234546456。
我使用.htaccess将页面定向到正确的页面。在我的网站链接中使用上面的第一个url是最好的，还是搜索引擎机器人能够处理上面的第二个url？
浏览 0提问于2013-01-14得票数 0
回答已采纳
我们有一个电子商务网站。由于一些营销和宣传活动，我们正在显示应用下载页面/横幅/促销/大图像(和其他任何东西)在我们的主页上，如果用户是第一次访问网站，这是基于cookie的。
但是我不希望机器人/爬虫看到这个内容(大图像)，相反，他们应该看到设置cookie之后的真实内容。URL对于两个内容都是相同的。
我可以对此做更多的澄清。如何避免机器人看到促销内容？
浏览 3提问于2014-04-11得票数 0
回答已采纳
1回答
虽然我理解响应式设计的优点，但将我的整个网站转换为处理移动设备的方法太复杂了。因此，我正在努力的是在每个页面的开始处进行用户代理检查，然后挑选出包含大部分内容的PHP include。然后有一个用于桌面和一个用于移动的包含。每个页面开头的代码片段如下所示：
<?php
include("../includes/UAsniffer.php");
if ($mobile_browser > 0) {
include("../includes/xyz_mobile.php");
}else{
include("../includes/xyz.php
浏览 4提问于2015-12-23得票数 0
很久以前，当我安装WordPress时，我启用了(没有机器人)或类似的东西，无论如何，谷歌在搜索我的站点时不会显示更多的细节。
我怎么才能扭转这一切？
编辑：
我的html来源：
<meta name="robots" content="noindex,nofollow">
My来源：
<meta charset="<?php bloginfo('charset'); ?>">
浏览 0提问于2013-10-08得票数 0
如何保护和隐藏/adminblah/文件夹，使其不被机器人和用户发现，这样只有管理员才知道它的存在？
1)为了禁止机器人和机器人使用它，我们可以使用robots.txt文件。
但是，该文件将包含Disallow: /adminblah/ then。因此，每个人(谁想要)都将知道管理员文件夹的路径，因为他可以读取robots.txt文件。为此，我们可以将.htaccess文件放到/adminblah/中，以对该文件夹进行密码保护。
这样做明智吗？有没有更聪明的解决方案来限制对/adminblah/index.php页面的访问？
这个问题涉及到所有的内容-管理php文件，管理图片等。
浏览 2提问于2011-08-21得票数 0
回答已采纳
1回答
原谅我不恰当地使用这个论坛，如果我是，但我非常喜欢这个网站，我想从这里开始。
最近，我选择了一个职位，让我与国际搜索引擎合作，尤其是在中国的百度。
有没有人有一些提示或地方开始寻找SEO技术？他们的索引/机器人是否与Google/Bing/Yahoo一样工作？等?
有人有这方面的经验吗？
再次，我很抱歉，如果这不是适当的地方，但有一个健康的数量在同一行业的人在这个社区，所以我想尝试。
浏览 0提问于2011-09-29得票数 1
1回答
我在我的站点上安装了mediawiki，如下所示：www.mysite.com/w/index.php
我使用了短URL方法将url更改为mysite.com/wiki
在此之后，我将其放置在robots.txt中，以禁止机器人遵循指向/w/的链接。
# prevent spiders from indexing non-article pages
User-agent: *
Disallow: /w/
在将上面的内容添加到robots.txt：之前，我在这里引用了这个Mediawiki手册链接
这是有用的，因为它防止机器人爬行编辑页面，等等。等等。但从那以后，我又遇到了另一个问题，那就是谷歌
浏览 2提问于2013-12-04得票数 1
回答已采纳
6回答
如何让用户访问具有WordPress保护的页面，并在下面的表单中提交密码？
我想让用户能够访问受密码保护的WordPress页面，而不需要键入密码，所以当他们进入页面时，密码是由POST URL在页面加载时提交的。
这在任何方面都不安全；我需要硬编码URL和PHP中的密码。这只是为了用户的简单性。
编辑4/19/10:如下所示，可以直接设置cookie，以便用户不必输入密码。让搜索机器人进入是最好的方法是检测用户代理和重定向，因为机器人不会处理cookie。
这是表单(它是WordPress核心代码)：
<form action="http://mydomain.com/wp-p
浏览 1提问于2010-04-11得票数 3
回答已采纳
我们使用静态html，结合部分页面水合通过javascript。访问者第一次到达网站时会下载一个完整的html页面，javascript从那里拦截任何内部链接点击，获取一个包含更改内容的json文件，然后用新内容补充现有的DOM。
但是，我们的模式数据作为ld+json包含在页面中，因此不包含在被补充的内容中。
我想知道，当Googlebot和宾博特访问像我们这样的网页时，他们是否会查看html，只需获取获得完整静态版本的链接中列出的url？或者他们是否模拟了链接点击，在这种情况下，js会预先形成页面水化，然后它们会分顺序爬行吗？
我之所以这样问，是因为我们还没有弄清楚如何用<scrip
浏览 0提问于2021-05-06得票数 1
回答已采纳
2回答
2014年有什么SEO值重写urls吗？
如果我的站点始终链接产品页面，并且该产品页面显示一致的规范url，那么是否有真正的SEO这样做？
http://example.com/products/woman-tracksuit-in-hemp
而不是这个
http://example.com/product.php?id=6588
我知道一个人会对一个重写的url感到更舒服，但是我想把重点放在搜索引擎优化和机器人上，尤其是Google。
浏览 0提问于2014-04-24得票数 1
我对此有一些想法，但我可以看出两者都有问题。我不需要百分之百准确的数据。80%的解决方案允许我对用户路由到的最受欢迎的域进行概括，这是很好的。
选项1 -使用。在跟踪单击之前，通过文件track.php路由链接，以确保引用页来自我的域。然后，此页面将用户路由到最终的预期URL。很明显，机器人可以欺骗这一切。做了很多吗？我也可以检查用户代理。再说一遍，我知道很多机器人都会这样。
选项2 -使用JavaScript。在click函数上执行一个JavaScript，该函数将单击写入数据库，然后将用户引导到最终的URL。
这两种方法都感觉它们可能会导致爬虫在我发出的链接之后出现问题。跟踪这些发出的点击
浏览 0提问于2012-03-25得票数 0
回答已采纳
哪个url是向机器人显示404的正确url？
页面包含404个内容
(或)
页面包含404个内容
也就是说，我是否要将不匹配的url重定向到404pagenotfound.php
或
是否要显示在同一不匹配的url中找不到的页面。
浏览 0提问于2014-06-05得票数 0
1回答
Bot后防洪
、、
从2月半个月起，我注意到一个非常小的网站的流量增加了，这个网站开始每天给我发一个访问日志。
机器人一遍又一遍地请求主页，以"3+6=?“的形式发布一些内容。验证。起初，这些信息包含指向其他网站的链接。为此，我决定用php阻止包含"href“、"http”或"www“的所有消息。这删除了一段时间的垃圾邮件，但很快就出现了一些随机内容的新帖子，比如“你去哪所大学”，“我很好”，……
所以我增加了一个蜜罐，一个应该是空的领域，几个小时后机器人就克服了。然后，我添加了一个隐藏字段，其中包含一个模糊的时间戳，它可以将99,99%的帖子排除在外。因此，没有更多的坏数据存储，
浏览 0提问于2016-03-11得票数 1
1回答
我要阻止所有的机器人，除了大型搜索引擎。
我的阻塞方法之一是检查“语言”：Accept-Language
如果它没有接受语言，机器人的IP地址将被阻止，直到2037年。
Googlebot没有Accept-Language，我想用DNS查找来验证它
<?php
gethostbyaddr($_SERVER['REMOTE_ADDR']);
?>
使用gethostbyaddr可以吗，有人能通过我的"gethostbyaddr保护“吗？
浏览 0提问于2010-06-20得票数 0
回答已采纳
我一直在为我的网站做更多的机器人过滤器，但它绝不是完整的。
到目前为止，我有主要的：
谷歌，雅虎，MSN，百度，亚马逊，还有其他几家.
现在，我正在使用一个过滤器来比较推荐URL、现有域和已知浏览器与非浏览器用户代理。
有没有其他好的技术来检测攻击是否来自一个机器人？
浏览 0提问于2010-09-29得票数 3
回答已采纳
1回答
我目前是一个双语网站，我想得到很好的SEO结果，当然。
，这是我的主意：
内部链接将由"www“子域组成，以便人们可以共享链接，而不管他们的语言如何。无论如何，它们的语言是由HTTP_ACCEPT_LANGUAGE PHP变量决定的。
因此，他们会在自己的地址栏中看到http:// www.site.com/mydocument/123，而不会看到像"http:// fr.site.com/mydocument/123“或"http://en.site.com/mydocument/123”这样的链接。
由于页脚中的链接，用户可以随时切换页面语言。
切换语言链接为:
浏览 0提问于2011-10-24得票数 3
回答已采纳
我有一个商店有分类，有多重要的是有类别名称的链接？
我在.htaccess上使用了.htaccess；例如：
www.someShop/productDetail.php?prodID=1234
www.someShop/product/category-name/product-name
或
www.someShop/productDetail.php?prodID=1234
www.someShop/product/product-name
与猫名的链接更好吗？提前谢谢！
浏览 5提问于2014-03-17得票数 0
回答已采纳
我在我的AW统计数据中发现了这个：
未知机器人(通过‘_+’后跟一个空格或以下字符之一进行标识：，.;/-)
636,127+83 17.95 GB
这就是在我的网站上消耗的最大带宽。是google机器人消耗的4倍。
我不知道这些机器人是什么，也不知道它们发送了多少流量，但本月在我的网站上机器人的总点击量已经超过了1M，这导致了一个“带宽超出”的错误信息
有没有办法用php preg阻止所有这些？
但我不想阻止谷歌机器人，雅虎机器人和必应机器人。
谁能给我在PHP中检测这些机器人的preg_match规则？
我想使用PHP，这样我就可以在发送403代码之前记录他们的输入。
谢谢
浏览 3提问于2017-07-27得票数 0
2回答
我知道搜索引擎机器人会注意页面上的粗体文本，这些文本是strong超文本标记。但是，如果我们使用font-weight:bold而不是strong标记，他们还能识别吗？
HTML标签等同于搜索引擎优化的font-weight:bold;吗？
浏览 0提问于2013-05-30得票数 0
回答已采纳
1回答
视频中的箭头识别
、、、
我想要创建一个程序，它可以识别视频提要中的箭头并确定它们指向的方向(左或右)。我的目标是使用这个程序与一个arduino机器人，以确定的方向，机器人应该移动。
我的问题是使用哪种方法。我已经缩小了我的选择范围模板匹配或冲浪。模板匹配是很好的，因为它是独立的旋转，因此它可以确定左右箭头之间。但是，由于机器人将移动，模板箭头的大小可能不等于视频提要的大小，因此没有匹配。
SURF解决了这个问题，但是它是旋转不变的。这意味着左箭头和右箭头将被视为相同的东西。
有谁能给我建议一下这个程序的方法吗？
提前感谢您的帮助
我将使用OpenCV来实现。
浏览 1提问于2014-05-27得票数 2
回答已采纳
我正在努力改善搜索引擎优化的网站，并击中了一个有趣的问题。除了其他东西之外，该站点还包括一个包含大量单独项目的目录(这些项目是什么并不重要)。每个项目都有自己的详细信息页面，可通过
http://www.mysite.com/item.php?id=item_id
或
http://www.mysite.com/item.php/id/title
该目录很大-其中有大约100,000个项目。当然，在任何一个页面上都只列出了几个项目。例如，在主站点主页上，有大约5到6个项目的链接，从其他一些页面到大约12个不同项目的链接，等等。
当真正的用户访问网站时，他们可以使用搜索表单根据关键字或位置来查找
浏览 0提问于2012-04-19得票数 0
回答已采纳
以前，我已经阻止了搜索引擎机器人，以防止使用robots.txt文件爬行我的网站，但现在我想取消阻止它们。 我更新了robots.txt文件，并允许搜索引擎机器人爬行我的网站，但搜索引擎似乎仍然使用我的旧robots.txt文件，我如何告诉搜索引擎使用我的新robots.txt文件？或者是我的robots.txt文件有什么问题？ 我的旧robots.txt文件的内容： User-agent: *
Disallow: / 我的新robots.txt文件的内容： User-agent: *
Allow: /
# Disallow these directories, url types &am
浏览 27提问于2019-03-24得票数 2
回答已采纳
我们希望在客户端为未经身份验证的用户实现免费的使用限制。例如，如果用户一天超过某一限制(比如每天5篇文章)，没有登录的用户将无法查看内容。我们计划将这些信息存储在本地存储上--然后，如果用户已经完成了一天的免费配额，则只需限制客户端进行API调用即可。
然而，对我们来说，这个限制是必要的，不影响网络机器人或谷歌机器人，它爬行网站的索引。谷歌机器人是否为从我的网站上抓取的每一页刷新本地存储内容？或者，对于如何为未经认证的用户实现免费使用限制，您有什么好的建议吗？
浏览 4提问于2022-09-11得票数 1
回答已采纳
1回答
如何用我的discord python机器人实现Api动漫角色数据库功能？我是新加入不和谐的蟒蛇机器人。以下是动画角色数据库的示例api链接： https://www.animecharactersdatabase.com/api_series_characters.php?character_q=naruto
浏览 17提问于2021-09-09得票数 0
2回答
据我所知，如果你在你的网站中使用AJAX或javascript链接，它会伤害SEO，因为谷歌机器人在你的站点上爬行有麻烦，基本上它喜欢锚标签。
所以，在你的网站上避免AJAX或Flash是一个普遍的说法，尽管有些人说谷歌机器人知道阅读javascript链接。
现在我相信这是可能的操纵谷歌机器人，当意义操纵我不意味着任何非法或黑帽子，我只是想阿贾克斯我的网站。
我的问题分为两部分：
它是否有可能“呈现”谷歌机器人与一个版本的网站，和用户与另一个？我读过，base64编码您的内容可能会使机器人感到困惑，但对我来说，这似乎是一个糟糕的解决方案。
同样，据我所知，您可以添加到robot.
浏览 3提问于2012-05-29得票数 0
回答已采纳
2回答
测试我的网站在程序中是如何显示的
、、、、
网站不仅可以被浏览器上的用户访问，还可以被程序、机器人和爬虫访问。我有一个运行在上的带有python的网站，它具有由python程序通过组合、合并和循环字符串生成的非静态HTML页面。但是，它们也不是动态页面，因为生成这些页面不需要用户输入。python生成内容完全是为了方便、简洁和易于维护，并且完全由url设置。
一些搜索引擎无法对动态页面进行索引。我想知道这些页面是否符合“动态”，即它们是否可以被这类机器人为通常的元数据和内容进行爬行或索引，并且通常希望有一种方法来检查任何url在机器人或爬虫中是如何出现的，比如搜索引擎使用的url，这样我就可以看到某个url何时是不可爬的。
如果有人知道
浏览 5提问于2012-01-09得票数 0
回答已采纳
我们可以用他们的用户代理(1，2)来识别机器人，但这不是那么简单。这样做的好处是跳过用于机器人的大型且可能无用的资源，只为核心内容服务。
这方面的最佳做法是什么？对机器人来说，跳过多余的资源值得吗？如果是这样的话，什么是探测机器人的最佳实践呢？
使用特定的?bot=true查询字符串(例如，手动检查它(并确保这些页面不可索引)还是会损害SEO？
浏览 0提问于2021-12-27得票数 3
回答已采纳
我有一个大型的个人名称目录，以及通用的、可公开的和特定类别的信息，我希望在搜索引擎中尽可能多地索引这些信息。将这些名字列在网站上并不是人们关心的问题，但有些人不想在搜索结果中自己“谷歌”。
我们希望继续在页面中列出这些名称，并且仍然对页面进行索引，而不是在搜索引擎中索引指定的名称或关键字。
这是一页一页的工作，还是设置两页是更好的工作：
现有的备选方案：
如果用户代理=机器人/搜索引擎，PHP可以检查关键字。
htaccess将机器人限制在非审查内容上，但允许第二个审查版本。
元标签定义单词而不是索引？
JavaScript可以对机器人隐藏关键字，但可以查看。
浏览 2提问于2009-11-27得票数 1
我有许多域名，而不是为每个域名单独创建内容，我在每个index.php页面中使用以下代码来显示我拥有的另一个网站的相关页面(其中'getDomain‘是从url获取域名的函数)：
<?php
$domain = $_SERVER['HTTP_HOST'];
$domain = getDomain($domain);
$crawl = "http://example.co.uk/page.php?domain=$domain";
$request = curl_init($crawl);
print curl_exec($request);
cu
浏览 1提问于2010-11-04得票数 0
回答已采纳
如果我想过滤掉所有的搜索引擎机器人，例如，一个计算在线用户的脚本，是否有网站或列表，它是最新的，包括所有机器人的ip地址？因为如果我手动将它们放入我的脚本中，我将不得不每天修改它，因为新的ips即将到来。
谢谢你的帮忙!
浏览 0提问于2011-03-15得票数 2
如何用Telebot插件在php(laravel)中回答电报机器人的内联查询？我正在用laravel做一个机器人项目，我用的是Telebot包。
Telebot支持answerInlineQuery方法吗？我找不到了。
\WeStacks\TeleBot\Laravel\TeleBot::answerInlineQuery([]); //this doesn't exist.
如何回答内联查询？
浏览 14提问于2022-03-31得票数 0
回答已采纳
在电报机器人(php)中如何识别发送给用户的消息和用户写答案之间的关系？我如何在电报机器人代码中识别它是否是这个文本的答案，首先我放上5个按钮，当用户按下每个按钮时，用户必须输入我想要的文本，识别它是特定按钮的答案。我如何用php来识别这一点呢？
浏览 3提问于2015-09-10得票数 2
我正在实现一个简单的过滤器，有多少未注册的用户可以访问我的网站。当然，我想让搜索引擎优化机器人自由统治/访问网站的大部分内容。
我知道这太简单了。但这并不值得做更复杂的事情。我需要编译一个我允许的用户代理的名称列表，为此，我需要一个机器人的名称列表，从Googlebot开始(我甚至不知道这是否是Gogles网络爬行机器人的官方拼写)。
任何人我想要一个链接到一个明确的资源，给出的SEO索引机器人的名称？我尝试过，但它的粒度不够细-它似乎列出了所有创建过的用户代理！
浏览 0提问于2010-06-28得票数 5
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储活动推荐
腾讯云开发者
