腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(3112)
视频
沙龙
1
回答
如何
让
Googlebot
抓取
从
AJAX
加载
的
内容
,
同时
防止
它
索引
URL
命中
?
、
、
我在我
的
网站上有一组页面,我在页面
加载
时发布“主要
内容
”,并在页面
加载
后通过
AJAX
命中
发布“相关
内容
”。我想要做
的
是确保
Googlebot
可以通过
AJAX
加载
内容
,并遵循其中
的
链接,但不
索引
请求
URL
。 如果我不允许robots.txt中
的
网址,
Googlebot
将不会
抓取
浏览 36
提问于2019-02-20
得票数 0
1
回答
Googlebot
会点击一个按钮/链接来显示
AJAX
内容
吗?
、
、
、
我
的
客户必须告诉
它
的
客户一些新
的
规定,谷歌机器人不应该爬行。不可能将这些信息放在单独
的
页面上,而不允许Google对其进行爬行。因此,我们
的
想法是在页面上放置一个按钮/链接,只有当用户单击该按钮/链接时,
它
才会
加载
相应
的
信息。我
的
假设是,Google无法单击链接并爬行特定
的
AJAX
内容
。 我说
的
对吗?如果是,是否有正式文件证明
浏览 0
提问于2020-07-01
得票数 4
回答已采纳
1
回答
Googlebot
是否在HTML页面中爬行JS或JSON?
、
、
、
、
我
的
Google搜索工具抱怨它在我
的
网站上找到了某些
URL
。这些是故意不可用
的
URL
;我不会在任何链接中使用它们。把它们看作是未使用
的
元数据。( A)在一个场景中,这些
URL
是我存储在变量中
的
JS对象
的
一部分 const foo = { badUrl: "http://www.example.com/{these
浏览 0
提问于2021-05-26
得票数 2
回答已采纳
1
回答
动态
加载
的
内容
在网页上没有识别的关键字密度检查-谷歌做同样
的
,我能修复
它
吗?
、
、
在我
的
页面上,用户可以创建文章。他们填了一张表格,上面写着他们
的
文章,文章放在我
的
数据库里。还有一个页面,当用户访问页面时,使用jQuery和
AJAX
动态
加载
用户
的
文章(以及他们
的
文章标题)。我目前工作在我
的
搜
索引
擎优化-具体而言,关键字密度。文章
的
内容
没有显示出来。 我想知道Google爬虫是否做了同样
的
事情--
它
没有看到用户文章
的
内容
浏览 0
提问于2021-08-01
得票数 2
回答已采纳
2
回答
谷歌是否只惩罚谷歌图像搜索中
的
网站?
、
、
、
、
我将一个Flash网站重新构建成一个基于
AJAX
的
网站,该网站使用
AJAX
从
JSON数据生成其所有
内容
。但从那时起,该网站开始失去谷歌
的
所有图像搜索结果。过了一段时间,没有一个结果来自主站点(
浏览 0
提问于2013-07-05
得票数 1
回答已采纳
2
回答
ajax
-solr:
如何
让
ajax
页面对Google可读?
、
、
、
我正在使用
从
Solr生成搜索结果。谢谢。
浏览 4
提问于2011-02-22
得票数 0
回答已采纳
2
回答
当
URL
中存在查询字符串时,
如何
防止
爬虫机器人为我
的
页面建立
索引
?
、
、
、
、
因此,我
的
页面上没有
Googlebot
可能找到
的
带有查询字符串
的
“可见”链接。而且
Googlebot
最终会发现
它
,尽管我没有展示
它
。
让
Google爬行
它
,但是当页面使用
浏览 0
提问于2021-01-09
得票数 6
4
回答
Googlebot
要花多长时间才能
抓取
一个页面?
、
、
Googlebot
每天爬行一定数量
的
页面,这取决于站点
的
大小。但是,对于一个特定
的
页面需要多长时间。换句话说,在扫描到下一页之前,它在当前扫描页面上花费了多少秒或分钟。这有固定
的
时间吗?
浏览 0
提问于2022-07-25
得票数 2
1
回答
无限滚动与改变
的
URL
,好还是坏SEO?
、
、
、
当用户开始滚动具有下一页链接
的
页面底部时,就会触发
它
,也会用更多
的
滚动将
url
从
www.example.com更改为www.example.com/?page=2等等。我看到网站有无限
的
滚动,没有变化
的
网址。另外,更改
URL
可以在Google获得更多
的
页面
索引
,这可能是一个加点。
浏览 0
提问于2021-07-09
得票数 2
1
回答
当Google
索引
AJAX
内容
作为页面的一部分时,点击
加载
到页面中,
Googlebot
会在散列表
URL
上
抓取
内容
吗?
、
我试图实现
ajax
调用,只有当用户到达页面的部分并
同时
确保Google能够读取
内容
时,才能
加载
页面的各个部分。在我
的
页面上创建了一个链接“查看注释”,并将#!module=comments添加到
url
中。客户端,我创建了一个脚本,在单击链接时
加载
静态html。 效果很好。当我点击链接时,我看到静态
内容
正在
加载</em
浏览 0
提问于2020-07-16
得票数 3
回答已采纳
1
回答
对于一个页面应用程序,我
的
robots.txt应该是什么样子?
、
我可以理解
如何
在正常应用程序中禁止机器人爬行一些页面/文件夹。例如,对于谷歌-bot这里描述得很好。但是,如果我有一个页面应用程序(这个应用程序只使用
ajax
上传新
内容
,并且在客户端上有路由和页面生成),我该怎么办?
如何
使它可爬行是描述这里和这里,但如果我没有一个机器人跟随一些链接(在我
的
起始页面)?我这样说
的
意思是:家(
浏览 0
提问于2014-05-01
得票数 2
回答已采纳
2
回答
服务器端呈现一个必须有一个良好
的
SEO一个反应网站?
、
、
现在我在我
的
网站上使用ReactJS,并且想知道更改服务器端呈现(NextJS)是否会影响我
的
搜
索引
擎排名?那么,如果我将从客户端呈现更改为服务器端呈现,它真的会影响我
的
SEO吗?即使它是最小
的
。我知道这里已经有(仅用于搜
索引
擎
的
服务器端呈现(SEO))关于服务器端呈现
的<
浏览 0
提问于2020-07-07
得票数 1
2
回答
更改
URL
和
内容
而不刷新页面会损害SEO吗?
、
、
如果您查看下面的示例站点,当您单击菜单中
的
任何页面时,站点上
的
内容
和
url
将发生更改,但该页面不会刷新。他们可能会用
AJAX
来实现这个特性。Discord.com(样本网站)
浏览 0
提问于2021-09-25
得票数 3
回答已采纳
1
回答
检查referrer并找到指向
它
的
href,然后用javascript触发点击
、
我在一个可湿性粉剂单页投资组合,
加载
AJAX
的
帖子
内容
。我读到可湿性粉剂不需要#!
的
URL
来使它可以被谷歌机器人
抓取
。如果我理解正确的话,因为
Googlebot
不会解释
ajax
,
它
只会跟随链接并
索引
文章页面。 所以我
从
我
的
URL
中删除了#!,当一个帖子打开时,我用.pushState更新它们。
它
工作得很好,但如果我点击F5,或者
浏览 0
提问于2012-12-16
得票数 0
1
回答
使用Firebase托管
的
内容
和seo,Firestore中
的
内容
、
、
、
我正在创建一个使用flutter
的
网站,大部分
内容
都是
从
Firestore和存储中获取
的
。我想用防火墙托管它。我对此非常陌生,所以我真的需要知道SEO是否会在这里工作。如果没有,是否有一种不改变上述3种条件
的
SEO工作方式?
浏览 0
提问于2022-01-09
得票数 2
1
回答
如何
向
URL
中添加特定
的
参数(ad_id)?
、
、
在我
的
WordPress站点上,有一个页面http://www.example.com/doc/list/动态显示所有DB条目(76,000条)。我
如何
告诉谷歌,/44444/是使
内容
唯一
的
参数,
浏览 0
提问于2013-08-07
得票数 0
1
回答
如何
使用谷歌可编程搜索作为一个内部搜
索引
擎,当
它
没有快速
索引
新网页?
、
、
、
、
我们已经为学生开发了一个类似维基百科
的
Firebase Web应用程序,其中每一页都是他们为课程作业写
的
一篇文章,并相互链接。 Firebase提供用于全文搜索
的
多个第三方搜
索引
擎。然而,我们正在寻找一种使用谷歌可编程搜
索引
擎
的
方法,这样学生在搜索彼此
的
文章时,谷歌会对他们
的
文章进行
索引
,并在谷歌搜索上获得更多
的
公众关注,以激励学生学会对社会产生影响,而不仅仅是为了通过课程要求而写作主要
的
问题是谷歌
浏览 0
提问于2022-02-19
得票数 2
2
回答
为什么谷歌不
索引
我
的
"robots.txt"?
、
、
我正在尝试允许谷歌机器人网络爬虫来
索引
我
的
网站。我
的
robots.txt最初看起来是这样
的
:Disallow: / Sitemap: https://www.sitename.com/sitemap.xmlUser-agent: * Host: www.sitename.com Sitemap: https://w
浏览 14
提问于2018-10-06
得票数 1
1
回答
什么是完整
的
页面重新
加载
,为什么我们需要在没有
ajax
的
情况下进行完整
的
页面重新
加载
?
我正在阅读
ajax
,以及
它
如何
使我们能够在幕后与服务器交换数据,从而避免页面重新
加载
。我
的
困惑就在这里,我真的不明白整页重装意味着什么。我想这可能是因为我从一开始就一直在使用
ajax
/react,我想,当我
从
数据库或api访问
内容
时,我还没有真正看到我
的
任何网页完全重新
加载
。如果有人能解释他们是什么,为什么我们在
ajax
之前需要他们,那就太好了。
浏览 6
提问于2022-03-03
得票数 1
回答已采纳
2
回答
基于
AJAX
的
搜索站点上
的
SEO
、
、
、
、
我正在构建一个网站,这基本上是一个简单
的
1页与搜索框,和
AJAX
搜索结果显示在一个表。是否应该尝试使
AJAX
搜索结果可
抓取
,如果是,是否需要做任何事情来使我
的
站点和异步搜索结果表可
抓取
。备选案文1和2
的
一些实际例子: 构建一个(以某种方式)可爬行
的
AJAX
搜索结果表,这样搜索"Foo Bar“
的
页面将
浏览 0
提问于2015-04-08
得票数 1
回答已采纳
点击加载更多
热门
标签
更多标签
云服务器
ICP备案
云直播
对象存储
即时通信 IM
活动推荐
运营活动
广告
关闭
领券