编辑:兖州新城建站 关注: 时间:2019-12-09 11:12:02
温馨提示:专业网站建设、小程序制作、APP开发,尽在新城建站,详询 15544599750(手机、微信、QQ同号)
文前导读:
让Google将您的网站编入索引的10种方法(实际可行)
如果Google没有为您的网站建立索引,那么您几乎是无形的。您不会出现任何搜索查询,也不会获得任何自然流量。齐尔奇 娜达 零。
鉴于您在这里,我想这对您来说不是新闻。因此,让我们开始做生意。
本文教您如何解决以下三个问题:
您的整个网站未编制索引。
您的某些页面已编入索引,而其他页面未编入索引。
您新发布的网页索引编制速度不够快。
但是首先,让我们确保我们在同一页面上并充分理解此索引恶意代码。
什么是爬网和索引编制?
Google会通过爬网来发现新 的网页,然后将这些网页添加到索引中。他们使用 称为Googlebot的网络蜘蛛进行此操作。
困惑?让我们定义一些关键术语。
爬网:跟踪网络上的超链接以发现新内容的过程。
索引编制:将每个网页存储在庞大的数据库中的过程。
Web Spider:设计用于 大规模执行爬网过程的软件。
Googlebot:Google的网络蜘蛛。
这是Google播放的视频 ,详细介绍了该过程:
当您使用Google产品时,您是在要求Google返回其索引中的所有相关页面。由于通常有数以百万计的页面符合要求,因此Google的排名算法会尽力对页面进行排序,以便您首先看到最佳和最相关的结果。
我在这里提出的关键点是索引编制 和排名 是两件事。
正在为比赛显示索引;排名获胜。
首先,您必须参加比赛才能赢得胜利。
如何检查您是否在Google中被索引
转到Google,然后搜索 site:yourwebsite.com
网站搜索索引
此数字大致显示您已为Google索引的页面数。
如果要检查特定URL的索引状态,请使用相同的site:yourwebsite.com/web-page-slug 运算符。
谷歌网站搜索网页
如果页面未编制索引,则不会显示任何结果。
现在,值得注意的是,如果您是Google Search Console 用户,则可以使用Coverage 报告来更准确地了解网站的索引状态。只需转到:
Google搜索控制台>索引>覆盖范围
Google Search Console有效页面
查看有效页数(有或没有警告)。
如果这两个数字的总和不是零,那么Google至少会将您网站上的某些页面编入索引。如果没有,那么您将遇到严重的问题,因为您的网页均未索引。
边注。不是Google Search Console用户?注册。免费。每个经营网站并关心从Google获得流量的人都应使用Google Search Console。这是 非常重要的。
您还可以使用Search Console来检查是否为特定页面建立了索引。要做到这一点,粘贴URL到的URL检测工具。
如果该页面已建立索引,则会显示“ URL在Google上”。
网址位于Google搜索控制台上
如果该页面未编入索引,则会看到“ URL不在Google上” 字样。
页面不在Google Search Console上
如何获得Google索引
是否发现您的网站或网页未在Google中建立索引?尝试这个:
前往Google Search Console
导航到URL检查工具
将您希望Google索引的网址粘贴到搜索栏中。
等待Google检查网址
点击“请求编制索引”按钮
当您发布新帖子或页面时,此过程是一种很好的做法。您实际上是在告诉Google您已经在网站中添加了一些新内容,他们应该看看。
但是,请求建立索引不太可能解决阻止Google索引旧页面的潜在问题。如果是这种情况,请按照下面的清单进行诊断并解决问题。
以下是每种战术的一些快速链接,以防您已经尝试过一些:
删除robots.txt文件中的抓取块
删除流氓noindex标签
在您的站点地图中包含页面
删除流氓规范标签
检查页面是否孤立
修复nofollow内部链接
添加“强大的”内部链接
确保页面有价值且独特
删除低质量的页面(以优化“抓取预算”)
建立高质量的反向链接
1)删除robots.txt文件中的抓取块
Google是否没有索引整个网站?这可能是由于robots.txt文件中的爬网阻止所致。
要检查此问题,请转到yourdomain.com/robots.txt。
查找以下两个代码片段之一:
User-agent: Googlebot
Disallow: /
User-agent: *
Disallow: /
这两个都告诉Googlebot,不允许他们抓取您网站上的任何页面。要解决此问题,请删除它们。就这么 简单。
如果Google没有为单个网页编制索引,robots.txt中的爬网块也可能是罪魁祸首。要检查是否存在这种情况,请将URL粘贴到Google Search Console中的URL检查工具中。单击Coverage区域以显示更多详细信息,然后查找“是否允许抓取?否:被robots.txt阻止”错误。
这表明该页面在robots.txt中被阻止。
如果是这种情况,请重新检查您的robots.txt文件中是否有与该页面或相关小节有关的“禁止”规则。
机器人txt
必要时将其卸下。
2)删除恶意noindex标签
如果您告诉网页,Google不会将其编入索引。这对于使某些网页保持私密性很有用。有两种方法可以做到这一点:
方法1:元标记
<head>Google不会为其部分中具有这些meta标签的页面建立索引:
<meta name=“robots” content=“noindex”>
<meta name=“googlebot” content=“noindex”>
这是一个元机器人标记,它告诉搜索引擎它们是否可以为页面编制索引。
边注。关键部分是“ noindex”值。如果看到,则页面设置为noindex。
要在您的网站上找到所有带有noindex元标记的页面,请使用Ahrefs的Site Audit运行抓取。转到内部页面 报告。查找“ Noindex页面”警告。
noindex ahrefs现场审核
单击以查看所有受影响的页面。从不属于其的任何页面中删除noindex元标记。
方法2:X?Robots标签
抓取工具还遵守X?Robots-Tag HTTP响应标头。您可以使用服务器端脚本语言(如PHP)、. htaccess文件中的内容或通过更改服务器配置来实现此目的。
Search Console中的URL检查工具可告诉您是否由于此标头而阻止Google抓取页面。只需输入您的URL,然后查找“是否允许索引?否:在“ X-Robots-Tag” http标头中检测到“ noindex””
x机械手标题搜索控制台
如果要在整个站点上检查此问题,请在Ahrefs的Site Audit工具中运行爬网,然后在数据资源管理器中使用“ HTTP标头中的机器人信息”过滤器:
x机械手标签过滤器现场审核
告诉您的开发人员从返回此标头中排除要索引的页面。
推荐阅读:机器人元标记和X?Robots-Tag HTTP标头规范
3)在您的站点地图中包含页面
网站地图会告诉Google您网站上的哪些页面很重要,哪些不重要。它也可以为应该多久重新爬网提供一些指导。
Google应该能够在您的网站上找到页面,而不管它们是否在站点地图中,但是将它们包括在内仍然是一种好习惯。毕竟,毫无意义地使Google的生活变得艰难。
要检查网页是否在您的站点地图中,请使用Search Console中的URL检查工具。如果您看到“ URL不在Google上”错误和“站点地图:N / A”,则表明该URL不在您的站点地图中或未建立索引。
网址不在Google或站点地图上
不使用Search Console?转到您的站点地图URL(通常是yourdomain.com/sitemap.xml),然后搜索页面。
网站地图搜寻
或者,如果您要查找站点地图中没有的所有可爬网和可索引页面,请在Ahrefs的Site Audit中运行爬网。转到数据资源管理器并应用以下过滤器:
不在Sitemap中可索引
这些页面应该在您的站点地图中,因此添加它们。完成后,请ping通此URL,以告知Google您已更新站点地图:
http://www.google.com/ping?sitemap=http://yourwebsite.com/sitemap_url.xml
将最后一部分替换为您的站点地图URL。然后,您应该会看到以下内容:
收到站点地图通知
这样可以加快Google对页面的索引编制。
4)删除流氓规范标签
规范标签会告诉Google哪个是页面的首选版本。看起来像这样:
<link rel="canonical” href="/page.html/">
大多数页面没有规范标签,或者所谓的自引用规范标签。这告诉Google该页面本身是首选版本,可能是唯一的版本。换句话说,您希望此页面被索引。
但是,如果您的网页带有流氓规范标签,则可能是在向Google告知该网页不存在的首选版本。在这种情况下,您的页面将不会被索引。
要检查规范,请使用Google的URL检查工具。如果规范指向另一个页面,您将看到“带有规范标记的替代页面”警告。
具有规范的备用页面
如果这不应该存在,并且您要为页面建立索引,请删除规范标签。
重要
规范标签并不总是坏的。带有这些标签的大多数页面都会有它们的原因。如果您看到页面上有规范的设置,请检查规范页面。如果确实是该页面的首选版本,并且也不需要索引该页面,则应该保留规范标记。
如果您想快速找到整个站点中的恶意规范标签,请在Ahrefs的站点审核工具中运行爬网。转到数据资源管理器。使用以下设置:
规范过滤器现场审核
这会在站点地图中查找带有非自引用规范标签的页面。因为几乎可以肯定的是,您希望索引站点地图中的页面,所以您应该进一步研究此过滤器是否返回任何结果。
这些页面很可能具有流氓规范,或者不应该首先放在您的站点地图中。
5)检查页面是否孤立
孤立页面是指没有内部链接指向这些页面的页面。
由于Google通过爬网发现新内容,因此他们无法通过该过程发现孤立页面。网站访问者也将无法找到他们。
要检查孤立页面,请使用Ahrefs的Site Audit来爬网您的网站。接下来,检查“ 传入链接” 报告中的“孤立页面(无传入内部链接)”错误:
孤儿页面
这会显示所有可索引并且在站点地图中显示的页面,但没有指向它们的内部链接。
重要
仅当满足以下两个条件时,此过程才有效:
您要索引的所有页面都在您的站点地图中
在“ Ahrefs的站点审核”中设置项目时,已选中该框以将站点地图中的页面用作爬网的起点。
不确定要索引的所有页面都在站点地图中吗?尝试这个:
下载网站上的完整页面列表(通过CMS)
抓取您的网站(使用Ahrefs的网站审核之类的工具)
交叉引用两个URL列表
在爬网过程中找不到的所有URL都是孤立页面。
您可以通过以下两种方式之一来修复孤立页面:
如果页面不重要,请将其删除并从站点地图中删除。
如果页面很重要,请将其合并到网站的内部链接结构中。
6)修复nofollow内部链接
Nofollow链接是带有rel =“ nofollow”标签的链接。它们阻止将PageRank传输 到目标URL。Google也不会抓取nofollow链接。
以下是Google 关于此事的看法:
本质上,使用nofollow会导致我们从整个网络图中删除目标链接。 但是,如果其他网站没有使用nofollow链接到目标页面,或者这些URL是在站点地图中提交给Google的,则目标页面仍可能出现在我们的索引中。
简而言之,您应确保遵循所有可索引页面的内部链接。
为此,请使用Ahrefs的“站点审核”工具来爬网您的站点。检查“ 传入链接”报告中的可索引页面是否出现“页面仅具有nofollow传入内部链接”错误:
nofollow传入链接错误
假设您希望Google为该页面编制索引,请从这些内部链接中删除nofollow标记。如果不是,请删除该页面或对该页面进行noindex。
推荐阅读:什么是Nofollow链接?您需要知道的所有内容(无术语!)
7)添加“强大的”内部链接
Google通过抓取您的网站来发现新内容。如果您忽略内部链接到相关页面,则他们可能无法找到该页面。
解决此问题的一种简单方法是在页面上添加一些内部链接。您可以在Google可以抓取并编制索引的任何其他网页上执行此操作。但是,如果您希望Google尽可能快地为页面建立索引,则可以从功能更强大的页面之一进行索引。
为什么?因为Google可能比不太重要的页面更快地重新爬网此类页面。
为此,请转到Ahrefs的Site Explorer,输入您的域,然后访问“ 最佳链接”报告。
最好的链接ahrefs博客2
这将显示您网站上的所有页面,并按URL Rating(UR)进行排序。换句话说,它首先显示最权威的页面。
略过此列表并查找相关页面,可从这些页面向该页面添加内部链接。
例如,如果我们要在内部访客发布指南中添加内部链接,则我们的链接构建指南 可能会提供一个相关的位置。该页面恰好是我们博客上第11个最权威的页面:
链接建设指南ahrefs最好通过链接
然后,下次他们重新抓取页面时,Google就会看到并点击该链接。
专家提示
将您将内部链接添加到的页面粘贴到Google的URL检查工具中。点击“请求索引”按钮,以使Google知道页面上的某些内容已更改,他们应该尽快对其进行爬网。这可以加快他们发现内部链接以及因此要索引的页面的过程。
8)确保页面有价值且独特
Google不太可能将低质量的网页编入索引,因为它们对其用户毫无价值。这是谷歌的约翰·穆勒(John Mueller)关于2018年建立索引的看法:
我们从不索引所有已知的URL,这很正常。我会专注于使该网站很棒且令人振奋,然后通常情况会更好。
—??约翰(@JohnMu)2018年1月3日
他暗示,如果您希望Google将您的网站或网页编入索引,则它必须“令人敬畏和鼓舞人心”。
如果您由于缺少索引而排除了技术问题,那么可能就是价值不足。因此,值得重新审视页面并问自己:此页面真的有价值吗?如果用户从搜索结果中点击该页面,会在该页面找到价值吗?
如果对上述两个问题的回答均为否,那么您需要改进内容。
您会发现更多使用Ahrefs的Site Audit工具 和URL Profiler未编入索引的潜在低质量页面。为此,请转到Ahrefs的站点审核中的“数据资源管理器”并使用以下设置:
查找质量低劣的网页站点审核
这将返回可索引的“薄”页面,当前没有自然流量。换句话说,它们没有被索引的可能性很大。
导出报告,然后将所有URL粘贴到URL Profiler中并运行Google Indexation检查。
网址分析器
重要
如果您要对很多页面(即超过100个页面)执行此操作,建议使用代理。否则,您将面临被Google禁止使用IP的风险。如果您不能这样做,那么另一种选择是在Google上搜索“免费的批量Google索引检查器”。这些工具不多,但大多数一次只能限制在25页以下。
检查所有未编入索引的页面是否存在质量问题。进行必要的改进,然后在Google Search Console中请求重新索引。
您还应该致力于解决重复内容的问题。Google不太可能索引重复或几乎重复的页面。使用“ 站点审核”中的“ 内容质量”报告来检查这些问题。
页面重复审核
9)删除低质量的页面(以优化“抓取预算”)
网站上的劣质页面过多,只会浪费搜寻预算。
这是Google 在此问题上所说的话:
浪费[低附加值页面]上的服务器资源将使爬网活动从确实有价值的页面上消耗掉,这可能会导致在站点上发现大量内容时出现严重的延迟。
可以将其视为教师评分论文,其中之一就是您的论文。如果他们有10篇论文要评分,那么他们很快就会收到您的论文。如果他们有一百个,那将花费更长的时间。如果他们有成千上万的话,那么他们的工作量就太高了,他们可能永远也无法为您的论文打分。
Google确实指出“搜寻预算[...]并不是大多数发布商都需要担心的事情,”并且“如果网站的网址少于几千个,则大多数情况下它将得到有效的搜寻。”
不过,从您的网站上删除低质量的页面绝不是一件坏事。它只会对检索预算产生积极影响。
您可以使用我们的内容审核模板 来查找可能被删除的低质量和不相关页面。
10)建立高质量的反向链接
反向链接告诉Google网页很重要。毕竟,如果有人链接到它,那么它必须具有一定的价值。这些是Google想要索引的页面。
为了实现完全透明,Google不仅会索引带有反向链接的网页。有大量(数十亿个)没有反向链接的索引页面。但是,由于Google认为具有高质量链接的页面更为重要,因此与不具有高质量链接的页面相比,它们爬网和重新爬网的速度可能更快。这导致更快的索引编制。
我们在博客上拥有大量资源来构建高质量的反向链接。
看看下面的一些指南。
进一步阅读
9 EASY Link建立策略(任何人都可以使用)
如何获得反向链接:不需要新内容的7种策略
如何查找反向链接(可以复制)
抢夺竞争对手反向链接的7种可行方法
一个简单(但完整)的断开链接构建指南
索引≠排名
在Google中将您的网站或网页编入索引并不 等于排名或访问量。
他们是两回事。
建立索引意味着Google知道您的网站。这并不意味着他们将对任何相关且有价值的查询进行排名。
这就是SEO的源头-优化网页以针对特定查询进行排名的艺术。
简而言之,SEO涉及:
查找您的客户正在寻找什么;
围绕这些主题创建内容;
针对您的目标关键字优化这些页面;
建立反向链接;
定期重新发布内容以使其保持“常绿”。
这是一个 使您开始使用SEO 的视频:
…以及一些文章:
进一步阅读
SEO基础知识:新手友好的SEO成功5步指南
如何进行SEO的关键字研究
On-Page SEO:可行指南
Noob友好链接构建指南
常绿内容:更新旧帖子如何将浏览量提升468%
最后的想法
Google无法为您的网站或网页编制索引的原因只有两个:
技术问题阻碍他们这样做
他们认为您的网站或页面质量低劣,对用户毫无价值。
拓展阅读:
本文由新城建站整理发布,喜欢请收藏,转载请保留链接 兖州SEO谈让Google将您的网站编入索引的10种方法(实际可行https://www.nccpu.net/jining/yanzhou/11397.html