纯文本链接的站长地图sitemap,百度能抓取吗,会收录吗?
搜索引擎可以通过站点地图发现通过其他传统抓取方式无法在贵网站发现的网页,一般的sitemap形式是XML文件。
最近新做了一个网站,技术那边做了一个纯文本链接的站点地图,也就是那种需要复制,然后粘贴才能访问的链接。技术做好后,我提交给了百度站长平台,发现,纯文本链接的sitemap 还是可以被抓取到的。所以,以后跟我们一样的站长,不用担心这个问题了。
标准sitemap协议说明:
1.Sitemap采用.xml格式
2.Sitemap可以使用utf-8编码和GBK编码
3.为节省带宽可以采用gzip格式压缩Sitemap文件
4.一个Sitemap文件中最多可包含50000个url,并且应小于10MB。
XML标签说明:
https://www.171tiyu.com/ 1.00 2019-03-19 Always文本格式sitemap说明:
您可以提供纯文本文件,其中每行包含一个网址。
文本文件格式举例:https://www.171tiyu.com/sitemap.xml
此文本文件需要遵循以下:
文本文件每行都必须有一个网址。网址中不能有换行。
您必须指定完整的网址,包括http。
每个文本文件最多可包含50,000个网址,并且不大于10MB(10,485,760字节)。如果网站所包含的网址超过50,000个,则可将列表分割成多个文本文件,然后分别添加每个文件。
文本文件需使用UTF-8编码或GBK编码。
文本文件不应包含网址列表以外的任何信息。
sitemap索引文件说明:
对于有多个Sitemap的站点,可以以一个名为sitemap_index.xml的索引文件来指定Sitemap的位置。