欢迎您来到腾讯云!积分商城

腾讯云腾讯云论坛

 找回密码
 立即注册
忘了密码?

扫一扫,访问微社区

快捷导航
搜索
查看: 996|回复: 3

[咨询求助] 网站启用腾讯云Cdn 不能被搜索抓取。

[复制链接]

1

主题

0

好友

200

积分

小白[LV1]

Rank: 1

云币
792
威望
200
发表于 2018-1-3 19:46:17 |显示全部楼层 |未分类
如题,网站只要启用腾讯云的cdn就不能被搜索蜘蛛抓取,不论Google的抓取测试,还是百度的抓取测试都是提示无法访问,但是用电脑浏览器是可以正常访问,cdn开启了https。求解,为什么,因为这个事情我用回了阿里云的cdn,没有这个问题,只要一用腾讯cdn就会这样,百思不得其解,中间源和seo回源都试过,无用。

5

主题

39

好友

2万

积分

超级版主

军哥

Rank: 15Rank: 15Rank: 15Rank: 15Rank: 15Rank: 15

云币
16523
威望
20920
发表于 2018-1-4 00:00:24 |显示全部楼层
到控制台下载日志看看
回复

使用道具 举报

1

主题

0

好友

200

积分

小白[LV1]

Rank: 1

云币
792
威望
200
发表于 2018-1-4 09:55:40 |显示全部楼层
20180104080831 139.199.62.227 www.noteba.com / 787 4 0 500 http://www.baidu.com/search/spider.htm 59 "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)" "(null)" GET HTTPS miss
20180104081643 173.208.128.34 www.noteba.com /robots.txt 453 -1 -1 200 NULL 221 "Mozilla/5.0 (compatible; MJ12bot/v1.4.7; http://mj12bot.com/)" "(null)" GET HTTPS miss
20180104081646 114.215.193.120 www.noteba.com /wp-cron.php?doing_wp_cron=1515025006.2751181125640869140625 222 1442 0 200 https://www.noteba.com/wp-cron.php?doing_wp_cron=1515025006.2751181125640869140625 681 "WordPress/4.8.4; https://www.noteba.com" "(null)" POST HTTPS miss
20180104084517 64.233.172.185 www.noteba.com /favicon.ico 237 -1 -1 200 NULL 75 "Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/49.0.2623.75 Safari/537.36 Google Favicon" "(null)" GET HTTPS miss
20180104084517 64.233.172.189 www.noteba.com / 5132 -1 -1 200 NULL 1128 "Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/49.0.2623.75 Safari/537.36 Google Favicon" "(null)" GET HTTPS miss
20180104080831 139.199.62.227 www.noteba.com / 183 4 0 301 http://www.baidu.com/search/spider.htm 1 "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)" "(null)" GET HTTP/1.1 hit
20180104081646 173.208.128.34 www.noteba.com /archives/category/%E5%B0%8F%E7%AC%94%E8%AE%B0/feed 3025 -1 -1 200 NULL 1514 "Mozilla/5.0 (compatible; MJ12bot/v1.4.7; http://mj12bot.com/)" "(null)" GET HTTPS miss
20180104081648 173.208.128.34 www.noteba.com /archives/category/%E5%B0%8F%E7%AC%94%E8%AE%B0 5055 -1 -1 200 NULL 627 "Mozilla/5.0 (compatible; MJ12bot/v1.4.7; http://mj12bot.com/)" "(null)" GET HTTPS miss
20180104084516 114.215.193.120 www.noteba.com /wp-cron.php?doing_wp_cron=1515026716.7917509078979492187500 222 1442 0 200 https://www.noteba.com/wp-cron.php?doing_wp_cron=1515026716.7917509078979492187500 468 "WordPress/4.8.4; https://www.noteba.com" "(null)" POST HTTPS miss

回复

使用道具 举报

1

主题

0

好友

200

积分

小白[LV1]

Rank: 1

云币
792
威望
200
发表于 2018-1-4 10:22:47 |显示全部楼层
HTTP/1.1 040
Server: nginx/1.8.1
Date: Thu, 04 Jan 2018 02:18:12 GMT
Content-Length: 0
Connection: close
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册
您需要登录后才可以发帖 QQ登录

联系我们|腾讯云平台|积分商城|腾讯云官方论坛    

GMT+8, 2018-12-19 10:21 , Processed in 1.126399 second(s), 29 queries .

Powered by Discuz! X2.5

© 2001-2012 Comsenz Inc.

回顶部