淘宝允许搜索引擎抓取了？

uov · 发表于 2022-6-24 23:54:34

我记得之前显示不允许抓取

淘宝热卖也做了百度竞价

antbt · 发表于 2022-6-25 00:18:53

小号专用马甲发表于 2022-6-25 00:04
不知道百度可以可以更换ua爬但是结果应该不会放出来，不然就违反robots.txt 了
具体咋回事不知道我用 ...

感觉有点淘宝做不过拼夕夕

mjjok · 发表于 2022-6-25 00:59:30

淘宝其他二级域名有些页面允许抓取的。

东风破 · 发表于 2022-6-25 00:39:05

淘宝越来越不行了

sky170 · 发表于 2022-6-25 00:33:25

抓了也没用，看个商品还要登录

DogeLee2 · 发表于 2022-6-25 00:31:43

现在电脑看个东西都要登录
隔壁强子就不需要
还有某多多根本没pc端

小号专用马甲 · 发表于 2022-6-25 00:04:29

提示: 作者被禁止或删除内容自动屏蔽

uov · 发表于 2022-6-25 00:01:41

小号专用马甲发表于 2022-6-25 00:00
https://www.taobao.com/robots.txt

site出来好几万是咋回事
爬虫强爬吗

小号专用马甲 · 发表于 2022-6-25 00:00:49

提示: 作者被禁止或删除内容自动屏蔽

		自动登录	找回密码
密码			注册

小号专用马甲小号专用马甲当前离线积分 7939	4^# 发表于 2022-6-25 00:04:29 来自手机 \| 只看该作者提示: 作者被禁止或删除内容自动屏蔽
小号专用马甲小号专用马甲当前离线积分 7939
	回复支持反对举报

小号专用马甲小号专用马甲当前离线积分 7939	2^# 发表于 2022-6-25 00:00:49 来自手机 \| 只看该作者提示: 作者被禁止或删除内容自动屏蔽
小号专用马甲小号专用马甲当前离线积分 7939
	回复支持反对举报