苹果cms 采集很慢

huifukejian · 发表于 2024-7-17 15:44:07

爬虫还是python给力

xiao5 · 发表于 2024-7-17 15:54:01

复制等待跳转哪个链接 ,多开窗口,修改页数.几万数据一会就好了

ceft · 发表于 2024-7-17 16:30:15

xiao5 发表于 2024-7-17 15:54
复制等待跳转哪个链接 ,多开窗口,修改页数.几万数据一会就好了

我也是这么干的一次开20个网页修改 page 后面的参数大概20分钟可以采 3000左右

sertt · 发表于 2024-7-17 16:31:10

xiao5 发表于 2024-7-17 15:54
复制等待跳转哪个链接 ,多开窗口,修改页数.几万数据一会就好了

谢谢大佬，我现在不同步图片就快了。图片等后边再同步

sertt · 发表于 2024-7-17 16:33:40

ceft 发表于 2024-7-17 16:30
我也是这么干的一次开20个网页修改 page 后面的参数大概20分钟可以采 3000左右 ...

吊，我开6个 cpu就满了，图就同步失败

ceft · 发表于 2024-7-17 16:35:47

sertt 发表于 2024-7-17 16:33
吊，我开6个 cpu就满了，图就同步失败

先采集资源采集完以后开一台win 慢慢跑图片

llyy · 发表于 2024-7-17 16:38:29

你们图片都放本地的吗直接用采集站的图不行吗

sertt · 发表于 2024-7-17 16:51:21

llyy 发表于 2024-7-17 16:38
你们图片都放本地的吗直接用采集站的图不行吗

一个是慢，一个是失效了难受了。我现在放阿里云oss 上，每个月有100G 免费流出。不知道其他人咋搞的

花菜大魔王 · 发表于 2024-7-17 18:37:14

来买我的高清资源

server0608 · 发表于 2024-7-18 09:34:12

sertt 发表于 2024-7-17 12:00
vps上吗这么吊，采集的哪家我也试试

付费采集，官解

		自动登录	找回密码
密码			注册

[美国VPS] 苹果cms 采集很慢