CRMEB论坛

 找回密码
 立即注册

QQ登录

只需一步,快速开始

查看: 505|回复: 16

[常见问题] 产品采集修复方案

[复制链接]

61

主题

537

帖子

2889

积分

管理员

Rank: 9Rank: 9Rank: 9

积分
2889

突出贡献荣誉管理论坛元老

发表于 2019-10-29 20:23:26 | 显示全部楼层 |阅读模式
最近很多用户反馈产品采集无法使用,给您带来不便敬请谅解!
产品采集是采用页面抓取方式,淘宝、天猫、阿里巴巴也有爬虫防护,所以导致采集不是很稳定。最近淘宝、天猫、阿里巴巴采集需要用户登录,所以紧急处理了一下,需要用采集的朋友,懂代码的请按照一下步骤进行操作
1、下载修复文件
链接: https://pan.baidu.com/s/1SYOYkzo7baFT-w2OJLNJaA 提取码: htte
2、用编辑器打开文件添加对应平台自己的cookie信息
  1. protected $webcookie = [
  2.         //淘宝
  3.         'taobao' =>'cookie: miid=8289590761042824660; thw=cn; cna=bpdDExs9KGgCAXuLszWnEXxS; hng=CN%7Czh-CN%7CCNY%7C156; tracknick=taobaorongyao; _cc_=WqG3DMC9EA%3D%3D; tg=0; enc=WQPStocTopRI3wEBOPpj8VUDkqSw4Ph81ASG9053SgG8xBMzaOuq6yMe8KD4xPBlNfQST7%2Ffsk9M9GDtGmn6iQ%3D%3D; t=4bab065740d964a05ad111f5057078d4; cookie2=1965ea371faf24b163093f31af4120c2; _tb_token_=5d3380e119d6e; v=0; mt=ci%3D-1_1; _m_h5_tk=61bf01c61d46a64c98209a7e50e9e1df_1572349453522; _m_h5_tk_enc=9d9adfcbd7af7e2274c9b331dc9bae9b; l=dBgc_jG4vxuski7DBOCgCuI8aj7TIIRAguPRwN0viOCKUxT9CgCDAJt5v8PWVNKO7t1nNetzvui3udLHRntW6KTK6MK9zd9snxf..; isg=BJWVXJ3FZGyiWUENfGCuywlwpJePOkncAk8hmRc6WoxbbrVg3-Jadf0uODL97mFc',
  4.         //阿里巴巴 1688
  5.         'alibaba' =>'',
  6.         //天猫 可以和淘宝一样
  7.         'tmall' =>'cookie: miid=8289590761042824660; thw=cn; cna=bpdDExs9KGgCAXuLszWnEXxS; hng=CN%7Czh-CN%7CCNY%7C156; tracknick=taobaorongyao; _cc_=WqG3DMC9EA%3D%3D; tg=0; enc=WQPStocTopRI3wEBOPpj8VUDkqSw4Ph81ASG9053SgG8xBMzaOuq6yMe8KD4xPBlNfQST7%2Ffsk9M9GDtGmn6iQ%3D%3D; t=4bab065740d964a05ad111f5057078d4; cookie2=1965ea371faf24b163093f31af4120c2; _tb_token_=5d3380e119d6e; v=0; mt=ci%3D-1_1; _m_h5_tk=61bf01c61d46a64c98209a7e50e9e1df_1572349453522; _m_h5_tk_enc=9d9adfcbd7af7e2274c9b331dc9bae9b; l=dBgc_jG4vxuski7DBOCgCuI8aj7TIIRAguPRwN0viOCKUxT9CgCDAJt5v8PWVNKO7t1nNetzvui3udLHRntW6KTK6MK9zd9snxf..; isg=BJWVXJ3FZGyiWUENfGCuywlwpJePOkncAk8hmRc6WoxbbrVg3-Jadf0uODL97mFc',
  8.         //京东 可不用配置
  9.         'jd' =>''
  10.     ];
复制代码
cookie 浏览器获取方式
1)首先打开淘宝登录页面 https://login.taobao.com/member/login.jhtml
登录自己帐号
2)再打开产品页面 https://item.taobao.com/item.htm?id=575636560349
3)打开浏览器调试F12或者右键查看元素
WX20191029-202115.png
复制cookie 所有信息很长哦,参考上面代码把自己的cookie替换进去
3、上传至服务器 直接替换
目录 /app/admin/controller/store/CopyTaobao.php
4、后台产品管理 复制淘宝、天猫、1688、京东试试吧!

1

主题

14

帖子

195

积分

vip4

Rank: 4

积分
195
发表于 2019-10-29 21:25:09 | 显示全部楼层
本帖最后由 wzbiz 于 2019-10-29 21:31 编辑

感谢 非常有用
试了一下,如丝般顺滑的采集过来了,妈妈说再也不用一个一个复制编辑了。。
回复

使用道具 举报

3

主题

22

帖子

416

积分

vip4

Rank: 4

积分
416
发表于 2019-10-29 22:16:18 | 显示全部楼层
获取商品信息可以获取了  但是吧  那个提交保存的时候提示  服务器异常
去去去.png
回复

使用道具 举报

11

主题

47

帖子

632

积分

vip4

Rank: 4

积分
632
发表于 2019-10-29 23:36:57 | 显示全部楼层
淘宝天猫正常了。

阿里巴巴 1688  获取 cookie  是哪一个文件呀?找不到。
回复

使用道具 举报

0

主题

2

帖子

100

积分

vip4

Rank: 4

积分
100
发表于 2019-10-29 23:46:02 | 显示全部楼层
京东提示系统错误
回复

使用道具 举报

1

主题

14

帖子

195

积分

vip4

Rank: 4

积分
195
发表于 2019-10-30 02:35:57 | 显示全部楼层
gzmmnet 发表于 2019-10-29 23:36
淘宝天猫正常了。

阿里巴巴 1688  获取 cookie  是哪一个文件呀?找不到。

用淘宝的即可,已测试过正常
回复

使用道具 举报

61

主题

537

帖子

2889

积分

管理员

Rank: 9Rank: 9Rank: 9

积分
2889

突出贡献荣誉管理论坛元老

 楼主| 发表于 2019-10-30 08:41:17 | 显示全部楼层
haiwang103 发表于 2019-10-29 22:16
获取商品信息可以获取了  但是吧  那个提交保存的时候提示  服务器异常

什么系统,都保存失败吗,调试看看什么错误信息
回复

使用道具 举报

7

主题

26

帖子

430

积分

vip4

Rank: 4

积分
430
发表于 2019-10-30 10:57:32 | 显示全部楼层
淘宝正常 1688、京东提示错误、换回旧文件京东正常
回复

使用道具 举报

1

主题

12

帖子

275

积分

vip4

Rank: 4

积分
275
发表于 2019-10-30 14:10:39 | 显示全部楼层
admin 发表于 2019-10-30 08:41
什么系统,都保存失败吗,调试看看什么错误信息

嗯我也保存是服务器异常,WIN2016,会不会是保存需要服务器文件夹写权限呢,但直接后台添加商品保存又没问题
回复

使用道具 举报

3

主题

22

帖子

416

积分

vip4

Rank: 4

积分
416
发表于 2019-10-30 23:03:12 | 显示全部楼层
admin 发表于 2019-10-30 08:41
什么系统,都保存失败吗,调试看看什么错误信息

win系统  IIS8   提交一直提示系统错误
回复

使用道具 举报

3

主题

22

帖子

416

积分

vip4

Rank: 4

积分
416
发表于 2019-10-30 23:09:10 | 显示全部楼层
18981991828 发表于 2019-10-30 14:10
嗯我也保存是服务器异常,WIN2016,会不会是保存需要服务器文件夹写权限呢,但直接后台添加商品保存又没问 ...

我的win服务器,不知道啥情况!
回复

使用道具 举报

9

主题

26

帖子

366

积分

vip4

Rank: 4

积分
366
发表于 2019-10-31 12:51:39 | 显示全部楼层
本帖最后由 rexhu 于 2019-10-31 13:22 编辑

。。。
回复

使用道具 举报

11

主题

47

帖子

632

积分

vip4

Rank: 4

积分
632
发表于 2019-10-31 12:53:20 | 显示全部楼层
1688可以采集了,但是保存  出现提示:  服务器异常
回复

使用道具 举报

9

主题

26

帖子

366

积分

vip4

Rank: 4

积分
366
发表于 2019-10-31 15:13:50 | 显示全部楼层
1688可以采集了,但是  出现提示:  服务器异常
回复

使用道具 举报

6

主题

19

帖子

371

积分

vip4

Rank: 4

积分
371
发表于 2019-11-2 09:05:21 | 显示全部楼层
提示:服务器异常

错误提示

错误提示

全局搜不到这个方法

全局搜不到这个方法
回复

使用道具 举报

1

主题

12

帖子

275

积分

vip4

Rank: 4

积分
275
发表于 2019-11-4 09:53:36 | 显示全部楼层
服务器异常 。。。还没找到问题吗
回复

使用道具 举报

3

主题

22

帖子

355

积分

vip4

Rank: 4

积分
355
发表于 2019-11-4 10:40:33 | 显示全部楼层
1688 提示“系统错误” 淘宝没问题
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

QQ|Archiver|手机版|小黑屋|CRMEB论坛

GMT+8, 2019-11-13 19:54 , Processed in 0.032294 second(s), 23 queries .

Powered by Discuz! X3.4

© 2001-2017 Comsenz Inc.

快速回复 返回顶部 返回列表