全部建议
>
建议详情
- 预审中
- 预审通过
- 3 已采纳
- 4 已实现
【用户体验】【实验手册内容有缺失】使用Python爬虫抓取图片和文字实验 已采纳 编辑 删除
- KooLabs云实验
场景描述:
在实验《使用Python爬虫抓取图片和文字实验》(https://lab.huaweicloud.cn/experiment-detail_2499)
实验手册很多地方缺失图片,比如:
进入数据库“vmall”的表管理页,点击“+新建表”,表名:“product”,其他参数默认,点击“下一步”如下图所示:
(没有图片)
建议方案:
请认真review一下这份实验手册,把缺失的图片补一下。
David.Lion
发布于 2025-01-15 15:22:39
2025-01-15
192 7
0%
0%
取消
发表
0/1000
+ 插入图片0/4
仅支持JPG、JPEG、PNG、GIF,数量不超过4张且每张大小不超过2MB
0%
0%
删除建议
全部评论(7)
评论(7)
非常感谢您的反馈,您的建议已经收到并以提交至相关产品团队进行评估,如您有其他诉求,请您在云声重新提交,我们收到后会尽快核实处理!感谢您对华为云的支持!
2025-01-15 16:23:59 [scrapy.core.scraper] ERROR: Error processing {'image': None, 'title': None}
Traceback (most recent call last):
File "/usr/local/lib/python3.6/site-packages/twisted/internet/defer.py", line 858, in _runCallbacks
current.result, *args, **kwargs
File "/usr/local/lib/python3.6/site-packages/scrapy/utils/defer.py", line 162, in f
return deferred_from_coro(coro_f(*coro_args, **coro_kwargs))
File "/root/vmall_spider/vmall_spider/pipelines.py", line 32, in process_item
image_name=url.split('_')[-1]
AttributeError: 'NoneType' object has no attribute 'split'
2025-01-15 16:24:03 [scrapy.core.engine] DEBUG: Crawled (200) <GET https://www.vmall.com/product/114230598.html#380594861> (referer: https://sale.vmall.com/huaweizone.html)
===========
程序执行也有报错,这里我贴出一段报错日志,还请看看。貌似数据库也没有写入进去。
真的缺了很多图,比如这里:
3.3.查看爬取数据
切换至【实验操作桌面】浏览器已登录云数据库RDS页面,点击“对象列表”->“打开表”如下图所示:
可看到已爬取的数据,如下图所示:
----------------------
也是没有图片的。
实验手册还需要添加放通“安全组”的操作,我这边今天做的实验,发现默认安全组没有哦放开3306端口。
非常感谢您的反馈,当前建议内容已转交至相关产品团队,如您有其他诉求,请您在云声重新提交,我们收到后会尽快核实处理!感谢您对华为云的支持!
可能基础镜像里面的python版本也要升级一下了,如附件图所示。
非常感谢您的反馈,您的建议和诉求已经收到,并已提交至相关产品团队进行核查评估,评估完成后对于建议是否采纳会尽快给您答复,也请您持续关注云声平台,了解反馈建议处理进展,感谢您对华为云的支持!