[人工智能] PYTHON3-SCRAPY学习之SHELL配置AGENT
作者：CC下载站 日期：2018-10-08 00:01:56 浏览：2159 分类：编程开发
在cmd测试scrapy的时候进场会报500错误或者400错误
例如:
scrapy shell https://www.zhihu.com/question/269297730/answer/389393234
![[人工智能] PYTHON3-SCRAPY学习之SHELL配置AGENT](http://www.cdz423.com/zb_users/upload/2018/10/20181008011850_68307.png)
,这是由于我们没有配置USER-AGENT 那么我们在cmd里面怎么使用user-agent呢
只需要这样做:
scrapy shell -s USER_AGENT="Mozilla/5.0 (Linux; Android 6.0; Nexus 5 Build/MRA58N) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/68.0.3440.106 Mobile Safari/537.36" https://www.zhihu.com/question/269297730/answer/389393234
这样就可以了,如下图状态码返回200
![[人工智能] PYTHON3-SCRAPY学习之SHELL配置AGENT](http://www.cdz423.com/zb_users/upload/2018/10/20181008011853_54192.png)
猜你还喜欢
- 03-08 [网络]宽带多拨以及ip独立分配图文教程
- 03-08 [Ubuntu]Rufus制作U盘启动实例教程
- 03-22 [设计教程]《adobe photoshop cs2中文版经典教程光盘》adobe公司著
- 03-22 [教程] 官方售价整套598元，雨果会贴吧发帖不删技术课程（工具+讲义+引流话术）
- 03-23 [教程] 网易云课堂付费课程之和阿文一起学信息图表
- 03-23 [教程]很难找的AUTOLISP教程分享给大家
- 03-23 [资料]网盘+教程分享
- 03-23 [教程]价值2K的网易白帽子培训教程
- 03-23 [教程]《何雄手机摄影教程》有需要的拿走了！
- 03-23 [魔术]泡妞必备魔术教程！！！！！！
- 03-23 [教程]BT5汉化教程
- 03-23 [教程]狐狸儿商学院
取消回复欢迎 你 发表评论:
- 精品推荐！
-
- 最新文章
- 热门文章
- 热评文章
![[电视剧] 我们在黑夜中相拥 (2024) 1080 横屏短剧 更24完结](https://www.cdz423.com/zb_users/upload/2024/11/20241113081542173145694210803.jpeg)
[电视剧] 我们在黑夜中相拥 (2024) 1080 横屏短剧 更24完结
![[书籍] 经典科普书籍合集30套近300部·完美精校全插图收藏版](https://www.kuafuzys.com/upload/attach/202401/2004_42QZETW39GWVTM6.jpg)
[书籍] 经典科普书籍合集30套近300部·完美精校全插图收藏版
![[电影] 狄仁杰之夺命妖僧（2024）【4K / HQ / 60帧 / 超高码率】【杜比5.1音效】【15.5G】](https://www.cdz423.com/zb_users/upload/2024/11/20241113080319173145619925060.jpeg)
[电影] 狄仁杰之夺命妖僧（2024）【4K / HQ / 60帧 / 超高码率】【杜比5.1音效】【15.5G】
![[电视剧] 春花 焰（2024）【完结】【4K / HQ / 60帧 / 超高码率】【杜比5.1音效】【刘学义/吴谨言】【256.4G】](https://www.kuafuzys.com/upload/attach/202411/61087_PRU2XJYDYV4WW59.jpg)
[电视剧] 春花 焰（2024）【完结】【4K / HQ / 60帧 / 超高码率】【杜比5.1音效】【刘学义/吴谨言】【256.4G】
![[有声小说] 《才气横空》 主播：八零居士 505集完结【MP3】](https://www.cdz423.com/zb_users/upload/2024/11/20241112011251173134517163283.png)
[有声小说] 《才气横空》 主播：八零居士 505集完结【MP3】
![[电影] 【珍藏版】20世纪电影合集从1922年到1990年代，看看爷爷辈的电影是什么样合集约212G](https://www.cdz423.com/zb_users/upload/2024/11/20241112005027173134382714449.jpeg)
[电影] 【珍藏版】20世纪电影合集从1922年到1990年代，看看爷爷辈的电影是什么样合集约212G
![[资料] 【2024年军队文职公共科目/专业课/真题及押题卷】](https://www.cdz423.com/zb_users/upload/2024/11/20241110191947173123758782448.jpeg)
[资料] 【2024年军队文职公共科目/专业课/真题及押题卷】
![[少儿教育] 唐诗三百首微电影(全314集)·少儿学唐诗](https://www.cdz423.com/zb_users/upload/2024/11/20241110191205173123712549618.png)
[少儿教育] 唐诗三百首微电影(全314集)·少儿学唐诗
![[资料] 2025军队文职 公共课+专业课+真题+押题+面试【合集】](https://www.cdz423.com/zb_users/upload/2024/11/20241109010119173108527965242.png)
[资料] 2025军队文职 公共课+专业课+真题+押题+面试【合集】
![[课程] 《大师级航拍教程》63节课程视频 MP4格式 5.9G](https://www.cdz423.com/zb_users/upload/2024/11/20241106010921173082656172713.jpeg)
[课程] 《大师级航拍教程》63节课程视频 MP4格式 5.9G
![[书籍] 彭子益医书合集 [PDF/DOC]](https://www.cdz423.com/zb_users/upload/2024/11/20241102182849173054332964088.jpeg)
[书籍] 彭子益医书合集 [PDF/DOC]
![[游戏] 《黑神话悟空》免安装学习版【全dlc整合完整版】+Steam游戏解锁+游戏修改工具！](https://www.cdz423.com/zb_users/upload/2024/08/20240824090317172446139718947.webp)
[游戏] 《黑神话悟空》免安装学习版【全dlc整合完整版】+Steam游戏解锁+游戏修改工具！
![[动画] 《名侦探柯南》名侦探柯南百万美元的五菱星 [TC] [MP4]](https://www.cdz423.com/zb_users/upload/2024/08/20240820174626172414718671184.jpeg)
[动画] 《名侦探柯南》名侦探柯南百万美元的五菱星 [TC] [MP4]
![[动画] 2002《火影忍者》720集全【4K典藏版】+11部剧场版+OVA+漫画 内嵌简日字幕](https://www.cdz423.com/zb_users/upload/2024/09/20240917000652172650281219934.jpeg)
[动画] 2002《火影忍者》720集全【4K典藏版】+11部剧场版+OVA+漫画 内嵌简日字幕
![[剧集] 《斯巴达克斯》1-4季合集 无删减版 1080P 内嵌简英特效字幕](https://www.cdz423.com/zb_users/upload/2024/09/20240920084652172679321224238.jpeg)
[剧集] 《斯巴达克斯》1-4季合集 无删减版 1080P 内嵌简英特效字幕
![[CG剧情] 《黑神话：悟空》158分钟CG完整剧情合集 4K120帧最高画质](https://www.cdz423.com/zb_users/upload/2024/08/20240828234608172485996890149.jpeg)
[CG剧情] 《黑神话：悟空》158分钟CG完整剧情合集 4K120帧最高画质
![[电影] 《变形金刚系列》七部合集 [4K HDR 蓝光] 国英双语音轨 [内封精品特效字幕]【典藏版】235G](https://www.cdz423.com/zb_users/upload/2024/10/20241012132630172871079044903.jpeg)
[电影] 《变形金刚系列》七部合集 [4K HDR 蓝光] 国英双语音轨 [内封精品特效字幕]【典藏版】235G
![[游戏] 黑神话悟空离线完整版+修改器](https://www.cdz423.com/zb_users/upload/2024/08/20240826234148172468690849518.jpeg)
[游戏] 黑神话悟空离线完整版+修改器
![[动画] 西游记 (1999) 动画版 4K 全52集 高清修复版 童年回忆](https://www.cdz423.com/zb_users/upload/2024/09/20240914151003172629780327697.jpeg)
[动画] 西游记 (1999) 动画版 4K 全52集 高清修复版 童年回忆
![[演唱会] 2024刀郎知交线上演唱会 2K [MP4]](https://www.cdz423.com/zb_users/upload/2024/09/20240906011043172555624375802.jpeg)
[演唱会] 2024刀郎知交线上演唱会 2K [MP4]
![[影视] 美国内战 4K蓝光原盘下载+高清MKV版/内战/帝国浩劫：美国内战(台)/美帝崩裂(港) 2024 Civil War 63.86G](https://www.cdz423.com/zb_users/upload/2024/08/20240820033214172409593460715.webp)
[影视] 美国内战 4K蓝光原盘下载+高清MKV版/内战/帝国浩劫：美国内战(台)/美帝崩裂(港) 2024 Civil War 63.86G
![[影视] 一命 3D 蓝光高清MKV版/切腹 / 切腹：武士之死 / Hara-Kiri: Death of a Samurai / Ichimei 2011 一命 13.6G](https://www.cdz423.com/zb_users/upload/2024/08/20240820033358172409603843888.jpeg)
[影视] 一命 3D 蓝光高清MKV版/切腹 / 切腹：武士之死 / Hara-Kiri: Death of a Samurai / Ichimei 2011 一命 13.6G
![[影视] 爱情我你他 蓝光原盘下载+高清MKV版/你、我、他她他 2005 Me and You and Everyone We Know 23.2G](https://www.cdz423.com/zb_users/upload/2024/08/20240820033553172409615378606.jpeg)
[影视] 爱情我你他 蓝光原盘下载+高清MKV版/你、我、他她他 2005 Me and You and Everyone We Know 23.2G
![[影视] 穿越美国 蓝光原盘下载+高清MKV版/窈窕老爸 / 寻找他妈…的故事 2005 Transamerica 20.8G](https://www.cdz423.com/zb_users/upload/2024/08/20240820033820172409630091311.jpeg)
[影视] 穿越美国 蓝光原盘下载+高清MKV版/窈窕老爸 / 寻找他妈…的故事 2005 Transamerica 20.8G
![[电影] 《黄飞鸿》全系列合集](https://www.cdz423.com/zb_users/upload/2024/09/20240924190959172717619976996.jpeg)
[电影] 《黄飞鸿》全系列合集
![[Android] 开罗游戏 ▎像素风格的模拟经营的游戏厂商安卓游戏大合集](https://www.cdz423.com/zb_users/upload/2024/10/20241006183357172821083789239.png)
[Android] 开罗游戏 ▎像素风格的模拟经营的游戏厂商安卓游戏大合集
![[游戏合集] 要战便战 v0.9.107 免安装绿色中文版](https://www.cdz423.com/zb_users/upload/2024/10/20241011011023172858022368857.png)
[游戏合集] 要战便战 v0.9.107 免安装绿色中文版
[电影] 【珍藏版】20世纪电影合集从1922年到1990年代，看看爷爷辈的电影是什么样合集约212G
[书籍] 彭子益医书合集 [PDF/DOC]
![[系统]【黑果小兵】macOS Big Sur 11.0.1 20B50 正式版 with Clover 5126 黑苹果系统镜像下载](https://www.cdz423.com/zb_users/upload/2024/10/20241018180634172924599447945.jpeg)
[系统]【黑果小兵】macOS Big Sur 11.0.1 20B50 正式版 with Clover 5126 黑苹果系统镜像下载
- 最新评论
-
找了好久的资源，终于在这里找到了。感谢本站的资源和分享。谢谢285552528 评论于：11-09 找了好久的资源bjzchzch12 评论于：11-07 谢谢分享感谢ppy2016 评论于：11-05 谢谢分享感谢ppy2016 评论于：11-05 有靳东！嘻嘻奥古斯都.凯撒 评论于：10-28 流星花园是F4处女作也是4人集体搭配的唯一一部！奥古斯都.凯撒 评论于：10-28 找了好久的资源，终于在这里找到了。感谢本站的资源和分享。谢谢AAAAA 评论于：10-26 
找了好久的资源，终于在这里找到了。感谢本站的资源和分享。谢谢password63 评论于：10-26 
找了好久的资源，终于在这里找齐了！！！！blog001 评论于：10-21 找了好久的资源，终于在这里找齐了！！！！blog001 评论于：10-21
- 热门tag