python安装Scrapy踩过的坑以及安装指导

 

在pyCharm中的setting中直接添加包然后报错,然后利用window控制台pip install 报错异常:

Command "python setup.py egg_info" failed with error code 1

第一步:准备更新pip,利用以下指令

python -m pip install --upgrade pip

注意:这种方式抛出了异常:

AttributeError: 'NoneType' object has no attribute 'bytes'

报错改用(window下用该指令)

easy_install -U pip

安装成功后再次安装报错,终于不是同一个错误

 running build_extbuilding 'twisted.test.raiser' extensionerror: Microsoft Visual C++ 14.0 is required. Get it with "Microsoft Visual C++ Build Tools": http://landinghub.visualstudio.com/visual-cpp-build-tools

第二步:安装visual c++,下载地址:https://pan.baidu.com/s/1eR5awgPrkNX8fT008-E4Ww(引用别的博客地址)

安装visual C++需要等待二十多分钟...耐心,切记安装的时候不要选择默认,默认是window 8环境,如果你是win10最后安装会提示一个错误信息。

error: command 'cl.exe' failed: No such file or directory

这个错误信息就是你是win10机器而选用默认win8的情况报错信息,因此我重新选自定义安装后就成功了!

第三步:安装完后安装twisted,我选择是在pyChram的setting->Project Interpreter中安装包的,等一分钟就好了

pip install Twisted

如果用的pip指令注意版本问题,反正我使用的pyCharm傻瓜式安装,所以pip install出问题我没总结

第四步:安装Srcapy,我是在pyCharm中安装的,等十几秒就好了

pip install Scrapy

引用博客地址:

https://blog.csdn.net/qq_37788558/article/details/79049410

https://blog.csdn.net/shuiyihang0981/article/details/84673171#commentBox

https://blog.csdn.net/u010899985/article/details/79165325

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/508958.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

MyBatis之快速入门

MyBatis之快速入门 2017/9/30首先我要明确告诉大家的是MyBatis是一个java持久层框架,以前我们都是用jdbc来将我们的java程序与数据库相连接,而MyBatis是对jdbc的一个封装。 1.MyBatis框架的引入 我们来看看传统的编程方式中使用jdbc的问题: 1.数据库连接…

【使用注意】特殊中括号[]的特殊json数组

Testpublic void demo93() throws Exception {String str "[\"a\", \"b\", \"c\"]";//生成json数组JSONArray createArray new JSONArray();createArray.put("a");createArray.put("b");createArray.put("…

MyBatis之Mapper动态代理开发

MyBatis之Mapper动态代理开发 2017/9/301.SqlSession的使用范围 1.SqlSessionFactoryBuilder SqlSessionFactoryBuilder是以工具类的方式来使用:需要创建sqlSessionFactory时就new一个 SqlSessionFactoryBuilder 2.sqlSessionFactory 正常开发时,以单例方式管理sqlS…

【转载保存】IDEA maven中添加本地jar包

http://www.cnblogs.com/pldsalaryblogs/p/8194742.html

【转载保存】Java 8 Lambda实现原理分析

怒学Java8系列一:Lambda表达式介绍 Java 8 Lambda实现原理分析

MyBatis之输入(parameterType)与输出(resultType、resultMap)映射

MyBatis之输入(parameterType)与输出(resultType、resultMap)映射 2017/9/30在MyBatis中,我们通过parameterType完成输入映射(指将值映射到sql语句的占位符中,值的类型与dao层响应方法的参数类型一致),通过resultType完成输出映射(从数据库中…

java几种遍历方式以及效率对比

几种遍历方式&#xff1a; /*** */ package effectiveUse;import java.util.Iterator; import java.util.List;/*** author weijie** 2019年4月13日*/ public class ForEachList {/** 方式1&#xff1a;开始时候*/public void countSizeForEachList(List<Integer> list)…

MyBatis之优化MyBatis配置文件中的配置

MyBatis之优化MyBatis配置文件中的配置 2017/9/30MyBatis配置文件很重要&#xff0c;首先我们来看看MyBatis配置文件中的内容和顺序: 文件目录结构如下: 1.<properties>属性定义 可以把一些通用的属性值配置在属性文件中&#xff0c;加载到mybatis运行环境内。例如创建d…

【转载保存】在python中如何用word2vec来计算句子的相似度

在python中&#xff0c;如何使用word2vec来计算句子的相似度呢&#xff1f; 第一种解决方法 如果使用word2vec&#xff0c;需要计算每个句子/文档中所有单词的平均向量&#xff0c;并使用向量之间的余弦相似度来计算句子相似度&#xff0c;代码示例如下&#xff1a; import …

Spark介绍

Spark Spark 是什么? Apache Spark?是用于大规模数据处理的快速和通用引擎. 速度:在内存中,运行程序比Hadoop MapReduce快100倍&#xff0c;在磁盘上则要快10倍. Apache Spark具有支持非循环数据流和内存计算的高级DAG执行引擎. 易用:可以使用Java&#xff0c;Scala&#…

MyBatis之使用resultMap实现高级映射

MyBatis之使用resultMap实现高级映射 2017/09/30对于数据库中对表的增删改查操作&#xff0c;我们知道增删改都涉及的是单表&#xff0c;而只有查询操作既可以设计到单表操作又可以涉及到多表操作&#xff0c;所以对于输入映射parameterType而言是没有所谓的高级映射的&#xf…

【转载保存】大型推荐系统架构图设计图

推荐系统架构&#xff1a;https://www.cnblogs.com/kobedeshow/p/3569525.html 推荐系统介绍和基本架构流程:https://blog.csdn.net/LHWorldBlog/article/details/80822719

MyBatis之查询缓存

MyBatis之查询缓存 2017/09/30正如大多数持久层框架一样&#xff0c;MyBatis同样也提供了对查询数据的缓存支持。今后我们要学习的SpringMVC框架属于系统控制层&#xff0c;它也有它的缓存区域&#xff0c;对响应的jsp页面进行缓存&#xff1b;Spring属于系统业务层&#xff0c…

Spark和机器学习整合

链接&#xff1a;https://www.cnblogs.com/charlesblc/p/6109551.html

MyBatis3.x和Spring3.x的整合

MyBatis3.x和Spring3.x的整合 2017/10/021.mybatis和spring整合的思路 1.让spring管理SqlSessionFactory 2.让spring管理mapper对象和dao 使用spring和mybatis整合开发mapper代理及原始dao接口。 自动开启事务&#xff0c;自动管理sqlsession 3.让spring管理数据源(即数据库连接…

【转载保存】匿名内部类中this的使用

转载链接&#xff1a;https://www.cnblogs.com/yaowen/p/9471389.html 代码使用模板使用&#xff1a; package test;public class A extends B {public String toString() {return "A";}public static void main(String[] args) {A a new A();a.say();A.AIn aa a…

特征选择

特征选择是特征工程中的重要问题&#xff08;另一个重要的问题是特征提取&#xff09;&#xff0c;坊间常说&#xff1a;数据和特征决定了机器学习的上限&#xff0c;而模型和算法只是逼近这个上限而已。由此可见&#xff0c;特征工程尤其是特征选择在机器学习中占有相当重要的…

交叉验证

sklearn中的交叉验证&#xff08;Cross-Validation&#xff09; sklearn是利用python进行机器学习中一个非常全面和好用的第三方库&#xff0c;用过的都说好。今天主要记录一下sklearn中关于交叉验证的各种用法&#xff0c;主要是对sklearn官方文档 Cross-validation: evaluati…

Jmater参数说明

样本数目&#xff1a;运行时得到的取样器响应结果个数 最新样本&#xff1a;最近一个取样器结果的响应时间 平均&#xff1a;所有取样器结果的响应时间平均值 偏离&#xff1a;所有取样器结果的响应时间标准差 吞吐量&#xff1a;每分钟响应的取样器结果个数 中值&#xf…

【转载保存】java静态方法继承与保存的问题

结论&#xff1a;java中静态属性和静态方法可以被继承&#xff0c;但是没有被重写(overwrite)而是被隐藏. 原因&#xff1a; 1). 静态方法和属性是属于类的&#xff0c;调用的时候直接通过类名.方法名完成对&#xff0c;不需要继承机制及可以调用。如果子类里面定义了静态方法…