scrapy 爬取失败但不提示出错怎么办

1. scrapy 爬取失败但不提示出错怎么办

如果您有还原软件或自带的还原，还原一下系统有效又省事。
你想想出事前你是怎么操作的？故障不会无缘无故的出现吧？将出事前下载所有东西全部卸载，在不可以，还原系统或重装，如果是硬件的问题就修修去，有问题请你追问（先看看下面的方法）。
电脑无声的解决方法：有修复系统和用软件安装声卡驱动的两种解决方法（首先看看小喇叭或在控制面板中看看是否设置了静音，在通过耳机检查是否有声音输出，如果有，则是音箱或喇叭和各连线的故障引起的，在有就是声卡驱动损坏引起的，如果是请您安装合适的声卡驱动，如果是硬件问题引起的，自己又解决不了，建议检修一下去，有问题请你追问我）
1、开机按F8不动到高级选项出现在松手，选“最近一次的正确配置”回车修复（这个方法可以恢复原来的驱动，如果您的电脑是Win8，进不了系统是进不了安全模式的，只有重装了）。
2、如果是因更新驱动引起的故障，右击我的电脑选属性，选设备管理器找到这个驱动右键选属性/上面的驱动程序选项/选下面返回驱动程序选项按确定（如果可以进入安全模式，也是开机按F8）。
3、如果故障依旧，还原系统或重装。
使用系统自带的系统还原的方法：
系统自带的系统还原：“开始”/“程序”/“附件”/“系统工具”/“系统还原”，点选“恢复我的计算机到一个较早的时间”，按下一步，你会看到日期页面有深色的日期，那就是还原点，你选择后，点击下一步还原（Win78还原系统，右击计算机选属性，在右侧选系统保护，系统还原，按步骤做就是了。如果有还原软件，也可以还原修复）。

2. Scrapy报错 报错如下 请问是什么问题导致的

错误有几种类型。
因为网络限制，你无法自动下载依赖的库
因为版本冲突问题，导致你安装scapy时无法完成安装，或者是安装无法正确使用
因为编译的位数不同64位和32位不同，导致的问题

解决办法：
简单的解决办法。如果scrapy对你很重要。重新安装一套python2.7然后从头安装scrapy，可以从pypi网站上下载。也可以从unofficial来源，一口气安装好的包。

耐心的解决办法。把scrapy的源码拿过来，执行python setup.py install，遇到哪个包不好用，就替换掉。办法是将那个包的源代码拿过来，先删除site-packages里的相应包，再手工执行python setup.py install。要有心理准备，很可能需要vc++ 2010的编译器。

最简单的办法，使用pip install scrapy。 如果你是在ubuntu下面apt-get install python-scrapy就搞定了。

3. 学习scrapy爬虫，请帮忙看下问题出在哪

现在的网站对爬虫还是比较反感的，所以我们在爬取的时候一定要想方设法让我们的爬虫像人一样去浏览，楼主的问题我也遇到过，我的总结如下：
1、User-agent头是网站判断爬虫的第一道大门，我在网上搜索了100多个agent头串，保存成txt文件，程序运行时读取到一个数组中，每次打开链接时都随机从数组中挑选一个。
2、爬虫爬取的时间一定要控制好，大量的爬虫快速爬取服务器对服务器性能会产生较大的压力，所以在爬取的时候，写一个随机事件方法，一般而言我都设置1-2秒左右的随机暂停时间，这样也是为了模拟人的访问间隔
3、楼主可以试一下用BeautifulSoup＋urllib2来编写爬虫，个人认为更加适合糗百这种信息结构较为简单的网站，对于爬虫的理解也会更加深刻一点。

4. 学习scrapy爬虫，请帮忙看下问题出在哪

　　现在的网站对爬虫还是比较反感的，所以我们在爬取的时候一定要想方设法让我们的爬虫像人一样去浏览，楼主的问题我也遇到过，我的总结如下：
　　1、User-agent头是网站判断爬虫的第一道大门，我在网上搜索了100多个agent头串，保存成txt文件，程序运行时读取到一个数组中，每次打开链接时都随机从数组中挑选一个。
　　2、爬虫爬取的时间一定要控制好，大量的爬虫快速爬取服务器对服务器性能会产生较大的压力，所以在爬取的时候，写一个随机事件方法，一般而言我都设置1-2秒左右的随机暂停时间，这样也是为了模拟人的访问间隔
　　3、楼主可以试一下用BeautifulSoup＋urllib2来编写爬虫，个人认为更加适合糗百这种信息结构较为简单的网站，对于爬虫的理解也会更加深刻一点。
　　以上是我学习的一些小总结，楼主可以借鉴一下，有不足的地方也请各路大神指教哈~

5. 学习scrapy爬虫，请帮忙看下问题出在哪

现在的网站对爬虫还是比较反感的，所以我们在爬取的时候一定要想方设法让我们的爬虫像人一样去浏览，楼主的问题我也遇到过，我的总结如下：
1、User-agent头是网站判断爬虫的第一道大门，我在网上搜索了100多个agent头串，保存成txt文件，程序运行时读取到一个数组中，每次打开链接时都随机从数组中挑选一个。
2、爬虫爬取的时间一定要控制好，大量的爬虫快速爬取服务器对服务器性能会产生较大的压力，所以在爬取的时候，写一个随机事件方法，一般而言我都设置1-2秒左右的随机暂停时间，这样也是为了模拟人的访问间隔
3、楼主可以试一下用BeautifulSoup＋urllib2来编写爬虫，个人认为更加适合糗百这种信息结构较为简单的网站，对于爬虫的理解也会更加深刻一点。

6. Python安装Scrapy出现以下错误怎么办

scapy安装的错误有几种类型。
因为网络限制，你无法自动下载依赖的库
因为版本冲突问题，导致你安装scapy时无法完成安装，或者是安装无法正确使用
因为编译的位数不同64位和32位不同，导致的问题

解决办法：
简单的解决办法。如果scrapy对你很重要。重新安装一套python2.7然后从头安装scrapy，可以从pypi网站上下载。也可以从unofficial来源，一口气安装好的包。

耐心的解决办法。把scrapy的源码拿过来，执行python setup.py install，遇到哪个包不好用，就替换掉。办法是将那个包的源代码拿过来，先删除site-packages里的相应包，再手工执行python setup.py install。要有心理准备，很可能需要vc++ 2010的编译器。

最简单的办法，使用pip install scrapy。 如果你是在ubuntu下面apt-get install python-scrapy就搞定了。

7. Python安装Scrapy出现以下错误怎么办

scapy安装的错误有几种类型。
因为网络限制，你无法自动下载依赖的库
因为版本冲突问题，导致你安装scapy时无法完成安装，或者是安装无法正确使用
因为编译的位数不同64位和32位不同，导致的问题

解决办法：
简单的解决办法。如果scrapy对你很重要。重新安装一套python2.7然后从头安装scrapy，可以从pypi网站上下载。也可以从unofficial来源，一口气安装好的包。

耐心的解决办法。把scrapy的源码拿过来，执行python setup.py install，遇到哪个包不好用，就替换掉。办法是将那个包的源代码拿过来，先删除site-packages里的相应包，再手工执行python setup.py install。要有心理准备，很可能需要vc++ 2010的编译器。

最简单的办法，使用pip install scrapy。 如果你是在ubuntu下面apt-get install python-scrapy就搞定了。

8. Python安装Scrapy出现以下错误怎么办

scapy安装的错误有几种类型。
因为网络限制，你无法自动下载依赖的库
因为版本冲突问题，导致你安装scapy时无法完成安装，或者是安装无法正确使用
因为编译的位数不同64位和32位不同，导致的问题

解决办法：
简单的解决办法。如果scrapy对你很重要。重新安装一套python2.7然后从头安装scrapy，可以从pypi网站上下载。也可以从unofficial来源，一口气安装好的包。

耐心的解决办法。把scrapy的源码拿过来，执行python setup.py install，遇到哪个包不好用，就替换掉。办法是将那个包的源代码拿过来，先删除site-packages里的相应包，再手工执行python setup.py install。要有心理准备，很可能需要vc++ 2010的编译器。

最简单的办法，使用pip install scrapy。 如果你是在ubuntu下面apt-get install python-scrapy就搞定了。