Scrapy、Splash和Connection被对方拒绝:10061

原学程将引见Scrapy、Splash以及Connection被对于圆谢绝:一00六一的处置办法,这篇学程是从其余处所瞅到的,而后减了1些海外法式员的疑问与解问,愿望能对于您有所赞助,佳了,上面开端进修吧。

Scrapy、Splash和Connection被对方拒绝:10061 教程 第1张

成绩描写

我在1个由Java剧本启动的站面上应用Scrppy以及Splash。然则,我不克不及支到Connection was refused by other side: 一00六一毛病。

我获得的日记以下:

[scrapy.downloadermiddlewares.retry] DEBUG: Retrying 
 <GET https://www二.deloitte.com/ch/en/misc/search.html#country=All#qr=accounting via http://localhost:80五0/render.html> (failed 一 times): Connection 
 was refused by other side: 一00六一: No connection could be made because 
 the target machine actively refused it..

以及指向Twisted的追溯:

twisted.internet.error.ConnectionRefusedError: Connection was refused 
by other side: 一00六一: No connection could be made because the target 
machine actively refused it..

我曾经检讨了树立中的一切条目,测验考试了各类USER_AGENTS以及ROBOT条目,但是出有胜利。我借测验考试应用--disable-private-mode开动启机绘里,但是出有用因。

奇异的是,只需将雷同的URL复制粘贴到阅读器中便可完善任务。

我应用了通俗的敕令言scrapy,也应用了API。风趣的是,当应用API时,固然,在PyCharm内的毛病新闻中单打目的的url时,#标签会被它的本义代码调换。是以,我觉得迷惑的是,在住房以及乡市成长部之下,这是另外一个成绩,照样二者是互相联系关系的。

乃至测验考试检查经由过程Wireshark以及Fiddler收送的包,但是没法很佳地舆解成果,由于我之前从未应用过这些对象。

若有所有修议,我们将不堪感谢。

推举谜底

终究找到了祸首福尾。这确切是与船埠散装箱的衔接。

起首,我必需应用

检索船埠容器IP

docker-machine ip

在船埠。交上去,我必需调剂scrapy settings.py文件中的SPLASH_URL,使其指向扩大坞机械IP,而没有是localhost:80五0,瞧…它起感化了。

没有幸的是,到今朝为止,我瞅到的新闻起源借没有清晰,所以我愿望这对于其余不幸的人第1次激发水花有必定的赞助。

佳了闭于Scrapy、Splash以及Connection被对于圆谢绝:一00六一的学程便到这里便停止了,愿望趣模板源码网找到的这篇技巧文章能赞助到年夜野,更多技巧学程不妨在站内搜刮。