Comments (8)
已经可以复现你的问题,请先下载V0.2.0版本的EasySpider使用,我这边今天尝试修复此Bug,修复后会回复。
from easyspider.
是直接下载的可执行程序,在执行./easyspider_executestage的时候报的错吗?还是下载的源代码然后运行的?
from easyspider.
是直接下载的可执行程序,在执行./easyspider_executestage的时候报的错吗?还是下载的源代码然后运行的?
对,直接下载 release 里的 mac 程序,按照文档设计了一个采集,然后点击【本地直接执行】,然后 cd 到解压的目录,执行代码就报错了。
from easyspider.
能不能给个文件夹和命令行的截图,我这边复现不了。
from easyspider.
cd 你的EasySpider文件夹,如:cd /Users/你的用户名/Downloads/EasySpider_MacOS_all_arch
./easyspider_executestage --id '[3]' --user_data 0 --server_address http://localhost:8074 --config_folder "/Users/panbing/Library/Application Support/EasySpider/" --headless 0 --read_type remote --config_file_name config.json --saved_file_name
路径中没有中文
from easyspider.
命令行执行的截图也发一下
from easyspider.
from easyspider.
你这个操作系统版本太低了,所以那个程序有些兼容性问题不能直接用,但是有办法编译运行,方式为:
cd Downloads/EasySpider-master/ExecuteStage
pip3 install -r requirements.txt
- 拷贝
easyspider_executestage.py
文件到之前下载好的EasySpider文件夹(带easyspider_executestage
可执行文件的那个文件夹):
- 命令行进入此文件夹,然后将提示命令中的
./easyspider_executestage
替换成python3 easyspider_executestage.py
后面不变:
cd 你的EasySpider文件夹,如:cd /Users/你的用户名/Downloads/EasySpider_MacOS_all_arch
python3 easyspider_executestage.py --id '[3]' --user_data 0 --server_address http://localhost:8074 --config_folder "/Users/panbing/Library/Application Support/EasySpider/" --headless 0 --read_type remote --config_file_name config.json --saved_file_name
即可执行任务。
from easyspider.
Related Issues (20)
- 爬取图片时,可以添加header参数吗,我需要在header里添加Referer=...才能获取真正的图片 HOT 1
- 关于循环与下拉菜单的问题 HOT 2
- 建成模型是全网共用的会不会涉及隐私问题 HOT 1
- 大佬,这个和影刀是不是差不多? HOT 2
- 网站的http与https的问题 HOT 1
- 如果这一页只有一个doc,有办法让下载的doc以这一页采集到的标题命名? HOT 5
- 判断条件的Javascript命令返回值功能执行错误 HOT 1
- 使用报错:most recent call last HOT 29
- 爬取时间范围内网页信息 HOT 1
- 校园集市的访问
- 建议加一个导出任务为独立py脚本的功能,可以在服务器灵活部署 HOT 1
- 自动修改文件名问题 HOT 1
- 请问该怎么提取cookie?
- 打开tripadvisor网页后被检测并封锁,无法继续后续的爬取操作
- 在国产统信系统上不能使用?请问有什么办法吗?
- 爬取若干页后需要输入图形验证码,这个可以解决吗?
- 在页面采集多列元素的时候,数据筛选新生成时,漏数据 HOT 5
- 爬取shanghairanking.cn问题
- 如何爬取一对多数据
- 强烈建议换底层,不需要对强反爬花太多精力 HOT 4
Recommend Projects
-
React
A declarative, efficient, and flexible JavaScript library for building user interfaces.
-
Vue.js
🖖 Vue.js is a progressive, incrementally-adoptable JavaScript framework for building UI on the web.
-
Typescript
TypeScript is a superset of JavaScript that compiles to clean JavaScript output.
-
TensorFlow
An Open Source Machine Learning Framework for Everyone
-
Django
The Web framework for perfectionists with deadlines.
-
Laravel
A PHP framework for web artisans
-
D3
Bring data to life with SVG, Canvas and HTML. 📊📈🎉
-
Recommend Topics
-
javascript
JavaScript (JS) is a lightweight interpreted programming language with first-class functions.
-
web
Some thing interesting about web. New door for the world.
-
server
A server is a program made to process requests and deliver data to clients.
-
Machine learning
Machine learning is a way of modeling and interpreting data that allows a piece of software to respond intelligently.
-
Visualization
Some thing interesting about visualization, use data art
-
Game
Some thing interesting about game, make everyone happy.
Recommend Org
-
Facebook
We are working to build community through open source technology. NB: members must have two-factor auth.
-
Microsoft
Open source projects and samples from Microsoft.
-
Google
Google ❤️ Open Source for everyone.
-
Alibaba
Alibaba Open Source for everyone
-
D3
Data-Driven Documents codes.
-
Tencent
China tencent open source team.
from easyspider.