cole2295 / hawk Goto Github PK

欢迎使用Hawk! HAWK无需编程，可见即所得的图形化数据采集和清洗工具，依据GPL协议开源。

项目主页： https://ferventdesert.github.io/Hawk/

下载地址:

Github

国内博客园

Hawk的含义为“鹰”，能够高效，准确地捕杀猎物。它的**来源于Lisp语言，功能模仿了Linux工具awk。

特点如下：

• 智能分析网页内容，�无需编程
• 所见即所得，可视化拖拽，快地实现转换和过滤等数据清洗操作
• 能从各类数据库和文件实现导入导出
• 任务可以被保存和复用
• 其最适合的领域是爬虫和数据清洗，但其威力远超于此。

HAWK使用C# 编写，其前端界面使用WPF开发，因此只能运行于windows平台，但提供命令行入口供自动化部署。 以下介绍全部基于最新的Hawk3，请使用老版本的同学尽快通过下面的地址升级最新版。

以获取大众点评的所有北京美食为例，使用本软件可在10分钟内完成配置，在1小时之内自动并行抓取全部内容，并能监视任务工作情况。而手工编写代码，即使是使用python，一个熟练的程序员也可能需要一天以上：

GitHub地址：https://github.com/ferventdesert/Hawk

示例工程文件： https://github.com/ferventdesert/Hawk-Projects

文档地址: https://github.com/ferventdesert/Hawk/wiki

编译： 下载VS2015及以上版本，解决方案路径在Hawk.Core\Hawk.Core.sln

• 2012 开始开发
• 2016.4 Hawk1开源发布
• 2016.10 Hawk2发布 支持动态嗅探和超级模式，修复bug
• 2018.5 Hawk3 交互极大优化，增强子任务,支持sqlite等。

其Python类似的实现是etlpy:但由于Hawk更新频繁，Hawk3无法再兼容，因此etlpy仅供参考。

http://www.cnblogs.com/buptzym/p/5320552.html

友情提示：由于软件更新频繁，界面有较大变化。一切更改以最新版本的软件为主，请谅解。视频演示，复杂度由小到大。

链家二手房 微信公共平台 大众点评-北京美食

抓取动态页面： https://v.qq.com/x/page/a03878tihmx.html

Hawk答疑： https://v.qq.com/x/page/n0387axmgg5.html