1. Hawk 数据抓取系统
欢迎使用Hawk! HAWK无需编程，可见即所得的图形化数据采集和清洗工具，依据GPL协议开源。
项目主页： https://ferventdesert.github.io/Hawk/
下载地址:
Hawk的含义为“鹰”，能够高效，准确地捕杀猎物。它的思想来源于Lisp语言，功能模仿了Linux工具awk。
特点如下：
- 智能分析网页内容，无需编程
- 所见即所得，可视化拖拽，快地实现转换和过滤等数据清洗操作
- 能从各类数据库和文件实现导入导出
- 任务可以被保存和复用
- 其最适合的领域是爬虫和数据清洗，但其威力远超于此。
HAWK使用C# 编写，其前端界面使用WPF开发，因此只能运行于windows平台，但提供命令行入口供自动化部署。 以下介绍全部基于最新的Hawk3，请使用老版本的同学尽快通过下面的地址升级最新版。
以获取大众点评的所有北京美食为例，使用本软件可在10分钟内完成配置，在1小时之内自动并行抓取全部内容，并能监视任务工作情况。而手工编写代码，即使是使用python，一个熟练的程序员也可能需要一天以上：
GitHub地址：https://github.com/ferventdesert/Hawk
示例工程文件： https://github.com/ferventdesert/Hawk-Projects
文档地址: https://github.com/ferventdesert/Hawk/wiki
编译： 下载VS2015及以上版本，解决方案路径在Hawk.Core\Hawk.Core.sln
- 2012 开始开发
- 2016.4 Hawk1开源发布
- 2016.10 Hawk2发布 支持动态嗅探和超级模式，修复bug
- 2018.5 Hawk3 交互极大优化，增强子任务,支持sqlite等。
其Python类似的实现是etlpy:但由于Hawk更新频繁，Hawk3无法再兼容，因此etlpy仅供参考。
友情提示：由于软件更新频繁，界面有较大变化。但Hawk1到Hawk3在操作思路上基本一致，只是文案和布局上有少许区别，因此老版本的视频同样可做重要的参考资料。
- Hawk3
[Hawk3视频教学字幕版-新功能展示][http://v.qq.com/x/page/d0660sxbebu.html]
- Hawk1
- Hawk2
[抓取动态页面][https://v.qq.com/x/page/a03878tihmx.html]
[Hawk答疑][https://v.qq.com/x/page/n0387axmgg5.html]