一个Qt开发的可以替代爬虫的网页数据采集软件,它最重要的特点就是,降低了采集网页数据的门槛,由至少必须掌握一门编程语言降低到只要会操作电脑即可。
MIT License
作者:北小菜
gitee开源地址:https://gitee.com/Vanishi/DS
github开源地址:https://github.com/any12345com/DS
V1.8
发布时间:2023.8.26
更新内容:
(1)升级内置浏览器内核版本。
(2)优化执行器的执行逻辑。
(3)新增导出csv格式的数据(对于有些用户的电脑无法导出excel,可以使用csv)。
夸克网盘「DS采集器公开版版本发布记录」 链接:https://pan.quark.cn/s/b6972753f8d2 提取码:ALPw
win10/win11 DS.v1.8.x64.2023.08.26.exe
win7/win8 暂未编译,可自行编译
mac/linux 暂未编译,可自行编译
V1.7
发布时间:2023.4.16
更新内容:
(1)内置浏览器支持系统VPN。
(2)内置浏览器支持数据缓存。
(3)优化部分系统崩溃问题。
(4)优化数据导出功能。
夸克网盘「DS采集器公开版版本发布记录」 链接:https://pan.quark.cn/s/b6972753f8d2 提取码:ALPw
win10/win11 DS.v1.7.x64.2023.04.16.exe
win7/win8 暂未编译,可自行编译
mac/linux 暂未编译,可自行编译
V1.6
发布时间:2023.4.13
更新内容:
(1)优化下载文件功能。
(2)优化日志记录和清理功能。
(3)优化崩溃问题。
夸克网盘「DS采集器公开版版本发布记录」 链接:https://pan.quark.cn/s/b6972753f8d2 提取码:ALPw
win10/win11 DS.v1.6.x64.2023.04.13.exe
win7/win8 DS.v1.6.x64.win7.win8.2023.04.13.zip
mac/linux 暂未编译,可自行编译
V1.5
发布时间:2023.4.8
更新内容:
(1)新增图片下载功能。
(2)优化程序代码结构,提升性能。
(3)修复采集执行器执行时的页数显示问题。
夸克网盘「DS采集器公开版版本发布记录」 链接:https://pan.quark.cn/s/b6972753f8d2 提取码:ALPw
win10/win11 DS.v1.5.x64.2023.04.08.exe
win7/win8 暂未编译,可自行编译
mac/linux 暂未编译,可自行编译
V1.4
发布时间:2023.4.1
更新内容:
(1)新新增定时启动任务的功能。
(2)优化任务执行时的回调机制。
(3)修复导入任务无法更新的bug。
夸克网盘「DS采集器公开版版本发布记录」 链接:https://pan.quark.cn/s/b6972753f8d2 提取码:ALPw
win10/win11 DS.v1.4.x64.2023.04.01.exe
win7/win8 暂未编译,可自行编译
mac/linux 暂未编译,可自行编译
V1.3
发布时间:2023.3.26
更新内容:
(1)兼容Qt6.4.3,内置浏览器内核更新至最新,预计性能提升20%。
(2)优修复了网络请求可能导致的崩溃。
(3)优化execl数据的导出。
夸克网盘「DS采集器公开版版本发布记录」 链接:https://pan.quark.cn/s/b6972753f8d2 提取码:ALPw
win10/win11 DS.v1.3.x64.2023.03.26.exe
win7/win8 暂未编译,可自行编译
mac/linux 暂未编译,可自行编译
V1.2
发布时间:2023.3.22
更新内容:
1)修复了删除任务的bug。
2)关闭了内置浏览器的调试,提升性能。
3)引入日志库。
4)兼容高分辨率屏幕。
5)获取admin权限,解决部分系统盘无法写入任务的问题。
夸克网盘「DS采集器公开版版本发布记录」 链接:https://pan.quark.cn/s/b6972753f8d2 提取码:ALPw
win10/win11/win7/win8 DS.v1.2.x64.2023.03.22.exe
mac/linux 暂未编译,可自行编译
V1.1
发布时间:2023.3.21
更新内容:
1)修复了删除任务的bug。
2)关闭了内置浏览器的调试,提升性能。
夸克网盘「DS采集器公开版版本发布记录」 链接:https://pan.quark.cn/s/b6972753f8d2 提取码:ALPw
win10/win11/win7/win8 DS.v1.1.x64.2023.03.21.exe
mac/linux 暂未编译,可自行编译
V1.0
发布时间:2023.3.18
更新内容:
1)首次发布
夸克网盘「DS采集器公开版版本发布记录」 链接:https://pan.quark.cn/s/b6972753f8d2 提取码:ALPw
win10/win11/win7/win8 DS.v1.0.x64.2023.03.18.exe
mac/linux 暂未编译,可自行编译
当今时代,无处不存在对数据获取的需求。对于企业来说, 可以通过招聘开发人员专门进行数据采集。 但对于大部分 需要数据,但不懂开发的个人来说,获取数据则是困难的, 很显然,他们是不可能通过编程开发进而获取数据的。
编写报告, 撰写论文,从事分析相关的研究人员,政府公务人员,销售人员,运营人员, 学生等,在日常工作生活都有面临采集网页数据的需求。 但很多时候,大部分人仅仅是需要一批网页数据,通过分析得出一些结论。 但是由于获取数据的成本较高,还需要额外学编程语言开发采集, 这对于他们来说是极其痛苦的,因为不能把有限的时间放在最有价值的事情上。
虽然开发程序采集数据,这对于开发人员来说,是比较简单的, 但是对于一个不懂编程的人,这是困难的, 而且即使是开发人员,可能也不愿意编写程序采集数据,因为太浪费时间。
希望DS能够成为一款类似于office,WPS 一样的一个办公必备软件,每一位有需要的职场人员,都可以使用DS进行采集数据,来应对日常工作
DS将永久开源,所有功能永久免费,我会保持更新,也希望有兴趣的开发者能够一起完善,并希望大家多提意见或建议,