[软件工具msray: 一款好用的url采集工具(搜索结果采集)
以前发布了基于python的开源版本 -superl-url,点赞的小伙伴还挺多,但是后期实在是没时间维护,升级的事情一直搁置了。时隔四五年,这次使用GO语言重新设计与开发了,彻底摆脱python环境与依赖问题,并且资源占用更少,也支持跨平台运行!MSRAY简介Msray,可根据指定的关键词,自动从多个搜索引擎获取搜索结果数据(并发), 并且支持自动去重复、自定义代理、webhook推送等。不仅仅是url采集!支持存储域名、网址(url)、标题、描述、结果来源的搜索引擎名称、IP地址、服务器所属国家等多种信息!msray是从msray-plus商业版中提取出来的精简版本,可免费使用无功能限制。下载地址:https://github.com/super-l/msray程序优势1. 支持国外与国内多个主流搜索引擎,每个引擎的参数可单独控制;2. 可自动检测当前网络属于国内还是国外,用于部分国外引擎的初始网络代理设定判断。3. 无需特定环境与依赖,可直接运行;4. 自动去重过滤。同时支持按url模式或者域名模式进行重复判断;5. 支持webhook,采集的结果,可实时推送到自定义远程API接
[软件工具msray采集软件即将上线国外搜素引擎-QWANT引擎模块!
Msray,是一款使用GO语言研发的企业级新一代多功能信息采集软件。具有高效率、低占用、功能强大、定制灵活、上手简单、支持webhook等特点。主要运用于全网域名/网址/IP信息检索、指定关键词批量数据采集、网络推广与分析、内容源收集,以及为各种大数据分析等提供数据支撑。提供WEB管理后台对软件进行相关操作,无需使用复杂的命令,功能强大且简单易上手!预计在2020年9月,msray将上线QWant搜索引擎模块!qwant是来自法国的搜索引擎,支持多种语言,类似谷歌与BING。其经典搜索引擎https://www.qwant.com及其精简版https://lite.qwant.com。Qwant搜索的信仰是:隐私与中立。“我们为您检索一切,除了你是谁”。“我们只为您检索信息,但不收集你的信息,也不会根据您的搜索推送广告。”令人愉快的是,qwant可以国内访问,无需任何翻墙软件!并且,qwant对爬虫相对友好,与百度、谷歌等高频触发搜索验证码的行为大相径庭。
[软件工具IntelliJ IDEA 2021多版本便携绿色增强破解版[亲测有效激活 长久稳定使用]
IntelliJ IDEA 2021多版本便携绿色增强破解版,由本人亲测有效激活,并且已经用了快两年了。注意: 不需要再自己手工去做激活操作,已经全部内置好了!!一:简介集成知言重置补丁,便携制作改配置文件为本地目录binIdea,可以移动文件配置不丢失设置为MD风格主题,修改字体以及配色样式更有多种精品插件自动集成。推荐使用以下版本,可在文本末尾提供的地址下载:ideaIU_2021.2.3_64bitideaIU_2021.2.2_64bitideaIU_2021.2.1_64bit二:使用方法第一次使用请运行根目录“绿化.bat”文件绿化;之后,也可以找到idea安装目录下面的bin目录里面的idea64.exe,点击运行;三:下载地址链接: https://pan.baidu.com/s/1Fs9GDteY4QFsDbn2Wxio0g?pwd=ibte提取码: ibte