小王子工具箱包含多种工具集合,包含基本工具、转换工具、论坛助手、图片下载器、网络调试助手、代码统计等功能,所有工具都以多线程形式运行,工具之间互不影响!
开发介绍
前段时间用C#写了个网络图片爬虫,反响效果不错,只是有部分人的需求可能无法满足,毕竟不是所有网站的图片都那么容易下载的。
基于兴趣,我又写了一个工具集合,主要是一些我日常用得到的工具,独乐乐不如众乐乐,分享给大家,工具不是所有人都用得到,主要是码农用的多。
功能介绍
工具箱主要有6个板块,分别是
1、基本工具,包括ping测试,获取本机ip和公网ip,文件md5计算,crc16计算,端口开放扫描
2、转换工具,包括时间戳跟日期互转,英汉互译,进制转换,随机数生成
3、论坛助手,主要是一些论坛网站帖子的爬取,包括吾爱破解,威锋网,IT之家,v2ex,知乎,还有某站的技术讨论区(需要代{过}{滤}理)
4、图片下载器,是之前那个下载器,集成进来,修复了一下bug和细节问题
5、网络调试助手,主要是收发16进制数据,工作所需
6、代码统计,统计项目下代码行数
注意事项
所有工具都以多线程形式运行,工具之间互不影响,其中端口开放扫描下线程数可以自定义,最大1000,取决于cpu,我本机测试线程在350个左右,扫描完1-65535需要4分钟左右,取决网速。
各位用的比较多估计还是图片下载器,用的时候,一定要设置好深度,图片大小,代{过}{滤}理,cookie,前缀等,按需设置,不要乱设置,也不能少设置
一些需要登录的网站,尤其是需要付费的网站,图片基本是很难爬的,一些大网站,像阿里,微博,反爬虫技术很牛逼。
更新日志
已去掉违规内容
前段时间用C#写了个网络图片爬虫,反响效果不错,只是有部分人的需求可能无法满足,毕竟不是所有网站的图片都那么容易下载的。
基于兴趣,我又写了一个工具集合,主要是一些我日常用得到的工具,独乐乐不如众乐乐,分享给大家,工具不是所有人都用得到,主要是码农用的多。
工具箱主要有6个板块,分别是
1、基本工具,包括ping测试,获取本机ip和公网ip,文件md5计算,crc16计算,端口开放扫描
2、转换工具,包括时间戳跟日期互转,英汉互译,进制转换,随机数生成
3、论坛助手,主要是一些论坛网站帖子的爬取,包括吾爱破解,威锋网,IT之家,v2ex,知乎,还有某站的技术讨论区(需要代{过}{滤}理)
4、图片下载器,是之前那个下载器,集成进来,修复了一下bug和细节问题
5、网络调试助手,主要是收发16进制数据,工作所需
6、代码统计,统计项目下代码行数
所有工具都以多线程形式运行,工具之间互不影响,其中端口开放扫描下线程数可以自定义,最大1000,取决于cpu,我本机测试线程在350个左右,扫描完1-65535需要4分钟左右,取决网速。
各位用的比较多估计还是图片下载器,用的时候,一定要设置好深度,图片大小,代{过}{滤}理,cookie,前缀等,按需设置,不要乱设置,也不能少设置
一些需要登录的网站,尤其是需要付费的网站,图片基本是很难爬的,一些大网站,像阿里,微博,反爬虫技术很牛逼。
已去掉违规内容