上招聘网执行查找公司招聘信息,以1分钟翻动一页的速度紧盯屏幕,翻看200页内容,需要多长时间?3小时!现在可以说NO了!
本抓取系统可以抓取国内各大招聘网站的最新招聘信息,进行详尽的分类识别,将之保存在本地硬盘中。根据网站的响应快慢,平均抓取速度为15分钟4000条以上的招聘信息的数据,同时包含公司介绍和职位介绍。
您现在只需要花费15分钟时间,就可以喝着咖啡,离线浏览本软件为您获取的最新招聘信息了。
软件名称:E3Labor(Employment/Electronic/Especial Labor)
版本:1.0.2
作者:千山独行
简介:本软件使用纯Java语言开发。首先使用当前先进的web2.0平台新特性及正则表达式匹配方式,根据配置文件中指出的网址对各大网站的实时数据进行抓取;然后进行详尽的分析并储存,是一个Spider爬虫程序,同时提供了内容管理系统(CMS)的相关功能。
目前提供的功能:
1.配置简便,只需要两个配置文件即可;可对配置文件中指出的网站进行全面的深度抓取和分析;
2.配置工作完成后,可开启是否定时功能,定时对网站的内容进行抓取;
3.实时动态抓取各大招聘网站的招聘职位的详细信息并进行全面细致的分类,但是并不只限于抓取此类型网站;
4.对抓取到的元数据进行详尽的分析,可选择存储至数据库,本地硬盘或者网络硬盘等方式;
5.可对抓取的内容/网页进行七大类型的分类识别并保存(保存主要针对本地硬盘和网络硬盘),例如根据公司性质,公司规模,工作地点等进行分类;
6.对于保存至硬盘的存储方式,分类后的内容,最多可嵌套构成3级目录,保存至用户指定文件夹下;
7.使用数据字典方式对抓取的内容进行分类识别及过滤,可通过实时修改数据字典实现不同分类过滤等功能,因此可轻松应对网站改版后的实时抓取工作;
8.使用数据字典识别黑名单公司及需要重点关注的招聘单位等功能;
9.使用单线程抓取方式,对微机性能几乎没有特殊要求;初步测试在CPU为赛扬2G,内存512MB的台式机上,20分钟即可抓取,分析并分类保存6000条以上数据(此数据和网站响应速度有关);程序运行时内存耗费始终保持在40MB左右;
10.全面使用嗅探器方式定制抓取模式,可使用嗅探器根据自身喜好抓取需要的网页。例如抓取截止日期为某年某月某日之后的网页等;
11.全程使用嗅探器进行跟踪评估,当发现抓取到的网页不符合要求时,程序会安全退出;
12.运行时异常抛出机制完备,当某条数据抓取分析错误时,并不影响整个抓取工作的进行;
13.提供可扩展接口,使用者可根据实际需要,自行开发新的抓取模式并编码实现自己的网站抓取程序,以适应千变万化的互联网站;
注:此试用版仅抓取某个国内知名招聘网站的800条销售类最新招聘数据,然后分类保存到本地硬盘名为E3LaborCareerInfo的根目录下。
实现技术:java
运行文件:E3Labor-1.0.2-eval.exe
运行平台:windows 2k,windows xp等win操作系统,需要jre1.5及后续版本的java运行环境,linux及unix系统下未进行测试
分享到:
相关推荐
《LinuxQQ v1.0.2-beta1 i386:在Linux系统中畅聊的探索》 在当今数字化时代,即时通讯软件已经成为日常生活和工作中不可或缺的一部分,QQ作为国内广泛使用的社交工具,其影响力不言而喻。然而,对于那些在Linux...
LoRaWAN规范V1.0.2是该技术的核心文档,定义了网络架构、通信协议以及设备如何在广域网中有效地进行低功耗、远距离通信。其目标是为物联网设备提供安全、可靠且可扩展的连接。 **LoRaWAN规范V1.0.2中的主要知识点:...
这个压缩包"linuxqq-v1.0.2-beta1.i386.zip"包含了Linux QQ的安装文件"linuxqq-v1.0.2-beta1.i386.rpm",这是针对32位(i386)Linux系统的软件包。RPM(Red Hat Package Manager)是Linux世界中广泛使用的软件包管理...
《Q_Chameleon v1.0.2:一款创新的PR插件详解》 在数字媒体制作领域,Adobe Premiere Pro(简称PR)作为一款强大的视频编辑软件,被广泛应用于电影、电视和网络视频的后期制作。为了提升工作效率和创意表现,众多...
安装Win64 OpenSSL v1.0.2t(由OpenSSL的创建者推荐给软件开发人员)。仅安装在Windows的64位版本上。请注意,这是OpenSSL的默认版本,并受当地和州法律的约束。在安装的法律协议中可以找到更多信息。
"神笔马良v1.0.2.rar"是一个压缩包文件,其主要包含的是一个名为"神笔马良v1.0.2.apk"的应用程序文件。这个应用程序是针对安卓平台设计的,标签“软件/工具”和“安卓工具”表明它是一款实用的安卓应用,可能是用于...
在信息技术领域,操作系统的选择多样,其中Linux以其开源、安全和高效的特点深受开发者和高级用户的喜爱。然而,与Windows系统相比,Linux在某些方面可能显得不够亲民,尤其是在日常应用软件上。好在,腾讯公司为了...
OKAuth_v1.0.2.apk
StartBBS(起点开源社区系统)是一个基于PHP MySQL开发的新型社区系统,她轻量小巧, 简单易用,强大高效的开源论坛系统。又简称”SB(烧饼)”, 采用MVC框架开发,前台UI采用流式响应式设计,可以适应各种设备浏览。 ...
GetQzoneHistory-GUI-win-x64-v1.0.2.zip
Kolor Neutralhazer v1.0.2+汉化 破解,免费下载。
【SNA新闻采集系统v1.0.2 For 动易4.03】是一款专为动易4.03版本设计的新闻自动化采集工具,旨在帮助用户高效、快速地从互联网上抓取并整合新闻资源。这款系统的核心功能包括新闻源识别、内容筛选、自动发布等多个...
能模拟3D物体的柔体效果,模拟果冻之类的物件,可以通过插件实现各种物理效果,果冻软体效果,物理模拟,相对来水是可以用,实现一些小小的物理效果,可能还需要一些算法通过算法来改变mesh
linuxqq-v1.0.2-beta1.i386
《a股股票大赛实时交易系统免费版v1.0.2插件》是专为Discuz! 6.0论坛平台设计的一款应用插件,它提供了实时的股票交易模拟功能,让用户可以在虚拟环境中体验a股市场的交易过程。该插件不仅能够提升论坛用户的活跃度...
软件版本号V1.0.2表明这是该软件的一个稳定版本,但为了保持最佳性能和兼容性,用户应及时关注JBL官方发布的更新信息,以便获取最新的修复和改进。 总结,JBL KX180PC的配套软件“KX180CN_V1.0.2_20PC-GUI”是音频...
USR-W600_Setup_V1.0.2.rar 是一个针对USR-W600型号串口服务器的驱动程序更新包。USR-W600是一款功能强大的设备,它能够将传统的串行通信(如RS-232、RS-485)转换为Wi-Fi网络通信,使得串行设备可以通过无线网络...
总的来说,UIS8910DM Device Specification V1.0.2是理解这款处理器的关键,它涵盖了从底层硬件到上层软件开发的全方位信息,对于任何想要利用此平台进行创新的工程师来说,都是不可或缺的资源。通过深入学习和研究...
这个v1.0.2版本是适用于Windows操作系统的,能够支持x86和x64架构的计算机。STM32CubeIDE集成了代码编辑、编译、调试和项目管理等多种功能,旨在简化STM32应用的开发流程,提高开发效率。 首先,STM32CubeIDE的核心...