- 浏览: 35579 次
- 性别:
- 来自: 北京
最新评论
-
firefox_hit:
您好,请问在哪里可以下载到此WebSpider的源码呢?我想学 ...
开放源码的网络蜘蛛 -
dying:
谢谢分享,不过写代码没注释的习惯真差
C语言写的多线程下载器 -
zkf53064:
...
C语言写的多线程下载器 -
iranger:
在load中使用LockMode.write是肯定不对的,AP ...
LockMode.UPGRADE 引发的对于Hibernate事务的思考 -
pn2008:
学习。。。。
LockMode.UPGRADE 引发的对于Hibernate事务的思考
文章列表
新增功能:
1. 主从复制功能
2. XML启动项配置, 同时处理Thrift客户端和Memcache客户端
3. 客户端shell,方便初学者使用
4. Memcache服务器性能提升30%, DiskTreap索引结构性能提升12%
5. 新增批量操作bulkPut,bulkGet,批量插入可达1.7w条每秒
6. 更丰富的API
http://code.google.com/p/treapdb/
应用场景:现有一个表Article(帖子),其中有一个字段visit_amount表示这个帖子被浏览过多少次。
现在做一个实验,开两个线程做同一件事情,就是:取出原有的浏览次数,然后加一,再存回数据库。每个线程把这个动作重复10次。
设想的结果:如果浏览次数的初始值是0的话,那么程序运行完毕后,浏览次数应该增长到20。
package com.javaye;
import org.hibernate.LockMode;
import org.hibernate.Session;
import org.hibernate.Transaction;
import com. ...
1. 招牌VS域名
餐馆的招牌要够响亮,才能让人记住。网站也是,一个好的域名是至关重要的。
2. 地段VS 主机空间
开餐馆要有好的地段,否则门可罗雀;做网站也要选好的主机空间,带宽要大,不管用户使的是教育网或 ...
今天在网上闲逛,发现一个提供免费HTTP代理列表的网站,好像每天都会更新,大概有200多个吧,随便挑了几个导入到TheWorld浏览器中,速度头挺不错的。
哈,这下可以隐藏IP了。
差点忘了说网址。
http://proxy.javaye.com
- 2008-05-12 21:54
- 浏览 5918
- 评论(3)
1.软件介绍
qdown是一款开源的HTTP多线程下载软件。
特点:多线程,支持服务器重定向,支持断点续传。
平台:Solaris/FreeBSD/Windows(CygWin)
作者:小孙
2.如何使用
usage: qdown URL [thread_amount] [save as]
example: qdown http://www.baidu.com/img/logo.gif 5 /home/sunjoy/log.gif
3.如何编译
On Solaris: cc -lsocket -lnsl qdown.c
On FreeBSD: gcc -pthread qdown.c ...
- 2008-03-18 11:38
- 浏览 8762
- 评论(2)
http://microsoft.csdn.net/vs/dev%5Fcontest/Ms_rich_Detail.aspx?pointid=102
开发环境:Visual Studio 2005 语言:C++/CLI
作品所要解决的主要问题: 对于给定的网站列表,下载其所有网页到数据库,可以限制抓取深度和吞吐量。
存储的信息包括标题、内容、网页大小、抓取时间、链接数、连接数等等 。
作品的主要应用场景: 可用于数据采集、数据挖掘以及搜索引擎的前期工作。
基于IOCP模型构建,稳定性有保证。
而且有详细的开发文档。
使用说明:
1.直接点击bin目录下的WebSpiderEh.exe,即可 ...
贴一段我用D写的Spider的代码。
越来越爱D了。
import std.stdio;
import std.string;
import std.conv;
import std.socket;
import std.socketstream;
import std.stream;
import std.regexp;
import std.thread;
import std.c.time;
char[][] g_queue;
int g_task_amount=0;
const char[] homepage="http://mobile.you ...