最新文章列表

网络爬虫基本原理(二) :更新策略与分布式抓取系统结构图解

四、更新策略     互联网是实时变化的,具有很强的动态性。网页更新策略主要是决定何时更新之前已经下载过的页面。常见的更新策略又以下三种:     1.历史参考策略     顾名思义,根据页面以往的历史更新数据,预测该页面未来何时会发生变化。一般来说,是通过泊松过程进行建模进行预测。     2.用户体验策略    尽管搜索引擎针对于某个查询条件能够返回数量巨大的结果,但是用户往往只关注 ...
lwg2001s 评论(0) 有519人浏览 2017-12-18 12:48

elastic-job之简单job

简介 elastic-job是当当网开源的基于zookeeper和quartz实现的分布式作业调度框架。github地址是https://github.com/dangdangdotcom/elastic-job,官方网站是http://elasticjob.io/。elastic-job分elastic-job-lite和elastic-job-cloud,elastic-job-lite定位 ...
234390216 评论(0) 有5543人浏览 2017-12-06 16:58

从零开始搭建ELK+GPE监控预警系统

摘要: 前言 本文可能不会详细记录每一步实现的过程,但一定程度上可以引领小伙伴走向更开阔的视野,串联每个环节,呈现予你不一样的效果。 业务规模 8个平台 100+台服务器 10+个集群分组 微服务600+ 用户N+ 面临问题 随着分布式微服务容器技术的发展,传统监控系统面临许多问题: 容器如何监控 微服务如何监控 集群性能如何进行分析计算 如何管理agent端大量配置脚本 这些都是传统监控所要面临 ...
爱哭的小魔女 评论(0) 有1056人浏览 2017-11-23 16:30

11月22日云栖精选夜读:双11享Go了吗?2017阿里双11在线峰会续写科技盛宴!

摘要: 历届双11,阿里以其前瞻性的视角和创新技术一直致力于为大众递交诚意满满的答卷,大浪淘沙后最终沉淀下来的都是技术的烁金。12月13-14日19:30,阿里巴巴技术协会、云栖社区联合主办并独家直播的《2017阿里双11技术十二讲》将强势来袭。 历届双11,阿里以其前瞻性的视角和创新技术一直致力于为大众递交诚意满满的答卷,大浪淘沙后最终沉淀下来的都是技术的烁金。12月13-14日19:30 ...
爱哭的小魔女 评论(0) 有549人浏览 2017-11-23 16:28

11月16日云栖精选夜读:阿里云 oss JavaScript客户端签名文件上传 vue2.0

热点热议 阿里云 oss JavaScript客户端签名文件上传 vue2.0   作者:烟海之蓝
爱哭的小魔女 评论(0) 有1102人浏览 2017-11-17 15:35

表格存储如何实现高可靠和高可用

系列文章 表格存储如何实现高可靠和高可用表格存储如何实现跨区域的容灾 前言 本文会介绍一款分布式NoSQL如何实现数据高可靠和服务高可用,这是 ...
爱哭的小魔女 评论(0) 有678人浏览 2017-11-16 17:45

11月15日云栖精选夜读:分布式服务框架Dubbo疯狂更新!阿里开源要搞大事情?

最近,开源社区发生了一件大事——使用最广的开源服务框架之一Dubbo低调重启维护,并且3个月连续发布了3个维护版本。这3个维护版本不仅解决了社区关心的一系列问题和需求,还让整个社区的活跃度得到了大幅提升。     热点热议 分布式服务框架Dubbo疯狂更新!阿里开源要搞大事情?   作者:技术小能手  发表于:
爱哭的小魔女 评论(0) 有509人浏览 2017-11-16 17:37

分析比特币网络:一种去中心化、点对点的网络架构

比特币采用了基于互联网的点对点(P2P:peer-to-peer)分布式网络架构。比特币网络可以认为是按照比特币P2P协议运行的一系列节点的集合。本文来分析下比特币网络,了解它跟传统中心化网络的区别,以及比特币网络是如何发现相邻节点的。 中心化网络 为了更好的理解P2P网络,我们先来看看传统的中心化模型: 这是一种典型的星型(“中心化”)结构,我们常见B/S及C/S网络架构就是这种模型, ...
xilibi2003 评论(0) 有291人浏览 2017-11-07 23:07

微服务入门介绍

一,微服务架构背景介绍   随着业务的发展,应用规模不断扩大,系统内部的巨无霸应用越来越多,常规的垂直应用架构已经无法应对复杂业务带来 ...
liuzhengqiu0127 评论(0) 有1013人浏览 2017-10-29 10:24

电商项目架构,高并发,高性能,高可用,高可扩展,分布式,集群

电商项目架构,高并发,高性能,高可用,高可扩展,分布式,集群     36套精品Java高级课,架构课,java8新特性,P2P金融项目,程序设计,功能设计,数据库设计,第三方支付,web安全,高并发,高性能,高可用,分布式,集群,电商,缓存,性能调优,设计模式,项目实战,大型分布式电商项目实战视频教程 视频课程包含:   36套Java精品高级课架构课包含:
tz16870486ping 评论(0) 有28人浏览 2017-10-18 09:39

分布式、微服务、云架构

分布式、微服务、云架构 JAVA语言开发、跨平台、高性能、高可用、安全、服务化、模块化、組件化、驱动式开发模式 commonservice eurekaNetflix 云端服务发现,一个基于 REST 的服务,用于定位服务,以实现云端中间层服务发现和故障转移。 commonservice configSpring
云米嘟 评论(1) 有141人浏览 2017-09-27 12:39

分布式java应用

 大型应用,通常会拆分为多个子系统来实现。       对Java来说,这些子系统可能部署在同一台机器的多个不同的JVM中,也可能部署在不同的机器上,但这些子系统又不是完全独立的,要相互通信来共同实现业务功能。       对于此类Java应用,我们称之为分布式Java应用。            对于分布式Java应用,通常有2种方法来实现:        1. 基于消息方式实现 ...
vision_xie 评论(0) 有533人浏览 2017-08-17 17:24

技术文章 | 机器学习分析工具将如何驱动物联网

  根据ABI Research近期的一份报告,机器学习分析工具将减少IoT的复杂性,并提高IoT的采用。该公司预计,随着机器学习即服务(MLaaS)模型的发展,机 ...
Gamay 评论(0) 有24人浏览 2017-08-11 15:13

技术文章|号称史上最晦涩的算法Paxos_如何变得平易近人?

本文来源于阿里云-云栖社区,原文点击这里。   Paxos(分布式一致性算法)作为分布式系统的基石,一直都是计算机系统工程领域的热门话题。Paxos号称是最难理解的算法,其实真的这么困难么? “X-Paxos”是阿里巴巴数据库团队面向高性能、全球部署以及阿里业务特征等需求,实现的一个高性能分布式强一致的Paxos独立基础库。X-Paxos具体又有哪些优势,能给现有的系统带来什么收益呢? 背 ...
Gamay 评论(0) 有19人浏览 2017-08-04 16:03

分布式服务Dubbo从入门到"精通"之Schema实现

  了解更多技术文章请点击原文链接   前言   尽管使用了Dubbo许久,但其实对于其了解还是九牛一毛,上个月通读了Netty实战(粗略的了解),突然有 ...
Gamay 评论(0) 有11人浏览 2017-07-11 14:39

分布式服务Dubbo从入门到"精通"之序言

了解更多技术文章请点击原文链接   最近微服务流行的一逼,大家一窝蜂的涌向spring_clould,很多不明所以然的朋友又是一顿各种配置,总算把spring_clould的一系列组件搭建好了。 不知那天,可能又会出来一个spring_sky,spring_rain,spring_wind之系列。然,大家就一直跟着屁股跑吧。 其实这里想跟大家说的是,技术框架是永远都学不完的。 如果大家不 ...
Gamay 评论(0) 有13人浏览 2017-07-11 14:34

转发一篇 分布式事务介绍

REST微服务的分布式事务实现-分布式系统、事务以及JTA介绍
robustwang 评论(0) 有585人浏览 2017-07-07 10:29

最近博客热门TAG

Java(141741) C(73643) C++(68602) SQL(64557) C#(59604) XML(59131) HTML(59042) JavaScript(54916) .net(54782) Web(54511) 工作(54116) Linux(50906) Oracle(49861) 应用服务器(43285) Spring(40811) 编程(39452) Windows(39380) JSP(37540) MySQL(37266) 数据结构(36420)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics