- 浏览: 82793 次
- 性别:
- 来自: 北京
最新评论
-
魔鸟科胖呆:
你好,如何才能使用JobCenter呢?
#研发中间件介绍#定时任务调度与管理JobCenter -
yangsong158:
难得的好文,必需支持。
安全基础教育第二季第1集:屡战屡败的找回密码 -
fisherhe:
只能说一句,受益匪浅
#研发解决方案介绍#基于ES的搜索+筛选+排序解决方案 -
houxinyou:
水是有源的,树是有根的,啥事都是有原因的
职场的真相——七句话 -
xiaoZ5919:
关于下厨房的这个事儿,只有close了所有指向该文件的文件描述 ...
被小伙伴们吓哭了:可怕的命令
文章列表
郑昀编著,文字资料来自于张帆、白俊华、刘飞宇以及网络资料 创建于2015/10/21 最后更新于2015/10/29
关键词:Docker,容器,持续集成,持续发布,CI,私有云
本文档适用人员:广义上的技术人员
提纲:
集装箱还是卷挂 ...
郑昀 创建于2015/6/30 最后更新于2015/10/13
关键词:成长,知识体系,学习金字塔,论坛,博客,RCA,分享会
本文档适用人员:技术人员
面试的时候,我会问面试者,你日常如何构建自己的知识体系,如何让自己更高更快更强?多数工程师并没有深入地思考过这个问题,基本上是零敲碎打,随机性大。
本着不能让你白来一趟的精神,好为人师的我会娓娓道来:
第一阶段 认真构建完整的知识体系
十几年前我投身软件行业的时候,光是讲解数据库原理、操作系统、TCP/IP、组网、算法等等基础知识的英文原版书摞起来就等身,认认真真看完,各种上手实践,入行后,读遍 C++ ...
郑昀编纂 基于网络资料 创建于2015/9/7 最后更新于2015/9/7
特别感谢知乎梁川、天顺等知乎网友的精彩答案
关键词:在线支付,POS,第三方支付,清算,银企直连,快捷支付,对公对私,支付宝,对账,App
本文档适用人员: ...
郑昀 基于刘勤红和石雍志的实践报告 创建于2015/8/13 最后更新于2015/8/19
关键词:压测、TCPCopy、仿真测试、实时拷贝流量
本文档适用人员:技术人员
提纲:
为什么要做仿真测试
TCPCopy是如何工作的
实作:仿真测试的拓 ...
郑昀 创建于2015/5/19 最后更新于2015/8/7
关键词: Web安全、系统安全、Web开发、找回密码、重置密码
本文档适用人员:广义的技术人员
提纲:
堡垒是从内部攻破的
员工无知者无畏
运维配置暴露细节
后台不设防
常犯常新,屡战屡败
找回密码
图形和短信验证码
平行权限
MD5等于明文
处处留心皆学问
表单被篡改
App被篡改
跨站请求伪造
0x00. 前言:
第一季培训主要宣导两点,第一,白帽子或黑
郑昀 创建于2015/6/23 最后更新于2015/6/25
关键词:Google Dapper、窝窝Tracing、鹰眼、天机、性能、调用链分析、散点图、瀑布图
本文档适用人员:技术人员
提纲:
Google Dapper是怎么做的
天机里如何从宏观看到微观
0x00, ...
郑昀 创建于2015/2/6 最后更新于2015/7/8
关键词:挖坑、埋雷、踩雷、RCA、对题集
本文档适用人员:技术人员
引子
在讲挖坑之前,先引述台湾作家侯文咏讲的一个真实的故事。
话说上世纪九十年代,为了迎接两岸 ...
郑昀 创建于2014/11/10
关键词:财富观、对题集、一票否决、业务收敛、持续集成、预研、培训、公开演讲、传承
本文档适用人员:研发干部
提纲:
研发财富观——问题和事故都是财富
挤出人力做预研课题
减少痛苦 ...
郑昀 创建于2015/4/10 最后更新于2015/4/28
关键词: Web安全、系统安全、社工、社会工程学、弱密码、github、svn
本文档适用人员:广义的技术人员
提纲:
堡垒是从内部攻破的
员工无知者无畏
运维配置暴露细节
后台 ...
郑昀 基于李丹和刘奎的文档 创建于2014/12/5
关键词:监控、dashboard、PHP、graphite、statsd、whisper、carbon、grafana、influxdb、Python
本文档适用人员:研发和运维员工
一,监控平台要做到什么程度?为什么要自己做?
运 ...
郑昀 最后更新于2014/11/11
关键词:定时任务、调度、监控报警、Job、crontab、Java
本文档适用人员:研发员工
没有JobCenter时我们要面对的:
电商业务链条很长,业务逻辑也较为复杂,需要成百上千种定时任务。窝窝的大多数定时任务其实调用的是本地或远端 Java/PHP/Python Web Service。如果没有一个统一的调度和报警,在集群环境下,我们会:
不知道哪一个定时任务执行失败或超时,不见得能第一时间知道——直到最终用户投诉反馈过来;
要求每一个定时任务输出统一格式的日志供监控系统解析?
对每一位定时 ...
郑昀 创建于2014/10/30 最后更新于2014/10/31
一)选型:Shib+Presto
应用场景:即席查询(Ad-hoc Query)
1.1.即席查询的目标
使用者是产品/运营/销售运营的数据分析师;
要求数据分析师掌握查询SQL查询脚本编写技巧,掌握不同业务的数据存储在不同的数据集市里;
不管他们的计算任务是提交给 数据库 还是 Hadoop,计算时间都可能会很长,不可能在线等待;
所以,
使用者提交了一个计算任务(PIG/SQL/Hive SQL),控制台告知任务已排队,给出大致的计算时间等友情提示, 这些作业的权重较低,
使用者和管理员可以查 ...
郑昀 基于刘金鑫文档 最后更新于2014/12/1
关键词:recsys、推荐评测、Evaluation of Recommender System、piwik、flume、kafka、storm、redis、mysql
本文档适用人员:研发
推荐系统可不仅仅是围着推荐算法打转
先明确一下,我们属于工业领域。很多在学术论文里行之有效的新特奇算法,在工业界是行不通的。当年我们做语义聚合时,分词、聚类、相似性计算、实体词识 别、情感分析等领域最终还都采用了工业界十几年前乃至于几十年前就流行的成熟算法。如果算法不能决定命运,那什么是关键呢?
算 ...
郑昀 最后更新于2014/11/12
关键词:GoogleDapper、分布式跟踪、鹰眼、Tracing、HBase、HDFS、
本文档适用人员:研发
分布式系统为什么需要 Tracing?
先介绍一个概念:分布式跟踪,或分布式追踪。
电商平台由数以百计 ...
郑昀 基于朱传志的设计文档 最后更新于2014/11/11
关键词:异步消息、订阅者集群、可伸缩、Push模式、Pull模式
本文档适用人员:研发
电商系统为什么需要 NotifyServer?
如子柳所说,电商系统『需要两种中间件 ...