devops资料大全

备份

备份软件

• Amanda -客户端-服务器模型备份工具
• Bacula - 另一个客户端-服务器模型备份工具
• Backupninja -轻量级，可扩展的元数据备份系统
• Backuppc -客户端-服务器模型备份工具和文件共享方案。
• Burp -网络备份和还原程序
• Duplicity -使用rsync算法加密的带宽-效率备份
• Lsyncd -监控一个本地目录树的变化,然后产生一个进程去同步变化。默认使用rsync。
• Rsnapshot -文件系统快照工具
• SafeKeep -使用rdiff-backup，集中的，基于pull的备份
• TarSnap - 具有一个开源客户端的安全备份服务
• UrBackup -另一个客户端-服务器备份系统
• DREBS - AWS EBS支持策略的备份脚本

克隆

克隆软件

• Clonezilla -分区和磁盘镜像/克隆程序
• Fog - 另一个计算机克隆解决方案
• Redo Backup -简单的备份，恢复和还原

云计算

• AppScale – 兼容Google App引擎的开源云计算软件.
• Archipel -使用Libvirt管理和监视虚拟机
• CloudStack -创建，管理和部署基础云服务的云计算软件
• Cobbler -Cobbler是一个Linux安装服务器，允许快速地构建网络安装环境
• Eucalyptus -兼容AWS的开源私有云软件
• Mesos -开发和运行能效高的分布式系统。
• OpenNebula -一个用于系统管理员和研发运维的用户驱动的云管理平台
• OpenStack -构建私有和开放云的开源软件
• The Foreman -Foreman是一个用于物理和虚拟服务器的全生命周期管理工具.FOSS.

云业务流程

• BOSH -IaaS业务流程平台，最初用于部署和管理云计算平台PaaS,但也用于通用的分布式系统。
• Cloudify -使用Python和YAML编写的开源TOSCA-based云业务流程软件平台。
• Juju -云业务流程工具用于管理服务，比如charms，YAML配置和部署脚本集
• MCollective -来自Puppet实验室的管理服务器业务流程和开发的Ruby框架
• Overcast -在不同的云提供商上部署VMs，并在任何或所有（VM）上通过SSH并行运行命令行和脚本
• Rundeck - 简单的业务流程工具
• Salt -Python编写

云存储

• git-annex assistant -在你的每一个OSX和Linux电脑，Android设备，可移动驱动，NAS电器和云服务上一个同步文件夹
• ownCloud -提供你的文件的统一访问，通过web，你的电脑和你的移动设备
• Seafile -另一个开源的云存储解决方案
• SparkleShare -提供云存储和文件同步服务。它默认使用Git作为存储后端
• Swift -一个高可用，分布式，最终一致的对象/大数据存储
• Syncthing -一个用于私有，加密和身份认证数据的开源系统

代码审查

基于Web的协作式代码审查系统

• Gerrit -基于Git版本控制，它促进软件开发人员审查源代码修改和批准或拒绝这些变更。
• Review Board - 基于MIT License的可用自由软件

协作软件

协作软件和群件套件

• Citadel/UX -协同套件（消息和群件）继承于Citadel家族程序
• EGroupware -PHP编写的群件软件
• Horde Groupware -基于PHP的协作软件套件，包括邮件，日历，wiki，时间跟踪和文件管理
• Kolab - 另一个群件套件
• SOGo - 协作软件服务器，专注简单性和可伸缩性
• Zimbra -协作软件套件，包括邮件服务和web客户端

配置管理数据库

配置管理数据库（CMDB）软件

• i-doit - 开源的IT文档管理和CMDB
• iTop -一个完全开源的，ITIL,基于web的服务管理工具
• Ralph -用于大型数据中心或较小本地网络的资产管理，DICM和CMDB系统
• Clusto -帮助跟踪你的库存，在哪，如何连接，同时提供一个和基础架构元素交互的抽象接口

配置管理

配置管理工具

• Ansible -Python编写的，通过SSH管理节点
• CFEngine -轻量级代理系统。通过申明语言配置状态。
• Chef -Rbuy和Erlang编写，使用纯RubyDSL
• Fabric - Python库和cli工具，为应用程序部署或系统管理任务简化使用SSH。
• Pallet -通过Clojure DSL进行架构定义，配置和管理
• Puppet - Ruby编写，使用Puppet声明语言或Rbuy DSL
• Salt - Python编写
• Slaughter - Perl编写

持续继承和持续部署

持续集成/部署软件

• Buildbot - 基于Python的持续集成工具
• Drone - 构建在Docker，使用YAML文件配置的的持续集成服务器
• GitLab CI -基于rbuy。他们也提供GitLab用于管理git存储库
• Go - 开源的持续交付服务器
• Jenkins - 一个可扩展的开源持续集成服务器
• Vlad the Deployer -自动化部署

分布式文件系统

网络分布式文件系统

• Ceph -分布式对象存储和文件系统
• DRBD -分布式块设备复制
• LeoFS -非结构化对象/数据存储和高可用性,分布,最终一致的存储系统。

• GlusterFS - 可扩展，网络附加存储文件系统。
• HDFS - Java编写的，用于Hadoop框架的分布式、可伸缩、可移植文件系统
• Lustre -一种并行分布式文件系统,一般用于大规模集群计算。
• MooseFS - 容错、网络分布式文件系统。
• MogileFS -应用程序级别、网络分布式文件系统。

• OpenAFS -只读副本和多操作系统支持的分布式网络文件系统

• TahoeLAFS -安全、分散、容错、点对点分布式数据存储和分布式文件系统。
• XtreemFS -XtreemFS是一个用于存储需求的容错式分布式文件系统。

DNS

DNS服务器

• Bind -最广泛使用的域名服务软件
• djbdns -DNS应用集合，包括tinydns
• Designate - DNS REST API,支持多种DNS服务器的后端
• dnsmasq -为小规模网络提供DNS,DHCP和TFTP服务的轻量级服务
• Knot - 高性能，权威的DNS服务器
• NSD - 权威的、高性能的、简单的域名服务器。
• PowerDNS -具有各种数据存储后端和负载平衡功能的DNS服务器。
• Unbound - 验证、递归和缓存DNS解析器。
• Yadifa - 具有DNSSEC兼容的轻量级的权威域名服务器，支持.eu的顶级域名。

主机控制面板

Web主机控制面板

• Ajenti -Linux和BSD控制面板
• Feathur - VPS供应和管理软件
• ISPConfig -Linux主机控制面板
• VestaCP -用于Linux和Nginx的主机面板
• Virtualmin -基于webmin的Linux控制面板
• ZPanel -Linux BSD和Windows控制面板

IMAP/POP3

IMAP/POP3邮件服务器

• Courier IMAP/POP3 -快速，可伸缩，企业级IMAP和POP3服务器
• Cyrus IMAP/POP3 -运行在密封服务器上,普通用户不允许登录。
• Dovecot -主要考虑安全而编写的IMAP和POP3服务器
• Qpopper - 一个古老且流行的POP3服务器实现

IT资产管理

IT资产管理软件

• GLPI -带有额外管理接口的信息资源管理器
• OCS Inventory NG -允许用户清算IT资产
• RackTables -数据中心和服务器房间资产，比如将硬件资产,网络地址,在货架空间,网络配置文档化。
• Ralph - 针对大型数据中心系统以及小型局域网网络的资产管理、DCIM和CMDB。
• Snipe IT -资产和许可证管理软件

LDAP

LDAP服务器

• 389 Directory Server - 通过Red Hat部署
• Apache Directory Server -用Java编写的Apache软件基金会项目
• Fusion Directory -基于OpenLDAP改善服务和公司目录的管理
• OpenDJ - OpenDS分支
• OpenDS -另一个用Java编写的目录服务器
• OpenLDAP -由OpenLDAP项目开发

日志管理

日志管理工具：收集，解析，可视化

• Elasticsearch - 一个基于Lucene的文档存储，主要用于日志索引、存储和分析。
• Fluentd - 日志收集和发出
• Flume -分布式日志收集和聚合系统
• Graylog2 -具有报警选项的可插入日志和事件分析服务器
• Heka -流处理系统，可用于日志聚合
• Kibana - 可视化日志和时间戳数据
• Logstash -管理事件和日志的工具
• Octopussy -日志管理解决方案（可视化/报警/报告）

监控

监控软件

• Cacti -基于Web的网络监控和图形工具
• Cabot - 监控和报警，类似PagerDuty
• check_mk -Nagios的扩展集合
• Dash -一个用于GNU/Linux机器的低开销web仪表板监控。
• Icinga - Nagios分支
• LibreNMS - Observium分支
• Monit - 管理和监控Unix系统的小型开源工具
• Munin -网络资源监控工具
• Naemon -基于Nagios4内核的网络监控工具，具有性能加强和新功能
• Nagios -计算机系统，网络和基础架构监控软件
• Observium -服务器和网络设备的SNMP监控，运行在linux
• OMD -开放的监控分布
• Opsview -基于Nagios4，Opsview核心，用于小型IT和测试环境
• Riemann -灵活和快速的事件处理器，允许负责时间和度量分析
• Sensu -开源的监控框架
• Sentry - 应用监控，事件记录和聚合
• Shinken - 另一个监控框架
• Thruk - 多后台监控的web接口，支持Naemon，Nagios，Icinga和Shinken
• Xymon -灵感来自Big Brother的网络监控
• Zabbix - Enterprise-class software for monitoring of networks and applications.
• Zabbix - 监控网络和应用的企业级软件
• Zenoss -基于Zope的应用，服务器和网络管理平台

度量和度量收集

度量收集和显示软件

• Collectd -系统统计收集守护进程
• Collectl -高精度系统性能指标收集工具。
• Dashing -Ruby gem,允许快速统计仪表板的开发。基于HTML5，允许在数据中心或会议室进行大屏幕显示。
• Diamond -基于Python的统计收集守护进程
• Ganglia - 基于RRD用于网格和/或集群的服务器的高性能、可伸缩监控设备。兼容Graphite，使用一个单一的收集进程。
• Grafana -一个Graphite或InfluxDB仪表盘和图形编辑器
• 开源的可伸缩绘图服务器
• InfluxDB -开源的分布式时间序列数据库，没有外部依赖。
• KairosDB -快速分布式可扩展的时间序列数据库,OpenTSDB 1. x的分支。
• OpenTSDB -存储和服务大量的时间序列数据，不丢失粒度。
• RRDtool - 开源企业标准，用于时间序列数据的高性能数据记录和绘图系统
• Statsd -应用统计监听

网络配置管理

网络配置管理工具

• GestióIP -一个自动的基于web的IPV4/IPV6地址管理工具
• RANCID -监控网络设备配置和维护历史变更
• rConfig -另一个网络配置管理工具

时事通讯

时事通讯软件

• DadaMail -Perl编写的邮件列表管理器
• phpList -PHP编写的时事通讯管理器

NOSQL

NOSQL数据库

• 列族
  • Apache HBase - Hadoop数据库，一个分布式的大数据存储
  • Cassandra -分布式数据库管理系统，设计用于处理大量数据跨多个服务器。
  • Hypertable -基于c++的bigtable DBMS,节省通信，可独立或在Hadoop类似的分布式FS上运行。
• 文档存储
  • CouchDB -易于使用,多主机复制的面向文档的数据库系统。
  • ElasticSearch - 基于Java的数据库,受欢迎的日志聚合,和电子邮件归档项目。
  • MongoDB - 另一个面向文档的数据库系统
  • RavenDB - 具有ACID/事物功能的基于文档的数据库
  • RethinkDB -开源分布式文档存储数据库，关注JSON
• 图
  • FlockDB -Twitter分布式，容错图数据库
  • Neo4j - 开源图数据库
• 键值
  • LevelDB -Google高性能键值数据库
  • Redis - 支持网络，基于内存，键值，亦可持久化数据库
  • Riak -另一个容错的键值NoSQL数据库

NoSQL服务器比较: http://kkovacs.eu/cassandra-vs-mongodb-vs-couchdb-vs-redis

打包

• fpm - 万能的多格式包创建器
• omnibus-ruby - 全栈，跨发行版的包管理软件（Ruby）
• packman -全栈，跨发行版的包管理软件（Python）
• tito - 为git项目构建RPM

队列

• BeanstalkD - A simple, fast work queue.
• BeanstalkD - 一个简单快速的工作队列
• Gearman -快速的多语言队列或任务处理平台
• NSQ - 实时分发的消息平台
• RabbitMQ -健壮的，全功能，跨发行版的队列系统
• ZeroMQ -轻量级队列系统

RDBMS

关系数据库管理系统

• Firebird - 真正的全球开源数据库
• Galera -Galera MySQL集群是一个易于使用的高可用性解决方案，具有很高的系统正常运行时间,没有数据丢失,为未来的增长提供可伸缩性。
• MariaDB -MySQL的社区开发分支
• MySQL - 非常流行的RDBMS服务器
• Percona Server -增强的，可替换MySQL
• PostgreSQL - 对象关系数据库管理系统（ORDBMS)
• PostgreSQL-XL - 基于PostgreSQL的可伸缩开源数据库集群
• SQLite -自包容，弱服务器，零配置，支持事务的SQL DBS实现库

安全

安全工具

• Denyhosts -阻止SSH字典攻击和暴力攻击
• Fail2Ban - 扫描日志文件，并对具有恶意行为显示的IP采取措施
• SpamAssassin -一个强大的和受欢迎的垃圾邮件过滤器，它采用多种检测技术。

服务发现

• Consul - Consule是伊戈尔服务发现，监控和配置的工具
• Doozerd - Doozer是一个高可用，完全一致的存储，用于少量非常重要的数据
• ZooKeeper - ZooKeeper是一个集中的服务，用于维护配置信息，命名，提供分布式同步和组服务

SMTP

SMTP服务器

• Exim -由剑桥大学开发的消息传输代理（MTA)
• Haraka - 用JavaScirpt编写的高性能，可插入的SMTP服务器
• MailCatcher -Ruby gem部署一个简单的SMTP MTA网关，接收所有邮件并在web接口显示。对调试和开发有用。
• Maildrop -开源的一次性邮件服务器，对开发也很有用
• OpenSMTPD -从OpenBSD项目实现的安全的SMTP服务器
• Postfix - 快速，易于管理和安全的Sendmail替代品
• Qmail - 安全的Sendmail替代品
• Sendmail -消息传输代理（MTA)

软件容器

操作系统级别的虚拟化

• Bitnami -为web应用，开发栈和虚拟设备生产开源软件安装器或软件包
• Docker - 给开发者和系统管理员构建，发布和运行分布式应用程序的开放平台
• OpenVZ -Linux平台基于容器的虚拟化

SSH

SSH工具

• autossh -网络中断后自动复位ssh会话。
• Cluster SSH -通过一个图形化控制台控制多个xterm窗口。
• DSH -Dancer的shell/分布式shell-从一个命令行包装执行多个远程shell命令。
• Mosh - 移动shell
• parallel-ssh -提供并行的OpenSSH版本和相关工具
• SSH Power Tool -不使用pre-shared钥匙的情况下对多个服务器同时执行命令和上传文件

统计

分析软件

• Analog - 世界上最流行的日志分析工具
• GoAccess -在终端运行的开源的实时web日志分析和交互视图
• Piwik -免费和开源的web分析应用
• Webalizer - F快速免费的web服务器日志文件分析程序

工单系统

基于web的工单系统

• Bugzilla -由Mozilla项目开发和使用过的通用缺陷跟踪和测试工具
• Cerb - 基于商业开源许可的基于组的邮件管理项目
• Flyspray - 使用PHP编写的缺陷跟踪系统
• MantisBT -另一个基于web的缺陷跟踪系统
• osTicket -开源的技术支持工单系统
• Otrs -免费和开源故障通知单系统软件包,公司,组织,或其他实体可以使用它来基于询问分配工单并跟踪进一步的沟通。
• Request Tracker -使用Perl编写的工单跟踪系统
• TheBugGenie -开源的工单系统，具有非常完备的用户权限分配

故障排除

故障排除工具

• mitmproxy -ython工具，用于拦截,查看和修改网络流量。在排除某些问题是非常重要的。
• Sysdig -从一个运行的linux实例上捕获系统状态和活动，之后保存，过滤和分析
• Wireshark -世界上著名的网络协议分析工具

项目管理

基于web的项目管理和缺陷跟踪系统

• ChiliProject - Redmine分支
• GitBucket 用Scala编写的GitHub的克隆，单独jar安装
• GitLab -用Rbuy编写的GitHub的克隆
• Gogs -用Go编写
• OpenProject -开源的项目协作项目
• Phabricator PHP编写
• Redmine - 基于rails在rbuy编写
• The Bug Genie -PHP编写
• Trac -python编写

版本控制

软件版本和版本控制

• Fossil -分布式版本控制，内建wiki和缺陷跟踪
• Git -速度很快的分布式版本控制和源代码管理
• GNU Bazaar -由Cannoicalzi赞助的分布式版本控制系统
• Mercurial -另一个版本控制
• Subversion -客户端-服务器版本控制系统

虚拟化

虚拟化软件

• Ganeti -在KVM和Xen上构建的集群虚拟服务器管理软件
• KVM -Linux内核虚拟化架构
• oVirt -管理虚拟机，存储和虚拟网络
• Packer - 从单个源配置为多个平台创建相同的机器镜像
• Vagrant - 创建完整开发环境的工具
• VirtualBox -来自Oracle公司的虚拟化产品
• Xen -用于32/64位Intel/AMD(IA 64）和PowerPC 970架构的虚拟机监控器

VPN

VPN软件

• OpenVPN -使用一个定制的安全密钥交换协议,利用SSL / TLS。
• Pritunl -基于OpenVPN的方案，易于设置
• SoftEther - 具有高级特性的多协议VPN软件
• sshuttle -穷人的VPN
• strongSwan - Linux下完整的IPsec实现
• tinc -分布式点对点VPN

XMPP

XMPP服务器

• ejabberd -用Erlang/OTP编写的XMPP短信服务器
• Metronome IM -Prosody IM分支
• MongooseIM -ejabberd分支
• Openfire -实时协作（RTC）服务器
• Prosody IM -Lua编写的XMPP服务器
• Tigase -java实现的XMPP服务器

Webmails

Webmail应用

• Mailpile - A modern, fast web-mail client with user-friendly encryption and privacy features.
• Mailpile - 一个先进，快速的web-mail客户端，具有用户友好的加密的私有个性
• Roundcube - Browser-based IMAP client with an application-like user interface.
• Roundcube - 基于浏览器的IMAP客户端，具有应用类似的用户界面

Web

Web服务器

• Apache -最流行的web服务器
• Cherokee -轻量级，高性能的web服务器/反向代理
• Lighttpd - speed-critical环境下更优化的web服务器
• Nginx -反向代理，负载均衡器，HTTP缓存和web服务器
• uWSGI -uWSGI项目，目标在开发一个构建主机服务的全栈

Web性能

• HAProxy - 负载均衡，SSL卸载和性能优化，压缩和通用web路由
• Varnish -基于HTTP的web应用加速器，关注内存优化和压缩

Wikis

Wiki软件

• DokuWiki -使用简单和高度通用的wiki,这并不需要一个数据库。
• Gollum - 一个简单,Git-powered wiki，具有不错的API和本地前端。
• ikiwiki -一个wiki编译器
• Mediawiki -加强Wikipedia
• MoinMoin -一个高级的易用的扩展性强的Wiki引擎，具有大量的社区用户TiddlyWiki - JavaScript的完整交互wiki
  • Ōlelo Wiki - 在Git存储上保存页面的wiki

资源

各种资源，比如书籍，网站和文章，用于提升技能和知识

博客

• Code as Craft - Etsy的运维博客，大量的技术博客
• DevOpsGuys - Devops顾问，运维博客
• Rackspace Developers -具有大量Devops主题的博客

书籍

Sysadmin相关书籍

• The Linux Command Line - William Shotts的书，关于Linux命令行
• The Phoenix Project: A Novel about IT, DevOps, and Helping Your Business Win -DevOps技术如何修复发生在IT组织的问题
• The Practice of System and Network Administration - 第一和第二版本描述系统和网络管理的最佳实践,独立于特定平台或技术。
• The Visible Ops Handbook: Implementing ITIL in 4 Practical and Auditable Steps -一个方法论,旨在启动实施控制和过程改进。
• UNIX and Linux System Administration Handbook - 从使用的角度走进系统管理

编辑器

开源的代码编辑器

• Atom -来自Github的文本编辑器
• Brackets - 用于web设计和前端开发的开源代码编辑器
• Eclipse - 用Java编写的IDE，具有可扩展的插件系统
• Geany -GTK2文本编辑器
• GNU Emacs -一个可扩展，自定义的文本编辑器
• Haroopad -Markdown编辑器，具有实时预览
• ICEcoder -非常棒的代码编辑器，内建常见的web语言
• jotgit -Git支持的实时协作代码编辑
• Light Table - 下一代代码编辑器
• Lime -旨在提供一个Sublime Text的开源替代方案
• TextMate -OS X下的图形文本编辑器
• Vim -一个高可配置的文本编辑器，用于高效编辑

时事通讯

• Servers for Hackers - 程序员的时事通讯，发现他们需要知道的服务器相关内容。

存储

软件包存储

• Dotdeb - Debian下LAMP更新包的存储
• Remi - RHEL/Centos/Fedora下LAMP更新包的存储

网站

有用的系统管理员相关的网站

• Ops School - 全面的计划,将帮助你成为一名运维工程师。
• Digital Ocean Tutorials - 一个非常庞大资源，获得基本的应用程序，工具,甚至是系统管理主题。