【推荐】国外大佬整理的网络工程师资源大全

受其他工程师汇编PHP 资源,kahun 在Github 发起系统管理员相关的开源资源整理。

内容分类包括:备份/ 克隆软件、云计算/ 云存储、协作软件、配置管理、日志管理、监控、项目管理…… 当然也有系统管理员相关书籍。

  • 备份软件

· Amanda  –客户端–服务器模型备份工具
· Bacula  –另一个客户端–服务器模型备份工具
· Backupninja  –轻量级,可扩展的元数据备份系统
· Backuppc  –客户端–服务器模型备份工具和文件共享方案。
· Burp  –网络备份和还原程序
· Duplicity  –使用rsync算法加密的带宽–效率备份
· Lsyncd  –监控一个本地目录树的变化,然后产生一个进程去同步变化。默认使用rsync。
· Rsnapshot  –文件系统快照工具
· SafeKeep  –使用rdiff-backup,集中的,基于pull的备份
· TarSnap  –具有一个开源客户端的安全备份服务
· UrBackup  –另一个客户端–服务器备份系统
· DREBS  – AWS EBS 支持策略的备份脚本

  • 克隆软件

· Clonezilla  –分区和磁盘镜像/克隆程序
· Fog  –另一个计算机克隆解决方案
· Redo Backup  –简单的备份,恢复和还原

  • 云计算

·AppScale –兼容Google App引擎的开源云计算软件
· Archipel  –使用Libvirt管理和监视虚拟机
· CloudStack  –创建,管理和部署基础云服务的云计算软件
· Cobbler  -Cobbler是一个Linux安装服务器,允许快速地构建网络安装环境
· Eucalyptus  –兼容AWS的开源私有云软件
· Mesos  –开发和运行能效高的分布式系统
· OpenNebula  –一个用于系统管理员和研发运维的用户驱动的云管理平台
· OpenStack  –构建私有和开放云的开源软件
· The Foreman  -Foreman是一个用于物理和虚拟服务器的全生命周期管理工具.FOSS.

  • 云业务流程

· BOSH  -IaaS业务流程平台,最初用于部署和管理云计算平台PaaS,但也用于通用的分布式系统。
· Cloudify  –使用Python和YAML编写的开源TOSCA-based云业务流程软件平台。
· Juju  –云业务流程工具用于管理服务,比如charms,YAML配置和部署脚本集
· MCollective  –来自Puppet实验室的管理服务器业务流程和开发的Ruby框架
· Overcast  –在不同的云提供商上部署VMs ,并在任何或所有(VM)上通过SSH并行运行命令行和脚本
· Rundeck  –简单的业务流程工具
· Salt  -Python编写

  • 云存储

· git-annex assistant  –在你的每一个OSX和Linux电脑,Android设备,可移动驱动,NAS电器和云服务上一个同步文件夹
· ownCloud  –提供你的文件的统一访问,通过web,你的电脑和你的移动设备
· Seafile  –另一个开源的云存储解决方案
· SparkleShare  –提供云存储和文件同步服务。它默认使用Git作为存储后端
· Swift  –一个高可用,分布式,最终一致的对象/大数据存储
· Syncthing  –一个用于私有,加密和身份认证数据的开源系统

  • 代码审查

基于Web 的协作式代码审查系统

· Gerrit  –基于Git版本控制,它促进软件开发人员审查源代码修改和批准或拒绝这些变更。
· Review Board  –基于MIT License的可用自由软件

  • 协作软件

协作软件和群件套件

· Citadel/UX  –协同套件(消息和群件)继承于Citadel家族程序
· EGroupware  -PHP编写的群件软件
· Horde Groupware  –基于PHP的协作软件套件,包括邮件,日历,wiki,时间跟踪和文件管理
· Kolab  –另一个群件套件
· SOGo  –协作软件服务器,专注简单性和可伸缩性
· Zimbra  –协作软件套件,包括邮件服务和web客户端

  • 配置管理数据库

配置管理数据库(CMDB)软件

· i-doit  –开源的IT文档管理和CMDB
· iTop  –一个完全开源的,ITIL,基于web的服务管理工具
· Ralph  –用于大型数据中心或较小本地网络的资产管理,DICM和CMDB系统
· Clusto  –帮助跟踪你的库存,在哪,如何连接,同时提供一个和基础架构元素交互的抽象接口

  • 配置管理

配置管理工具

· Ansible  -Python编写的,通过SSH管理节点
· CFEngine  –轻量级代理系统。通过申明语言配置状态。
· Chef  -Rbuy和Erlang编写,使用纯RubyDSL
· Fabric  – Python库和cli工具,为应用程序部署或系统管理任务简化使用SSH。
· Pallet  –通过Clojure DSL进行架构定义,配置和管理
· Puppet  – Ruby编写,使用Puppet声明语言或Rbuy DSL
· Salt  – Python编写
· Slaughter  – Perl编写

  • 持续继承和持续部署

持续集成/ 部署软件

· Buildbot  –基于Python的持续集成工具
· Drone  –构建在Docker,使用YAML文件配置的的持续集成服务器
· GitLab CI  –基于rbuy。他们也提供GitLab用于管理git存储库
· Go  –开源的持续交付服务器
· Jenkins  –一个可扩展的开源持续集成服务器
· Vlad the Deployer  –自动化部署

  • 分布式文件系统

网络分布式文件系统

· Ceph  –分布式对象存储和文件系统
· DRBD  –分布式块设备复制
· LeoFS  –非结构化对象/数据存储和高可用性,分布,最终一致的存储系统。
· GlusterFS  –可扩展,网络附加存储文件系统。
· HDFS  – Java编写的,用于Hadoop框架的分布式、可伸缩、可移植文件系统
· Lustre  –一种并行分布式文件系统,一般用于大规模集群计算。
· MooseFS  –容错、网络分布式文件系统。
· MogileFS  –应用程序级别、网络分布式文件系统。
· OpenAFS  –只读副本和多操作系统支持的分布式网络文件系统
· TahoeLAFS  –安全、分散、容错、点对点分布式数据存储和分布式文件系统。
· XtreemFS  -XtreemFS是一个用于存储需求的容错式分布式文件系统。

  • DNS

DNS 服务器

· Bind  –最广泛使用的域名服务软件
· djbdns  -DNS应用集合,包括tinydns
· Designate  – DNS REST API,支持多种DNS服务器的后端
· dnsmasq  –为小规模网络提供DNS,DHCP和TFTP服务的轻量级服务
· Knot  –高性能,权威的DNS服务器
· NSD  –权威的、高性能的、简单的域名服务器。
· PowerDNS  –具有各种数据存储后端和负载平衡功能的DNS服务器。
· Unbound  –验证、递归和缓存DNS解析器。
· Yadifa  –具有DNSSEC兼容的轻量级的权威域名服务器,支持.eu的顶级域名。

  • 主机控制面板

Web 主机控制面板

· Ajenti  -Linux和BSD控制面板
· Feathur  – VPS供应和管理软件
· ISPConfig  -Linux主机控制面板
· VestaCP  –用于Linux和Nginx的主机面板
· Virtualmin  –基于webmin的Linux控制面板
· ZPanel  -Linux BSD和Windows控制面板

  • IMAP/POP3

IMAP/POP3 邮件服务器

· Courier IMAP/POP3  –快速,可伸缩,企业级IMAP和POP3服务器
· Cyrus IMAP/POP3  –运行在密封服务器上,普通用户不允许登录
· Dovecot  –主要考虑安全而编写的IMAP和POP3服务器
· Qpopper  –一个古老且流行的POP3服务器实现

  • IT 资产管理软件

· GLPI  –带有额外管理接口的信息资源管理器
· OCS Inventory NG  –允许用户清算IT资产
· RackTables  –数据中心和服务器房间资产,比如将硬件资产,网络地址,在货架空间,网络配置文档化。
· Ralph  –针对大型数据中心系统以及小型局域网网络的资产管理、DCIM和CMDB。
· Snipe IT  –资产和许可证管理软件

  • LDAP

LDAP 服务器

· 389 Directory Server  –通过Red Hat部署
· Apache Directory Server  –用Java编写的Apache软件基金会项目
· Fusion Directory  –基于OpenLDAP改善服务和公司目录的管理
· OpenDJ  – OpenDS分支
· OpenDS  –另一个用Java编写的目录服务器
· OpenLDAP  –由OpenLDAP项目开发

  • 日志管理

日志管理工具:收集,解析,可视化

· Elasticsearch  –一个基于Lucene的文档存储,主要用于日志索引、存储和分析。
· Fluentd  –日志收集和发出
· Flume  –分布式日志收集和聚合系统
· Graylog2  –具有报警选项的可插入日志和事件分析服务器
· Heka  –流处理系统,可用于日志聚合
· Kibana  –可视化日志和时间戳数据
· Logstash  –管理事件和日志的工具
· Octopussy  –日志管理解决方案(可视化/报警/报告)

  • 监控软件

· Cacti  –基于Web的网络监控和图形工具
· Cabot  –监控和报警,类似PagerDuty
· check_mk  -Nagios的扩展集合
· Dash  –一个用于GNU/Linux机器的低开销web仪表板监控。
· Icinga  – Nagios分支
· LibreNMS  – Observium分支
· Monit  –管理和监控Unix系统的小型开源工具
· Munin  –网络资源监控工具
· Naemon  –基于Nagios4内核的网络监控工具,具有性能加强和新功能
· Nagios  –计算机系统,网络和基础架构监控软件
· Observium  –服务器和网络设备的SNMP监控,运行在linux
· OMD  –开放的监控分布
·Opsview  –基于Nagios4,Opsview核心,用于小型IT和测试环境
· Riemann  –灵活和快速的事件处理器,允许负责时间和度量分析
· Sensu  –开源的监控框架
· Sentry  –应用监控,事件记录和聚合
· Shinken  –另一个监控框架
· Thruk  –多后台监控的web接口,支持Naemon,Nagios,Icinga和Shinken
· Xymon  –灵感来自Big Brother的网络监控
· Zabbix  – Enterprise-class software for monitoring of networks and applications.
· Zabbix  –监控网络和应用的企业级软件
· Zenoss  –基于Zope的应用,服务器和网络管理平台

  • 度量和度量收集

度量收集和显示软件

· Collectd  –系统统计收集守护进程
· Collectl  –高精度系统性能指标收集工具。
· Dashing  -Ruby gem,允许快速统计仪表板的开发。基于HTML5,允许在数据中心或会议室进行大屏幕显示。
· Diamond  –基于Python的统计收集守护进程
· Ganglia  –基于RRD用于网格和/或集群的服务器的高性能、可伸缩监控设备。兼容Graphite,使用一个单一的收集进程。
· Grafana  –一个Graphite或InfluxDB仪表盘和图形编辑器

  • 开源的可伸缩绘图服务器

· I?nfluxDB  –开源的分布式时间序列数据库,没有外部依赖。
· KairosDB  –快速分布式可扩展的时间序列数据库,OpenTSDB 1. x的分支。
· OpenTSDB  –存储和服务大量的时间序列数据,不丢失粒度。
· RRDtool  –开源企业标准,用于时间序列数据的高性能数据记录和绘图系统
· Statsd  –应用统计监听

  • 网络配置管理工具

· GestióIP  –一个自动的基于web的IPV4/IPV6地址管理工具
· RANCID  –监控网络设备配置和维护历史变更
· rConfig  –另一个网络配置管理工具

  • 时事通讯软件

· DadaMail  -Perl编写的邮件列表管理器
· phpList  -PHP编写的时事通讯管理器

  • NOSQL 数据库

列族

· Apache HBase  – Hadoop数据库,一个分布式的大数据存储
· Cassandra  –分布式数据库管理系统,设计用于处理大量数据跨多个服务器。
· Hypertable  –基于c++的bigtable DBMS,节省通信,可独立或在Hadoop类似的分布式FS上运行。

文档存储

· CouchDB  –易于使用,多主机复制的面向文档的数据库系统。
· ElasticSearch  –基于Java的数据库,受欢迎的日志聚合,和电子邮件归档项目。
· MongoDB  –另一个面向文档的数据库系统
· RavenDB  –具有ACID/事物功能的基于文档的数据库
· RethinkDB  –开源分布式文档存储数据库,关注JSON

· FlockDB  -Twitter分布式,容错图数据库
· Neo4j  –开源图数据库

键值

· LevelDB  -Google高性能键值数据库
· Redis  –支持网络,基于内存,键值,亦可持久化数据库
· Riak  –另一个容错的键值NoSQL数据库

NoSQL服务器比较: http://kkovacs.eu/cassandra-vs-mongodb-vs-couchdb-vs-redis

打包

· f?pm  –万能的多格式包创建器
· omn​​ibus-ruby  –全栈,跨发行版的包管理软件(Ruby)
· packman  –全栈,跨发行版的包管理软件(Python)
· tito  –为git项目构建RPM

队列

· BeanstalkD  – A simple, fast work queue.
· BeanstalkD  –一个简单快速的工作队列
· Gearman  –快速的多语言队列或任务处理平台
· NSQ  –实时分发的消息平台
· RabbitMQ  –健壮的,全功能,跨发行版的队列系统
· ZeroMQ  –轻量级队列系统

  • RDBMS

关系数据库管理系统

· Firebird  –真正的全球开源数据库
· Galera  -Galera MySQL集群是一个易于使用的高可用性解决方案,具有很高的系统正常运行时间,没有数据丢失,为未来的增长提供可伸缩性。
· MariaDB  -MySQL的社区开发分支
· MySQL  –非常流行的RDBMS服务器
· Percona Server  –增强的,可替换MySQL
· PostgreSQL  –对象关系数据库管理系统(ORDBMS)
· PostgreSQL-XL  –基于PostgreSQL的可伸缩开源数据库集群
· SQLite  –自包容,弱服务器,零配置,支持事务的SQL DBS实现库

  • 安全

安全工具

· Denyhosts  –阻止SSH字典攻击和暴力攻击
· Fail2Ban  –扫描日志文件,并对具有恶意行为显示的IP采取措施
· SpamAssassin  –一个强大的和受欢迎的垃圾邮件过滤器,它采用多种检测技术。

  • 服务发现

· Consul  – Consule是伊戈尔服务发现,监控和配置的工具
· Doozerd  – Doozer是一个高可用,完全一致的存储,用于少量非常重要的数据
· ZooKeeper  – ZooKeeper是一个集中的服务,用于维护配置信息,命名,提供分布式同步和组服务

  • SMTP

SMTP 服务器

· Exim  –由剑桥大学开发的消息传输代理(MTA)
· Haraka  –用JavaScirpt编写的高性能,可插入的SMTP服务器
· MailCatcher  -Ruby gem部署一个简单的SMTP MTA网关,接收所有邮件并在web接口显示。对调试和开发有用。
· Maildrop  –开源的一次性邮件服务器,对开发也很有用
· OpenSMTPD  –从OpenBSD项目实现的安全的SMTP服务器
· Postfix  –快速,易于管理和安全的Sendmail替代品
· Qmail  –安全的Sendmail替代品
· Sendmail  –消息传输代理(MTA)

  • 软件容器

操作系统级别的虚拟化

· Bitnami  –为web应用,开发栈和虚拟设备生产开源软件安装器或软件包
· Docker  –给开发者和系统管理员构建,发布和运行分布式应用程序的开放平台
· OpenVZ  -Linux平台基于容器的虚拟化

  • SSH 工具

· autossh  –网络中断后自动复位ssh会话。
· Cluster SSH  –通过一个图形化控制台控制多个xterm窗口。
· DSH  -Dancer的shell/分布式shell-从一个命令行包装执行多个远程shell命令。
· Mosh  –移动shell
· parallel-ssh  –提供并行的OpenSSH版本和相关工具
· SSH Power Tool  –不使用pre-shared钥匙的情况下对多个服务器同时执行命令和上传文件

  • 统计

分析软件

· Analog  –世界上最流行​​ 的日志分析工具
· GoAccess  –在终端运行的开源的实时web日志分析和交互视图
· Piwik  –免费和开源的web分析应用
· Webalizer  – F快速免费的web服务器日志文件分析程序

  • 工单系统

基于web 的工单系统

· Bugzilla  –由Mozilla项目开发和使用过的通用缺陷跟踪和测试工具
· Cerb  –基于商业开源许可的基于组的邮件管理项目
· Flyspray  –使用PHP编写的缺陷跟踪系统
· MantisBT  –另一个基于web的缺陷跟踪系统
· osTicket  –开源的技术支持工单系统
· Otrs  –免费和开源故障通知单系统软件包,公司,组织,或其他实体可以使用它来基于询问分配工单并跟踪进一步的沟通。
· Request Tracker  –使用Perl编写的工单跟踪系统
· TheBugGenie  –开源的工单系统,具有非常完备的用户权限分配

  • 故障排除工具

· mitmproxy  -ython工具,用于拦截,查看和修改网络流量。在排除某些问题是非常重要的。
· Sysdig  –从一个运行的linux实例上捕获系统状态和活动,之后保存,过滤和分析
· Wireshark  –世界上著名的网络协议分析工具

  • 项目管理

基于web 的项目管理和缺陷跟踪系统

· ChiliProject  – Redmine分支
· GitBucket  用Scala编写的GitHub的克隆,单独jar安装
· GitLab  –用Rbuy编写的GitHub的克隆
· Gogs  –用Go编写
· OpenProject  –开源的项目协作项目
· Phabricator  PHP编写
· Redmine  –基于rails在rbuy编写
· The Bug Genie  -PHP编写
· Trac  -python编写

  • 软件版本和版本控制

· Fossil  –分布式版本控制,内建wiki和缺陷跟踪
· Git  –速度很快的分布式版本控制和源代码管理
· GNU Bazaar  –由Cannoicalzi赞助的分布式版本控制系统
· Mercurial  –另一个版本控制
· Subversion  –客户端–服务器版本控制系统

  • 虚拟化

虚拟化软件

· Ganeti  –在KVM和Xen上构建的集群虚拟服务器管理软件
· KVM  -Linux内核虚拟化架构
· oVirt  –管理虚拟机,存储和虚拟网络
· Packer  –从单个源配置为多个平台创建相同的机器镜像
· Vagrant  –创建完整开发环境的工具
· VirtualBox  –来自Oracle公司的虚拟化产品
· Xen  –用于32/64位Intel/AMD(IA 64)和PowerPC 970架构的虚拟机监控器

  • VPN

VPN 软件

· OpenVPN  –使用一个定制的安全密钥交换协议,利用SSL / TLS。
· Pritunl  –基于OpenVPN的方案,易于设置
· SoftEther  –具有高级特性的多协议VPN软件
· sshuttle  –穷人的VPN
· strongSwan  – Linux下完整的IPsec实现
· tinc  –分布式点对点VPN

  • XMPP

XMPP 服务器

· ejabberd  –用Erlang/OTP编写的XMPP短信服务器
· Metronome IM  -Prosody IM分支
· MongooseIM  -ejabberd分支
· Openfire  –实时协作(RTC)服务器
· Prosody IM  -Lua编写的XMPP服务器
· Tigase  -java实现的XMPP服务器

  • Webmail 应用

· Mailpile  –一个先进,快速的web-mail客户端,具有用户友好的加密的私有个性
· Roundcube  –基于浏览器的IMAP客户端,具有应用类似的用户界面

  • Web 服务器

· Apache  –最流行​​ 的web服务器
· Cherokee  –轻量级,高性能的web服务器/反向代理
· Lighttpd  – speed-critical环境下更优化的web服务器
· Nginx  –反向代理,负载均衡器, HTTP缓存和web服务器
· uWSGI  -uWSGI项目,目标在开发一个构建主机服务的全栈

  • Web 性能

· HAProxy  –负载均衡,SSL卸载和性能优化,压缩和通用web路由
· Varnish  –基于HTTP的web应用加速器,关注内存优化和压缩

  • Wiki 软件

· DokuWiki  –使用简单和高度通用的wiki,这并不需要一个数据库。
· Gollum  –一个简单,Git-powered wiki,具有不错的API和本地前端。
· ikiwiki  –一个wiki编译器
· Mediawiki  –加强Wikipedia
· MoinMoin  –一个高级的易用的扩展性强的Wiki引擎,具有大量的社区用户TiddlyWiki  – JavaScript的完整交互wiki
· Ōlelo Wiki  –在Git存储上保存页面的wiki

  • 各种资源,比如书籍、网站和文章,用于提升技能和知识

博客

· Code as Craft  – Etsy的运维博客,大量的技术博客
· DevOpsGuys  – Devops顾问,运维博客
· Rackspace Developers  –具有大量Devops主题的博客

书籍:Sysadmin相关书籍

The Linux Command Line  – William Shotts的书,关于Linux命令行
The Phoenix Project: A Novel about IT, DevOps, and Helping Your Business Win  -DevOps技术如何修复发生在IT组织的问题
The Practice of System and Network Administration  –第一和第二版本描述系统和网络管理的最佳实践,独立于特定平台或技术。
The Visible Ops Handbook: Implementing ITIL in 4 Practical and Auditable Steps  –一个方法论,旨在启动实施控制和过程改进。
UNIX and Linux System Administration Handbook  –从使用的角度走进系统管理

编辑器:开源的代码编辑器

· Atom  –来自Github的文本编辑器
· Brackets  –用于web设计和前端开发的开源代码编辑器
· Eclipse  –用Java编写的IDE,具有可扩展的插件系统
· Geany  -GTK2文本编辑器
· GNU Emacs  –一个可扩展,自定义的文本编辑器
· Haroopad  -Markdown编辑器,具有实时预览
· ICEcoder  –非常棒的代码编辑器,内建常见的web语言
· jotgit  -Git支持的实时协作代码编辑
· Light Table  –下一代代码编辑器
· Lime  –旨在提供一个Sublime Text的开源替代方案
· TextMate  -OS X下的图形文本编辑器
· Vim  –一个高可配置的文本编辑器,用于高效编辑

时事通讯

· Servers for Hackers  –程序员的时事通讯,发现他们需要知道的服务器相关内容。

存储:软件包存储

· Dotdeb  – Debian下LAMP更新包的存储
· Remi  – RHEL/Centos/Fedora下LAMP更新包的存储

网站:有用的系统管理员相关的网站

· Ops School  –全面的计划,将帮助你成为一名运维工程师。
· Digital Ocean Tutorials  –一个非常庞大资源,获得基本的应用程序,工具,甚至是系统管理主题。

 

请看  贡献详情

发表评论

您的电子邮箱地址不会被公开。 必填项已用 * 标注

一条评论 “【推荐】国外大佬整理的网络工程师资源大全”