免费注册 查看新帖 |

ChinaUnix.net

  平台 论坛 博客 文库 频道自动化运维 虚拟化 储存备份 C/C++ PHP MySQL 嵌入式 Linux系统
12下一页
最近访问板块 发新帖
查看: 116620 | 回复: 14

[其他] 【技术盘点】运维利器盘点,细数那些不为知的运维应用技巧? [复制链接]

论坛徽章:
140
2015年亚洲杯之日本
日期:2015-04-28 13:32:012015年亚洲杯之朝鲜
日期:2015-05-06 10:16:442015年亚洲杯之日本
日期:2015-05-06 10:21:342015年亚洲杯纪念徽章
日期:2015-05-13 17:16:442015亚冠之北京国安
日期:2015-05-13 17:18:292015亚冠之鹿岛鹿角
日期:2015-05-13 17:19:062015亚冠之德黑兰石油
日期:2015-05-27 16:47:402015亚冠之塔什干棉农
日期:2015-05-28 15:24:122015亚冠之卡尔希纳萨夫
日期:2015-06-01 13:52:392015亚冠之柏斯波利斯
日期:2015-06-04 17:37:292015亚冠之阿尔纳斯尔
日期:2015-06-16 11:31:202015亚冠之塔什干火车头
日期:2015-06-23 10:12:33
发表于 2018-08-21 17:18 |显示全部楼层
100可用积分
涉及运维日常应用工具都有哪些?他们各有哪些不为人知的巧妙用法?
本期活动我们将安札以下几个分类对运维工具进行盘点:

配置类工具
web管理平台
自动化构建和测试
监控类工具
微服务平台
性能监控工具
响应时间统计工具
免费APM工具
进程监控
日志系统
绘图工具
流量监控
数据库可视化
流控系统
安全检查
PaaS
Troubleshooting
服务发现
持续集成
APP CD
磁盘压测
Memcache
Redis
MySQL 监控
MySQL基准测试
MySQL Proxy
MySQL逻辑备份工具
MySQL物理备份工具
MongoDB压测
数据库管理
大数据管理套件
DevOps Tool

…………

没有涉猎到的欢迎大家留言补充,凡参与此次活动的同学,即可获得100积分的奖励(灌水除外)

活动时间:8月21日-9月15日

CUer福利:
活动结束后,我们将通过评选的方式,5个工作日为评选期限,选票最多的同学,即可获得最具贡献奖(价值500元的社区福包)
欢迎大家积极参与~



论坛徽章:
39
技术图书徽章
日期:2018-08-21 13:30:492015亚冠之首尔
日期:2015-11-04 22:25:43IT运维版块每日发帖之星
日期:2015-08-17 06:20:00寅虎
日期:2014-06-04 16:25:27狮子座
日期:2014-05-12 11:00:00辰龙
日期:2013-12-20 17:07:19射手座
日期:2013-10-24 21:01:23CU十二周年纪念徽章
日期:2013-10-24 15:41:34数据库技术版块每日发帖之星
日期:2015-12-01 06:20:00平安夜徽章
日期:2015-12-26 00:06:30技术图书徽章
日期:2018-08-21 13:30:242016科比退役纪念章
日期:2018-03-07 11:23:33
发表于 2018-08-22 08:28 |显示全部楼层
配置类工具:git,gogs,consul,etcd
自动化构建和测试:selenium,
监控类工具:cacti,nagios,zabbix
微服务平台:spring cloud
性能监控工具:kibana,graphana,prometheus
响应时间统计工具:berserkjs, phantomjs
进程监控:monit,supervisor
日志系统:ELK
绘图工具:echarts,d3,
流量监控:mrtg,cacti
数据库可视化:navicat,sqlyog,
流控系统:panabit
服务发现:consul,
持续集成:jenkins

论坛徽章:
140
2015年亚洲杯之日本
日期:2015-04-28 13:32:012015年亚洲杯之朝鲜
日期:2015-05-06 10:16:442015年亚洲杯之日本
日期:2015-05-06 10:21:342015年亚洲杯纪念徽章
日期:2015-05-13 17:16:442015亚冠之北京国安
日期:2015-05-13 17:18:292015亚冠之鹿岛鹿角
日期:2015-05-13 17:19:062015亚冠之德黑兰石油
日期:2015-05-27 16:47:402015亚冠之塔什干棉农
日期:2015-05-28 15:24:122015亚冠之卡尔希纳萨夫
日期:2015-06-01 13:52:392015亚冠之柏斯波利斯
日期:2015-06-04 17:37:292015亚冠之阿尔纳斯尔
日期:2015-06-16 11:31:202015亚冠之塔什干火车头
日期:2015-06-23 10:12:33
发表于 2018-08-22 09:36 |显示全部楼层
回复 2# laputa73

如果有这些工具的下载链接,那就很赞啦

论坛徽章:
131
操作系统版块每日发帖之星
日期:2016-05-11 17:06:57操作系统版块每日发帖之星
日期:2016-05-11 17:06:57数据库技术版块每日发帖之星
日期:2016-05-11 17:07:05操作系统版块每日发帖之星
日期:2016-05-11 17:06:57操作系统版块每日发帖之星
日期:2016-05-11 17:06:57综合交流区版块每日发帖之星
日期:2016-05-11 17:07:052022北京冬奥会纪念版徽章
日期:2015-08-07 17:10:57IT运维版块每日发帖之星
日期:2016-05-11 17:06:49操作系统版块每日发帖之星
日期:2016-05-11 17:06:57综合交流区版块每日发帖之星
日期:2016-05-11 17:07:05操作系统版块每日发帖之星
日期:2016-05-11 17:06:57程序设计版块每日发帖之星
日期:2016-05-11 17:06:57
发表于 2018-08-24 11:03 |显示全部楼层
大部份都是开源的,网上都可以免费不要手机微信验证码直接下的

论坛徽章:
1
2017金鸡报晓
日期:2017-01-10 15:13:29
发表于 2018-08-26 11:51 |显示全部楼层
本帖最后由 aloki 于 2018-08-29 21:25 编辑

安全检查
·Infection Monkey
这个项目是一个可以攻击你网络的模拟器,它通过模拟真实的攻击者来评估被攻击网络的安全性。它的攻击方式是安全的所以不用担心造成真实的损害,你可以在任何你想运行它来检测一下的时候运行。顺带一提,它的开发者是 GuardiCore Labs ,他们是专门研究网络安全的,有兴趣的朋友可以顺路看看他们的官网:https://www.guardicore.com/labs/
GitHub地址:https://github.com/guardicore/monkey

数据库CI/CD是DevOps流水线中的老大难问题,leansoftX.com团队的小伙伴是用一个简单开源小工具来解决这个问题的。工具开源地址 https://github.com/leansoftX/SQLToolkit

论坛徽章:
1
2017金鸡报晓
日期:2017-01-10 15:13:29
发表于 2018-08-26 22:09 |显示全部楼层
本帖最后由 aloki 于 2018-09-09 21:39 编辑

Bootstrapping:
Kickstart、Cobbler、CloudBoot、rpmbuild/xen、kvm、lxc、Openstack、 Cloudstack、Opennebula、Eucalyplus、RHEV

配置类工具:
Capistrano、Chef、puppet、func、salstack、Ansible、rundeck、CFengine、Rudder

·Chef 是一个系统集成框架,为整个架构提供配置管理功能。

·Puppet,您可以集中管理每一个重要方面,您的系统使用的是跨平台的规范语言,管理所有的单独的元素通常聚集在不同的文件,如用户, CRON作业,和主机一起显然离散元素,如包装,服务和文件。

·Saltstack 可以看做是func的增强版+Puppet的弱化版。使用Python编写。非常好用,快速可以基于EPEL部署。Salt 是一个开源的工具用来管理你的基础架构,可轻松管理成千上万台服务器。

·Ansible 提供一种最简单的方式用于发布、管理和编排计算机系统的工具,你可在数分钟内搞定。Ansible 是一个模型驱动的配置管理器,支持多节点发布、远程任务执行。默认使用 SSH 进行远程连接。无需在被管理节点上安装附加软件,可使用各种编程语言进行扩展。

·RunDeck 是用 Java/Grails 写的开源工具,帮助用户在数据中心或者云环境中自动化各种操作和流程。通过命令行或者web界面,用户可以对任意数量的服务器进行操作,大大降低了对服务器自动化的门槛。

·Cfengine(配置引擎)是一种 Unix 管理工具,其目的是使简单的管理的任务自动化,使困难的任务变得较容易。Cfengine 适用于管理各种环境,从一台主机到上万台主机的机群均可使用。

·Rudder 已改名为Flannel,为每个使用 Kubernetes 的机器提供一个子网。也就是说 Kubernetes 集群中的每个主机都有自己一个完整的子网,例如机器 A 和 B 可以有 10.0.1.0/24 和 10.0.2.0/24 子网。


web管理平台:
CacheCloud(Redis云管理平台)

自动化构建和测试:
Ant、Maven、Selenium、PyUnit、QUnit、JMeter、Gradle、PHPUnit

·Apache Ant是一个将软件编译、测试、部署等步骤联系在一起加以自动化的一个工具,大多用于Java环境中的软件开发。

·Maven 除了以程序构建能力为特色之外,还提供 Ant 所缺少的高级项目管理工具。由于 Maven 的缺省构建规则有较高的可重用性,所以常常用两三行 Maven 构建脚本就可以构建简单的项目,而使用 Ant 则需要十几行。事实上,由于 Maven 的面向项目的方法,许多 Apache Jakarta 项目现在使用 Maven,而且公司项目采用 Maven 的比例在持续增长。

·Selenium (SeleniumHQ)是thoughtworks公司的一个集成测试的强大工具。

·Python单元测试框架(The Python unit testing framework),简称为PyUnit, 是Kent Beck和Erich Gamma这两位聪明的家伙所设计的 JUnit 的Python版本。

·QUnit 是 jQuery 的单元测试框架。

·JMeter 是 Apache 组织的开放源代码项目,它是功能和性能测试的工具,100% 的用 java 实现。

·Gradle 就是可以使用 Groovy 来书写构建脚本的构建系统,支持依赖管理和多项目,类似 Maven,但比之简单轻便。

·PHPUnit 是一个轻量级的PHP测试框架。它是在PHP5下面对JUnit3系列版本的完整移植,是xUnit测试框架家族的一员(它们都基于模式先锋Kent Beck的设计)。


监控类工具:
Cacti、Nagios(Icinga)、Zabbix(模板大全)、基于时间监控前端Grafana、Mtop、MRTG(网络流量监控图形工具)、Monit 、Diamond+Graphite+Grafana、netdata

微服务平台:
OpenShift、Cloud Foundry、Kubernetes、Mesosphere

·OpenShift 是由红帽推出的一款面向开源开发人员开放的平台即服务(PaaS)。 OpenShift通过为开发人员提供在语言、框架和云上的更多的选择,使开发人员可以构建、测试、运行和管理他们的应用。

·Cloud Foundry 是VMware于2011年4月12日推出的业界第一个开源PaaS云平台,它支持多种框架、语言、运行时环境、云平台及应用服务,使开发人员能够在几秒钟内进行应用程序的部署和扩展,无需担心任何基础架构的问题。

·Kubernetes 是来自 Google 云平台的开源容器集群管理系统。基于 Docker 构建一个容器的调度服务。该系统可以自动在一个容器集群中选择一个工作容器供使用。其核心概念是 Container Pod。

·Apache Mesos 是一个集群管理器,提供了有效的、跨分布式应用或框架的资源隔离和共享,可以运行Hadoop、MPI、Hypertable、Spark。

性能监控工具:
dstat(多类型资源统计)、atop(htop/top)、nmon(类Unix系统性能监控)、slabtop(内核slab缓存信息)、sar(性能监控和瓶颈检查)、sysdig(系统进程高级视图)、tcpdump(网络抓包)、iftop(类似top的网络连接工具)、iperf(网络性能工具)、smem)(高级内存报表工具)、collectl(性能监控工具)、TCP优化监控工具tcpdive

响应时间统计工具:
tcprstat

免费APM工具:
mmtrix(见过的最全面的分析工具)、alibench、JAVA性能监控pinpoint、cat、skywalking、UAVStack、Google Opencensus、OpenZipkin

进程监控:
mmonit、Supervisor、frigga、 StrongLoop Process Manager

日志系统:
Logstash、Scribe、Graylog、ELKStack

绘图工具:
RRDtool、Gnuplot

流量监控:
iptraf、nload、ifstat、iftop、ntop、mtr、vnstat

数据库可视化:
zeppelin、metabase、Heka、redash、superset

流控系统:
Panabit、在线数据包分析工具Pcap Analyzer

安全检查:
chrootkit、rkhunter

PaaS:
Cloudify、Cloudfoundry、Openshift、Deis (Docker、CoreOS、Atomic、ubuntu core/Snappy、RancherOS)、DomeOS、Rainbond

Troubleshooting:
Sysdig 、Systemtap、Perf

服务发现:
SmartStack、etcd

持续集成:
Go、Jenkins、Gitlab、facebook代码审查工具phabricator、spinnaker、PHP代码持续集成
工具PHPCI、Codeship、Bamboo、TeamCity、Circle CI、Travis CI

·Go 是 Google 开发的一种编译型,并发型,并具有垃圾回收功能的编程语言。

·Jenkins 的前身是 Hudson,它是一个可扩展的持续集成引擎。


·GitLab是一个利用Ruby on Rails开发的开源应用程序,实现一个自托管的Git项目仓库,可通过Web界面进行访问公开的或者私人项目。

·Codeship对CI / CD有着不同的看法,并提供托管持续集成即服务方案。该工具最初是为Rails开发人员提供持续集成平台而构建的; 当时,他们需要在GitHub上托管自己的代码并将其部署到Heroku。由于极高的人气与旺盛的需求,该公司多年来一直不断扩展以支持其他技术方案。

·Bamboo是Atlassian产品套件的一部分。与其他工具类似,它也提供代码的构建,测试和部署功能并支持多种语言。它与其他与CI周期相关的Atlassian产品(如JIRA和Bitbucket)拥有强大的集成能力/协同效应。


·TeamCity是由JetBrains开发的CI / CD服务器。其提供“开箱即用”的持续集成功能,并允许用户根据自己的需要实现适配。它支持多种语言(Java,.NET,Ruby等),而JetBrains也为其提供多款支持工具与出色的说明文档。


·Circle CI是一款基于云的工具,可自动执行集成和部署任务。它还强调在部署之前对代码中的每项变更进行测试,且使用多种方法——如单元测试、集成测试与功能测试等。该工具支持容器、OSX以及Linux环境,可以在私有云或您自己的数据中心内运行。


·Travis CI是CI / CD生态系统中比较常见的名号之一,最初设定为开源项目,并在多年扩展之后转为闭源项目。它专注于CI工作,通过自动化测试和警报系统提高构建过程的效能。


APP CD:
fastlane、xcode_shell、xctool

磁盘压测:
fio、iozone、IOMeter(win)

Memcache:
Mcrouter(scaling memcached)

Redis:
Dynomite、Twemproxy、codis/SSDB/Aerospike、Redis Cluster

MySQL 监控:
mytop、orzdba、Percona-toolkit、Maatkit、Percona-PMM(包含Grafana)、innotop、myawr、SQL级监控mysqlpcap、拓扑可视化工具

MySQL基准测试:
mysqlsla、sql-bench、Super Smack、Percona's TPCC-MYSQL Tool、sysbench

MySQL Proxy:
SOHU-DBProxy、Mycat、Altas、cobar、58同城Oceanus、kingshard

MySQL逻辑备份工具:
mysqldump、mysqlhotcopy、mydumper、MySQLDumper 、mk-parallel-dump/mk-parallel-restore

MySQL物理备份工具:
Xtrabackup、LVM Snapshot

MongoDB压测:
iibench&sysbench

数据库管理:
数据库迁移工具flyway、表结构对比工具sqllog

大数据管理套件:
Ambari、Cloudera Manger(CDH)

DevOps Toolautoops、OpsManage、opman-djangoCMDB  CMDB(hequan)、CMDB(voilet)、roncoo-cmdb、OpsPlus

故障管理&监控二次开发  
fms


论坛徽章:
39
技术图书徽章
日期:2018-08-21 13:30:492015亚冠之首尔
日期:2015-11-04 22:25:43IT运维版块每日发帖之星
日期:2015-08-17 06:20:00寅虎
日期:2014-06-04 16:25:27狮子座
日期:2014-05-12 11:00:00辰龙
日期:2013-12-20 17:07:19射手座
日期:2013-10-24 21:01:23CU十二周年纪念徽章
日期:2013-10-24 15:41:34数据库技术版块每日发帖之星
日期:2015-12-01 06:20:00平安夜徽章
日期:2015-12-26 00:06:30技术图书徽章
日期:2018-08-21 13:30:242016科比退役纪念章
日期:2018-03-07 11:23:33
发表于 2018-08-27 14:03 |显示全部楼层
够学一辈子的

论坛徽章:
31
IT运维版块每日发帖之星
日期:2016-04-01 06:20:002017金鸡报晓
日期:2017-02-08 10:39:4215-16赛季CBA联赛之同曦
日期:2017-02-11 13:43:1415-16赛季CBA联赛之同曦
日期:2017-05-13 19:24:3815-16赛季CBA联赛之上海
日期:2017-07-19 17:38:4415-16赛季CBA联赛之福建
日期:2017-08-02 09:45:3315-16赛季CBA联赛之山东
日期:2017-08-23 17:34:3615-16赛季CBA联赛之上海
日期:2017-11-14 09:20:5015-16赛季CBA联赛之佛山
日期:2017-12-01 10:26:3815-16赛季CBA联赛之吉林
日期:2018-03-30 12:58:43黑曼巴
日期:2018-07-13 09:53:54ChinaUnix元老
日期:2018-08-03 17:26:00
发表于 2018-08-28 13:11 |显示全部楼层
回复 7# laputa73

真是够学一辈子了。

论坛徽章:
140
2015年亚洲杯之日本
日期:2015-04-28 13:32:012015年亚洲杯之朝鲜
日期:2015-05-06 10:16:442015年亚洲杯之日本
日期:2015-05-06 10:21:342015年亚洲杯纪念徽章
日期:2015-05-13 17:16:442015亚冠之北京国安
日期:2015-05-13 17:18:292015亚冠之鹿岛鹿角
日期:2015-05-13 17:19:062015亚冠之德黑兰石油
日期:2015-05-27 16:47:402015亚冠之塔什干棉农
日期:2015-05-28 15:24:122015亚冠之卡尔希纳萨夫
日期:2015-06-01 13:52:392015亚冠之柏斯波利斯
日期:2015-06-04 17:37:292015亚冠之阿尔纳斯尔
日期:2015-06-16 11:31:202015亚冠之塔什干火车头
日期:2015-06-23 10:12:33
发表于 2018-08-28 15:45 |显示全部楼层
回复 8# fenyun689

哈哈,太繁杂,眼花缭乱

论坛徽章:
53
2015七夕节徽章
日期:2015-08-24 11:17:25ChinaUnix专家徽章
日期:2015-07-20 09:19:30每周论坛发贴之星
日期:2015-07-20 09:19:42ChinaUnix元老
日期:2015-07-20 11:04:38荣誉版主
日期:2015-07-20 11:05:19巳蛇
日期:2015-07-20 11:05:26CU十二周年纪念徽章
日期:2015-07-20 11:05:27IT运维版块每日发帖之星
日期:2015-07-20 11:05:34操作系统版块每日发帖之星
日期:2015-07-20 11:05:36程序设计版块每日发帖之星
日期:2015-07-20 11:05:40数据库技术版块每日发帖之星
日期:2015-07-20 11:05:432015年辞旧岁徽章
日期:2015-07-20 11:05:44
发表于 2018-08-28 20:29 |显示全部楼层
俺是做开发的。是不是用VSS,SVN这样的也算呢。
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

数据风云,十年变迁
DTCC 第十届中国数据库技术大会已启航!

2019年5月8日~5月10日,由IT168旗下ITPUB企业社区平台主办的第十届中国数据库技术大会(DTCC2019),将在北京隆重召开。大会将邀请百余位行业专家,就热点技术话题进行分享,是广大数据领域从业人士的又一次年度盛会和交流平台。与SACC2018类似,本届大会将采用“3+2”模式:3天传统技术演讲+2天深度主题培训。大会不仅提供超100场的主题演讲,还会提供连续2天的深度课程培训,深化数据领域的项目落地实践方案。
DTCC2019,一场值得期待的数据技术盛会,殷切地希望您报名参与!

活动入口>>
  

北京盛拓优讯信息技术有限公司. 版权所有 16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122
中国互联网协会会员  联系我们:huangweiwei@it168.com
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP