沸点大火－blog

在大数据采集平台中，有这样一个特殊的平台，它的各部分均是可定制化的，你可以通过简单的配置，将日志收集到任何地方。这是一个目前非常火热的大数据采集平台，被众多企业所应用，所以本期就为大家介绍这个特殊的平台——Fluentd。

什么是Fluentd？

Fluentd是一个开源的数据收集器，专为处理数据流设计，有点像 syslogd ，但是使用JSON作为数据格式。它采用了插件式的架构，具有高可扩展性高可用性，同时还实现了高可靠的信息转发。 （更多…）

下载Google的身份验证模块：

# wget https://google-authenticator.googlecode.com/files/libpam-google-authenticator-1.0-source.tar.bz2

解压缩并编译安装：

# tar xvf libpam-google-authenticator-1.0-source.tar.bz2 
# cd libpam-google-authenticator-1.0
# make
# make install

而后，google的验证模块就会被复制到/lib64/security目录下，而用来生成密钥的可执行程序：google-authenticator，则复制到/usr/local/bin目录下，方便调用。 （更多…）

1. 运维工作分类

主要工作包以下几方面：

1.1. 安全设备运维

包括安全设备的配置、备份、日常巡检等工作。这部分工作很多甲方因为人力的原因很难做起来，如防火墙、入侵检测系统、堡垒机、企业杀毒软件等安全设备的日常配置、日志审计，可能日常的配置因为业务需求的原因能及时做支持，安全设备日志审计因为各种原因很难做成。 （更多…）

背景

SRE（Site Reliability Engineering）是Google于2003年提出的概念，将软件研发引入运维工作。现在渐渐已经成为各大互联网公司技术团队的标配。

美团点评作为综合性多业务的互联网+生活服务平台，覆盖“吃住行游购娱”各个领域，SRE就会面临一些特殊的挑战。

1. 业务量的飞速增长，机器数量剧增，导致人工维护成本增大；而交易额的增长，对SLA的要求也不断提高。与此同时，一些新业务会面临大流量冲击，资源调度的挑战也随之增大。
2. 业务类型复杂多样、业务模型千差万别，对应的技术方案也多种多样，因此SRE的整体维护成本大大提高。

根据上述挑战，我们需要制定相应的解决策略，策略原则主要聚焦在以下三点：

1. 稳定，这也是SRE工作的核心。
2. 效率，包括云主机交付效率，也包括我们自己内部的一些系统效率。
3. 成本，用最少的机器提供最优质的服务。

在此原则的基础上，我们开始了对SRE进行的一系列改进。 （更多…）