AWS 的几个”坑” 这篇文章简单说说最近搭建 aws 基础环境遇到的几个”坑”，有兴趣的可以参考下呃。 1. 默认公网IP 在机器重启之后会变化，如果想保持固定，可以申请一个 弹性IP 与实例绑定。 2. Classic 网络里 内网IP 在重启之后是有可能变化的，VPC 则不会。 3. /etc/resolv.conf 文件里面的 nameserver 重启之后会被重置(重置成aws内部的DNS IP)，如果想固定，可以修改 /etc/rc...

Continue reading »

由于我们工作室的很多运维工具都部署在自己的 IDC 里面，比如 Puppet、YUM 源、NTP 服务器、Nginx 日志分析工具 等，如果不打通 AWS 到 IDC 的内网，这些工具都要在 AWS 搭建一份，太麻烦，so do it . 一开始我想使用 AWS 的「VPN连接」服务(文档在 这里 )来做，但是要求 IDC 端是 cisco 路由器等硬件设备，我们 IDC 没有这些设备，所以只能找机器来做了。   1. 机器是 Centos6，...

Continue reading »

一客户的需求是如何在创建实例的时候不自动生成公网IP(为了安全)，但是实例也能访问外网(有访问外网的需求) aws 提供四种网络架构，分别是 VPC with a Single Public Subnet VPC with Public and Private Subnets VPC with Public and Private Subnets and Hardware VPN Access VPC with a Private Subnet Only and Hardware VPN Access   先说下 公网 和 私网，公网可以直接访问...

Continue reading »

月底的时候，当时有做一个基于aws的高性能Web Server项目的意向。就开始对aws S3以及EC2进行了一定的调研，并做了一些测试。后来项目后延，这个事情暂时搁置。5月中旬左右将会正式开展，想了一下，得把以前一些有用的东西重拾一 下，稍微搭建一个小系统，尽量缩短正式开始时候的工期。 1.AWS相关服务 亚马逊的云服务，应该是目前提供的云服务最完备、接口最好用的地方。但是在国...

Continue reading »

EMR是Amazon亚马逊云计算平台提供的一项服务，用户可以在此平台使用亚马逊强大的计算资源执行Map Reduce程序。由于Map Reduce很多情况下都是做的海量数据文本统计类的并行计算任务，需要耗费很多时间，使用云计算则可以大大加快执行速度。 EMR建立在Amazon S3和Amazon EC2的 基础上。用户提交一个map程序和一个reduce程序，同时提交需要处理的数据文件作为输入。这些都上传到Amazon S3...

Continue reading »