Amazon Web Services (AWS) представляет собой безопасную платформу облачных сервисов, которая предоставляет вычислительные мощности, доступ к хранилищам, базам данных, услугам доставки контента и другим функциональным возможностям, помогающим в масштабировании и развитии бизнеса.

Клево звучит =) А на практике очень страшно. Сервисов там уйма. Что, зачем, для чего и как??? вот вам небольшая шпаргалка по сервисам Amazon.

Сервисы "Run an App:

EC2
Должен называться Amazon Virtual Servers	Сфера применения Хостуйте вещи, которые вы считаете компьютерами.	Похож на VPS, предоставляемые Linode, DigitalOcean и Rackspace
IAM
Должен называться Users, Keys and Certs	Сфера применения Настраивайте пользователей, добавляйте новые ключи AWS Keys и сертификаты.
S3
Должен называться Amazon Unlimited FTP Server	Сфера применения Храните фотографии и прочие материалы для сайтов. Храните бекапы и файлы в общем доступе. Храните статические сайты. Кстати, многие сервисы также хранят свои данные в S3.
VPC
Должен называться Amazon Virtual Colocated Rack	Сфера применения Добавьте дополнительный уровень защиты всему, что вы храните в Интернете. Пусть всё выглядит так, будто все ваши AWS-сервисы находятся в одной маленькой сети, а не разбросаны в огромной.	Похож на VLAN, если вы разбираетесь в сетях
Lambda
Должен называться AWS App Scripts	Сфера применения Запускайте маленькие сниппеты на JS, Java или Python для выполнения отдельных задач.

Сервисы для веб-разработчика

API Gateway
Должен называться API Proxy	Сфера применения Проксируйте API ваших приложений через этот сервис для обработки трафика, тестирования новых версий и т.д.	Похож на 3Scale
RDS
Должен называться Amazon SQL	Сфера применения Одновременно MySQL-, Postgres-, и Oracle-БД для вашего приложения.	Похож на Heroku Postgres
Route53
Должен называться Amazon DNS + Domains	Сфера применения Купите новый домен и настройте DNS-записи.	Похож на DNSimple, GoDaddy, Gandi
SES
Должен называться Amazon Transactional Email	Сфера применения Отправляйте одиночные письма (для смены паролей, доставки уведомлений и т.п.). Можно использовать и как газету, если реализуете, но лучше не стоит.	Похож на SendGrid, Mandrill, Postmark
Cloudfront
Должен называться Amazon CDN	Сфера применения Ускорьте загрузку сайтов, оптимально распределяя доставку статических файлов пользователям.	Похож на MaxCDN, Akamai
CloudSearch
Должен называться Amazon Fulltext Search	Сфера применения Достаньте все данные из S3 или RDS и ищите в них то, что нужно.	Похож на Sphinx, Solr, ElasticSearch
DynamoDB
Должен называться Amazon NoSQL	Сфера применения Масштабируемое хранилище ключей для вашего приложения.	Похож на MongoLab
Elasticache
Должен называться Amazon Memcached	Сфера применения Memcached или Redis вашего приложения.	Похож на Redis to Go, Memcachier
Elastic Transcoder
Должен называться Amazon Beginning Cut Pro	Сфера применения Обработка различных странностей видео (форматы, сжатие и т.д.).
SQS
Должен называться Amazon Queue	Сфера применения Храните данные для дальнейшей обработки в очереди.	Похож на RabbitMQ, Sidekiq
WAF
Должен называться AWS Firewall	Сфера применения Блокируйте опасные запросы к сайтам, защищённым Cloudfront (не давайте людям попробовать подобрать 10 000 паролей к /wp-admin).	Похож на Sophos, Kapersky

Сервисы для мобильных разработчиков

Cognito
Должен называться Amazon OAuth as a Service	Сфера применения Предоставьте пользователям возможность залогиниться через Google, Facebook и т.д.	Похож на OAuth.io
Device Farm
Должен называться Amazon Drawer of Old Android Devices	Сфера применения Протестируйте ваше приложение на нескольких iOS и Android-устройствах одновременно.	Похож на MobileTest, iOS emulator
Mobile Analytics
Должен называться Spot on Name, Amazon Product Managers take note	Сфера применения Следите, что пользователи делают в ваших приложениях.	Похож на Flurry
SNS
Должен называться Amazon Messenger	Сфера применения Отправляйте мобильные уведомление, письма и / или SMS.	Похож на UrbanAirship, Twilio

Сервисы для внедрения кода

CodeCommit
Должен называться Amazon GitHub	Сфера применения Контроль версий вашего кода.	Похож на Github, BitBucket
Code Deploy
Должен называться И так неплохо	Сфера применения Загрузите ваш код из репозитория CodeCommit (или Github) на несколько сущностей EC2.	Похож на Heroku, Capistrano
CodePipeline
Должен называться Amazon Continuous Integration	Сфера применения Запускайте автоматизированные тесты вашего кода и вносите необходимые изменения.	Похож на CircleCI, Travis
EC2 Container Service
Должен называться Amazon Docker as a Service	Сфера применения Поместите Dockerfile в сущность EC2 для запуска сайта.
Elastic Beanstalk
Должен называться Amazon Platform as a Service	Сфера применения Переместите ваше приложение с Heroku на AWS, когда первый вам станет не по карману.	Похож на Heroku, BlueMix, Modulus

Корпоративные сервисы

AppStream
Должен называться Amazon Citrix	Сфера применения Поместите копию Windows-приложения на Windows-систему, к которой вы предоставляете удалённый доступ.	Похож на Citrix, RDP
Direct Connect
Должен называться	Сфера применения Заплатите за доступ к выделенной линии от вашего дата-центра или сети до AWS.	Похож на Туннель, позволяющий объехать пробку
Directory Service
Должен называться На самом деле, весьма точное название	Сфера применения Объединяйте приложения, которым для управления нужна Microsoft Active Directory.
WorkDocs
Должен называться Amazon Unstructured Files	Сфера применения Делитесь Word-документами с коллегами.	Похож на Dropbox, DataAnywhere
WorkMail
Должен называться Amazon Company Email	Сфера применения Настройте всем в компании одинаковые почтовую систему и календарь.	Похож на Google Apps for Domains
Workspaces
Должен называться Amazon Remote Computer	Сфера применения Интерфейс для удалённого управления компьютером.
Service Catalog
Должен называться Amazon Setup Already	Сфера применения Предоставьте всем пользователям AWS в вашей группе доступ к написанным вами приложениям, чтобы им не приходилось читать гайды вроде этого.
Storage Gateway
Должен называться S3, считающий себя частью вашей корпоративной сети	Сфера применения Хватит покупать место для хранения документов Word. Упростите передачу файлов из сети в S3.

Big Data-сервисы

Data Pipeline
Должен называться Amazon ETL	Сфера применения Извлекайте, Обрабатывайте и Сохраняйте все данные из AWS, а также настраивайте расписания и получайте сообщения об ошибках.
Elastic Map Reduce
Должен называться Amazon Hadooper	Сфера применения Обрабатывайте большие объёмы текстовых или сырых данных, хранящихся в S3.	Похож на Treasure Data
Glacier
Должен называться Очень медленный Amazon S3	Сфера применения Делайте бекапы бекапов, хранящихся в S3. Запасы на чёрный день.
Kinesis
Должен называться Amazon High Throughput	Сфера применения Быстро сохраняйте большие объёмы данных (например, аналитику или список людей, ретвитящих Канье Уэста), чтобы проанализировать их позже.	Похож на Kafka
RedShift
Должен называться Amazon Data Warehouse	Сфера применения Храните аналитические данные, обрабатывайте их и выгружайте.
Machine Learning
Должен называться Skynet	Сфера применения Предсказывайте поведение, исходя из текущих данных, для решения различных задач.
SWF
Должен называться Amazon EC2 Queue	Сфера применения Создайте сервис из «мыслителей» и «рабочих» поверх EC2 для выполнения задачи. В отличие от SQS, обладает встроенной логикой.	Похож на IronWorker
Snowball
Должен называться AWS Big Old Portable Storage	Сфера применения AWS Snowmobile в миниатюре.	Похож на Shipping a Network Attached Storage device to AWS

Сервисы для управления AWS

CloudFormation
Должен называться Amazon Services Setup	Сфера применения Настройте несколько связанных сервисов за один подход.
CloudTrail
Должен называться Amazon Logging	Сфера применения Ведите логи активностей AWS-стека.
CloudWatch
Должен называться Amazon Status Pager	Сфера применения Получайте уведомления, когда ваши сервисы AWS ведут себя некорректно.	Похож на PagerDuty, Statuspage
Config
Должен называться Amazon Configuration Management	Сфера применения Не сходите с ума, когда вам нужно следить за большой AWS-системой.
OpsWorks
Должен называться Amazon Chef	Сфера применения Управляйте запуском вашего приложения при помощи вещей наподобие автоматического масштабирования.
Trusted Advisor
Должен называться Amazon Pennypincher	Сфера применения Выясните, за что вы переплачиваете.
Inspector
Должен называться Amazon Auditor	Сфера применения Проверьте вашу AWS-систему на наличие проблем безопасности.	Похож на Alert Logic

Облачный хостинг - это вычислительные мощности с возможностью гибкого расширения и распределения нагрузки. Например, есть у вас проект с малой посещаемостью, но вы ожидаете резкого притока посетителей. Тогда вам выгодно будет размещаться в облаке. Можно взять минимальный тариф, а когда нагрузка будет возрастать, мигрировать на более дорогой тариф. Все это займет у вас всего несколько минут, и при этом не нужно будет осуществлять перенос данных.

Допустим, у вас есть один инстанс (экземпляр запущенной операционной системы) в облаке, и наплыв посетителей происходит всплесками. Вы можете добавить еще несколько инстансов, которые будут включаться и распределять между собой нагрузку только при пиковых нагрузках. Еще одним плюсом облачного хостинга является оплата только за то, чем вы пользуетесь по факту. Правда это будет несколько дороже обычного виртуального хостинга, но за более высокую цену вы получите те сервис, удобство и надежность, которых никогда не будет при использовании виртуального хостинга.

В этом обзоре посмотрим на западных крупных учатсников рынка: таких как Amazon Web Services (AWS) и Rackspace, так как они предоставляют максимально гибкие, полные и качественные услуги. Отдельно скажем о Linode, провайдере, предоставляющем в аренду VPS в облаке. Сразу стоит упомянуть, что эти компании не предоставляют технической поддержки на русском языке.

Amazon Web Services (AWS)

AWS представляет собой конструктор, из которого можно собрать сколь угодно сложную, распределенную сетевую инфраструктуру. Помимо этого Amazon предоставляет первый год пользования сервисом бесплатно в течение года, при условии, что вы не превысите лимитов сервиса (при превышении придется оплачивать по обычному тарифному плану). Вполне достаточно, чтобы попробовать облачный хостинг бесплатно. AWS очень удобен при необходимости разворачивать много одинаковых инстансов. Бесплатный пакет AWS Free Usage Tier включает в себя:

EC2 (инстансы - виртуальные машины ОС)

• 750 часов использования виртуальной машины с Linux или Windows Server (613 Мб ОЗУ, 32- битная или 64-битная платформа) - достаточное количество часов для работы инстанса каждый месяц
• 750 часов Elastic Load Balancer плюс 15 Гб обработки трафика
• 30 Гб Amazon Elastic Block Storage, плюс 2 миллиона операций ввода/вывода и 1 Гб для хранения снэпшотов.
• 15 Гб трафика

S3 (файловое хранилище)

• 5 Гб Amazon S3 стандартного хранилища, 20000 Get запросов и 2000 Put запросов

Relational Database Service (служба реляционных баз данных, RDS)

• 750 часов сервиса для запуска MySQL, Oracle BYOL или SQL Server
• 20 Гб хранилище базы данных
• 10 миллионов операций ввода/вывода
• 20 Гб хранилище для бекапов для автоматического резервного копирования вашей базы данных и возможностью создать снэпшот базы данных

На Amazon есть калькулятор для расчета потребления оказываемых услуг. Есть три типа тарифов: on-demand, spot, reserved. On-demand - это обычный VPS на виртуализации . Spot - это то же самое, что on-demand, только не гарантируется такой же высокий uptime. Spot работает, пока цена, которую вы предложили, выше средней цены за этот же инстанс. А reserved это скидка при долгом пользовании инстанса on-demand, которую можно приобрести. Условно говоря, если вы долгое время используете on-demand инстанс за 23 доллара, то чтобы перейти на тариф reserved и платить по 12 долларов в месяц нужно заплатить 50 единоразово. Ссылки на цены у Амазон:

Помимо этого стоит упомянуть о глобальной инфраструктуре Амазона, а именно о дата-центрах. В Северной Америке у Амазона 12 дата-центров, в Европе – 8, в Южной Америке – 1, в Азии -5. То есть на Амазоне можно получить приличные скорость и пинг практически из любой точки мира.

Здравствуйте, уважаемые облачные друзья!

Я думаю, что людей, которые бы не слышали о передовых технологиях и сервисах от компании Amazon с каждым днем становиться все меньше. Для тех кто не знаком с сервисами компании Amazon или знаком, но еще не начал использовать, я в данной статье расскажу о начале работы с Amazon Web Services. В статье будет описан процесс создания, работы и управления виртуальной машиной в инфраструктуре AWS.

Поехали

Амазон предоставляет, новым пользователям, ряд сервисов на бесплатной основе. Безусловно, бесплатное использование сервисов Амазон возможно с некоторыми ограничениями. Однако, предоставляемых лимитов вполне достаточно для того, что бы попробовать и оценить функциональные возможности Amazon Web Services. Вот набор бесплатных сервисов и их ограничений:

• Виртуальные машины только на базе Amazon EC2 Linux Micro Instance. Бесплатно предоставляется 750 часов использования, которых, в течении первого года с момента регистрации учетной записи, будет достаточно для использования одного EC2 экземпляра в режиме 24/7;
• 750 часов использования сервиса Elastic Load Balancer + 15 гигабайт обработанных данных;
• 10 гигабайт в сервисе Amazon Elastic Block Storage (EBS). В бесплатный лимит EBS включены 1 миллион операций ввода/ввывода, 1 гигабайт для хранения мгновенных снимков, 10000 get запросов и 1000 put запросов к этим мгновенным снимкам;
• 5 гигабайт в системе хранения Amazon Simple Storage Service (S3). В бесплатный лимит S3 включены 20000 Get запросов и 2000 Put запросов;
• 30 гигабайт входящего и исходящего трафика в равных пропорциях;
• 25 часов работы с Amazon SimpleDB и 1 гигабайт для данных;
• 100000 запросов впри использовании сервиса Amazon Simple Queue ;
• 100000 запросов, 100000 HTTP уведомлений и 1000 уведомлений по электронной почте при использовании сервиса Amazon Simple Notification ;
• 10 метрик, 10 предупреждений и 1000000 запросов к API в сервисе Amazon Cloudwatch .

Если у вас еще нет аккаунта в Амазоне, вы легко можете его создать. Я опущу описание процесса регистрации аккаунта, т.к. он вполне логичный и понятный. Просто перейдите на страницу регистрации и следуйте инструкциям.

К сожалению, использование любых сервисов Amazon Web Services требует наличия у пользователя банковской карты (Visa, MasterCard и пр.). Без карты использование сервисов будет невозможно. Однако, в тестовый период, если вы не превысили указанные выше лимиты, никаких списаний денежных средств, за исключением проверочного списания в размере $1, быть не должно. Однако вам необходимо помнить, что по окончании тестового периода, если вы продолжите пользоваться сервисами, деньги начнут списываться автоматически.

Итак, аккаунт создан и верифицирован. Продолжим?

Давайте попробуем создать нашу первую виртуальную машину (EC2 экземпляр). Все просто - открываем консоль управления и переходим на вкладку Amazon EC2.

Тут, для начала, нам необходимо выбрать регион в котором будет работать наш EC2 экземпляр и нажать на кнопку Launch Instance .

В терминологии Амазон, регион (Region) - это региональное местоположение дата-центров в которых будут работать ваши виртуальные машины. Регионы, в свою очередь, делятся на зоны доступности (Availability Zone). Для обеспечения максимального уровня отказоустойчивости вашего приложения располагайте его в разных регионах, а внутри региона распределяйте ваши EC2 экземпляры по разным зонам доступности. Безусловно, приложение должно поддерживать такого рода распределения.

Сервисы AWS доступны в дата-центрах расположенных в США, Ирландии, Сингапуре и Японии. Для пользователей из России, логичным будет использование региона в Ирландии (EU West Ireland).

Далее необходимо выбрать тип экземпляра EC2. Можно создать свой или использовать уже готовые образы (AMI). Для простоты давайте возьмем готовый образ типа Basic 32-bit Amazon Linux AMI .

На следующем шаге выбираем тип экземпляра с Micro . Остальные параметры оставляем без изменений.

На следующих двух шагах можно внести изменения в расширенные настройки экземпляра. Оставим эти значения этих настроек по-умолчанию и перейдем к диалогу создания приватного RSA ключа, который, в последствии, мы будем использовать для доступа к виртуальной машине.

На шаге Create Key Pair , введите любое понравившееся имя для вашего RSA ключа и после перехода по ссылке Create & Download your Key Pair , ключ будет создан и вам будет предложено сохранить его на локальном компьютере. Сохраните его в надежном месте.

Следующее, что вам необходимо будет сделать - это создать группу безопасности (Security Group) для вашего EC2 экземпляра. Для этого, на шаге Configure Firewall , выбираем Create a new Security Group , и даем этой группе любое понравившееся название.

Фактически, группа безопасности (Security Group) - это средство обеспечивающее фильтрацию сетевых соединений для EC2 экземпляра. Другими словами - это файервол. Соответственно для обеспечения доступа к сервисам, которые будут работать в вашем EC2 экземпляре необходимо разрешить доступ к определенным TCP портам. Давайте сделаем наш экземпляр доступным для входящих соединений по протоколам HTTP, HTTPS и SSH. По желанию, можно добавить дополнительные правила.

На следующем, заключительном, шаге вам будет предложено проверить все заданные ранее настройки для EC2 экземпляра. Тут же можно внести изменения в параметры экземпляра или же незамедлительно его запустить. Просто нажмите кнопку Launch и ваш экземпляр будет запущен и доступен для использования через несколько секунд.

Список ресурсов используемых созданным EC2 экземпляром можно посмотреть в панели управления EC2.

Для просмотра списка созданных вами экземпляров используйте ссылку 1 Running Instance . Выберите ранее созданный экземпляр и получите информацию о его состоянии и параметрах. Зафиксируйте где-нибудь значение параметра Public DNS , оно нам позже понадобится.

Подключение к EC2 экземпляру

Итак, мы создали наш первый EC2 экземпляр, запустили готовый образ с ОС Linux, настроили файервол. Далее нам нужно как-то к нему подключиться, посмотреть на него изнутри и что-нибудь с ним сделать.

Сделаем это через SSH используя созданные ранее приватный RSA ключ. Для пользователей Linux и прочих *nix систем, кто не знаком с механизмом безпарольного ssh-подключения, рекомендую почитать мануал для ssh. Пользователи Windows, думаю, сами разберуться как им действовать. Можно использовать функциональные возможности популярного ssh-клиента Putty или эмулятор Cygwin.

Ок, с ключами разобрались. А куда подключаться-то? А помните, мы где-то запомнили значение параметра Public DNS ? Вот его то и нужно использовать для подключения к вашему экземпляру посредством протокола SSH.

Для тех кому лень читать мануалы и разбираться как использовать RSA ключ в ssh используйте следующую команду:

# ssh -i path_to_key ec2-user@public_dns_hostname path_to_key - это путь к вашему секретному ключу
public_dns_hostname - это значение параметра Public DNS

Что дальше?

Ну что ж, EC2 экземпляр создали, запустили и даже смогли подключиться к нему. Ура! Давайте запустим в нем какой-нибудь сервис. Например, веб-сервер apache, тем более у нас уже готовы правила фильтра разрешающие доступ к экземпляру по протоколам HTTP и HTTPS.

• Устанавливаем веб-сервер Apache

  $ sudo yum install httpd

• И запускаем его

  $ sudo /etc/init.d/httpd start

• Вводим в нашем любимом браузере URL http://public_dns_hostname и радуемся стартовой страничке Apache:)

Напоминаю, что public_dns_hostname - это значение параметра Public DNS для вашего экземпляра.

Заключение

Ну что, все оказалось не так страшно как возможно вы себе представляли. Все действия по запуску нашей первой виртуальной машины в экосистеме Amazon AWS, заняли всего 10-15 минут, а штатное средство для создания и управления экземплярами под названием Amazon AWS Management Console, сделало этот процесс весьма простым и удобным.

В следующих статьях я попробую рассказать, более детально, про другие сервисы Amazon AWS, про их настройку и управление. Если у вас есть какие-либо пожелания по темам обзоров, оставляйте их в комментариях.

1- Amazon

Google , Microsoft и IBM все являются гигантами технологии, лидирующими во многих сферах и имеют миллиарды пользователей. Но имеется бизнес сегмент, в котором многие годы они всегда позади Amazon .

Что следует сказать, тот сегмент не является электронной коммерцией, сфера крепко привязанная к имени Amazon . Мало кто знает, что данная компания так же работает еще в другой сфере, которая влияет на миллиарды пользователей и занимает первую позицию в мире.

Доля рынка инфраструктуры Amazon облачных вычислений в начале 2016 года была еще больше чем у Microsoft, IBM и Google сложивших вместе.

Это сфера облачных вычислений, с названием Amazon Web Services (AWS) и объявлена в первый раз в 2006 году. Тогда многие инвесторы сомневались в решении CEO Jeff Bezos , так как это сфера не имеет отношения к электронной коммерции. При этом главный бизнес сегмент Amazon снижается в прибыли, и затраты на инвестиции на персонал, инфраструктуру для AWS совсем не мал.

В 2015, Bezos доказал свою правоту когда объявил “огромную” прибыль от AWS . AWS принесла 12,2 миллиардов долларов, с прибылью 3,1 миллиардов долларов в 2016 году.

Так что такое Amazon Web Service ? Amazon определяет свой продукт как “услуга облачных вычислений” (Cloud computing service). Главны функции AWS это вычисление (computing), хранение (storage), безопасность, анализ данных, услуга искусственного интеллекта, платформа Internet of Things ...

Две самые популярные услуги AWS это Amazon Elastic Compute Cloud (Amazon EC2) и Amazon Simple Storage Service (Amazon S3) . Обе эти услуги предоставляют безлимитные ресурсы пользователям для хранения, вычисления с возможностью быстро менять объем работы. Это так же является общей сильной стороной облачных вычислений: гибкость в использовании ресурсов и затрат, помогает индивидуальным разработчикам иметь возможность работать с эквивалентной инфраструктурой к большим технологическим корпорациям.

Очень много известных имет сейчас являются клиентами у AWS как Netflix , Twitter , New York Times , Nasdaq . Для этих компаний, аренда инфраструктуры Amazon вместо самостоятельного развития, помогает им сфокусировать на другие вопросы по технологии, бинесу, как однажды сказал технический директор Netflix . Он так же оценил облачные вычисления, как хорошее и гибкое решение для таких компаний как Netflix , когда потребность пользователя может привести к быстрому расширению инфраструктуры.

Это не случайность, что Amazon вовлечен в эту кажется несвязанную сферу. В начале 2000 годов, у них была система, которая помогала создавать вебсайты для онлайн продаж. Но при работе, Amazon встретил проблемы в расширении инфраструктуры и сложности с системой программ обеспечения. Это момент когда инженеры предоставили более свободное и простое решение.

Когда они поняли, что могут предоставлять услуги помимо Amazon . Benjamin Black , член группы предложил идею Jeff Bezos . CEO очень понравилась эта идея, и даже представил платформу, которая позволит любому, даже студентам проживающим в общежитиях иметь возможность работать с интрументами, чтобы открыть технологическую компанию.

До сих пор эта идея правильна, только она была расширена до всего мира.

Google и Microsoft конечно не смогли пропустить этот потенциальный рынок. Теперь, эти два гиганта технолонии так же имеют продукт для конкуренции с AWS , но они не могут поймать ту скорость предоставления новых свойств как Amazon . Доля рынка "Облачных вычислений" у Amazon почти равна доле Google , Microsoft и Salesforce сложивших вместе.