AWS Notes

Прошло довольно много времени с момента последнего новостного выпуска, а значит, свежих апдейтов подоспело немало! Что же нового вышло в AWS с конца весны? Подборка материалов и актуальной информации о последних релизах: - Новый AWS регион в ОАЭ, а также новость о том, какие регионы в очереди на открытие; - Новые инстансы в AWS m6id, c6id, r6id, r6a; - Инстансы с 3-м поколением гравитонов (Amazon EC2 C7g) вышли в GA; - Cost Management практики - Cost Allocation Tags в EKS и что такое KubeCost; - Консолидация нагрузки в Karpenter-е; - Всё Serverless с re:Invent теперь GA (Amazon MSK, Amazon EMR, Amazon Redshift , Amazon SageMaker Serverless Inference) #podcast Послушать можно тут: - Anchor - Yandex - Google Podcasts - Apple Podcasts - Spotify

Споты = большая экономия. Но приложение должно понимать как отрабатывать если вдруг спот забирают. Теперь протестировать "забор" спота можно прямо из консоли. https://aws.amazon.com/about-aws/whats-new/2022/10/spot-instance-interruptions-tested-amazon-ec2-console-fault-injection-simulator-integration/

Serverless 101 🔹 Intro - https://www.youtube.com/watch?v=uSW_9pzvQg4 🔸 Lambda - https://www.youtube.com/watch?v=n4Cfu6uJ16M 🔹 API Gateway - https://www.youtube.com/watch?v=aCyg0tAl_X0 🔸 Step Functions - https://www.youtube.com/watch?v=dHDr5THHCNI 🔹 SQS - https://www.youtube.com/watch?v=JfLH-0HeHkY 🔸 SNS - https://www.youtube.com/watch?v=52lWX0lBvSI 🔹 S3 - https://www.youtube.com/watch?v=xfi_zQv_M1Q 🔸 Kinesis - https://www.youtube.com/watch?v=qecvFLVx_Xk 🔹 EventBridge - https://www.youtube.com/watch?v=e3sevLjtIQg #Serverless

Serverless 101 🔹 Intro - https://www.youtube.com/watch?v=uSW_9pzvQg4 🔸 Lambda - https://www.youtube.com/watch?v=n4Cfu6uJ16M 🔹 API Gateway - https://www.youtube.com/watch?v=aCyg0tAl_X0 🔸 Step Functions - https://www.youtube.com/watch?v=dHDr5THHCNI 🔹 SQS - https://www.youtube.com/watch?v=JfLH-0HeHkY 🔸 SNS - https://www.youtube.com/watch?v=52lWX0lBvSI 🔹 S3 - https://www.youtube.com/watch?v=xfi_zQv_M1Q 🔸 Kinesis - https://www.youtube.com/watch?v=qecvFLVx_Xk 🔹 EventBridge - https://www.youtube.com/watch?v=e3sevLjtIQg #Serverless

Бесконечно можно смотреть на 🔥 огонь и обсуждать, как на ☁️ AWS установить 🗒️ Wordpress: https://www.youtube.com/watch?v=PYyAl2RPdhM #design #Wordpress

Прекрасная AWS новость для Казахстана: 🎉 https://aws.amazon.com/about-aws/whats-new/2022/09/aws-outposts-rack-kazakhstan-serbia/ Присоединяйтесь: @aws_kz. 😀

On September 22 AWS User Group Ukraine invite you to the 2nd Data Meetup! We have top experts in the lineup: Alex DeBrie and Taras Slipets🔥 Also together with the friendly UA Responders Foundation we launched a charity initiative to raise €700 for 50 Occlusive Bandages. Together with the speakers we’ll discuss: - the basics of DynamoDB and what it's good at, then look at various options for handling internal analytics or customer-facing analytics; - Flixbus' experience in decentralized cross-department data analysis and business intelligence on direct customer feedback. 🔸 "Patterns for Analytics with DynamoDB" (ENG), ━ Alex DeBrie, AWS Data Hero, author of "The DynamoDB Book," founder of DynamoDBGuide.com, Independent Consultant. 🔸 "Customers Feedback - from Data Mess to Data Mesh" (ENG), ━ Taras Slipets, Senior Data Engineer at Flixbus. Host - Ivanna Bashmat, Software Architect at N-iX 👉 Details and registration: https://bit.ly/3f9jsuv We look forward to our e-meet!

Все о DynamoDB для начинающих и не только В этом выпуске мы поговорили о DynamoDB, что это за база данных такая. Начали с основ, какого именно типа база данных DynamoDB, как именно данные хранятся в таблицах. Что такое локальные и глобальные вторичные индексы - чем они отличаются, и когда их стоит применять и создавать. На что стоит обратить внимания во время проектирования хранилища данных используя DynamoDB, и какие есть плюсы минусы при работе с GSI, и почему не стоит забывать про проблему "hot" partition. Все это и не только в новом выпуске вместе с Кареном (Data Community Builder) Послушать можно тут: - Anchor - Yandex - Google Podcasts - Apple Podcasts - Spotify

​​AWS Fargate — up to 16 vCPU and 120 GB: https://aws.amazon.com/fargate/pricing/ #Fargate

Issue #36 Sep 5 - Sep 11, 2022 ▪️ App Runner Route 53 alias record for root domain name ▪️ Backup CloudWatch metrics ▪️ CloudFormation new AWS::LanguageExtensions transform | GA ▪️ CloudTrail SageMaker Studio API Calls ▪️ Cognito enables time-based-one-time-password (TOTP) self-enrollment ▪️ Connect voice spoofing fraud detection ▪️ Console blog posts and launch announcements widgets ▪️ Controllers for K8S RDS, Lambda, Step Functions, Prometheus, KMS | GA ▪️ DynamoDB 25 -> 100 actions per transaction ▪️ Fargate migration of service quotas to vCPU-based quotas ▪️ Firewall Manager  WAF custom requests and responses ▪️ Kinesis Data Analytics CPU, Memory, Disk Utilization metrics ▪️ Lex composite slot type ▪️ Lookout for Metrics dimensions values filtering | increases limits ▪️ Open-Source Seekable OCI (SOCI) for lazy loading container images ▪️ Personalize increases limits for all customers ▪️ Quicksight line and area charts | Missing Data control ▪️ SageMaker built-in TensorFlow Image Classification algorithms deploying large models through configurable volume size and timeout quotas ▪️ SageMaker Canvas advanced visualizations ▪️ Security Hub new FSBP controls ▪️ SNS  Message data protection | Public Preview ▪️ VPC Flow Logs Kinesis Firehose delivery ▪️ WorkDocs Apple Silicon MacBooks support

Что послушать в пятницу вечером - конечно же новый выпуск #podcast AWS на русском :) Продолжаем говорить про AWS организации. В первой части мы закончили говорить про Organization Units, а во второй уже начали с service control policies (SCPs): как работают политики и как внутренний сервис Amazon, Zelkova, помогает с безопасностью. Что такое AWS Control Tower и как он помогает в построении организации. Не забыли раскрыть тему уменьшения расходов при использовании AWS организации и другие преимущества работы с ней. Если у вас есть вопросы, предложения темы, пишите мне личку. Послушать можно тут: Anchor Yandex Google Podcasts Apple Podcasts Spotify

​​⚖️ Отличный инструмент для анализа и поиска наиболее выгодного/дешёвого решения EC2/Fargate/Lambda: https://compute-cost.com Для выбора своей конфигурации нужно нажать Commence Configuration. Можно подобрать по: ▪️ цене — стоимость в час-день-месяц-год ▪️ процессорам — с учётом 0.25 дробных для Lambda и с аппроксимацией для Tx-burstable инстансов по их baseline производительности ▪️ памяти — с учётом 0.25 дробных для Lambda ▪️ регионам — с возможностью учёта Local Zones ▪️ сервисам — EC2/Fargate/Lambda ▪️ типу — OnDemand/Spot/RI ▪️ архитектуре — x86/ARM 💪 Классная штука, хорошо подойдёт для подбора наиболее выгодных нод в EKS кластер, однозначно в закладки, прекрасное дополнение к ec2instances.info. #info #comparison

Новый AWS Region — Объединённые Арабские Эмираты: 🎉 https://aws.amazon.com/blogs/aws/now-open-aws-region-in-the-united-arab-emirates-uae/ Второй на текущий момент в Middle East, идентификатор me-central-1. Как и в подавляющем большинстве других регионов, имеет 3 AZ. Итого на теперь всего — 27 регионов. #AWS_Regions

AWS DevOps — Linux Linux вместе с сетями — главное для DevOps вообще и для начинающих есть то, с чего следует начинать. Упоминал, что если совсем уж нет представления о сетях — лучше начать с них. Если же есть какие-то знания-опыт — начинаем с Linux. Учитывая тот факт, что Amazon Linux построен на базе RedHat, даю и рекомендую изучать Linux на базе подготовки к сертификации RHCSA: https://www.redhat.com/en/services/certification/rhcsa Курсов для подготовки к нему много и не стоит пугаться, что в описании ко многим указывается что-то типа "год опыта работы системным администратором". Во-первых, это не так. 🙂 Во-вторых, главное — какая-то система, план подачи материала, лабы, охват работы Linux с разных сторон. Конечно же крайне важно сразу совмещать с практикой, но для совсем начинающих возникает проблема курицы и яйца — чтобы знать, нужно практиковаться, а чтобы практиковаться, нужно хоть что-то знать. Потому на первом этапе лабы (их наличие) критично. Простые, понятные, легко выполняемые, повторимые. Пересмотрев немало курсов, рекомендую для начинающих курсы по Linux от Sander van Vugt — он даёт их больше двадцати лет и это не просто так. Например, здесь: https://www.oreilly.com/videos/red-hat-certified/9780135656495/ Они не идеальны, но отработаны, есть чёткая программа, что критично именно для тех, кто с нуля. У других есть крутые вещи, но подавляющее большинство изначально предполагает наличие знаний/опыта у обучающегося. Альтернативой может быть подготовка к сдаче сертификации на LFCS: https://training.linuxfoundation.org/certification/linux-foundation-certified-sysadmin-lfcs/ Особых отличий у них реальности нет, а курс LFCS от вышеупомянутого автора в реальности полная копия его курса для RHCSA с упоминанием Ubuntu в одном из уроков на пару минут. 😀 После прохождения основного курса по Linux (даю с ориентацией именно на облака/AWS, потому выбрасываю или проходим лишь для информации чисто локальное применение и специфику RedHat инструментов), очень рекомендую его же курс Linux Under the Hood — при некоторой сложности полезен для новичков, т.к. объясняет важные вещи (и даже знающим может быть полезен). Ещё раз отмечу, что по Linux в интернете много всего, однако стройной, доступной именно с нуля и при этом относительно компактной программы, не обнаружил и вышеперечисленные ближе именно к такому желаемому варианту. Опять же автор из Нидерландов и у него понятный английский даже совсем начинающим в нём. В дополнение на YouTube из моря по Linux вообще и RHCSA в частности посоветую этот канал: https://www.youtube.com/c/theurbanpenguin/search?query=rhcsa p.s. Напишите, пожалуйста, ваши рекомендации по изучению Linux для начинающих с нуля — мне и многим другим точно будет полезно. 😀 #devops #начинающим #linux

AWS DevOps — Linux Linux вместе с сетями — главное для DevOps вообще и для начинающих есть то, с чего следует начинать. Упоминал, что если совсем уж нет представления о сетях — лучше начать с них. Если же есть какие-то знания-опыт — начинаем с Linux. Учитывая тот факт, что Amazon Linux построен на базе RedHat, даю и рекомендую изучать Linux на базе подготовки к сертификации RHCSA: https://www.redhat.com/en/services/certification/rhcsa Курсов для подготовки к нему много и не стоит пугаться, что в описании ко многим указывается что-то типа "год опыта работы системным администратором". Во-первых, это не так. 🙂 Во-вторых, главное — какая-то система, план подачи материала, лабы, охват работы Linux с разных сторон. Конечно же крайне важно сразу совмещать с практикой, но для совсем начинающих возникает проблема курицы и яйца — чтобы знать, нужно практиковаться, а чтобы практиковаться, нужно хоть что-то знать. Потому на первом этапе лабы (их наличие) критично. Простые, понятные, легко выполняемые, повторимые. Пересмотрев немало курсов, рекомендую для начинающих курсы по Linux от Sander van Vugt — он даёт их больше двадцати лет и это не просто так. Например, здесь: https://www.oreilly.com/videos/red-hat-certified/9780135656495/ Они не идеальны, но отработаны, есть чёткая программа, что критично именно для тех, кто с нуля. У других есть крутые вещи, но подавляющее большинство изначально предполагает наличие знаний/опыта у обучающегося. Альтернативой может быть подготовка к сдаче сертификации на LFCS: https://training.linuxfoundation.org/certification/linux-foundation-certified-sysadmin-lfcs/ Особых отличий у них реальности нет, а курс LFCS от вышеупомянутого автора в реальности полная копия его курса для RHCSA с упоминанием Ubuntu в одном из уроков на пару минут. 😀 После прохождения основного курса по Linux (даю с ориентацией именно на облака/AWS, потому выбрасываю или проходим лишь для информации чисто локальное применение и специфику RedHat инструментов), очень рекомендую его же курс Linux Under the Hood — при некоторой сложности полезен для новичков, т.к. объясняет важные вещи (и даже знающим может быть полезен). Ещё раз отмечу, что по Linux в интернете много всего, однако стройной, доступной именно с нуля и при этом относительно компактной программы, не обнаружил и вышеперечисленные ближе именно к такому желаемому варианту. Опять же автор из Нидерландов и у него понятный английский даже совсем начинающим в нём. В дополнение на YouTube из моря по Linux вообще и RHCSA в частности посоветую этот канал: https://www.youtube.com/c/theurbanpenguin/search?query=rhcsa p.s. Напишите, пожалуйста, ваши рекомендации по изучению Linux для начинающих с нуля — мне и многим другим точно будет полезно. 😀 #devops #начинающим #linux

Новый выпуск #podcast : Как AWS может помочь в разработке игр В этом выпуске обсудили специфику бизнеса разработчиков игр и выяснили на опыте интересных публичных кейсов, почему облака так привлекательны игровым компаниям. Также обсудили: * Как AWS связан с разработкой игр и их оперированием. * Какие бывают задачи: аналитика, гейм-сервера, мета, билды, доставка контента. * Рекомендации для инди девелоперов / небольших студий, с чего лучше начать. * Как можно экономить, используя AWS, если у вас уже есть игра в оперировании. Послушать можно тут: Anchor Spotify Yandex GooglePodcasts ApplePodcasts Если есть желание прийти в гости и рассказать вашу историю с проекта, или поделиться опытом (не только на подкаст) пишите в личку буду рад обсудить.

https://www.youtube.com/watch?v=Yw3Xh4a6JRw Присоединяйтесь!