AWS Community Day 2020

 

AWS의 새로운 소식을 듣기 위해 AWS Community day를 다녀왔다. AWS Community day는 AWS에서 매년 개최하는 reinvent를 참석하지 못한 개발자들을 위해 reinvent에서 발표한 새로운 서비스를 소개하는 세션이 많았다. 이번 reinvent에서 새롭게 발표된 서비스의 대부분은 인공지능에 대한 서비스였다. 작년는 SageMaker와 같은 개발자를 위한 도구가 발표되었다면 올해에는 인공지능을 비지니스에 바로 적용할 수 있는 서비스들이 많이 발표되었다. AWS의 발표만 봐도 IT시장의 화두는 인공지능이라는 것을 확실하게 알수 있다.

 

이번 AWS에서 발표한 새로운 서비스 중에서 주목한 서비스는 Fargate for EKS이다. 회사에서 serverless architecture를 최대한 사용하여 운영 / 관리 비용을 줄이기위한 설계를 주로 하고 있다. serverless architecture구현하기 위해 lambda를 사용하고 있는데 lambda의 제한 사항이 많다. 15분의 제한 사항이나 최대 memory 제한 등 이러한 제한 사항이 hard limit라 변경도 불가능하다. 이러한 제한사항으로 구현아 어려운 서비스는 ECS - Fargate를 사용하는 형태로 구현하고 있다. ECS 대신 향후 Kubernates를 도입예정에 있어 계속 Kubernates에 대한 자료를 조사중에 있다. 

 

data분석 pipeline을 구성하는 project를 진행중이라 Athena Rederated Query에도 관심이 갔다. Athena Rederated Query는 AWS여러 서비스에 통합적인 query를 사용할 수 있는 서비스이다. Athena Rederated Query를 사용할 수 있는 서비스는 PartiQL, MySQL, RDS, AuroraDB, DynamoDB, CloudWatch 등 이다. SQL문만 사용하면 여러 data source에서 data를 query할 수 있는 장점이 있다. 각각의 서비스에 query하기 위해서 각각의 서비스에서 지원하는 query 언어를 알아야 했지만 Athena Rederated Query를 사용하면 SQL문으로 모두 query할 수 있게 되어 다양한 data source를 사용하는 architecture에서 효율적일 것이다.