최신기사

• 
  [AWS 리인벤트 2022] 버너 보겔스 아마존 CTO "슈퍼컴이 못 푸는 문제, 양자 시뮬레이션이 풀 것" 업계 1위 클라우드서비스 운영사 아마존웹서비스(AWS) 모기업인 아마존의 최고기술책임자(CTO)가 양자컴퓨터에 대해 현존 슈퍼컴퓨터 기반 3차원(3D) 시뮬레이션 기술의 한계를 넘어설 돌파구가 될 것이라는 전망을 내놨다. 전통적인 디지털 컴퓨터로 풀리지 않는 문제가 미래에 실용화되는 양자컴퓨터로 풀린다고 기대하는 것이다. 버너 보겔스 아마존 CTO는 1일(현지시간) 미국 라스베이거스 AWS 리인벤트 2022 행사 기조연설에서 컴퓨터 기반 시뮬레이션의 중요성을 강조하고 '심스페이스 위버' 활용 사례를 설명했다. 심스페이스 위버는 지난 11월 29일 AWS 리인벤트 2022 행사 둘째날 아담 셀립스키 최고경영자(CEO) 기조연설을 통해 먼저 소개된 AWS 클라우드 기반 3D 공간 시뮬레이션 도구다. 컴퓨터 시뮬레이션은 현실에 나타난 문제를 가상으로 재현해 보면서 해결할 방법을 찾기 위해 쓰인다. 대도시에서 발생하는 교통 체증과 같은 특정한 현상 전체를 물리적 한계가 있는 현실에서 관찰하고 분석하기는 쉽지 않기 때문이다. 코로나19 사태 후 이용자가 많은 통행로에 화분같은 것을 둬서 사람들이 자연스럽게 6m씩 '거리두기'를 하게 유도하는 데 컴퓨터 시뮬레이션이 쓰였다. 보겔스 CTO는 "2000년대 많은 데스크톱 컴퓨터와 시뮬레이션 도구가 있었지만 대부분 사람들이 갖고 있는 하드웨어에 따른 제약을 많이 받았다"며 "오늘날에는 디자인, 금융, 에너지, 항공, 기후모델링 등 모든 산업마다 자체적인 시뮬레이션(도구)가 있고 앤시스같은 엔지니어링 시뮬레이션 전문 소프트웨어 기업도 있고 AWS는 이 모든 산업별 시뮬레이션을 가능하게 (지원)한다"고 했다. 예를 들어 컴퓨터 시뮬레이션으로 자율주행차가 인공지능(AI)으로 실제 도로를 안전하게 달릴 만큼 발전했는지 검증할 수 있다. 현실에서 수년 내지 수십년에 걸쳐 진행되는 삼림 자원 고갈과 같은 현상도 단 몇 시간 만에 확인하고 대처 방안을 도출할 수 있다. 그런데 문제 해법을 찾기 위해 현실의 지리공간과 사물을 많이 고려할수록, 더 정확한 결과를 얻으려 할수록 많은 계산이 필요하다. 심스페이스 위버는 더 포괄적이고 구체적인 현상을 다루는 컴퓨터 시뮬레이션에 필요한 만큼의 방대한 계산 자원을 AWS 클라우드로 제공한다. 수십만 그루 나무를 심어 생물 다양성을 장려하고 탄소를 포집하기에 적합한 장소를 찾는 것처럼 장기적이고 광범위한 시공간을 다루는 문제를 효율적으로 풀 수 있다. 그만한 슈퍼컴퓨터를 직접 구축하고 운영하고 관리해야 하는 부담이 없다. 보겔스 CTO는 "교통량이나 공급망 인프라 등 여러 분야에 맞는 지리공간 시뮬레이션을 심스페이스 위버로 할 수 있다"며 "이 시뮬레이션으로 모든 (일어날 수 있는 일의) 시나리오를 모두 볼 수 있고 실제로는 할 수 없는 실험을 원하는 만큼 할 수 있고 (구상한 해법을) 현실에 적용하기 전에 적용해 보고 어떤 패턴이 나타나는지 볼 수 있다"고 설명했다. 그는 이어서 "우리가 당장 해결할 수 없는 문제도 있다"면서 "여러 규모가 있지만 대체로 '몬테카를로 방법(Monte Carlo method, 반복 무작위 추출 방식)'을 쓰는데 이건 세상을 근사치로 접근하는 것이고 실제 세상을 만들기에는 아직 과제가 많다"고 했다. 더 복잡하고 현실에 가깝게 만들기 위해서는 여러 물리 엔진이 필요하고 '분자'와 같은 작은 사물을 시뮬레이션에 제약이 크다고 했다. 그에 따르면 페니실린 분자 하나를 기존 컴퓨터로 표현하기 위해서는 '2의 285승 비트'가 필요한데 이 수를 저장하려면 전 세계에 당장 필요한 디지털 컴퓨터보다 많은 저장소를 써야 한다. 그래서 실질적으로는 이런 분자를 정밀하게 시뮬레이션할 수 없다. 양자컴퓨터는 양자를 이용한 '큐비트(qubit)'로 정보를 처리하기 때문에 '자연'을 재현할 수 있을 것이라는 기대를 받고 있다. 보겔스 CTO는 "양자 기반 시뮬레이션이 지금 슈퍼컴퓨터만큼 정확하지 않고 한창 개발 중이지만, 양자컴퓨터를 개발하는 여러 회사가 있고 AWS는 그와 관련한 실험을 지원하고 있다"면서 "10년 전 컴퓨터로 해결하지 못하는 문제를 지금 해결하고 있듯이 10년 뒤 양자컴퓨터가 실현되고 이 분야 혁신이 계속 추진되면 기존 컴퓨터가 답할 수 없는 질문에 답할 수 있을 것"이라고 덧붙였다. 그는 "비료 생산 업종의 관점에서 양자 시뮬레이션 활용 분야를 상상해 본다면 암모니아가 전 세계 가스 중 3%를 차지한다고 하는데 냉장고에서 음식을 꺼내 식탁에 두면 아무 것도 안 해도 암모니아가 생성되는데 그 양이 얼마나 될지 시뮬레이션할 수 있을 것"이라며 "이런 분야에 양자컴퓨터가 필요하고 양자컴퓨터가 실질적으로 미래의 현실을 만들어갈 수 있는 분야"라고 강조했다.

  • 2022-12-02
  • 10:29:11
• 
  [AWS 리인벤트 2022] 머신러닝도 협업 필수…AWS, 세이지메이커 모델 개발 공동작업 강화 아마존웹서비스(AWS)가 머신러닝(ML) 모델 개발 서비스 '아마존 세이지메이커'에 신기능을 대거 추가해 개발자, 데이터 전문가와 비즈니스 실무자의 협업을 지원한다. AWS는 11월 30일(현지시간) 미국 라스베이거스 AWS 리인벤트 2022 행사에서 세이지메이커 신기능 8가지를 발표했다. ML 수명주기 전반에 걸쳐 모델 성능 가시성을 제공하는 '아마존 세이지메이커 거버넌스', 데이터 품질 문제를 해결하고 데이터 사이언스 팀 협업 촉진과 테스트 단계에서 실제 운영 단계로 넘어가는 프로세스를 앞당기는 '아마존 세이지메이커 스튜디오 노트북'과 모델 검증과 지리공간 데이터 작업의 어려움을 덜어 주는 신기능을 지원한다. 아마존 세이지메이커 롤 매니저(Amazon SageMaker Role Manager)는 데이터 거버넌스 기능이다. 조직의 ML 시스템을 만들고 모니터링하는 관리자가 작업, 리소스, 데이터 접근을 제어하고 개발을 간소화하는 업무를 롤 매니저가 지원한다. 엑셀 파일 목록에 데이터 준비와 모델 훈련 등 ML 관련 활동을 적어 놓고 접근 권한 정책을 관리하는 식으로 수작업에 의존하는 기존 도구는 새로운 사용자가 업무를 효과적으로 수행하기 위해 필요한 작업을 정하는 데 몇 주를 허비하게 할 수 있다. 롤 매니저를 쓰면 관리자가 다양한 사용자 역할과 책임에 따라 사전 구성된 템플릿 선택과 편집으로 쉽게 접근 제어와 사용자 권한 정의를 할 수 있다. 필요한 권한이 있는 접근 정책을 자동 생성하고 사용자 역할과 책임 범위를 전달해 숙지하게 하고 관리 부담을 줄일 수 있다. 아마존 세이지메이커 모델 카드(Amazon SageMaker Model Cards)는 모델 정보 수집을 단순화한다. 실무자가 모델 개발과 평가 중 승인 절차, 등록, 감사, 고객 문의, 모니터링을 지원하기 위해 필요한 ML 모델 세부 정보는 이메일, 텍스트, 엑셀 파일에 저장돼 있어 수집에만 몇 달이 걸릴 수 있다. 모델 카드는 AWS 콘솔에 저장할 수 있는 단일 위치를 제공해 모델 수명주기 동안 문서 작업을 간소화하고, 입력 데이터 세트와 훈련 환경과 결과 등 세부 정보를 자동으로 기입한다. 실무자는 성능 목표와 위험 등급 등의 모델 정보, 편향과 정확도 등 평가 결과를 문서화하기 위한 질문지를 사용해 추가 정보를 포함하고 관찰 결과를 기록할 수 있다. 아마존 세이지메이커 모델 대시보드(Amazon SageMaker Model Dashboard)는 ML 모델을 추적하기 위한 중앙 인터페이스를 제공한다. 한 조직에 수천 개 모델이 배포되면서 기 배포된 모델 추적을 지원한다. 대시보드에서 모델 및 데이터 드리프트 모니터링 기능 '아마존 세이지메이커 모델 모니터'와 ML 편향 감지 기능 '아마존 세이지메이커 클래리파이'와 통합할 수 있다. 아마존 세이지메이커 스튜디오 노트북은 실무자 수십명이 공동 모델을 개발할 때 도움을 주는 세 가지 신기능(데이터 준비 간소화, 데이터 사이언스 팀 간 협업 가속화, 노트북 코드를 프로덕션 준비 작업으로 자동 변환)을 탑재한다. 스튜디오 노트북의 데이터 준비 간소화 기능은 실무자가 클릭 몇 번으로 데이터 특성을 검토하고 품질 문제를 해결할 수 있는 데이터 준비 기능으로 차트를 자동 생성하고 일반적인 문제 해결을 돕는 데이터 변환을 제안한다. 준비된 데이터를 활용할 때 팀이 함께 단일 노트북을 읽고 편집하고 실행하는 작업 공간이 제공된다. 팀원은 이 결과를 함께 검토해 모델 성능을 이해하고 비트버킷, AWS 코드커밋 등 서비스 지원을 통해 노트북 버전을 관리하고 변경 사항을 비교할 수 있다. 완성된 ML 모델을 실제 운영 시스템으로 옮길 때 CI/CD 파이프라인을 설정, 구성, 관리해 배포를 자동화하고 일정에 따라 반복적으로 실행하려면 모든 인프라 설정에 몇 주가 걸릴 수 있다. 아마전 세이지메이커 스튜디오 노트북 신기능은 노트북을 선택하고 운영 시스템에서 실행하는 작업을 자동화해 이동 시간을 몇 주에서 몇 시간으로 단축할 수 있다. 아마존 세이지메이커 인퍼런스(Amazon SageMaker Inference)는 새 모델 성능을 실제 운영 시스템에 적용한 모델과 쉽게 대조하는 기능이다. 이로써 테스트 환경을 따로 구축하지 않고 수천 개 모델을 새로 테스트하는 환경을 마련할 수 있다. 운영 시스템에서 수신한 추론 요청의 사본을 새 모델로 가져와 대시보드를 생성하고 주요 지표 간 성능 차이를 보여 준다. 지리공간 ML 예측 생성을 가속화하는 기능도 아마존 세이지메이커에 새로 탑재됐다. 사용자가 지리공간 모델 구축을 시작하기 위해 위성 이미지나 지도 데이터와 같은 서드파티 데이터를 가져와 자체 데이터를 보완하는데, 이 때 방대한 지리공간 데이터로 인해 데이터 세트를 관리에 용이한 하위 집합으로 나누는 코드를 만들어야 한다. 여러 데이터 세트를 재결합해 ML 모델 예측을 상호 연관시키려면 코드를 더 많이 작성해야 하고 완성된 모델 예측을 시각화하려면 지도에 표시(렌더링)하는 데 며칠을 기다려야 한다. 데이터 보완부터 시각화까지 전체 과정에 몇 달이 걸려 적시에 지리공간 데이터 활용과 ML 예측을 하기 어려웠다. 신기능을 탑재한 아마존 세이지메이커는 지리공간 모델 훈련 후 몇 시간 만에 결과를 시각화할 수 있다. 클릭 몇 번으로 또는 API로 AWS나 신뢰할 수 있는 서드파티 공급자, 오픈소스 데이터 세트의 지리공간 데이터 출처에 접근해 내장된 연산자를 사용하면 자체 데이터와 실제 사용하려는 데이터 세트를 결합할 수 있다. 정밀 농업으로 작물 수확량을 늘리고 자연재해 피해 지역을 모니터링하고 도시 계획을 개선하는 사례를 위해 사전 훈련된 딥러닝 모델 접근을 제공한다. 김기완 AWS코리아 시니어 아키텍트는 이번에 세이지메이커에 추가된 신기능에 대해 "그간 다양한 배경을 가진 사용자들이 어려워 했던 복잡한 작업 구간을 단순화하는 흐름으로 개선이 이뤄진 것"이라고 설명했다.

  • 2022-12-01
  • 11:34:36
• 
  [AWS 리인벤트 2022] AWS "데이터 가치 창출 열쇠는 미래지향적 기반, 연결 조직, 머신러닝 민주화" 아마존웹서비스(AWS)가 데이터를 활용해 비즈니스를 키우려는 기업을 위한 클라우드 활용 방안을 구체화했다. 인공지능(AI)·머신러닝(ML) 기술 전문가 임원이 나서서 비즈니스 의사 결정과 혁신 성과를 내기 위한 기업 데이터 전략 3대 핵심 요소를 제시하고, 데이터 엔지니어와 분석가에게 유용한 데이터 분석·활용 지원 기술과 서비스를 선보였다. 스와미 시바수브라마니안(Swami Sivasubramanian) AWS 데이터 및 머신러닝 부사장은 11월 30일(현지시간) 미국 라스베이거스 AWS 리인벤트 2022 기조연설에서 "데이터는 기업 안에서 자연스럽게 흐르지 않고 단절, 불일치를 일으켜 분석과 새로운 아이디어 도출이 어려운 상태"라며 "데이터 가치를 극대화하기 위한 절차가 있는데, (기업 다수가) 아직 갈 길이 멀다"고 말했다. AWS 데이터 전략은 첫째, 기업이 데이터를 제대로 활용하기 위해 우선 핵심 데이터 서비스가 지원하는 미래 지향적 기반을 마련해야 한다는 것이다. 데이터와 사용자 유형에 따라 다양한 도구를 갖춰 모든 워크로드에 적절하게 대응하고 계속 늘어나는 데이터를 알맞은 규모와 성능으로 처리해 IT·데이터 담당자가 더 가치있는 일에 집중하게 해야 한다. 높은 안정성과 보안성도 필수다. AWS는 아마존 세이지메이커로 ML 모델을 쉽게 만들고 다양한 데이터베이스(DB), 데이터레이크, 데이터웨어하우스(DW), 데이터 저장 시스템 질의, 분석, 비즈니스인텔리전스(BI)를 사용해 데이터 수집, 분석, 가공을 처리한다. 시바수브라마니안 부사장은 "천편일률적 접근은 장기적으로 효과가 없다"며 "AWS 상위 고객 1000곳의 94%가 DB와 분석 서비스를 10종 이상 쓴다"고 했다. '아마존 아테나'는 표준 정형데이터 질의 언어(SQL)와 호환하는 AWS 클라우드 기반 서버리스 대화형 질의 서비스로 뛰어난 편의성 덕분에 분석가, 데이터 엔지니어, 데이터 과학자, 개발자 사이에서 인기가 높다. 이번에 정식 출시된 '아마존 아테나 포 아파치 스파크'로 시계열 데이터 분석에 널리 쓰이는 오픈소스 기술 '아파치 스파크'의 데이터도 몇 초 이내에 분석할 수 있게 됐다. 클라우드DW '아마존 레드시프트'에서 쉽게 아파치 스파크 데이터를 분석하는 서비스 '아마존 레드시프트 인티그레이션 포 아파치 스파크'는 다른 환경보다 최대 3배 빠른 성능으로 AWS 클라우드에서 아파치 스파크를 실행한다. '아마존 다이나모DB'는 다른 클라우드DW보다 최대 5배 뛰어난 '가성비'로 매일 엑사바이트 규모 데이터를 처리하고 있다. 노드 당 최대 64테비바이트(TiB)까지 데이터를 확장할 수 있는 완전 관리형 문서DB 서비스 '아마존 도큐먼트DB'는 수만 명의 문서 워크로드에 사용되고 있다. AWS는 단일 DB 노드에 최대 2페타바이트(PB) 데이터를 저장하는 '아마존 도큐먼트DB 엘라스틱 클러스터'를 만들었다. 여러 도큐먼트DB 노드에서 용량을 관리하고 데이터를 수동 배포했던 고객의 관리 부담을 덜어 준 것이다. 시바수브라마니안 부사장은 "넷플릭스는 실시간 이벤트 응답 기반으로 하루 TB 규모 데이터를 수집해 양질의 고객 경험을 제공하고 필립스는 아마존 세이지메이커로 48PB 데이터를 사용하고 디지털 헬스 플랫폼에서 위험군 환자 식별력을 높였다"며 "고성능 기술을 제공받은 조직은 고객에게 더 나은 경험을 제공할 수 있다"고 강조했다. ML 모델 제작을 위한 통합개발환경(IDE)을 제공하는 아마존 세이지메이커는 지리공간 데이터를 사용해 모델을 구축, 훈련, 배포하는 방법을 더 쉽게 만들었다. 아마존 레드시프트는 핵심적인 분석 워크로드를 지원하는 고가용성과 신뢰성을 제공하는 다중 가용영역(AZ)을 지원한다. ML 기술로 이상 행위를 탐지해 보안 위협에 대비하는 '아마존 가드듀티 RDS 프로텍션'도 제공된다. 두 번째 데이터 전략 핵심 요소는 각 부서의 개인과 팀이 데이터를 다루는 경로를 통합해 전사적으로 데이터를 결합하고 연결하는 조직을 구성하는 것이다. 이 결합 조직은 장기적인 성장을 위해 양질의 데이터와 그 품질을 관리할 도구, 데이터 사용에 대해 조직 맞춤형 정책으로 운영하는 거버넌스 시스템, 데이터를 안전하게 공유하고 필요 시 조치를 취하게 할 저장소를 갖춰야 한다. 'AWS 글루 데이터 퀄리티'는 데이터 품질을 높이기 위한 새 도구다. 데이터 품질 규칙을 자동 생성하고 기업의 데이터레이크로 흘러드는 데이터 품질을 자동으로 측정, 감시, 관리하고 수작업 부담을 덜어 준다. '레드시프트 데이터 공유용 중앙화 접근제어'는 AWS 레이크포메이션을 사용하는 레드시프트 데이터에 대한 접근 제어를 중앙 관리하는 새 서비스다. '아마존 세이지메이커 ML 거버넌스'는 ML 개발 환경에서 모델 훈련에 쓰이는 데이터 사용을 통제하고 구성원 간 협력하는 체계를 제공한다. 이 서비스에 사용자 권한을 몇 분 만에 정의해 권한 공유 문제를 해소하는 '역할 관리자', 여러 ML 모델이 만들어진 배경과 특징 등 메타데이터 관리하는 '모델 카드', 다양한 모델의 성능 가시성을 제공하는 '모델 대시보드' 기능이 모여 있다. 시바수브라마니안 부사장은 "거버넌스는 역사적으로 데이터가 사일로(단절된 영역)로 가게 만드는 수단으로 간주됐지만, 올바른 거버넌스는 조직 안에서 적절한 사람이 데이터에 접근해 더 빠르게 움직이고 혁신하도록 도움을 준다"며 "데이터 양이 급증하면 고객은 종단간 전체 데이터를 관리를 원하는데 이 때 ML과 데이터 과학자, 엔지니어 등 많은 사용자가 협업해야 한다"고 했다. 올바른 데이터 거버넌스를 실현하는 데 전날(29일) 발표된 '아마존 데이터존'이 한 축을 맡는다. 데이터존은 조직 전체 데이터를 분석, 검색, 공유, 관리하도록 지원하는 서비스로 데이터 보안과 개인정보 보호 요구사항을 충족하면서 AWS와 타사 데이터 서비스의 데이터 분석을 지원한다. AWS는 아마존 S3, 레드시프트, 키네시스, 오픈시프트, 스플렁크, 파이어호스 등 자체 저장소와 외부 데이터 출처를 통합하는 기술에 투자하고 있다. ML 모델 훈련에 필요한 데이터를 쉽게 가져올 수 있도록 아마존 세이지메이커의 '데이터 랭글러'를 만들었고 아마존 앱플로(AppFlow)로 서드파티 클라우드 소프트웨어와 DW 간 데이터를 쉽게 옮기는 커넥터를 제공하고 있다. 오는 2026년까지 200만개 인간 유전자 분석에 도전하고 있는 제약사 아스트라제네카는 이런 AWS 데이터 통합 기술을 적극적으로 활용하고 있다. AWS 스텝 펑션스, AWS 람다, AWS 배치, 아마존 S3 등을 사용해 게놈 분석을 하면서 25PB 규모 데이터를 쌓았다. 환자 데이터, ML, AI, 원격 데이터 수집, 다중 오믹스, 종양 스캔 기술을 활용해 초기 암 진단과 예측 방법을 연구 중이다. 마지막 세 번째 데이터 전략 핵심은 ML 도구와 교육을 보급해 '데이터를 민주화(보편화)'하는 것이다. 직원이 통찰을 얻고 혁신 폭을 확대하는 일은 교육과 훈련을 통해 가능하다. ML 분야에 부족한 전문가 역할을 채울 인재도 필요한데 이를 위해 기술직군 인재에 전문성을 높이는 교육 프로그램을 제공하고 비(非) 기술직군 인재가 데이터로 더 많은 업무를 수행하도록 지원해야 한다. AWS는 미국에서 연 5만4000명의 컴퓨터과학 전공 대학생이 졸업하는데 오는 2029년까지 AI 분야에 만들어질 1000만개 일자리를 채우기에는 불충분하다고 판단했다. 이에 커뮤니티칼리지에 다니는 지역사회 저소득층, 소외계층 학생에게 장학금을 지급하며 학습 동기를 부여하고, 이들에게 데이터 관리, AI, ML 분야 지식을 전수할 교육자를 양성하는 데 투자하고 있다. 시바수브라마니안 부사장은 "데이터를 모든 직원이 이해하고 통찰을 얻어야 데이터 기반 의사결정을 혁신할 수 있다"면서 "모든 직원이 데이터에 높은 전문성을 가질 필요는 없지만 로코드·노코드 도구를 활용해 기술적인 지식이 없어도 데이터를 활용할 수 있도록 지원을 받아야 한다"고 설명했다. 그는 기술적 지식이 없는 사용자가 몇 분 만에 데이터 분석과 대시보드를 만드는 ML 기반 BI 솔루션 '아마존 퀵사이트'를 소개했다. AWS 고객사인 글로벌 호텔 체인 베스트웨스턴이 2만3000명의 호텔 관리자와 직원에게 데이터를 공유하면서 이를 활용한 사례, 워너브라더스게임즈가 데이터로 플레이어의 경험을 이해하고 캐릭터 제작 등 게임 콘텐츠를 개선한 사례도 제시했다.

  • 2022-12-01
  • 09:48:46
• 
  [AWS 리인벤트 2022] 아담 셀립스키 AWS CEO "데이터가 모든 디지털 전환의 주춧돌" "이 (현실) 세계가 기하급수적으로 늘어나는 데이터의 세계다. 데이터 급증을 어떻게 지원하느냐가 우리의 문제다. 익스피디아는 매년 인공지능(AI) 추론 6000억건을 실행하고 삼성은 전 세계 11억 이용자의 (삼성 계정 서비스) 요청을 초당 8만 건씩 처리한다. 데이터는 모든 디지털 전환의 주춧돌이다. 데이터 왕국을 탐색하기 적합한 도구를 사용하고 그 통찰력을 비즈니스에 적용해야 한다." 아담 셀립스키 아마존웹서비스(AWS) 최고경영자(CEO)가 29일(현지시간) 미국 라스베이거스 AWS 리인벤트 2022 기조연설을 통해 이같이 말하면서 기업 고객의 디지털 전환 성공 방법론을 설파했다. 그는 데이터베이스(DB), 데이터웨어하우스(DW), 머신러닝(ML), 추출·변환·적재(ETL), 비즈니스인텔리전스(BI), 정보보안, 고성능컴퓨팅(HPC) 분야에 걸쳐 AWS 클라우드의 주요 기술과 서비스로 데이터 수집·분석부터 활용까지 이르는 모든 과정에서 기업이 높은 비용 효율과 성능을 얻도록 지원하겠다고 강조했다. 퍼블릭 클라우드 자체의 비용 절감 효과가 먼저 언급됐다. 클라우드로 전환한 포춘500 기업 캐리어는 비용을 40% 절감했고 길리어드는 6000만 달러를 아꼈으며 또다른 포춘500 기업 애그코는 비용 78%를 절감했다. AWS가 글로벌 시장 점유율 1위를 차지하고 있는 클라우드가 전통적인 IT 대비 비용면에서 우위에 있을뿐 아니라 숙박 공유 중개업체 에어비앤비가 코로나19 사태로 시장이 무너질 때 클라우드의 이점을 활용해 즉시 6350만 달러를 절감했다가 최근 여행이 재개하면서 다시 확장에 나서고 있다. 셀립스키 CEO는 "클라우드로 더 비용 효율적이면서 민첩하게 혁신을 추진할 수 있다"며 "기업의 온프레미스(자체 구축 인프라)를 AWS로 이전하면서 새로운 애플리케이션 출시 시간도 단축한다"고 말했다. 그는 "기업은 불확실한 시대에도 혁신, 성취를 위해 새로운 환경을 탐색해야 하고 무엇이든 예상하지 못한 상황에 유연하게 대응해야 하는데 클라우드가 그런 힘을 제공한다"며 "기업이 경쟁사보다 강하고 빠르게 움직이도록 대비할 수 있게 해 준다"고 강조했다. AWS 클라우드 기반 DB 제품군 가운데 관계형DB '아마존 오로라'는 그와 호환되는 기술인 MySQL의 5배, 포스트그레SQL의 3배 성능을 보장하면서 비용을 10분의1 수준으로 줄여 준다. 셀립스키 CEO는 "여러 데이터를 분석하려면 인공지능(AI), ML 서비스 가격과 성능이 합리적이고 포괄적, 심층적인 데이터 분석 성능과 규모, 비용을 타협하지 않고 활용할 수 있어야 한다"며 "아마존 EMR 기반으로 (빅데이터 처리를 위해) '아마존 매니지드 스트리밍 포 아파치 카프카'와 '아마존 레드시프트'를 쓸 수 있다"고 했다. 아마존 레드시프트는 완전 관리형 테라바이트(TB)급 클라우드DW다. 셀립스키 CEO에 따르면 이를 활용해 수많은 고객이 매일 엑사바이트(EB) 규모 데이터를 처리하고 있고 다른 클라우드DW보다 가격대성능비가 5배 높다. 레드시프트 서버리스 기능을 통해 필요할 때만 이 기술을 쓰고 불필요할 때 중지해 사용량만큼 가격을 지불할 수 있다. 기존 애널리틱스 서버리스에 더해 '아마존 오픈서치 서버리스'가 나왔다. 인터랙티브 로그 분석과 실시간 애플리케이션 모니터링을 위한 오픈서치 기능을 서버리스로 제공한다. 셀립스키 CEO의 소개로 프랑스의 다국적 전력 기업 그룹 엔지(Engie)의 비야나 카이토비치(biljana kaitovic) 최고정보책임자(CIO)가 무대에 등장했다. 엔지는 AWS와 협력해 재생에너지 생산과 최적화를 위한 분석, 설비 고장 예측과 유지관리를 위한 사물인터넷(IoT), ML 기술을 활용하고 AWS 공통 데이터 허브로 1000여개 프로젝트의 많은 데이터를 처리하고 있다. 이를 위해 아마존 레드시프트, 글루, 아테나, 세이지메이커 등 다른 AWS 기술을 활용해 개발자와 데이터 전문가가 협업해 관련 코드를 빠르게 배포한다. 이어 '제로ETL'이 소개됐다. 이는 아마존 오로라와 아마존 레드시프트 서비스에 담긴 데이터를 ETL 작업 없이 옮기는 솔루션이다. 통상 기업에서 성격이 다른 DB를 통합하기 위해 ETL 시스템을 구성하면 이를 지속적으로 관리하기 위해 많은 코드 작성과 테스트, 데이터 변경 발생시 재시도 등 골치 아픈 상황을 감수해야 한다. AWS 클라우드 안에서나마 제로ETL 솔루션으로 이 작업을 아예 걷어낸다면 레드시프트와 오로라 DB를 운영하는 기업이 추가 관리 부담 없이 최신 정보를 실시간 통합해 활용할 수 있다. 데이터를 통합하면 이를 분석해 의미를 도출하는 단계로 넘어가야 한다. 여러 업무 담당자들이 비즈니스 개선과 성장을 위해 각자 역할과 권한에 맞는 전사 데이터에 접근할 수 있어야 한다. AWS는 이를 위해 조직 내 모든 유형의 부서와 구성원에 맞는 데이터 접근 권한 제어와 거버넌스를 구성하고 운영할 수 있는 웹 포털 서비스 '아마존 데이터존'을 만들었다. 조직 내 데이터 생산자가 이 서비스에 데이터를 연결하고 카탈로그에 정보를 추가하면 누구나 데이터 자산을 확인하고 구성원 간 협업할 수 있다. AWS에는 클라우드 BI '아마존 퀵사이트'가 있다. 이 도구는 자연어 질의 음성을 입력해 SQL로 데이터를 변환해 주는 '퀵사이트 Q'를 제공해 데이터 분석, 시각화 작업의 진입 장벽을 낮춰 준다. 퀵사이트 Q에 특정 비즈니스 데이터의 배경을 물으면 이유를 찾아 알려 주고 추세가 유지될 때 미래 실적을 예측하는 ML 기반 기능, 임원들에게 보고하기 좋게 출력용 보고서 파일을 생성하는 기능, 데이터 준비 시간을 단축하는 자동 전처리 기능, 대규모 데이터 세트 연결 기능, 기존 BI를 API로 관리하는 기능이 추가됐다. AWS 클라우드 기반 관리형 컨테이너 서비스 '아마존 EKS' 사용자를 위한 보안 기술 '아마존 가드듀티 EKS 프로텍션'과 '컨테이너 런타임 쓰렛 디텍션 포 가드듀티'가 소개됐다. 셀립스키 CEO는 이런 기술이 높은 보안성을 요구하는 의료기관, 은행, 정부 등의 인프라를 24시간 모니터링하고 다중 오류 감지, 데이터 분석, 암호화 기능을 제공해 다른 클라우드나 구축형 시스템보다 더 안전하다고 주장했다. 이에 더해 AWS 클라우드와 수천 개 파트너 솔루션이 통합돼 애플리케이션과 데이터 안전을 보장한다고 했다. AWS가 자체 개발한 프로세서 시리즈인 니트로(Nitro), 그래비톤, 트레이니엄, 인퍼런시아 등을 활용해 구동되는 아마존EC2 신형 인스턴스의 성능 이점이 강조됐다. 이전 세대보다 빠른 연산 속도, 적은 에너지 소비량, 높은 전력 당 성능과 가격대 성능비, ML 작업 시 훈련과 추론 단계에서 각각 강점을 발휘하는 인스턴스의 높은 효율을 뒷받침하는 연산 성능과 네트워크 처리 대역폭, 기후예측·전산유체역학 등 HPC 워크로드에 최적화한 높은 성능 등이 수치로 제시됐다. 앞으로 AWS 클라우드 기술이 특정 사진이나 영상으로 담긴 이미지의 물리적 공간을 분석하는 '스페이셜 컴퓨팅' 분야에도 쓰일 전망이다. '심스페이스 위버'가 이를 위한 새로운 서비스다. 가상 공간 시뮬레이션을 구축하고 분석하려는 개발자가 언리얼엔진이나 유니티 등 3D 엔진과 통합한 콘텐츠를 구축하는 작업을 수행하면서도 기반 인프라를 고민할 필요가 없도록 만들어졌다. 심스페이스 위버를 사용하면 클릭 몇 번에 공간 시뮬레이션 계산 명령을 내리고 필요한 만큼 인스턴스를 확장할 수 있다. 셀립스키 CEO는 이날 클라우드로 IT 분야의 한계를 극복하는 것을 넘어 고객사의 주요 비즈니스 영역에 주어진 제약을 넘어서는 것도 지원하겠다는 메시지를 던졌다. 콜센터 관리용 솔루션 '아마존 커넥트'에 직원 성과 문제 식별, 코칭 등 관리를 수행하기 위한 '아마존 커넥트 ML 드리븐 포어캐스팅'을 제공한다. 30년 아마존닷컴 이커머스 운영 노하우를 녹인 'AWS 서플라이 체인' 솔루션도 공개했다. 여러 업종이 소비자 이해도를 높이기 위해 협업할 수 있는 데이터 결합 분석 서비스 'AWS 클린룸'도 출시된다. 세포치료제를 개발하는 미국 제약사 라이엘 이뮤노파마(Lyell Immunophama)의 리즈 호먼스 CEO는 기조연설 무대에 등장해 AWS와 협업해 구축한 암환자용 세포 치료법 연구설비 운영 환경과 실제 세포 치료제 개발을 위한 실제 환자 데이터 관리·분석 방법을 소개했다. 이어 셀립스키 CEO가 헬스케어 기업의 의료 데이터 분석을 위한 전용 데이터레이크 '아마존 헬스레이크'와 유전체 기반 신약 개발 등으로 주목받고 있는 오믹스(생체 물질 전반을 포괄하는 용어) 데이터 분석 서비스 '아마존 오믹스'를 소개했다. 셀립스키 CEO는 "고객은 그들에게 필요한 것이 방대한 데이터에서 통찰력을 얻는 능력, 안전하게 주위 환경을 파악하는 능력, 극한 조건 속에서도 작업을 수행할 수 있는 능력, 비전과 가능성을 바라보며 (도달할 목표를) 상상할 수 있는 능력이라고 우리에게 알려 준다"면서 "우리는 모든 상황에서 이걸 제공할 것"이라고 말했다. 그는 "사람들에게 탐험 정신을 불어넣고 혁신하게 하고, 변화를 시도하고 빠르게 반복케 하고, 더 나은 시도를 하게 할 것"이라며 "이것이 클라우드의 진정한 힘"이라고 덧붙였다.

  • 2022-11-30
  • 21:40:52
• 
  [AWS 리인벤트 2022] 업종 간 데이터 결합 활용도 클라우드로…'AWS 클린룸' 공개 아마존웹서비스(AWS)가 업종을 넘나드는 데이터 결합을 간편하게 처리하도록 지원하는 클라우드 기반 데이터 결합·분석 서비스 'AWS 클린룸(AWS Clean Rooms)'을 공개했다. 이는 AWS 광고·마케팅 사업부가 제공하는 독립적인 상품(offering)으로 광고대행사와 광고기술기업, 브랜드와 미디어출판 기업이 광고와 마케팅 캠페인 효과를 높이기 위한 포괄적인 솔루션으로 제공된다. AWS는 29일(현지시간) 미국 라스베이거스 AWS 리인벤트 2022 행사에서 AWS 클린룸을 발표하고 이미 AWS를 사용하는 기업들이 AWS 클린룸 안에서 쉽게 협업할 수 있다고 밝혔다. AWS 클린룸은 기업이 기초 데이터(underlying data) 노출 없이 다른 회사와 협력해 데이터 세트를 결합하고 광고 캠페인, 투자 결정, 임상 연구 등을 위한 분석을 수행할 수 있는 서비스로 소개됐다. AWS 클린룸은 쿼리 제어, 쿼리 출력 제한, 쿼리 로깅, 암호화 컴퓨팅 도구를 포함하고 민감한 데이터를 보호하는 자체 데이터 접근 제어 세트를 제공한다. 현재 시험판(preview)으로 나온 AWS 클린룸은 내년 초 미국 동부(Ohio, N. Virginia)와 서부(Oregon), 아시아태평양(Seoul, Singapore, Sydney, Tokyo), 유럽(Frankfurt, Ireland, London, Stockholm) 클라우드 리전에서 제공된다. AWS 설명에 따르면 이 서비스는 기업이 다른 파트너와 각자 수집해 보유한 데이터 세트를 함께 분석하고 협업해 활용하도록 지원한다. AWS 클라우드에서 자체 클린룸을 몇 분 만에 만들고 클릭 몇 번으로 공동 데이터 세트 분석을 시작할 수 있다. AWS 관리 콘솔에서 협업 파트너, 데이터 세트를 선택하고 참여자에 대한 제한 조건을 구성하는 과정을 거치면 된다. AWS 클라우드 사용 기업이 실행한 질의에 대해 AWS 클린룸이 해당 데이터가 있는 곳에서 데이터를 읽고 내재된 분석 규칙을 적용해 데이터 통제를 유지하도록 돕는다. 각 참여자가 실행하는 질의에 대한 제한을 기업이 지정할 수 있다. AWS 클린룸은 엄격한 데이터 처리 정책을 준수하기 위해 질의 처리 도중 데이터를 암호화 상태로 유지하는 고급 암호화 컴퓨팅 도구도 포함한다. 여러 산업 분야 기업이 자사 데이터를 외부 파트너 데이터로 보완하려고 하는 추세다. 광고 업계에선 다양한 채널과 애플리케이션에 저장된 데이터 세트로 협업해 광고와 마케팅 캠페인의 관련성을 높이고 소비자 참여를 늘리려고 한다. 동시에 이런 기업은 민감한 소비자 개인정보를 보호하고 원시 데이터 공유를 줄이거나 제거하길 원한다. AWS는 "어떤 회사는 종종 사용자 수준 데이터(user-level data) 사본을 파트너에게 제공하고 계약을 통해 오용을 방지하려고 한다"며 "데이터 클린룸은 참여자가 서로 원시 데이터를 못 보게 보호한 환경에서 여러 참여자가 데이터를 결합·분석하게 해 이 문제 해결을 돕지만 이는 구축하기 어렵고 복잡한 개인정보 보호 제어와 분석 도구 맞춤화 등에 개발 기간이 몇 달 걸린다"고 했다. AWS는 또 "새 협력자가 추가되거나 다른 유형 분석이 필요하면 회사는 더 많은 개발 시간을 소비해야 한다"며 "이런 회사가 직접 통제할 수 없는 스토리지 환경에 데이터를 반복적으로 복사하고 업로드해야 하므로 비용이 늘고 민감한 정보가 노출될 위험이 있다"고 지적했다. 직접 데이터 클린룸을 구축하려고 하면 이런 어려움을 겪는 만큼, 대신 AWS 클린룸을 쓰라는 얘기다. AWS 클린룸은 한국에서 개인정보의 일부나 전부를 대체·삭제해 추가정보 없이 개인을 못 알아보게 만든 '가명정보' 보유 기업이나 기관 여럿이 이를 결합해 활용하고자 하는 경우 유용할 수 있다. 다만 현행법상 정부 지정 '가명정보결합전문기관'이 이런 가명정보 결합을 수행할 권한을 갖고 있고 이들은 가명정보 결합과 반출을 위해 '가명정보 처리 가이드라인'을 준수해야 하는데 AWS 클린룸이 이를 지원하는지 여부는 불분명하다.

  • 2022-11-30
  • 19:47:16
• 
  [AWS 리인벤트 2022] AWS "보안 특화 데이터레이크, 클라우드에 담자" 아마존웹서비스(AWS)가 보안 문제에 더 빠르게 대응할 수 있도록 특화한 페타바이트(PB) 단위 대규모 데이터 저장소를 간단하게 생성하고 관리하는 '아마존 시큐리티 레이크'를 선보였다. AWS는 29일(현지시간) 미국 라스베이거스 AWS 리인벤트 2022 행사에서 클라우드와 구축형 시스템에서 나온 보안 관련 데이터를 AWS 사용자의 전용 데이터 레이크로 중앙 집중화하하고 보안 데이터에 대해 더 빨리 조치를 취할 수 있게 했다고 밝혔다. 기업은 조직 전체 보안 활동에 대한 가시성을 높여 위협과 취약성을 미리 파악하고 보안 경고에 대응하고 향후 문제가 나오지 않도록 예방하려고 한다. 대부분 이를 위해 클라우드와 온프레미스 환경에 실행되는 애플리케이션, 방화벽, 계정 시스템 등의 로그와 이벤트 데이터에 의존한다. 기업은 이 데이터를 분석해 민감 데이터 외부 유출이나 직원 기기에 설치된 악성코드를 식별한다. 그런데 여러 보안 솔루션의 로그와 이벤트 데이터 출처는 대부분 호환되지 않는 고유 데이터 형식을 사용하기 때문에 분석에 앞서 일관된 형식으로 정규화해야 한다. 이를 위해 동일한 데이터를 여러 번 복제하고 처리하는 경우가 많은데 이는 시간과 비용 부담이 크고 보안 부서의 문제 발견, 대응 능력을 떨어뜨린다. 일반 데이터 레이크의 모든 보안 데이터에 대한 중앙 저장소를 생성하는 보안 부서도 있지만 이런 시스템을 만들어 관리하려면 전문적인 기술이 필요하고 출처가 서로 다른 대규모 로그 데이터가 PB 단위로 처리될 수 있어 몇 달에 걸쳐 구축해야 할 수 있다. 아마존 시큐리티 레이크는 기업이 보안 이슈에 더 빠르게 대응할 수 있도록 데이터를 집계하고, 정규화하거나, 저장할 수 있도록 특화된 보안 데이터 레이크다. AWS 클라우드 서비스 사용자가 선호하는 도구를 사용해 몇 번의 클릭만으로 간단하게 생성할 수 있다. 아마존 S3와 AWS 레이크 포메이션을 사용해 보안 데이터 레이크를 구축하고 사용자 계정에 그 인프라를 자동 구성한다. 아마존 시큐리티 레이크에 사용자가 선택한 데이터 출처를 연결하면 해당 지역에 맞게 보안 데이터 레이크가 자동 생성돼 현지 데이터 규제 요건을 충족할 수 있다. AWS 데이터를 자동 정규화하고 개방형 산업 표준(OCSF)을 지원하는 서드파티 솔루션 출처를 결합해 저장하고 질의하기 쉬운 형식으로 최적화한다. 사용자가 생성한 보안 데이터 레이크에 아마존 아테나, 아마존 오픈서치, 아마존 세이지메이커 등 보안 도구와 분석 도구를 IBM, 스플렁크, 수모로직 등 서드파티 솔루션과 함께 사용할 수 있다. AWS와 시스코시스템즈, 크라우드스트라이크, 팔로알토네트웍스 등 50여개 서드파티 파트너 솔루션의 사용자 데이터 출처에서 빠른 심층 데이터 분석을 수행할 수 있다. AWS는 "아마존 시큐리티 레이크는 고객이 전반적인 보안 대응 절차를 개선하고 보안 팀이 이슈를 식별, 이해할 수 있도록 더 큰 가시성을 제공하며, 보안 문제 해결 시간을 단축하도록 지원한다"고 설명했다.

  • 2022-11-30
  • 18:44:21
• 
  [AWS 리인벤트 2022] AWS, 데이터 분석·시각화 도구 퀵사이트 확산 촉진…"과거 분석 넘어 미래 예측까지" 아마존웹서비스(AWS)가 클라우드 서버리스 형태 비즈니스 인텔리전스(BI) 기술 '아마존 퀵사이트(Amazon QuickSight)'에 탑재한 자연어 기반 데이터 조회 기능의 지원 범위를 과거 분석에서 미래 예측으로 확대한다. AWS는 29일(현지시간) 미국 라스베이거스 AWS 리인벤트 2022 현장에서 아마존 퀵사이트를 사용한 BI 작업 간소화를 지원하는 신기능을 발표했다. 이로써 사용자가 판매 예측, 중요 운영 보고서 배포, 트래픽 집약적 웹사이트 분석, 방대한 데이터 세트 시각화 분석 등을 활용해 대규모 데이터 기반 의사 결정을 내릴 수 있게 했다. AWS는 아마존 퀵사이트의 자연어 기반 데이터 질의 기능인 '퀵사이트 Q'를 머신러닝 기술과 결합된 서비스로 확장했다. 사용자가 자연어로 더 쉽고 빠르게 질문을 던질 수 있게 했다. 데이터 준비를 자동화해 판매 예측 등 특정 예측 결과를 받고 그 이유까지 되물을 수 있게 됐다. 모든 사용자가 비즈니스 데이터에 대해 자연어로 질문하고 시각화를 통해 몇 초 만에 정확한 답을 받을 수 있다. 누구나 기술적 전문 지식 없이 과거 추세와 지표를 탐색하고 사용자에게 데이터 기반 통찰력을 제공한다. 예를 들어 영업 담당자가 '작년에 가장 많은 품목을 판매한 곳이 어디인지' 묻거나 재무 담당자가 '목표 대비 실제 수익이 얼마인지' 물을 때 아마존 퀵사이트 Q는 머신러닝 기술로 강화된 신기능을 통해 빠르게 답을 제시한다. 또 비즈니스 사용자는 과거의 추세가 유지될 때 성과 지표 달성 가능성을 전망하기 위한 질문을 던지고 특정한 현재 비즈니스 성과에 기여한 과거 데이터를 확인하기 위해 '왜'라는 질문을 던질 수 있다. 사용자는 다른 신기능인 '아마존 퀵사이트 페이지별 보고서(Amazon QuickSight Paginated Reports)'를 통해 아마존 퀵사이트에서 대화형 대시보드와 페이지를 매겨 출력한 보고서를 생성하고 데이터 세트 수십억 행을 빠르게 분석·시각화할 수 있다. 프로그래밍 방식으로 BI 자산을 관리하고 앞서 구축된 시스템을 빠르게 전환할 수 있다. 이는 아마존 퀵사이트 기업용 버전(QuickSight Enterprise Edition)을 사용하는 모든 고객사에 부가기능(add-on)으로 제공된다. 앞서 소개된 두 신기능 외에 세 가지가 더 있다. AWS는 BI 팀이 아마존 퀵사이트 Q로 자연어 기반 데이터 질의를 할 때 필요한 데이터 준비 시간을 며칠에서 몇 분으로 단축하는 '자동 데이터 전처리(Automated data preparation)'를 제공한다. 아마존 퀵사이트의 초고속·병렬·인메모리·계산엔진(SPICE)을 강화해 사용자가 인프라 설정과 관리 없이 수십억 행(row)에 달하는 대규모 데이터 세트를 SPICE에 연결하고 빠르게 분석할 수 있도록 만들었다. 그리고 퀵사이트 API 기능을 확장해 기업이 기존 구축형 BI 툴과 자산을 프로그래밍 가능한 방식으로 관리하고 향후 클라우드 기반으로 쉽게 이전하도록 했다. G2 크리슈나무티(G2 Krishnamoorthy) AWS 분석 담당 부사장은 "10만여 고객이 퀵사이트로 BI 수요를 충족한다"고 말했다. 이어 "퀵사이트는 클라우드용으로 구축된 포괄적이고 빠른 서비스로 BI 운영 간소화, 직관성, 유연성, 접근이 강화됐다"며 "AWS는 대규모 데이터 기반 의사 결정을 지원하는 고급 BI 기능을 제공해 지속해서 고객을 위해 혁신하고 있다"고 말했다. 아마존 퀵사이트는 3M, 베스트웨스턴, 브리스톨-마이어스 스퀴브, 캐피탈 원, 컴캐스트, 익스피리언, 가디언 라이프, 맥도날드, NFL, NTT 도코모, 지멘스, 유나이티드항공 등에 도입됐다. 아마존 퀵사이트가 작년 80여개 신기능을 추가하고 이번에 주요 신기능을 추가한 것은 고객 인프라 사이에서 클라우드 기반 BI 확산을 추진하고 통합해 나가려는 AWS 전략의 일환이다.

  • 2022-11-30
  • 17:44:18
• 
  [AWS 리인벤트 2022] AWS, 데이터 관리 서비스 '아마존 데이터존' 공개…IT·데이터 전문가와 실무자 협업 촉진 아마존웹서비스(AWS)가 기업 데이터센터에 구축된 시스템과 클라우드에 저장된 데이터를 빠르게 찾아 IT·데이터 전문가와 실무 담당자 권한 별 접근과 활용을 촉진하는 데이터 관리 서비스 '아마존 데이터존(Amazon DataZone)'을 공개했다. 아마존 데이터존은 사용자가 데이터 접근을 관리하고 데이터 검색, 사용, 협업으로 시사점을 얻게 해 조직의 데이터 중심 의사결정을 돕는다. AWS는 29일(현지시간) 미국 라스베이거스 AWS 리인벤트 2022 행사에서 아마존 데이터존을 발표했다. 이를 사용하는 조직의 데이터 관리 담당자와 데이터 생산자가 데이터 접근을 관리하고 제어해 엔지니어, 데이터 과학자, 제품 관리자, 분석가, 비즈니스 사용자 등 구성원 역할 별 권한에 알맞게 데이터에 접근해 검색, 사용, 협업하고 인사이트를 도출할 수 있게 지원한다. 많은 기업이 여러 부서, 서비스, 구축형 데이터베이스, 파트너 솔루션과 공공 부문 데이터 소스에 분산된 페타바이트, 엑사바이트 규모 데이터를 수집한다. 직원들은 의사 결정을 위해 동료가 생산한 정보를 검색하고 분석하고 싶어 한다. 기업은 데이터 접근성을 보장하면서 적절한 사람만 접근할 수 있도록 제어와 거버넌스를 유지해야 한다. 조직 내 모든 데이터, 부서, 사용 사례를 고려한 거버넌스 정책을 마련하는 것은 어려운 일이다. 정보를 선별하고 활용을 제안하는 데이터 카탈로그 시스템을 구축하면 유지와 관리에 많은 시간이 소모되고 데이터 생산자가 출처와 설명 등을 수동 지적해야 하는 부담을 안게 된다. 데이터 소비자가 소유자에게 접근 승인을 요청할 수 없고 생산자의 수동 레이블 지정 부담도 크다. 사용자가 데이터 카탈로그 시스템에서 필요한 정보를 찾아도 데이터를 소유한 쪽에 접근 허용을 요청하고 분석 서비스에 데이터를 올려 협업하기는 어려울 수 있다. 의사결정자가 필요한 정보를 제때 얻지 못하거나 불완전하거나 오래된 데이터를 기반으로 잘못된 결정을 내릴 수 있다. 아마존 데이터존을 도입한 조직의 데이터 생산자는 데이터존 웹 포털로 데이터 분류 체계를 정의하고 거버넌스 정책을 구성한다. 아마존 S3, 아마존 레드시프트 등 AWS 서비스 파트너 솔루션, 온프레미스 시스템에 연결하는 등 작업으로 자체 비즈니스 데이터 카탈로그를 설정한다. 각 조직에 아마존 데이터존으로 설정된 자체 비즈니스 데이터 카탈로그는 머신러닝 기반으로 각 데이터 세트의 정보 출처와 데이터 유형 등 메타데이터를 수집, 제안한다. 메타데이터를 통해 분류 체계, 선호도를 훈련하고 점진적으로 개선해 카탈로그를 유지 관리하는 번거로움을 덜어 준다. 카탈로그가 설정되면 웹 포털로 데이터 자산을 찾아 데이터 세트에 접근을 요청할 수 있다. 직원이 데이터 분석을 시작할 준비가 되면 사용자는 아마존 데이터존에 다양한 데이터 세트를 가져오고 동료와 함께 접근하고 분석을 위해 협업하는 '아마존 데이터존 데이터 프로젝트'를 생성한다. 이는 아마존 레드시프트, 아마존 아테나, 아마존 퀵사이트 등 AWS 분석 서비스와 통합돼 별도 자격증명 관리 없이 데이터 프로젝트 환경에서 사용자 접근과 데이터 사용을 허용한다. 아마존 데이터존은 데이터브릭스, 스노플레이크, 태블로 등 파트너 솔루션과 사용자 지정 솔루션에 통합할 수 있는 애플리케이션 프로그래밍 인터페이스(API)를 제공한다. 이 API를 활용하면 고객이 모든 데이터 자산을 게시, 검색, 사용할 수 있다. 프랑스 에너지 기업 엔지(ENGIE), 미국 미디어 기업 폭스 코퍼레이션, 브라질 금융사 이타우(Itaú) 등이 아마존 데이터존 고객사다.

  • 2022-11-30
  • 17:07:54
• 
  [AWS 리인벤트 2022] AWS, 아마존 이커머스 공급망 운영 노하우 클라우드로 판다 아마존웹서비스(AWS)가 모기업이자 세계 최대 전자상거래 업체인 '아마존닷컴'이 약 30년 간 쌓아 온 공급망 관리·운영 노하우를 상품화했다. 기업에 머신러닝 기술 기반으로 공급망 가시성과 분석력을 제공하는 'AWS 서플라이 체인(AWS Supply Chain)'을 AWS 클라우드 서비스로 만들어 선보였다. 기업이 소비자에게 상품과 서비스를 제공하기 위해 의존하고 운영 비용과 직결돼 있는 공급망 위험에 더 쉽고 빠르게 대처하도록 지원하겠다고 예고했다. AWS는 29일(현지시간) 미국 라스베이거스 AWS 리인벤트 2022 현장에서 AWS 서플라이 체인을 발표하고 이 애플리케이션으로 기업이 공급망에 머신러닝 기반 데이터 분석을 적용하고 위험을 완화하며 비용을 절감하고 고객 경험을 개선할 수 있다고 밝혔다. 기업이 이를 활용해 여러 공급망 시스템에서 데이터를 자동 결합하고 분석해 실시간 운영 상태를 관찰하고 트렌드를 빨리 파악해 수요를 더 정확하게 예측하고 소비자 기대치에 맞는 재고를 확보할 수 있다고 AWS는 설명했다. 아담 셀립스키 AWS 최고경영자(CEO)는 이날 키노트를 통해 "기업은 글로벌 공급망 네트워크를 조정하고 최적의 비용으로 제때 적절하게 상품을 배송할 책임이 있다"면서 "지난 1년 간 항만 등 물류 현장에서 광범위하고 심각한 공급망 관련 혼란을 빚었는데, 기업은 이럴 때 공급망 문제 대처 계획을 세우고 비용을 관리하고 공급망을 유지할 방안을 고민하고 재고를 파악, 조정하는 최선의 조치를 강구해야 한다"고 강조했다. AWS 서플라이 체인은 업력 30년 아마존닷컴의 공급망 문제 해법을 품은 솔루션이다. 사전 훈련한 머신러닝 모델을 사용해 기업의 전사적자원관리(ERP)와 공급망관리(SCM) 시스템에서 데이터를 이해하고 추출하고 집계해 통합한 '공급망 데이터레이크'를 구성한다. 위치 별 재고 구성과 수량 현황을 보여 주는 실시간 시각화 지도로 이 정보 맥락을 나타내고 머신러닝 기반으로 재고 관리와 수요 계획 담당자, 공급망 리더에게 위험에 대비하도록 경고하는 잠재적 재고 부족 또는 지연 등 감시 목록을 만들 수 있다. 셀립스키 CEO는 "AWS 서플라이 체인은 실시간 재고 현황을 파악해 사용자에게 조정을 권고하고 재고 소진을 피하기 위해 검토할 만한 지역 간 재고 이동 조치를 제안한다"고 설명했다. 그는 "공급망 복잡성 때문에 큰 영향을 미치는 문제를 파악해도 부정확한 정보를 기반으로 의사결정을 내려야 할 때가 있다"며 "재고 현황 오류와 전송 지연을 방지하기 위해 사용자는 팀원이나 담당자와 채팅과 메시징 기능으로 협업하고 공급망 위험을 더 정확하게 예측할 수 있다"고 덧붙였다. 앞서 자원 부족 심화, 전쟁, 자연 재해 등으로 수요와 공급 변동성이 커졌다. 기업이 부품 부족, 선적항 혼잡, 기상 악화 등을 잘못 예측하면 과도한 재고 비용이나 고객 경험 수준 하락을 초래하게 된다. 공급망 가시성 확보를 위해 기업이 ERP와 SCM 시스템 전체 데이터에 접근하려면 맞춤형 통합 환경을 구축해야 하는데 이는 고비용 장기 프로젝트 기반 시스템 개발을 수반하고 공급망에서 발생한 문제를 감지하기 어렵게 만들 수 있다. 셀립스키 CEO는 "많은 기업 고객이 AWS 인프라 기반 머신러닝과 공급망 기술을 사용해 그들을 지원할 수 있느냐고 문의했다"면서 "기업은 AWS 서플라이 체인으로 ERP와 SCM 시스템 간 데이터를 일일이 수작업으로 연계할 필요 없이 클릭 한 번으로 통합해 여러 경비를 절감하면서 공급망 전반의 가시성을 확보할 수 있다"고 설명했다. 그는 AWS 서플라이 체인을 초기 라이선스 비용 부담 없이 쓸 수 있다면서 "이것은 시작일 뿐, 여러분에게 가장 어려운 공급망 문제 해결을 도울 것"이라고 덧붙였다.

  • 2022-11-30
  • 10:38:07
• 
  [AWS 리인벤트 2022] AWS, 자체 칩 가상서버로 HPC·AI 가성비 높였다 아마존웹서비스(AWS)가 자체 설계한 반도체 프로세서로 고성능컴퓨팅(HPC), 네트워크 집약적 애플리케이션, 머신러닝 추론 연산 구동 성능을 확 끌어올린 가상서버 신상품 3종을 선보였다. 전날 소프트웨어 알고리즘으로 머신러닝 훈련 연산 성능을 높인 신상품과 함께 주요 HPC와 인공지능(AI) 모델 제작과 활용을 위해 효율을 높인 인프라를 지원하게 됐다. AWS는 29일(현지시간) 미국 라스베이거스 AWS 리인벤트 2022 현장에서 'Hpc7g', 'C7gn', 'Inf2' 등 새로운 세 가지 아마존 EC2 인스턴스를 공개하고 이들이 더 낮은 비용으로 더 높은 성능을 제공한다고 밝혔다. Hpc7g 인스턴스는 AWS의 ARM 기반 프로세서 '그래비톤3E'로 구동되는 HPC 워크로드용 가상서버 상품이다. 기존 C6gn 인스턴스보다 2배 높은 부동소수점 성능과 Hpc6a 인스턴스보다 20% 높은 성능을 구현한다. 전산 유체 역학, 날씨 시뮬레이션, 유전체학, 분자 역학 분야 HPC 워크로드에 최고의 가성비를 제공한다. 아스트라제네카, 포뮬러원(Formula 1), 맥사테크놀로지스 등이 유전체학 처리, 전산유체역학, 일기예보 시뮬레이션 등 기존 HPC 워크로드를 AWS에서 실행하고 있다. 엔지니어, 연구원, 과학자가 코어 수천 개로 데이터를 처리하고 거의 무제한 컴퓨팅 용량과 고대역폭 네트워크를 제공하는 HPC에 최적화한 아마존 EC2 인스턴스로 HPC 워크로드를 실행한다. AWS에 따르면 Hpc6a, Hpc6id, C5n, R5n, M5n, C6gn 등 기존 HPC용 인스턴스는 대부분 HPC 사용 사례에 충분하지만, 고객들은 AI나 자율주행차 등 새로운 애플리케이션 문제를 해결하고 코어를 수만 개 이상으로 확장하는 HPC 워크로드 비용을 줄이기 위해 추가로 확장할 수 있는 HPC 최적화 인스턴스를 원한다. AWS는 "Hpc7g 인스턴스는 모든 AWS 인스턴스 유형에서 높은 메모리 대역폭과 CPU당 가장 높은 네트워크 대역폭을 제공하므로 HPC 애플리케이션 결과를 더 빨리 낸다"며 "고객은 오픈소스 클러스터 관리 도구인 AWS 패러렐클러스터(ParallelCluster)와 함께 Hpc7g 인스턴스를 사용해 다른 인스턴스 유형과 Hpc7g 인스턴스를 프로비저닝할 수 있다"고 설명했다. C7gn 인스턴스는 신형 니트로(Nitro) 카드를 탑재한 네트워크 집약적 워크로드용 인스턴스로 기존 인스턴스 대비 CPU당 네트워크 대역폭을 2배로 늘리고 초당 패킷 성능을 3배 늘렸다. 방화벽, 가상 라우터, 로드 밸런서 등 네트워크 가상 어플라이언스나 데이터 암호화같이 까다로운 네트워크 집약적 워크로드를 실행하는 데 알맞다. AWS는 아마존 EC2 네트워크 최적화 인스턴스 가운데 C7gn 인스턴스가 최고 수준 대역폭과 패킷 처리 성능을 제공하고 '엘라스틱 패브릭 어댑터(EFA)' 네트워크 지연시간을 줄일 수 있으며 기존 C6gn 인스턴스 대비 암호화 워크로드보다 25% 높은 연산 성능과 2배 빠른 속도를 지원한다고 설명했다. C7gn 인스턴스의 고성능과 빠른 네트워크 속도를 실현하는 니트로 카드는 네트워크 가속 기능을 지닌 '니트로 AL10' 칩으로 구동된다. 이 니트로 카드는 호스트 CPU에서 특수 하드웨어로 기능 입출력을 오프로드하고 가속화해 대다수 아마존 EC2 인스턴스 자원의 CPU 사용률을 낮추면서 일관된 성능을 제공한다. Inf2 인스턴스는 머신러닝 추론 연산에 특화한 신형 프로세서 '인퍼런시아2(Inferentia2)'로 구동되는 가상서버다. 최대 1750억개 파라미터를 다루는 딥러닝 모델을 실행한다. 기존 Inf1 인스턴스 대비 4배 처리 성능, 10분의1 수준의 짧은 지연시간을 구현한다. 2019년 Inf1 출시 당시 딥러닝 모델 파라미터는 수백만 개였지만 이후 전반적인 딥러닝 모델 크기와 복잡성은 훨씬 커졌다. 파라미터 1000억개 이상을 포함한 대규모 언어 모델은 널리 보급되는 가운데 대규모 데이터 훈련으로 연산 요구 사항이 증가하는 추세다. 더 나은 애플리케이션과 더욱 맞춤화된 경험에 대한 요구를 수용하기 위해 데이터 사이언티스트와 머신러닝 엔지니어가 더 크고 복잡한 딥 러닝 모델을 구축하고 있다. AWS는 머신러닝 복잡성과 비용 관점에서 비중이 큰 추론 영역이 고객 혁신을 늦출 수 있다고 보고 Inf2 인스턴스로 대규모 딥러닝 기술을 사용한 차세대 애플리케이션을 다루는 고객에게 추론 작업에 유연한 소프트웨어, 짧은 지연 시간, 높은 처리 성능을 제공한다. 최초로 대규모 모델 추론을 여러 칩에 분산 처리하고 추론당 전력을 줄이는 CFP8과 정밀도가 낮은 데이터 유형을 활용하지 않은 모듈 성능을 높이는 FP32 등 다양한 데이터 유형을 지원한다. 고객은 머신러닝 추론 통합 소프트웨어 개발 도구인 AWS 뉴런(AWS Neuron)을 사용해 Inf2 인스턴스를 시작할 수 있다. AWS 뉴런은 파이토치, 텐서플로 등 머신러닝 프레임워크와 통합돼 최소 코드 변경으로 기존 모델을 Inf2 인스턴스에 배포하도록 지원한다. 초당 192GB 링(ring) 연결을 제공하는 AWS 인스턴스 인터커넥트 '뉴런링크'를 지원한다. AWS는 지난 10년 간 클라우드에서 저 더렴한 비용으로 성능과 확장성을 제공하기 위해 자체 칩을 설계하고 이를 활용하는 가상서버 상품군을 확대해 왔다. 2013년 AWS 니트로 시스템을 도입한 이후 니트로 시스템 5세대, 그래비톤 칩 3세대, 추론용 인퍼런시아 칩 2세대, 머신러닝 훈련용 트레이니엄 칩 등을 개발했다. AWS는 클라우드 기반으로 반도체 회로설계와 오류검증을 자동화한 '전자 설계 자동화(EDA)' 도구를 사용해 칩을 더 빠르게 개발하고 제공한다. 이를 탑재한 아마존 EC2 인스턴스의 성능, 비용, 전력 효율성을 개선해 고객 요구사항에 최적화한 칩과 인스턴스 조합을 선보이고 있다. 데이비드 브라운(David Brown) AWS 아마존 EC2 담당 부사장은 "그래비톤에서 트레이니엄과 인퍼런시아 칩, 니트로 카드에 이르기까지 AWS 자체 설계 실리콘 각 세대는 다양한 고객 워크로드에 향상된 수준의 성능, 저렴한 비용, 전력 효율성을 제공한다"며 "오늘 새로 공개한 인스턴스는 HPC, 네트워크 집약, 머신러닝 추론 워크로드 성능을 개선해 고객 선택지를 확대했다"고 말했다. 전날(28일) AWS 리인벤트 2022 1일차 키노트를 진행한 피터 데산티스 AWS 유틸리티컴퓨팅 수석부사장도 AWS 클라우드 인프라의 HPC와 AI 구동 성능을 높인 자체 하드웨어 기술력을 강조했다. 그는 기존 머신러닝 훈련 연산 전용 반도체 칩 '트레이니엄'을 구동하는 신형 인스턴스 'Trn1n'을 제공한다고 밝혔다. C7gn과 Hpc7g처럼 새로운 칩을 탑재한 것은 아니지만, Trn1n은 확률적 반올림과 메모리 공유 최적화 알고리즘으로 모델 훈련 속도를 끌어올린 인스턴스로 소개됐다.

  • 2022-11-30
  • 07:53:13
• 
  [AWS 리인벤트 2022] AWS, 클라우드 친환경 비전 확대…"2030년까지 '워터 포지티브' 달성" 아마존웹서비스(AWS)가 2030년까지 클라우드 서비스 운영에 쓴 것보다 더 많은 물을 사회에 환원하는 '워터 포지티브' 기업으로 진화하겠다고 선언했다. 워터 포지티브 달성을 위해 물 소비효율 개선, 지속 가능한 수자원 사용, 지역사회 재사용을 위한 물 반환, 물 보충 프로젝트 지원 등 4가지 핵심 전략을 추진한다. AWS는 28일부터 오는 12월 2일(현지시간)까지 미국 라스베이거스에서 진행되는 연례 클라우드 기술 콘퍼런스 'AWS 리인벤트 2022'에서 워터 포지티브 기업 목표와 이를 위한 물 소비효율 현황을 공개했다. AWS는 작년 글로벌 물 이용효율(WUE) 지표 킬로와트시당 0.25리터를 기록해 클라우드 제공업체 중 물 효율 선도 역량을 입증했다고 강조했다. AWS는 연중 대부분 기간에 데이터센터에 냉각수를 쓰지 않고 외부 공기를 활용한다. 일례로 아일랜드와 스웨덴에서 연 95% 기간 동안 데이터센터 냉각에 물을 사용하지 않는다. 물을 여러 번 재사용해 냉각수 소비량을 최소화하는 현장 수처리 시스템에 투자한다. 사물인터넷(IoT) 기술과 같은 클라우드 서비스로 실시간 물 사용량 분석, 누수 식별 등으로 높은 물 효율성을 추구한다. AWS는 지속 가능성 관점으로 재활용수, 빗물과 같은 수자원을 사용해 지역사회의 식수를 보전한다. 미국 버지니아 북부에서 로던워터(Loudoun Water)와 협력해 직접 증발 냉각 시스템에 재활용수를 쓰도록 승인받은 데이터센터 운영 업체가 됐다. 전 세계 20개 데이터센터 냉각에 재활용수를 사용 중이고 워터 포지티브 목표를 위해 재활용수 사용 시설을 확대할 계획이다. 데이터센터 물 소비효율을 높이는 것을 넘어 미국 오리건주에서 AWS는 냉각수 최대 96%를 지역 농부에게 무상 제공해 옥수수, 대두, 밀 등 농작물 관개에 쓰도록 하고 있다. AWS 사업 지역 물 보충 프로젝트를 추진하면서 브라질, 인도, 인도네시아, 남아프리카 공화국에서 현지 주민에게 담수 16억 리터를 제공했다. 이번 AWS 리인벤트 2022에서 AWS는 연 8억2300만 리터 이상의 물을 제공하는 프로젝트를 추진한다고 발표했다. 그 일환으로 인도에서 워터에이드와 상수도 시스템, 지하수 재충전 프로젝트를 완료했고 영국에서 더 리버 트러스트, 액션 포 더 리버 케넷과 협력해 템스 강 지류에 습지 두 곳을 조성 중이며 미국 캘리포니아에서 올 겨울부터 프레시워터 트러스트, OHWD와 함께 코섬니스 강물을 사용해 지하수를 재충전할 계획이다. 아담 셀립스키 AWS 최고경영자(CEO)는 "수 년 안에 세계 인구 절반이 물 부족 지역에 살 것으로 예상돼 모든 사람이 물에 접근하게 하려면 이 귀중한 자원을 보존하고 재사용하는 데 도움이 될 혁신적 방법을 마련해야 한다"면서 "우리는 클라우드 운영에서 물 관리(stewardship)에 앞장서고 사업 지역에서 쓴 양보다 많은 물을 돌려주기 위해 최선을 다하고 있다"고 밝혔다. AWS 모기업 아마존은 앞서 기후 복원력이 있는 물과 위생 솔루션을 제공할 '물&기후기금(Water&Climate Fund)' 출범을 지원하기 위해 워터닷오알지에 1000만 달러를 기부하기로 약정했다. 이 기부금은 오는 2025년까지 100만 명의 물 접근성을 확대하고 물 부족 지역 인구에 매년 물 30억 리터를 제공하는 데 쓰인다.

  • 2022-11-30
  • 06:35:04
• 
  [AWS 리인벤트 2022] "더 싸고 좋은 클라우드 만들었다"…AWS의 가성비 혁신기 글로벌 클라우드 선두 기업 아마존웹서비스(AWS)가 기존 한계를 넘어선 새 컴퓨팅, 데이터베이스(DB), 스토리지, 네트워킹, 데이터 분석, 머신러닝 기술로 서비스의 '가성비'를 끌어올렸다. 자사 클라우드 서비스 성능을 하드웨어와 소프트웨어 간 파트너십 내지 일종의 '장단 맞추기'로 묘사하면서 보안성을 유지하거나 개선하면서 비용을 더욱 낮춘 성과와 이를 통한 신상품을 선보였다. 피터 데산티스 AWS 유틸리티컴퓨팅 수석부사장은 28일(현지시간) 저녁 미국 라스베이거스에서 진행된 'AWS 리인벤트 2022' 1일차 기조연설(Monday Night Live)을 통해 AWS 클라우드 서비스의 새로운 서비스와 기존 대비 성능이 향상된 업그레이드 서비스를 소개했다. 기존 대비 더 나은 성능을 더 저렴하게 제공할 수 있도록 개발된 최신 하드웨어, 소프트웨어 기술의 이점을 강조했다. AWS 클라우드는 정보기술(IT) 인프라를 쓰기 위한 대규모 사전 투자 없이 쓴 만큼만 비용을 지불하고 고객 수십만 명에게 IT 인프라 자원을 제공하는 규모의 경제 효과로 종량제 요금을 낮출 수 있다. 클라우드를 쓰는 기업은 자체 전산실과 데이터센터에 서버를 설치하고 전원과 공조 설비를 유지하는 데 쓸 시간과 비용을 절감하고 고객에게 집중해 비즈니스 차별화 여력을 확보할 수 있다. 기업은 클라우드를 이용해 IT 인프라 자원을 필요한 만큼만 쓰도록 이용 규모를 확장·축소하고 클릭 한 번으로 몇 분 만에 개발 실험을 위한 새 자원을 쓸 수 있어 뛰어난 비즈니스 민첩성을 확보하게 된다. 더불어 클릭 몇 번이면 전 세계 각지에 애플리케이션을 구축하고 최소 비용으로 고객에게 지연 시간 단축 효과와 더 나은 IT 인프라 활용으로 개선된 비즈니스 환경을 제공할 수 있다. 데산티스 수석부사장은 "이 여섯 가지 클라우드의 장점은 매뉴얼에 나오지 않는 장기적인 투자를 통해 실현된다"고 말했다. 이어 AWS 클라우드의 가상서버 상품군 'EC2'를 맞춤형 시스템으로 제공하기 위해 설계한 '니트로(Nitro) v5' 시스템과 이를 탑재한 신형 EC2 인스턴스 'C7gn'을 소개했다. 니트로 v5는 이전 세대보다 2배 많은 트랜지스터를 구동해 50배 빠른 메모리 액세스 속도, 향상된 대역폭, 60% 빨라진 초당 패킷 처리 속도, 30% 감소한 전력소비량과 40% 증가한 와트 당 성능을 제공한다. 이를 탑재해 구동되는 아마존 EC2 C7gn 인스턴스는 AWS의 ARM 기반 프로세서 '그래비톤3' 칩셋을 기반으로 네트워크 대역폭 200Gbps를 지원해 50% 향상된 패킷 처리 성능을 낸다. AWS는 x86 칩 기반 인스턴스보다 60% 나은 와트당 성능과 이전 세대(그래비톤2)보다 25% 빠른 그래비톤3 칩을 고성능컴퓨팅(HPC) 기술 운영 환경에 맞게 최적화한 '그래비톤3E'도 선보였다. 그래비톤3E는 더 많은 부동소수점 벡터 연산을 소화해 슈퍼컴퓨터 성능 측정(벤치마크) 도구인 HPL 점수를 35% 높이고 분자 역학 시뮬레이션 프로그램 GROMACS 기준 성능을 12% 개선했다. 데산티스 수석부사장은 그래비톤3E을 탑재한 '아마존 EC2 HPC7g' 인스턴스를 발표하면서 "이 인스턴스는 최고의 에너지 효율에 더 나은 가격과 성능을 결합한 것으로 고효율 실시간 HPC 애플리케이션에 활용할 수 있다"고 소개하고 "리스케일(HPC 플랫폼 전문기업) 등이 이걸 활용해 더 빠르고 효율적인 워크로드를 보급할 수 있을 것이라고 기대한다"고 강조했다. AWS는 하드웨어 성능 한계를 넘는 개선 효과를 얻기 위해 소프트웨어를 함께 이용한다. 그 일환으로 인터넷에서 데이터를 전달하는 표준 통신 규격인 '전송제어프로토콜(TCP)' 대신 AWS 클라우드 맞춤형 규격으로 고안한 '스케일러블 릴라이어블 데이터그램(SRD, Scalable Reliable Datagram)'과 SRD 통신을 위한 EC2 네트워크 인터페이스 '엘라스틱 패브릭 어댑터(EFA)' 개발했다. 데산티스 수석부사장은 "TCP는 단일 경로로 모든 패킷을 보내기 때문에 다중 경로 네트워크를 충분히 활용하지 못한다"며 "SRD는 문제 발생 시 네트워크를 우회하고 패킷 누락에 따른 재전송 시간이 마이크로초(㎲) 수준으로 밀리초(㎳) 수준인 TCP보다 훨씬 빠르며 '니트로' 환경에서 작동해 기존 AWS EC2 인스턴스 애플리케이션에 영향을 주지 않고 작동한다"고 설명했다. 내년 초 모든 '아마존 엘라스틱 블록 스토어(EBS)'를 위한 io2 볼륨이 SRD를 활용해 구동한다. 아마존 EBS는 EC2 인스턴스에 구축한 애플리케이션을 지원하기 위해 제공되는 클라우드 기반 블록 스토리지 솔루션이다. SRD를 활용하는 ios2 볼륨을 사용하는 아마존 EBS 인스턴스는 네트워크 지연시간을 10분의 1로 단축하고 4배 향상된 처리 성능을 지원할 수 있다. EC2 인스턴스를 위한 네트워크 인터페이스 기술 '엘라스틱 네트워크 어댑터(ENA)'도 SRD를 통해 기존 5배 수준에 달하는 처리 성능을 실현했다. SRD 기반 ENA의 단일 연결 기준 초당 처리 성능은 25GB/s다. AWS는 이 기술을 'ENA 익스프레스'로 명명하고 기존 TCP와 운영체제에 추가 소프트웨어 없이 이 기술을 적용해 애플리케이션 지연시간 단축 효과를 얻을 수 있다고 강조했다. AWS는 덩치가 큰 AI 모델을 학습하는 전문가를 위해 모든 머신러닝 모델의 학습 속도를 20% 가량 높여 주는 기법을 고안했다. 모델 매개변수 값으로 16비트와 32비트 표현을 혼용하는 부동소수점 실수 계산에 확률적 반올림(stochastic rounding)을 적용해 순수 32비트 계산보다 시간과 메모리를 덜 쓰면서도 16비트 계산보다 빠르고 정확한 모델 훈련을 가능케 했다. AWS는 확률적 반올림 기능과 함께 여러 서버에 걸쳐 머신러닝 학습 클러스터를 구성한 환경에서 전체 프로세서와 서버 간 학습 데이터 교환 작업량을 감축하는 메모리 공유 최적화 알고리즘을 도입했고, 머신러닝 전용 반도체 칩 '트레이니엄' 기반 EC2 인스턴스(Trn1)의 최신 버전인 'Trn1n'을 제공한다고 밝혔다. 서버리스 컴퓨팅 서비스인 AWS 람다 성능이 개선된 배경도 공개됐다. AWS에는 클라우드 이용자의 람다 기반 함수 실행 호출이 전달됐을 때 코드를 처리할 런타임을 두기 위해 캐시 자원이 미리 구성돼 있다. 이 자원이 부족하면 실행할 함수를 위한 캐시 자원이 추가돼야 하는데, 이를 제공할 소형 인스턴스(t2)의 기동 시간 단축을 위해 '파이어크래커'라는 가상머신(VM)이 투입됐다. 파이어크래커는 람다 함수 실행 런타임용 캐시가 이미 구성된 기본 VM을 빠르게 재시작할 수 있는 소형 VM으로 지난 2018년 도입됐다. AWS는 여기서 만족하지 않았다. 이 기본 VM을 띄울 때 자바VM 시작, 클래스 코드 압축 해제, 로딩 단계를 거쳐 마지막 클래스 초기화 단계까지 진행해야 비로소 캐시를 쓸 수 있는데, 가장 긴 마지막 단계 소요 시간을 줄일 방법까지 찾아냈다. AWS는 이 방식으로 기본 VM 전체 기동 소요시간 90%를 단축한 '람다 스냅스타트' 기술을 이용자들에게 추가 비용 없이 제공한다고 밝혔다. 이 기술은 이미 클래스 초기화 단계를 마친 VM이 스냅숏 형태로 준비돼 있다가 실제 구동 시점에 각각 다른 암호화 키를 받아 보안상 안전하게 기동하고, 뒤따르는 함수 실행 호출을 예측해 더 빠르게 기본 VM을 재시작할 수 있도록 지원한다. 데산티스 수석부사장은 기조연설을 마무리하면서 "성능 개선 작업은 끝 없는 과정"이라며 "(AWS의 성능 개선 작업은) 보안성을 훼손하지 않으면서도 가장 저렴하게 혁신을 제공한다"고 강조했다. 그는 "우리는 니트로 반도체 칩부터 서버리스 컴퓨팅까지 모든 기술의 한계를 끌어올리고 있다"며 "AWS가 항상 뒤에서 여러분의 성공을 돕고 있다"고 덧붙였다.

  • 2022-11-29
  • 20:12:42
• 
  [AWS 리인벤트 2022] 디지털 전환 나선 택배 업계…한진은 스마트 물류 솔루션 기업 변신 중 코로나19 이후 택배 물량이 급증하자 정보기술(IT) 기업들이 배송·물류 업계와 손잡고 물류 혁신을 주도하고 있다. CJ대한통운과 네이버의 물류 동맹, 로봇·디지털 기술로 이커머스 물류 센터 자동화·최적화에 투자하고 있는 쿠팡 사례가 두드러진다. 물류기업 한진이 아마존웹서비스(AWS) 클라우드 기술과 자체 디지털 전문 인력을 확보하며 배송 물류 경쟁력 강화에 나서 눈길을 끈다. 강신길 한진 미래전략실장(전무)은 28일(현지시간) 미국 라스베이거스 'AWS 리인벤트 2022' 1일차 행사장에서 기자들과 만나 AWS의 클라우드 기술을 이용해 코로나19 사태 이후 택배 물류 사업 경쟁력을 강화하기 위해 시작한 디지털화 경험과 혁신 추진 성과를 소개했다. 한진은 작년부터 택배물류·글로벌물류 부문으로 구성된 물류 사업 가운데 택배물류 분야 혁신을 추진 중이다. 최근 물류 업계에서 택배사와 플랫폼 기업 간 협업, 유통·물류 수직계열화, 당일·익일 배송 등 이용자 편의와 접근성 개선이 비즈니스 성장을 위한 전략적 요충지로 부상했다. 전통적인 물류 기업들은 배송 물량을 접수해 배송처에 전달하기까지 모든 과정을 맞춤형 서비스로 구성하고 더 다양해진 화주들의 요구사항을 충족하면서 비용효율성을 끌어올리기 위해 고심하고 있다. 질병 감염 우려와 맞물린 비대면 활동 증가 이후 전자상거래와 택배 이용량 급증 현상도 나타났다. 한진은 택배 일 250만건 이상 물량을 소화해야 하는 상황이 됐지만, 아파트 같은 대규모 주거 단지에서 과거처럼 외부 차량 진입을 무제한 허용하지 않고 건물에 외부인 출입을 금지하거나 택배 기사의 엘리베이트 이용을 제한하는 등 택배 배송 업무 환경은 오히려 더 열악해졌다. 한진은 물류 처리량 증대를 위해 기존 IT 시스템 인프라를 클라우드로 이전하는 작업에 집중하고 올해 데이터와 애플리케이션에 중심을 둔 인프라 설계 구조를 도입하기 시작했다. 강 전무는 "자체 IT 담당 인력의 업무를 재구성해 (시스템 구축) 프로젝트 중심에서 제품(product) 중심으로 바꿔 접근하고 있다"며 "향후 기술 리더십 확보와 조직 전반에 변화 확산을 추구한다"고 했다. 한진은 AWS가 자사 클라우드 기술과 인프라, 솔루션을 제공하면서 이를 위해 필요한 조직 문화, 습득 방법 등을 실습 위주로 교육하고 전수하는 'AWS 프로서브(ProServe)'를 활용해 물류 시스템 개발 역량을 내재화했다. 시스템 통합 기업에 의존하지 않고 개발 경험이 없던 인력들을 대상으로 3개월 간 교육을 진행하고 6개월 간 택배 물류 데이터 처리 개선 작업을 추진했다. 강 전무는 "1년 전 내부 개발 인력이 거의 없는 상황에서 교육을 통해 AWS 클라우드 플랫폼, 보안, 애플리케이션 개발, 데브옵스, 데이터베이스 등 영역별 담당자를 양성했다"며 "기본 역량을 갖춘 '투 피자 팀(two pizza team, 모든 구성원이 피자 두 판으로 한끼를 해결할 수 있도록 통상 5~10명으로 이뤄진 소규모 개발팀)'을 확보해 일일 (코드) 배포 체계를 운영 중"이라고 밝혔다. 그는 "택배 업무 현장 담당자 목소리를 듣고 개발한 시스템을 지난달(10월) 론칭하고 2주간 터미널 현장의 데이터 입력 등 수작업을 통합, 수정 사항을 반영해 1개월간 추가로 안정화 단계를 거쳤다"며 "현장 담당자의 요구사항(VoC)을 반영해는 기간을 과거 17~20일 수준에서 버그 수정에 2일, 기능 개선에 5일 이내 기간만 걸리는 수준으로 개발·배포 과정을 개선했다"고 설명했다. 한진은 화주와 기사를 위한 포털 환경을 구축해 가동했다. 화주들이 PC로만 가능했던 송장 인쇄를 스마트폰 기기에서 할 수 있게 해 편의성을 높이고 택배 기사들이 아침에 출발할 수 있는 시간을 30분 앞당겨 호응을 얻었다. 내년부터 비즈니스 셀프 서비스 포털을 구축해 모든 직원이 데이터를 직접 들여다보고 가공하면서 현장 가치 위주 의사 결정을 할 수 있도록 만들 계획이다. 강 전무는 "'2025년까지 스마트 물류 솔루션 사업자' 비전에 맞춰 더 정확한 데이터를 효율적으로 제공하는 플랫폼을 구축하려고 한다"면서 "데이터 중심 경영을 해 보자는 최고 의사결정자의 지지로 여기까지 올 수 있었고 앞으로 비즈니스 민첩성 확보, 전사 조직 변화를 위한 실험을 지속해 전체 고객, 파트너와 함께 플랫폼을 운영하는 생태계가 만들어지길 기대한다"고 덧붙였다. 한진은 물류 비즈니스 환경 변화에 맞춰 택배 처리 업무 프로세스를 개선하고 효율을 높일 필요성이 크다고 판단해 2020년부터 모든 IT 운영 환경을 AWS 클라우드로 전환하는 작업을 추진해 왔다. 2020년 8월 택배 시스템, 2021년 10월 물류 시스템, 올해 1월 글로벌 사업 시스템 등 전환을 완료했다. 하루 택배 250만 건을 처리하는 과정에 전국에서 모인 택배를 배송하기 위해 수백 개 터미널 사이의 수많은 노선을 거쳐 물류 이동을 자동화 처리하는 간선 시스템을 구현했다. 앞서 15년 간 전국 200개 물류 터미널에서 택배를 접수하고 배송하는 과정에 필요한 현황 데이터 입력과 갱신 등의 수작업을 없앴다.

  • 2022-11-29
  • 16:45:10
• 
  [AWS 리인벤트 2022] 세계 최대 클라우드 콘퍼런스 'AWS 리인벤트', 3년만에 정상화 글로벌 클라우드 선두 기업 아마존웹서비스(AWS)의 'AWS 리인벤트 2022'가 개막했다. 코로나19 사태로 하늘길이 막히면서 2020년 비대면으로, 2021년 온라인 중심으로 열린 업계 최대 연례 클라우드 기술 콘퍼런스가 3년만에 온전한 오프라인 이벤트로 돌아왔다. 올해로 11회째를 맞이하는 이번 AWS 리인벤트는 현지시간 11월 28일부터 12월 2일까지 미국 라스베이거스에서 진행한다. AWS는 지난 2012년부터 매년 AWS 리인벤트를 개최하고 클라우드에 관심있는 기술 전문가와 산업계 종사자 수만명이 교류하는 이벤트로 키워 왔다. 이번 AWS 리인벤트의 주요 키노트와 세션이 진행되는 라스베이거스 베네시안 호텔에 개막 첫날인 28일부터 전 세계 소프트웨어(SW) 개발자, 엔지니어, 정보기술(IT) 기업 임원, 시스템 관리자와 아키텍트가 모여들어 높은 관심을 방증했다. 이번 리인벤트 참석자는 주최측 추산 5만 명에 달한다. 첫날은 일반 참석자가 아닌 AWS 고객사와 파트너 중심으로 진행됐다. 현장 취재차 참석한 국내 언론을 대상으로 한국의 AWS 고객사인 한진과 CJ 임원들이 현장 인터뷰를 통해 AWS 클라우드 기술을 활용한 물류 분야 디지털 전환 전략과 비즈니스 혁신 경험, 향후 추진 계획을 소개했다. 루바 보르노 AWS 얼라이언스 및 채널 담당 부사장은 호주의 클라우드 콘택트센터 솔루션 스타트업 '로컬메저'의 비즈니스 전환을 지원한 경험과 AWS 마켓플레이스를 통해 제공되는 글로벌 시장 접근 기회를 제시했다. 피터 데산티스 AWS 유틸리티컴퓨팅 수석부사장이 한국 기준 29일 오후 12시 30분 시작하는 리인벤트 첫 키노트(Monday Night Live)를 맡았다. 서버, 네트워크, 스토리지 등 AWS 클라우드 서비스를 제공하는 인프라를 설계하는 방안과 높은 가용성을 제공하기 위해 자체 개발 반도체부터 하드웨어와 SW를 아우르는 기술 영역에 기울인 노력을 강조할 것으로 보인다. 이탈리아 F1 레이싱 팀 스쿠데리아 페라리 소속 기술 전문가가 그와 함께 무대에 올라 AWS 클라우드를 활용해 거둔 혁신 사례를 설명한다. 아담 셀립스키 AWS 최고경영자(CEO)가 2일차 키노트를 진행한다 그는 이 행사의 핵심인 AWS 클라우드 주요 신규 서비스 관련 뉴스와 그 배경에 있는 리더십 비전을 강조할 예정이다. 세포치료제를 개발하는 미국 제약사 라이엘 이뮤노파마(Lyell Immunophama)의 리즈 호먼스 CEO, 프랑스의 다국적 전력 기업 그룹 엔지(Engie)의 비야나 카이토비치(biljana kaitovic) 최고정보책임자(CIO), 지멘스그룹의 디지털인더스트리 부문 CEO를 맡고 있는 세드릭 나이케(Cedrik Neike) 부회장이 각자 공유한다. 행사 3일차 키노트는 스와미 시바수브라마니안 AWS 데이터 및 머신러닝 부사장이 진행한다. 그는 제약사 아스트라제네카, 여행정보서비스기업 익스피디아의 IT 부문 고위 임원들과 함께 기업이 다루는 데이터에서 의미를 얻고 비즈니스를 성장시키기 위한 실행 계획을 도출하는 전략을 제시한다. AWS 클라우드에서 제공되는 주요 머신러닝 및 인공지능(AI) 기술과 서비스의 이점을 강조하고 이를 기업의 데이터 중심 의사결정을 지원하기 위한 데이터 엔지니어와 분석가 지원 방안을 설명할 것으로 보인다. AWS의 모기업인 아마존의 버너 보겔스 최고기술책임자(CTO)가 4일차 키노트를 진행한다. 보겔스 CTO는 AWS 클라우드에서 제공하는 개발자 도구와 앞으로 개발자들이 주시해야 할 기술 업계 동향에 대해 발표할 것으로 예상된다. 글로벌 게임사 에픽게임즈의 게임 플랫폼 에픽게임즈 담당 임원과 'AWS 히어로'라고 불리는 AWS 서버리스 기술 전문가가 키노트 연사로 함께 무대에 나선다. AWS 히어로는 AWS 클라우드 기술의 특정 분야 전문성을 인정받아 대외 기술 확산을 돕는 외부 전문가다. 주요 키노트 발표와 더불어 이날부터 12월 2일까지 리인벤트 현장에서 5일간 1500여개 이상의 기술 관련 세션이 진행된다. 한진과 LG CNS, 제페토, 카카오 스타일, SK에코플랜트, 모라이(MORAI) 등 한국 AWS 고객사의 한국어 강연 5건이 준비됐다. 영어 기반 발표 세션 가운데 삼성전자, 카카오게임즈, CJ, 쿠팡, LG AI 리서치 등 한국 고객 사례를 다루는 발표도 진행된다. 주 행사장인 베네시안 호텔 안에서 키노트, 세션발표 등 강연식 정보 공유와 별개로 AWS 기술 파트너들이 실제 클라우드 기술을 활용한 제품과 솔루션, 서비스를 선보이는 전시구역(EXPO)이 운영된다. 베네시안 호텔 일대 라스베이거스 리인벤트 행사장에서 주요 부대행사가 함께 열린다. 산업계 전문가들이 교류하고 AWS 기술 기반 디지털 전환 전략을 습득하는 '인더스트리 네트워킹 라운지'와 AWS의 산업 분야별 솔루션을 선보이는 '인더스트리 인터랙티브 데모 플라자'가 운영된다.

  • 2022-11-29
  • 11:00:57
• 
  [AWS 리인벤트 2022] AWS, 세계 최대 클라우드 콘퍼런스 앞두고 '디지털 주권' 강조 각지에서 요구되는 디지털 주권(digital sovereignty)에 대응하는 클라우드 사업자 역량과 태도에 시장의 관심이 커지고 있다. 세계 클라우드 시장 1위 아마존웹서비스(AWS)와 경쟁하는 한국 클라우드 사업자들은 클라우드 보안인증(CSAP)과 같은 국내 공공 조달용 클라우드 인증 제도에 포함된 요구사항이 디지털 주권을 위한 장치라고 보는 반면, AWS는 CSAP 제도를 국제 무역장벽 해소 차원에서 개선돼야 하는 규제라고 지목하고 있다. 29일 업계에 따르면 AWS는 열한 번째 세계 최대 클라우드 콘퍼런스 'AWS 리인벤트' 개막을 앞두고 이용자 규제 환경에 알맞게 데이터 제어 기능을 지속해서 제공하겠다는 디지털 주권 서약(AWS Digital Sovereignty Pledge)을 발표했다. 디지털 주권은 시민과 정부가 디지털 공간으로 확장된 영토까지 입법·사법·행정 등 국가 권력을 행사하고 국가·시민의 이익을 보호할 수단으로 세계 각국에서 관련 논의가 활발해지는 추세인데, AWS가 이런 흐름에 선도적인 클라우드 기업임을 자처하는 모습이다. 맷 가먼(Matt Garman) AWS 마케팅 및 글로벌 서비스 수석부사장은 지난 27일 공식 블로그를 통해 "지난 18개월 동안 많은 고객은 AWS의 모든 기능을 갖춘 클라우드 서비스와 혁신, 변화, 성장을 저해할 수 있는 제한적인 솔루션 중 하나를 선택해야 할 우려가 있다고 말했지만, AWS는 고객이 이런 선택을 해선 안 된다는 믿음을 갖고 있다"면서 "이것이 모든 AWS고객에게 클라우드 기술에서 가장 발전된 형태의 디지털 주권 제어와 기능을 제공하겠다는 'AWS 디지털 주권 서약'을 소개하는 이유"라고 밝혔다. 가먼 수석부사장은 "AWS는 이미 고객이 데이터 위치, 데이터에 접근 가능한 인력, 데이터 이용 방식을 제어하는 다양한 보호 기능, 인증 및 계약 의무를 제공한다"며 "전 세계 고객이 AWS 클라우드의 기능, 성능, 혁신, 규모에 영향을 주지 않으면서 디지털 주권 관련 요건을 충족할 수 있도록 데이터 보호 정책을 지속적으로 확대할 것을 약속하고, 고객과 규제 기관의 변화하는 요구와 규제 요건을 깊이 이해하고 이를 충족하기 위해 신속하게 적응하고 혁신을 이어나가고자 한다"고 말했다. AWS 디지털 주권 서약에 따라 AWS는 클라우드 이용자가 데이터 위치와 데이터 접근성을 제어하고 AWS 클라우드 내부와 외부에서 관리되는 암호화 키로 데이터를 암호화하는 제어 기능에 투자해 지속 혁신하겠다고 예고했다. 또 동일한 AWS 클라우드 리전의 여러 가용 영역(AZ)으로 애플리케이션을 분할(partitioning)해 고가용성 달성을 지원하고 오프라인 데이터와 원격 컴퓨팅·스토리지 기능을 지원하는 서비스 처럼 연결이 끊기는 상황에 애플리케이션을 지속 운영할 수 있는 선택권을 강화하겠다고 했다. 가먼 수석부사장은 이용자 데이터를 보호하고 신뢰를 쌓기 위해 데이터를 처리하고 전송하는 방식을 투명하게 공개하고 이용자 데이터를 제공하라는 정부와 사법기관 요청에 이의를 제기하겠다고 밝혔다. 이용자에게 규정 준수, 규제 요건 충족을 위한 지침, 규정 준수 증거 및 계약상 의무 이행을 제공하고 개인정보 보호 규정과 각 지역 디지털 주권 규정을 준수하는 데 필요한 투명성, 비즈니스 유연성을 계속 보장하겠다고 덧붙였다. 독일에서는 도이치텔레콤이 T-시스템즈를 통해 AWS 관리형 서비스로 현지 규정에 맞는 데이터 보호 기능이 제공된다. 암호화 키 구성과 관리를 위한 서비스를 통해 AWS 클라우드에서 디지털 주권 요구 사항을 해결하는 데 도움이 되는 전문 지식을 지원한다. 가먼 수석부사장은 "AWS는 고객이 디지털 주권 요구 사항을 해결하는 데 도움이 되도록 신뢰할 수 있는 현지 파트너와 협력한다"며 "글로벌 AWS 클라우드 내에서 주권 기능, 제어, 보안을 혁신하고 어떤 기능 타협 없이 이를 제공하겠다"고 강조했다. 이 포스팅에서 가먼 수석부사장은 AWS 클라우드가 처음부터 디지털 주권 보호를 위해 설계됐고 사업 초기부터 금융·의료 업계와 같이 높은 수준의 보안과 데이터 정보 보호를 요구하는 고객에게 클라우드 사용에 필요한 보안 기능과 제어 기능에 관한 의견을 모았다고 밝혔다. 그 일환으로 작년 말 물리적 데이터 저장 위치 제어 기능 '데이터 레지던시 가드레일'을 AWS 환경 관리 서비스(AWS Control Tower)에 보태고 지난 2월 유럽 클라우드 인프라 서비스(CISPE) 관련 행동 강령을 반영한 서비스를 발표했다. AWS 관계자는 "AWS 리인벤트는 AWS가 지난 2012년부터 매년 개최하고 있는 글로벌 클라우드 컴퓨팅 콘퍼런스로 전 세계에서 수만명이 참석하는 오프라인 중심 행사로, 미국 라스베이거스에서 열리는 이번 콘퍼런스에 애덤 셀립스키 AWS 최고경영자, 버너 보겔스 아마존 최고기술책임자 등 AWS 주요 임원의 기조 발표와 1500여개 기술 관련 세션에 참석할 수 있다"면서 "AWS 서비스를 이용하는 여러 고객과 교류의 장이 제공되고 새로운 AWS 서비스 소개와 이용 방법을 배울 수 있다"고 설명했다.

  • 2022-11-29
  • 09:04:58