AWS 기술 블로그

Category: Analytics

LG 에너지 솔루션의 Amazon DataZone을 활용한 데이터 거버넌스 혁신 전략

LG 에너지 솔루션은 다양한 부서와 시스템에 분산된 데이터를 통합적으로 관리하고 활용하는 데 한계가 있었기 때문에, 데이터 관리 및 활용에 혁신이 필요하다고 판단하여, 데이터 거버넌스의 체계화에 착수했습니다. 이를 위해 AWS와 협력하여 Amazon DataZone을 도입하여 데이터 거버넌스를 마련했습니다. 이 과정을 통해 데이터 접근 권한 관리 및 규정 준수 측면에서의 거버넌스 복잡성을 줄이고 BI/ML 서비스의 생산성을 크게 증진시켰습니다. […]

AWS DataZone에서 OpenLineage 기반의 View 테이블 데이터 계보 그리기

배경 관계형 데이터베이스에서 View 테이블은 실제 데이터를 저장하지 않고, 기본 테이블의 데이터를 기반으로 한 가상의 테이블입니다. View 테이블의 데이터 계보는 데이터가 어떤 기본 테이블에서 비롯되었고, 어떤 과정을 거쳐 최종적으로 View 테이블에 도달했는지를 명확히 파악하는 데 필수적입니다. 이를 통해 데이터의 출처와 변환 과정을 명확히 이해하고, 데이터의 신뢰성을 보장할 수 있습니다. 또한, 데이터 계보는 View 테이블이 잘못된 […]

포스코홀딩스의 Managed Apache Flink를 활용한 효율적인 다수 CCTV 이벤트 처리 사례

포스코홀딩스는 한국의 대표적인 글로벌 철강 기업 포스코를 중심으로 이차전지 소재, 건설 등 다양한 사업 포트폴리오를 보유한 그룹 지주사입니다. 그룹 전체의 지속 가능한 성장을 추구하며, 특히 안전을 최우선 가치로 두고 있습니다. 사업장 내 안전사고 예방을 위해 끊임없이 노력하고 있습니다. 최근 AI 기술의 급격한 발전과 함께, 포스코홀딩스는 AI를 활용한 실시간 상황감지 시스템 구축에 많은 관심을 기울이고 있습니다. […]

LinqAlpha 의 Amazon Bedrock과 Amazon OpenSearch 를 활용한 헤지펀드 투자사를 위한 Company Screener Agent

LinqAlpha 소개 LinqAlpha는 헤지펀드와 자산운용사를 위한 AI 기반 금융 리서치 솔루션을 제공하는 미국 기반 AI 스타트업으로, 방대한 시장 데이터를 신속하고 정확하게 분석하여 최적의 투자 결정을 지원합니다. 기관 투자자들은 글로벌 경제 지표와 기업 실적, 다양한 자산군의 가격 변동 등 복잡한 데이터를 실시간으로 처리해야 합니다. LinqAlpha는 최신 인공지능 기술 기반의 하이브리드 검색과 금융 특화 모델을 활용해 투자 […]

Amazon OpenSearch Service OR1 인스턴스 내부 구조 알아보기

이 글은 AWS Big Data Blog에 게시된 ‘Amazon OpenSearch Service Under the Hood’를 번역 및 개선했습니다. Amazon OpenSearch Service는 Optimized Instance(OR1)를 제공하고 있습니다. 이 새로운 제품군은 벤치마크 테스트에서 기존 메모리 최적화 인스턴스보다 가격 대비 성능이 최대 30% 향상되었습니다. 이는, OR1 인스턴스는 내부적으로 Amazon S3를 활용하기 때문이며 이러한 특징으로 OR1 인스턴스는 11 9s의 뛰어난 데이터 내구성을 […]

SAP 데이터와 AWS Glue를 활용하여 RISE 워크로드 확장하기

이 글은 AWS Big Data Blog에 게시된 ‘Scaling RISE with SAP data and AWS Glue’를 번역했습니다. 고객은 종종 원본 SAP 데이터를 다른 소스 데이터로 확장하거나 보강하기를 원합니다. 이러한 분석 사용 사례는 데이터 웨어하우스 또는 데이터 레이크를 구축하여 구현할 수 있습니다. 이제 고객은 AWS Glue SAP OData 커넥터를 사용해 SAP에서 데이터를 추출할 수 있습니다. SAP OData […]

Amazon OpenSearch Service의 Multi-AZ with Standby 기능 동작 방식 알아보기

Amazon OpenSearch Service 는 비즈니스 크리티컬 워크로드에 99.99%의 가용성과 일관된 성능을 제공하는 관리형 클러스터를 위한 Multi-AZ with Standby 배포 옵션을 제공합니다. Multi-AZ with Standby를 사용하면 OpenSearch Service 도메인은 하드웨어 또는 네트워킹 장애와 같은 인프라 장애에 대해 복원력을 갖출 수 있습니다. 이 옵션은 안정성이 향상되고 모범 사례를 적용하고 복잡성을 줄임으로써 클러스터 구성 및 관리를 간소화하는 추가적인 […]

AWS 데이터 분석 서비스 기반 게임 레벨링 환경 구성 사례

개요 기존의 문제 상황 소규모 인디게임 개발사는 작은 규모와 한정된 자원에도 불구하고 창의성과 혁신성을 발휘하며 새로운 게임 경험을 선사합니다. 하지만 이러한 장점에도 불구하고, 게임 개발 과정에서 적지 않은 과제에 직면하곤 합니다. 특히 게임 출시 전 완성도를 높이기 위한 테스팅과 난이도 조정 작업은 매우 중요하지만, 인력이 부족한 인디 게임 스튜디오에서는 이러한 작업을 충분히 수행하기 어려운 상황입니다. […]

SK하이닉스의 RAG 플랫폼 구축 및 성능 평가/분석 연구 사례

이 블로그는 SK hynix 오세진 TL, 노정기 TL, 오태진 TL 이 함께 작성하였습니다. SK 하이닉스는 AI 시대라는 새로운 세상의 중심에 반도체가 있다는 사명감을 가지고 최고의 기술력을 향해 끊임없는 혁신을 이뤄 가고 있습니다. 세계 최고 성능의 HBM3를 최초 개발 및 출시한 데 이어 확장 버전인 HBM3E 역시 세계 최초 양산에 성공하며 메모리 반도체 시장을 선도하고 있고, 세계 […]

전용 코디네이터 노드를 사용한 Amazon OpenSearch Service 클러스터 복원력과 성능 향상

이 글은 Akshay Zade 님이 직성하신 “Improve OpenSearch Service cluster resiliency and performance with dedicated coordinator nodes” 포스팅을 한글로 번역 한 Posting입니다. Amazon OpenSearch Service에서 OpenSearch 도메인을 생성할 때, 기존에는 데이터 노드가 여러 역할을 동시에 수행했습니다. 데이터 노드는 색인 요청 및 검색 요청을 조정할 뿐만 아니라, 색인 문서를 처리하고 검색 쿼리에 응답하는 작업까지 담당했습니다. 또한, […]