亚马逊AWS官方博客
Category: Analytics
使用 AWS DMS 将数据从 Amazon S3 流式传输至 Amazon Kinesis Data
本文介绍了如何使用AWS DMS,将批处理方案转换为近实时解决方案。这套解决方案大大简化了将记录由Amazon S3迁移至Kinesis并加以分析的过程。Kinesis作为AWS DMS指定的目标,可为多种其他系统提供数据资源。这样一条近实时管道将帮助您快速了解系统内的各类变化,最终提升组织的实际决策能力。
配置和优化 Amazon Athena 联合 Amazon Redshift 查询性能
在本文中,我们探讨了如何使用Lambda配置并使用Athena联合AmazonRedshift功能。现在,您无需等待从Amazon Redshift数据仓库到Amazon S3的数据转移流程,也不再需要负担查询的日常维护工作。
Cookpad 如何在扩展 Amazon Redshift 集群规模的同时,通过限制资源用量有效控制成本
Amazon Redshift已经成为Cookpad公司为员工提供自助服务分析的关键基础。正如前文所述,我们使用AWS提供的种种新功能对集群容量进行了扩展,且全程未添加任何节点。
使用 Glue 和 Athena 分析 AWS 服务日志
本文以VPC流日志为例,指导如何使用Glue爬网程序构建VPC流日志的数据目录,并使用GLUE ETL 作业把源数据进行分区并转换成Parquet格式,加速Athena查询VPC流日志的速度并减少扫描量以降低分析的成本。
使用 Amazon EKS 轻松运行 Flink 作业
本文介绍如何在 Amazon EKS 上部署和运行 FLink 作业。 Kubernetes 是目前最流行的用于自动部署,扩展和管理容器化应用程序的开源系统。我们看到越来越多的用户开始使用 Kubernetes 来作为企业容器应用部署平台。Amazon Elastic Kubernetes Service (Amazon EKS) 是一项完全托管的 Kubernetes 服务。
Delhivery 公司最佳实践剖析:从 Apache Kafka 迁移至 Amazon MSK
Amazon MSK能够降低基础设施的维护强度,简化问题的识别与解决,缩短代理维护时间,最终将生产力提升至新的层面。它在后台承担起Apache Kafka的维护工作,结合实际需求为我们提供监控级别选择,让我们的团队能够腾出更多精力改善业务应用程序并为客户提供价值回报
规划具有 Hot-Warm 架构的 Amazon Elasticsearch Service 集群
Elasticsearch近几年的热度持续增长,有着非常广泛的应用场景,而AWS作为云计算的领导者,不可或缺地提供托管的Elasticsearch服务 — Amazon Elasticsearch Service(简称AES),在今年的5月份,AWS正式上线了创新性的Ultrawarm节点,使得AES支持业界流行的Hot-Warm存储架构,整体存储成本大大降低,为用户提供更好的性价比。本文将向您介绍如何规划具有Hot-Warm架构的AES集群。
AWS Glue DataBrew 正式发布 – 助您快速实现数据清洗与规范化的可视数据准备工具
我们高兴地宣布,AWS Glue DataBrew目前已正式上线。凭借这款可视化数据准备工具,您能够将数据清洗与规范化速度提升达80%,确保把更多精力投入到真正具有业务价值的工作当中。
AWS 发布 AWS Glue DataBrew,让数据可视化准备工作提速达80%
AWS Glue全新的可视化数据准备工具,让数据科学家和数据分析师能够更快地清理和规范化数据,与传统数据准备方法相比,速度可提高80%。
使用 Amazon Kinesis 快速构建流式数据分析架构
本文详细介绍了如何利用Kinesis构建流式数据架构并带有指导实验。