亚马逊AWS官方博客
Category: Compute
基于 AWS Batch 只需五步搭建一个高性能集群
AWS Batch服务近期已在AWS中国区域上线运行。AWS Batch已在全球范围内广泛服务于基因测序、数字媒体渲染、科学研究、金融服务等高性能计算(HPC)的业务场景中。本文通过一个只需五个步骤的动手实践来示例如何利用AWS Batch快速搭建HPC集群,以帮助您快速上手运用AWS Batch服务。
使用 HAQM VPC CNI 插件搭建自定义网络环境的 Kubernetes 集群
在本文中,我们通过一步步的引导,搭建起了自定义网络环境的Kubernetes集群,实现了同一K8S集群在多VPC内的部署,让Pod间通信可以跨子网,跨VPC,主机与Pod分属不同子网和安全组的灵活配置。
如何缩减 EBS 卷容量以降低存储成本
本博文主要介绍如何利用rsync工具缩减EBS卷容量。
如何在 AWS 上构建并行文件系统 BeeGFS
本文将指导 AWS 用户如何在 AWS 环境构建 BeeGFS 并行文件系统,并通过 SAMBA ( SMB ) 与 NFS 共享给其它主机使用
基于 jenkins 打造 kubernetes on aws 上的 CI/CD 管道
本博客将会利用jenkins pipeline实现对于存储在Github上的代码在kubernetes平台之上的CI/CD管道,其中会以云原生的方式,将jenkins master,jenkins slave全部部署于kubernetes之上,从而打造一个高可用,弹性伸缩的CI/CD管道。此外,项目中还会涉及到kubernetes on AWS的特有特性,AWS上的镜像仓库(ECR)等知识的介绍。
利用 HAQM EKS 集群运行 Spark 实现大数据处理
本文主要讲解如何实现Spark on EKS。
HAQM EKS Windows 容器支持现已正式推出
今年 3 月,我们推出了基于 HAQM Elastic Kubernetes Service 的 Windows 容器支持预览版,并邀请客户进行体验,提供反馈。我们根据反馈经过了几个月的产品优化,今天,我很高兴地宣布,Windows 容器支持现已正式发布。
基于 Lambda + DynamoDB 托管服务构建灵巧型 HPC 集群
在客户运用云端计算集群来处理诸如分子匹配分析或中小规模基因分析的任务时,需要能有一个更轻量级的、可自定义并行规则的集群调度方式,本文提出一种基于 Lambda + DynamoDB 托管服务来构建灵巧型 HPC 集群的应用架构,其中计算集群的调度由 Lambda 函数来串接,分析任务的切片对应关系和各数据片的状态基于 DynamoDB 数据库来存储,同时提供配置和状态查询的API接口。
使用 VM import 将 Azure 虚拟机迁移至 AWS 平台
本博客主要介绍的内容包括:1. 将Azure的VM的镜像导出VHD;2. 将Azure的VM镜像上传到对象存储;3. 将VHD镜像转换为AMI并通过AMI启动EC2。
如何自动化的选择和优化EC2系列(一)利用AWS Price List API生成中国区的EC2 价格表
企业客户在上云的实践过程中,一般都要经历系统迁移入云和云上运维优化这两个重要的阶段,且云上的优化是需要定期不停的做下去的,以达到持续降低成本、优化资源的使用率,以最小的成本、最大的资源利用率来保证业务系统稳定的运行,并能够根据业务系统的实际使用量来分配资源(减低配置或者扩容)。本文先介绍第一部分:利用AWS Price List API生成中国区的EC2 价格表。