2019年AWS云服务助力构建空间信息数据基础设施.pdf

1、AWS云服务云服务助力构建空间信息数据基础设施助力构建空间信息数据基础设施西云数据简介迭代演进的AWS大数据平台建设案例分享亚马逊AWS中国(宁夏)区域云服务运营方宁夏西云数据科技有限公司（简称”西云数据”）是 AWS 中国(宁夏)区域云服务的运营方和服务提供方。AWS 为西云数据的战略技术合作伙伴并向西云数据提供技术服务和技术支持。西云数据成立于 2015 年，是一家持有互联网数据中心服务和互联网资源协作服务牌照的云服务提供商。2017年12月12日，西云数据正式推出AWS 中国(宁夏)区域云服务，现已开通3个可用区。西云数据市场销售总部设立于北京，在全国多地设有分支机构以服务全国各地的企业

2、客户。西云数据致力于将世界先进的 AWS 云计算技术带给中国客户，为客户提供优质、安全、稳定、可靠的云服务，全力支持中国企业和机构的创新发展。西云数据承诺尽可能多地使用可再生能源我们承诺使用尽可能多的可再生能源来支持您的业务，为地球可以持续发展贡献你我的力量为什么AWS关心公共大数据客户至上海拔模型海拔模型航空遥感图像航空遥感图像气候模型气候模型卫星图像卫星图像高分辨率雷达高分辨率雷达AWS上的地球：https:/amazonaws- 包含110种开放地测数据集，源数据由（非）政府组织、研究机构、企业和个人来维护AWS对GIS数据的表达日趋完善AWS对突发事件的及时响应2010年墨西哥湾的漏油

3、事件美国国家地理空间信息平台，由美国联邦地理数据委员会兴建数据需要打电话给多个部门索要现在卫星将高清图片传送到Amazon Simple Storage Service（S3）上，后台服务进行及时处理，对紧急相应组织非常有用全托管的全球卫星地面站服务；12个站点覆盖全球任何轨道；节省建造和运营成本；快速与卫星数据进行交互；快速利用AWS服务进行计算、存储、分析和机器学习等工作中国如何利用AWS与世界无缝融合：Ground Station下下载到本地载到本地 最传统的方式 费时费力 无序的数据管理 没有扩展性从数据中心访问从数据中心访问 远程登陆 数据近线分析 仅下载分析结果 扩展性呢？从从AW

4、SAWS云访问云访问 远程登陆 数据近线分析 仅下载分析结果 分布式计算和存储资源有效的扩展，使用大量公开的数据，节省成本，简化部署中国如何利用AWS与世界无缝融合：从AWS云访问1.选取区域2.下载遥感图像3.计算NDVI（Normalized Difference Vegetation Index,归一化差分植被指数,标准差异植被指数)下载到本地示例：计算植被面积从AWS云访问示例 图库放在Amazon S3上，每天更新，数据量大概在750TB，七百万个图片 前端应用托管在Amazon S3上，无需服务器就直接通过浏览器进行访问 快速计算出北京1978年和2019年农作物的对比情况Live

5、 Demo:http:/landsatappv1p3.s3-website-us-west- S3原原始数据始数据Amazon S3数据湖数据湖Amazon EMRETL商业分析教育研究业务用户开发商流式数据获取AWS开放数据平台高阶分析事件抓取事件抓取Amazon Kinesis流分析流分析Amazon EMR事件事件处理处理AWS Lambda无无SchemaAmazon ElasticSearch直直接查询接查询Amazon AthenaNo SQLAmazon DynamoDB托管的托管的Hadoop平台平台Amazon EMR应用系统应用系统ERP,BW etc数据仓库数据仓库Ama

6、zon Redshift机器视觉文件导入机器学习模型的机器学习模型的构构建、建、训练、测试和部署训练、测试和部署Amazon SageMaker阶段一阶段二阶段三阶段一：选择Amazon S3存储搭建数据湖访问频度频繁访问不频繁访问动态,频繁访问数据毫秒级访问 3 AZ不断变化的数据访问毫秒级访问 3 AZ平均比Standard节省20%每对象单独监控.最小化存储周期不频繁访问数据毫秒级访问 3 AZ比Standard节省40%基于GB的取回费用最小化存储周期最小化存储大小S3 StandardS3 Standard-IAS3 One Zone-IAS3 Glacier可再生的非频繁访问数据毫