前言：开放式数据处理服务(odps )是阿里巴巴通用计算平台提供的快速、完全托管的GB/TB/PB级数据仓库解决方案，目前为maman MaxCompute为用户提供了高级数据导入方案和许多经典的分布式计算模型，现在可以提供更多的功能
开放式数据处理服务(odps )是阿里巴巴通用计算平台提供的快速、完全托管的GB/TB/PB级数据仓库解决方案，如今已成为最大公司MaxCompute为用户提供了高级数据导入解决方案和许多经典的分布式计算模型，以便更快地为用户提供解决方案
此外，大数据开发工具包和MaxCompute关系密切，大数据开发工具包为MaxCompute提供了一站式数据同步、任务开发、数据工作流开发、数据管理和数据运维等功能。 有关详细信息，请参阅大数据开发工具包概述。
MaxCompute 主要服务于批量结构化数据的存储和计算提供海量数据仓库解决方案和大数据分析建模服务。 随着社会数据采集手段的丰富和完善，积累了越来越多的行业数据。 数据规模已扩展到传统软件行业无法容纳的大量数据(10gb、TB、PB )级别。
在分析海量数据的场景中，由于单台服务器处理能力的限制，数据分析人员通常采用分布式计算模式。 但是分布式计算模型对数据分析人员提出了很高的要求，难以维护。 要使用分布式模型，数据分析员不仅要了解业务需求，还必须熟悉底层的计算模型。 MaxCompute的目的是为用户提供一种方便地分析和处理大量数据的手段。用户可以不必关心分布式计算细节，从而达到分析大数据的目的
MaxCompute在阿里巴巴集团内部提供了大规模的APP应用，包括大型互联网公司的数据仓库和BI
分析、网站日志分析、电子商务网站交易分析、用户特征和兴趣挖掘等。
MaxCompute于2009年9月成立了AlibabaCloud (阿里巴巴云)，目标是成为计算和共享数据的第一平台。 2010年4月，随着蚂蚁金融融资业务上线，ODPS正式投入生产运营，2012年建成统一数据平台，2013年具备超大规模海量数据处理能力，2014~2015年大数据平台成熟
重要的里程碑
2010.04 ODPS正式投入生产。 蚂蚁金融的融资业务在线下稳定运营。
2013.05 ODPS公测。
2013.07 ODPS正式提供商业化服务，单一集群规模5K台服务器的多级组网能力。
2016.09 ODPS正式更名为MaxCompute，推出2.0，富有高性能、新功能和环保。
MaxCompute组件数据通道： TUNNEL :提供高并发脱机数据上传服务。 用户通过Tunnel服务向MaxCompute
批量上传或下载数据。 MaxCompute Tunnel仅提供用户可以使用的Java编程接口。 和分析任务： SQL:MaxCompute只能以表格格式保存数据，并向外部提供了SQL查询功能。 用户将最大计算
作为传统的数据库软件运行，但可以处理TB、PB级别的大量数据。 MaxCompute SQL是事务、索引和
在执行Update/Delete等操作的同时，MaxCompute的SQL语法和Oracle，MySQL
存在差异，用户无法将其他数据库的SQL语句无缝迁移到MaxCompute。 另外，作为使用方法，使用MaxCompute SQL
最快可以在分钟或秒级别完成查询，而不能在毫秒级别返回用户结果。 最大计算SQL
的优点是对用户的学习成本低，用户不需要理解复杂的分布式计算概念。 具有数据库操作经验的用户可以很快熟悉MaxCompute SQL
来修改选定线条的属性。
UDF是用户定义的函数。 MaxCompute有很多内置函数
满足用户的计算要求，用户可以通过编写自定义函数满足各种计算要求。
MapReduce:MapReduce是谷歌最早制作的
提出的分布式数据处理模型随后得到业界的广泛关注，并被广泛应用于各种业务场景。 在本文件中，我们将
简要介绍MapReduce模型，使用户快速熟悉和理解该模型。 使用最大计算
MapReduce的用户必须基本了解分布式计算的概念，并具有相应的编程经验。 MaxCompute MapReduce为用户提供
Java编程接口。
Graph:MaxCompute提供的Graph功能是一种面向迭代的图形计算处理框架。 图的计算工作用图建模，图从点开始
(Vertex )和边)组成，点和边中包含权重
(值)。 通过迭代对图进行编辑、进化，最终求出结果，典型应用有PageRank、单源最短距离算法、k均值聚类算法等。
SDK :开发人员工具包。 有关SDK的介绍，请参阅SDK的介绍。 安全：最大计算
提供强大的安全服务，保护用户的数据安全。 详细内容请参照安全参考手册。
有关MaxCompute的详细信息，请参见云栖社区
全套阿里巴巴大数据计算平台MaxCompute (原名ODPS )攻略
3359 yq.a liyun.com/articles/78108
原文链接：
3359 developer.a liyun.com/article/149536