是否有经济援助？

是的。在特定的学习课程中，如果您付不起注册费，可以申请助学金或奖学金。如果您选择的学习课程有助学金或奖学金，您可以在说明页面找到申请链接。

在集群和云存储中管理大数据

在集群和云存储中管理大数据

Q: 我什么时候能看到讲座和作业？

要获取课程资料、作业和证书，您需要在注册课程时购买证书体验。 您可以尝试免费试听，或申请资助。课程可能提供 "完整课程，无证书"。通过该选项，您可以查看所有课程资料，提交必要的评估，并获得最终成绩。这也意味着您无法购买证书体验。

本课程是使用 SQL 进行现代大数据分析专项课程的一部分

位教师：Ian Cook

顶尖授课教师

12,579 人已注册

包含在 Coursera Plus 中

了解更多

5个模块

深入了解一个主题并学习基础知识。

4.7

（297 条评论）

初级等级

无需具备相关经验

灵活的计划

2 周在 10 小时一周

自行安排学习进度

95%

大多数学生喜欢此课程

5个模块

深入了解一个主题并学习基础知识。

4.7

（297 条评论）

初级等级

无需具备相关经验

灵活的计划

2 周在 10 小时一周

自行安排学习进度

95%

大多数学生喜欢此课程

您将学到什么

使用不同工具浏览大数据系统中的现有数据库和表格
使用不同工具探索分布式大数据文件系统和云存储中的文件
使用 Apache Hive 和 Apache Impala 创建和管理大数据数据库和表格
描述并选择大数据系统的不同数据类型和文件格式

您将获得的技能

要了解的详细信息

可分享的证书

添加到您的领英档案

作业

9 任务¹

AI 评分请参见免责声明

授课语言：英语（English）

了解顶级公司的员工如何掌握热门技能

了解关于 Coursera for Business 的更多信息

Petrobras, TATA, Danone, Capgemini, P&G 和 L'Oreal 的徽标

积累特定领域的专业知识

本课程是使用 SQL 进行现代大数据分析专项课程专项课程的一部分

在注册此课程时，您还会同时注册此专项课程。

向行业专家学习新概念
获得对主题或工具的基础理解
通过实践项目培养工作相关技能
获得可共享的职业证书

该课程共有5个模块

在本课程中，您将学习如何管理大型数据集，如何将其加载到集群和云存储中，以及如何对数据进行结构化处理，以便使用 Apache Hive 和 Apache Impala 等分布式 SQL 引擎对其进行查询。您还将学习如何根据要使用的工具和需要的性能选择正确的数据类型、存储系统和文件格式。

课程结束时，您将能够： - 使用不同的工具浏览大数据系统中的现有数据库和表； - 使用不同的工具探索分布式大数据文件系统和云存储中的文件； - 使用 Apache Hive 和 Apache Impala 创建和管理大数据数据库和表；以及 - 为大数据系统描述和选择不同的数据类型和文件格式。要使用本课程的实践环境，您需要下载并安装虚拟机和运行虚拟机的软件。在继续之前，请确保您可以访问符合以下硬件和软件要求的计算机： - Windows、macOS 或 Linux 操作系统（iPad 和 Android 平板电脑无法使用） - 64 位操作系统（32 位操作系统无法使用） - 8GB 或更大内存 - 25GB 或更大可用磁盘空间 - 启用英特尔 VT-x 或 AMD-V 虚拟化支持（在使用英特尔处理器的 Mac 电脑上，该支持始终处于启用状态；在 Windows 和 Linux 电脑上，您可能需要在 BIOS 中启用该支持） - 仅适用于 Windows XP 电脑：您必须安装 7-Zip 或 WinZip 等解压实用程序（Windows XP 的内置解压实用程序无法使用）。

涵盖的内容

7个视频3篇阅读材料1个作业1个讨论话题

7个视频总计56分钟

欢迎参加课程4分钟
使用 Hue 浏览表7分钟
使用 SQL 实用程序语句浏览表6分钟
使用 Hue 文件浏览器浏览 HDFS13分钟
从命令行浏览 HDFS9分钟
了解 S3 和其他云存储平台6分钟
从命令行浏览 S3 存储桶8分钟

3篇阅读材料总计65分钟

审查和准备30分钟
下载和安装练习环境的说明30分钟
虚拟机故障排除5分钟

1个作业总计30分钟

第 1 周等级测验30分钟

1个讨论话题总计15分钟

自我介绍15分钟

涵盖的内容

7个视频12篇阅读材料2个作业1个讨论话题

7个视频总计32分钟

第 2 周介绍3分钟
CREATE TABLE 语句简介5分钟
在相同数据上使用不同模式12分钟
指定 TBLPROPERTIES2分钟
检查、修改和删除表格1分钟
Hive 和 Impala 的互操作性2分钟
Impala 元数据刷新3分钟

12篇阅读材料总计200分钟

使用 Hue 创建数据库和表30分钟
使用 SQL 创建数据库和表15分钟
创建数据库和表的权限5分钟
行格式条款25分钟
存储为条款15分钟
地点条款20分钟
创建表快捷方式10分钟
使用 Hive SerDes15分钟
处理非结构化和半结构化数据15分钟
检查表结构10分钟
删除数据库和表5分钟
修改现有表格35分钟

2个作业总计60分钟

第 2 周练习测验30分钟
第二周分级测验30分钟

1个讨论话题总计15分钟

最难以理解15分钟

涵盖的内容

5个视频12篇阅读材料2个作业1个讨论话题

5个视频总计14分钟

第 3 周简介1分钟
数据类型概述1分钟
选择正确的数据类型4分钟
文件类型概述3分钟
选择正确的文件类型3分钟

12篇阅读材料总计90分钟

整数数据类型5分钟
十进制数据类型10分钟
字符串数据类型10分钟
其他数据类型5分钟
检查数据类型10分钟
超出范围的数值5分钟
文本文件5分钟
Avro 文件5分钟
镶木地板文件5分钟
ORC 文件5分钟
其他文件类型5分钟
使用 Avro 和 Parquet 文件创建表格20分钟

2个作业总计50分钟

第 3 周练习测验20分钟
第 3 周等级测验30分钟

1个讨论话题总计10分钟

你属于哪种类型10分钟

涵盖的内容

8个视频13篇阅读材料2个作业1次同伴评审1个讨论话题

8个视频总计48分钟

第 4 周简介3分钟
加载数据后刷新 Impala 的元数据缓存2分钟
使用 Hue 的表浏览器将文件加载到 HDFS 中10分钟
使用 Hue 的文件浏览器将文件加载到 HDFS 中6分钟
从命令行将文件加载到 HDFS8分钟
从命令行将文件加载到 S310分钟
使用 Hive 和 Impala 将数据加载到表中3分钟
结论2分钟

13篇阅读材料总计115分钟

关于 HDFS Shell 命令的更多信息10分钟
使用 HDFS 命令进行链式处理和编写脚本5分钟
HDFS 权限5分钟
将文件加载到 S3 的其他方法5分钟
S3 权限10分钟
缺失值15分钟
字符集5分钟
使用 Sqoop 导入数据15分钟
更多 Sqoop 导入选项5分钟
使用 Sqoop 导出数据5分钟
SQL LOAD DATA 语句10分钟
SQL INSERT 语句10分钟
SQL INSERT ... SELECT 和 CTAS 语句15分钟

2个作业总计60分钟

第 4 周练习测验30分钟
第 4 周等级测验30分钟

1次同伴评审总计75分钟

数据管理75分钟

1个讨论话题总计10分钟

看看这个10分钟

荣誉（可选）

涵盖的内容

6个视频20篇阅读材料2个作业1个讨论话题

6个视频总计20分钟

第 5 周导言1分钟
当查询过于复杂时该怎么办1分钟
查询时间过长时该怎么办1分钟
何时使用表分区8分钟
何时使用复合列2分钟
文件系统与存储引擎4分钟

20篇阅读材料总计220分钟

创建和查询视图10分钟
修改和删除视图10分钟
实体化和非实体化视图10分钟
视图中的 ORDER BY 条款10分钟
选择使用哪种查询引擎5分钟
了解地图任务和还原任务15分钟
Hive 查询性能模式5分钟
了解执行计划10分钟
表和列统计10分钟
查询优化的其他策略5分钟
创建分区表10分钟
使用动态分区加载数据10分钟
使用静态分区加载数据15分钟
使用分区的风险10分钟
复杂数据类型10分钟
创建包含复杂数据的表格15分钟
使用 Hive 查询复杂数据10分钟
使用 Impala 查询复杂数据15分钟
复杂数据的实践25分钟
阿帕奇库杜概述10分钟

2个作业总计60分钟

第 5 周练习测验30分钟
第 5 周等级测验30分钟

1个讨论话题总计10分钟

有问题吗？10分钟

获得职业证书

将此证书添加到您的 LinkedIn 个人资料、简历或履历中。在社交媒体和绩效考核中分享。

位教师

授课教师评分

4.9 (60个评价)

顶尖授课教师

Ian Cook

2 门课程30,629 名学生

Glynn Durham

2 门课程54,219 名学生

提供方

Cloudera

从数据分析浏览更多内容

状态：免费试用
University of California San Diego
Big Data Integration and Processing
课程
状态：免费试用
Google Cloud
Data Management and Storage in the Cloud
课程
状态：免费试用
Cloudera
Foundations for Big Data Analysis with SQL
课程
状态：免费试用
University of California San Diego
Big Data Modeling and Management Systems
课程

人们为什么选择 Coursera 来帮助自己实现职业发展

Felipe M.

自 2018开始学习的学生

''能够按照自己的速度和节奏学习课程是一次很棒的经历。只要符合自己的时间表和心情，我就可以学习。'

Jennifer J.

自 2020开始学习的学生

''我直接将从课程中学到的概念和技能应用到一个令人兴奋的新工作项目中。'

Larry W.

自 2021开始学习的学生

''如果我的大学不提供我需要的主题课程，Coursera 便是最好的去处之一。'

Chaitanya A.

''学习不仅仅是在工作中做的更好：它远不止于此。Coursera 让我无限制地学习。'

学生评论

4.7

297 条评论

5 stars
79.46%
4 stars
15.48%
3 stars
3.36%
2 stars
1.01%
1 star
0.67%

显示 3/297 个

已于 Feb 24, 2024审阅

Excellent class, I learned a lot. Well organized and great content.

已于 Apr 13, 2020审阅

This is one of the systematic specializations which makes the harder and otherwise overwhelming subject so easy to navigate, follow and learn.

已于 Feb 9, 2020审阅

Very good material and the labs using the VM are wonderful hands-on experience.

查看更多评论

通过 Coursera Plus 开启新生涯

无限制访问 10,000+ 世界一流的课程、实践项目和就业就绪证书课程 - 所有这些都包含在您的订阅中

了解更多

通过在线学位推动您的职业生涯

获取世界一流大学的学位 - 100% 在线

探索学位

加入超过 3400 家选择 Coursera for Business 的全球公司

提升员工的技能，使其在数字经济中脱颖而出

了解更多

常见问题

- Windows、macOS 或 Linux 操作系统（iPad 和 Android 平板电脑无法使用） - 64 位操作系统（32 位操作系统无法使用） - 8GB 或更大内存 - 25GB 或更大可用磁盘空间 - 启用英特尔 VT-x 或 AMD-V 虚拟化支持（在配备英特尔处理器的 Mac 电脑上，此功能始终处于启用状态；在 Windows 和 Linux 电脑上，可能需要在 BIOS 中启用） - 仅适用于 Windows XP 电脑：必须安装 7-Zip 或 WinZip 等解压实用程序（Windows XP 的内置解压实用程序无法正常工作）

要获取课程资料、作业和证书，您需要在注册课程时购买证书体验。您可以尝试免费试听，或申请资助。课程可能提供 "完整课程，无证书"。通过该选项，您可以查看所有课程资料，提交必要的评估，并获得最终成绩。这也意味着您无法购买证书体验。

注册课程后，您就可以访问专项课程中的所有课程，完成作业后还可以获得证书。您的电子证书将添加到您的 "成就 "页面--在那里，您可以打印证书或将其添加到您的 LinkedIn 个人资料中。