admin 管理员组

文章数量: 1184232


2024年2月20日发(作者：手机版论坛模板)

习题1

1.选择题

（1）下列哪个不是大数据的特征？（ D ）

A. Volume

B. Variety

C. Velocity

D. Variance

（2）下列不属于大数据技术的是（ C ）。

A. 大数据采集技术

B. 大数据存储及管理技术

C. 财务报表分析技术

D. 大数据分析及挖掘技术

（3）下列不属于Spark生态系统的是（ B ）。

A. Spark Streaming

B. Storm

C. Shark SQL

D. Spark R

（4）下列适合Spark大数据处理场景的是（ D ）。

A. 复杂的批处理

B. 基于历史数据的交互式查询

C. 基于实时数据流的数据处理

D. PB级的数据存储

（5）下列不是Spark的部署模式的是（ C ）。

A. 单机式

B. 单机伪分布式

C. 列分布式

D. 完全分布式

2.操作题

使用Hadoop用户名登录Linux系统，启动Hadop，使用Hadoop提供的Shell完成如下操作：

（1）在Linux系统的本地文件系统的“/home/hadoop”目录下新建一个文本文件，并在该文件中随意输入一些内容，然后上传到HDFS的“/data/input”目录下。

$vi /home/hadoop/

$ hdfs dfs –put /home/hadoop/ /data/input/

（2）在spark-shell中读取Linux系统的本地文件“/home/hadoop/”，然后统计出文件的行数。

$ cd /usr/local/spark

$./bin/spark-shell

scala>val textFile=le("file:///home/hadoop/")

scala>()

1

（3）在spark-shell中读取HDFS系统文件“/data/input/”（如果文件不存在，请先创建），然后统计出文件的行数。

scala>val textFile=le("hdfs://localhost:9000/user/hadoop/")

scala>()

2


本文标签： 技术 数据 文件 下列 系统

版权声明：本文标题：《Spark编程基础及项目实践》课后习题及答案1 内容由网友自发贡献，该文观点仅代表作者本人， 转载请联系作者并注明出处：http://www.roclinux.cn/p/1708400968a522784.html， 本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容，一经查实，本站将立刻删除。