还剩4页未读,继续阅读
文本内容:
《大数据开发技术》教学大纲Spark适用范围2020版本科人才培养方案课程代码08150491课程性质专业选修课学分4学分学时64学时其中理论48学时,实验16学时先修课程Linux、Python,大数据平台与架构等后续课程适用专业软件工程、数据科学与大数据技术教材Spark编程基础Scala版.林子雨主编,人民邮电出版社,
2018.08开课单位计算机科学与技术学院-、课程的性质与任务课程性质本课程是软件工程、数据科学与大数据技术专业的专业选修课课程任务通过对本课程的学习,让学生在对大数据技术有一定了解的基础上,进一步学习大数据技术、Spark的设计与运行原理、环境搭建及使用等内容,通过入门级编程实践操作来提升学生学习和掌握大数据处理的实践能力
二、课程教学目标
1.知识目标掌握和理解Spark基本设计与运行原理、环境搭建及使用等基本知识;
2.能力目标掌握Sparic编程实践
3.素质目标树立正确的政治理想和政治道德,培养对党和国家,社会主义事业忠诚可靠的建设者和接班人;
三、课程的基本内容及要求一语言基础Scala
1.课程教学内容1Scala简介2Scala的安装3Scala基础知识
2.课程重点难点重点Scala的基础知识难点Scala的安装与基础知识
3.课程教学要求⑴了解Scala;2掌握Scala的安装;原创力文档3掌握和运用Scala的基本知识max.book
118.com~Spark的设计与运行预览与源文档T下载高清无水
1.课程教学内容印⑴Spark生态系统2Spark运行架构;3Spark的部署方式;
2.课程重点难点重点Spark运行架构难点Sparic的部署方式
3.课程教学要求1了解Spark生态系统;2掌握Spark运行架构和部署方式三Spark环境搭建和使用L课程教学内容lSpark的安装;2Spark-shell命令;3开发Spark应用程序;4Spark集群搭建
2.课程重点难点重点Spark-shell和应用程序开发难点Spark应用程序开发和集群搭建
3.课程教学要求1掌握Spark的安装;2掌握Spark-shell命令及应用程序开发;四RDD编程
1.课程教学内容lRDD编程基础;2键值对RDD;3数据读写
2.课程重点难点重点RDD编程基础难点数据读写
3.课程教学要求1TW-RDD;2理解并掌握RDD编程;原创力文档五Spark SQLmax.book
118.com
1.课程教学内容预览与源文档一致清无水印lSpark SQL架构2DataFrame的创建保存及操作⑶使用Spark SQL读写数据
2.课程重点难点重点DataFrame的创建保存及操作难点使用Spark SQL读写数据
3.课程教学要求1了解Spark SQL架构;□⑵理解并掌握DataFrame的创建保存及操作3理解并掌握使用Spark SQL读写数据A Spark Streaming
1.课程教学内容1流计算;2Spark Streaming:3Spark Streaming工作机制4基本输入源及高级输入源
2.课程重点难点重点Spai-kStreaming基本知识难点Spark Streaming程序编写
3.课程教学要求1了解流计算□2掌握Spark Streaming程序编写;□
四、课程学时分配教学章节理论实践验讨论、习题
一、Scala语言基础104
二、Spark的设计与运行6
三、Spark环境搭建和使用104
四、RDD编程84
五、Spark SQL82
六、Spark Streaming62总计4816
五、课程考核方式与要求考核方式本课程主要以课程视频、课堂表现、作业评价、测试、期末机试等考核方式对学生进行考核评价考核基本要求考核总成绩由过程性评价成绩和期末机试成绩组成其中期末机试考核成绩为100分(权重为60%),主要针对程序关键点进行开发测试过程性评价成绩为100分(权重40%),主要包含课程视频、课堂表现、作业评价、测试等;过程性评价分值与期末机试评价分值分配与教学大纲各章节的学时基本成比例
六、源库
1.林子雨.大数据技术原理与应用(第二版).人民邮电出版社,
20172.陆嘉恒.Hadoop实战(第二版).机械工业出版社.
20123.Tom White.Hadoop权威指南(中文版).清华大学出版社
4.鸟哥.鸟哥的Linux私房菜基础学习篇(第三版).人民邮电出版社.
20165.王道远.Spark快速大数据分析.人民邮电出版社.
20156.M.Zaharia.An architecturefor fastand generaldata processingon largeclustersMorganClaypool,
20167.Leskovec J,Raj aramanA,Ullman JD.Mining ofmassive datasets.Cambridge UniversityPress,2014。
个人认证
优秀文档
获得点赞 0