大数据开发技术仿真实验平台

大数据开发技术仿真实验平台（http://10.10.7.30:8088/SchoolMS，只能在校园网内访问）

        平台利用云计算技术打造私有云教育平台，在平台上部署实验环境、教学资源和实训资源。 根据实验的实际需求部署不同配置的虚拟机环境和教学案例资源，满足课堂教学、上机实验、综合实训等不同教学场景的需求。平台主要包括大数据私有云管理系统、大数据实验镜像和大数据虚拟实验室。

        大数据私有云管理系统对教学所需的硬件资源进行统一管理，为教师、学生提供所需的计算资源。该系统可以对虚拟机进行创建、启动、关闭等操作，也可以 通过该系统进行整体云主机管理，整体云硬盘管理，查看所有网络信息，查看私有云平台服 务状态等操作。

        大数据实验镜像系统与虚拟实验室是大数据学习与实践的环境，采用 Docker容器技术，通过容器管理平台可对公有云、私有云上的 Linux 主机资源，也可以是其他虚拟机，物理机资源进行管理。 系统中整合了主流开源的大数据相关框架和软件，这些软件和框架作为大数据实验教学的软件环境基础，所有的实验在该系统上进行，镜像系统中嵌入了实验所需的所有 数据资源。

        大数据实验实训平台是进行大数据项目实训的虚拟实验环境，通过集成高级计算机语言IDE，调用Hadoop、Spark 等框架接口， 以及内置机器学习经典算法和实例集，为教师和学生提供完整、专业的项目实训虚拟环境。主要功能包括数据采集(脚本、日志、数据库采集及采集列表等)、数据清洗(自动清 洗、脚本清洗、清洗列表等)、数据处理、数据挖掘(自动评估、脚本评估和挖掘、挖掘列 表等)，还具备公有数据集等功能。