1 |
大数据训练设备 |
1.00 |
套 |
四合天地 |
无 |
是 |
基础平台
基于自研Docker容器编排管理引擎,运用云原生和容器技术构建训练环境,支持快速创建训练环境。实现每个学生环境互相隔离、训练过程互不干扰,教师可以一键操作即可创建一套全新的环境供学生进行备赛训练,方便学生高效的完成训练操作的同时,大幅降低了教师组织训练的难度和成本。
1、本系统运行在开源操作系统Linux平台下,应使用浏览器/服务器模式提供服务,用户使用最新版本的谷歌浏览器访问系统。
2、系统支持包括管理员、教师、学生三种角色。管理员负责系统配置维护、镜像环境维护等工作;教师负责小组维护、训练任务维护等工作;学生参与并完成训练。
管理员功能:
3、专业管理:管理员可自主创建专业,编辑专业相关内容,如:新增(编辑)专业,删除专业。
4、班级管理:管理员可自主创建班级,编辑班级相关内容,如:新增(编辑)班级,删除班级。
5、用户管理:管理员可自主创建用户,编辑用户相关内容,如:新增(编辑)用户的账号、姓名、手机号、角色、状态、密码等,同时也可对用户进行删除操作。
6、镜像环境:管理员可维护镜像环境,可通过网页上传Dockerfile文件来完成镜像环境的创建,也可从本地镜像仓库进行镜像同步,并可对镜像环境执行编辑和查看端口说明操作。
7、环境配置:管理员依据镜像环境的具体应用场景,通过添加环境配置来完善该镜像所需的CPU、内存、磁盘空间等配置信息,并可对环境配置信息进行编辑和删除。
8、服务器配置:管理员可配置计算节点服务器相关信息,包括新增服务器名称、服务器IP地址、CPU核数、内存大小、磁盘空间,也可对服务器配置信息进行编辑和删除。(提供加盖制造商公章的功能截图证明材料)
9、训练资源监控:管理员可监控正在进行的训练资源,监控正在进行的训练状态、使用人数、占用资源等信息,并可对相关的环境执行启动、挂起等操作。(提供加盖制造商公章的功能截图证明材料)
10、角色管理:管理员可自主创建角色,编辑角色相关内容,如:添加(编辑)角色名称、角色备注(描述)、状态、权限分配(权限分配依据角色名称分配相应权限)等,同时也可对角色进行删除操作。
11、日志管理:管理员可查看当前系统操作日志和登录日志。操作日志主要记录操作的账户、操作模块、时间、IP等信息。登录日志主要记录登录的用户、IP地址、登录状态等信息。
12、系统设置:可自定义系统名称,如浏览器标题、浏览器LOGO、登录页标题、首页标题、首页LOGO等。
教师功能:
13、训练模块:教师可自主创建训练模块,编辑相应的训练内容。内容包括训练的名称、介绍、使用状态、该训练指定的一个或多个实训环境、可供下载的资源包、任务设置的具体形式包括上传任务说明、任务参考等。(提供加盖制造商公章的功能截图证明材料)
14、小组管理:教师可自主创建小组,并对小组进行编辑、启用、禁用等操作。已启用的小组可以进行添加成员、设置任务参考操作。在编辑具体小组时,通过选择该小组所包含的成员,内容上选择所用到的训练模块,完成小组的整体设置。(提供加盖制造商公章的功能截图证明材料)
15、训练监控:教师可查看各小组的训练情况,选择启动、挂起、继续或结束训练环境。通过“进入”按钮,可进入小组的某个环境进行指导操作,也可对小组的某个训练环境执行启动、停止、重置或重启。
16、训练报告:对已启用小组,记录每个小组中,学生具体的训练情况,查阅学生提交上传的报告、附件等信息,编辑每个学生对应的训练成绩。(提供加盖制造商公章的功能截图证明材料)
17、个人实验环境:教师可在个人实验环境中选择镜像环境进行个人实验或练习等操作。(提供加盖制造商公章的功能截图证明材料)
18、消息通知:当学生完成训练报告的提交或附件上传时,教师会收到消息通知并可通过消息通知直接找到训练报告或附件。
19、个人资料:教师可修改个人头像及密码。
学生功能:
20、学生登录平台,可进入对应的训练模块,在线查看任务说明、任务参考,并进入训练环境进行操作,可在浏览器中访问自己的训练环境包括命令行形式的或桌面形式的Linux操作系统,环境相关端口已映射,可通过环境映射的相应宿主机端口访问环境中部署的相应服务,也可对环境进行重置、重启、查看端口说明、上传、下载等操作,同时学生可以下载相关的资源文件,提交个人的训练报告,上传相关附件完成训练。
21、个人中心:学生可修改个人头像及密码,也可查看自己的训练记录。
训练内容配置
平台内置两套行业真实脱敏数据,行业背景为工业和电商,数据提供形式为离线存量数据和实时数据生成脚本,其中工业数据包含设备信息、设备状态信息、设备记录数据信息、产品加工信息、环境检测信息等相关数据字段,电商数据包含用户信息、登录信息、积分信息、登录日志、余额变动、商品品牌信息、分类信息、供应商信息、评论信息、浏览记录、收藏信息、订单信息、购物车信息、仓库信息、物流信息等相关数据字段,并配备相应的集群环境镜像用于完成大数据相关基础平台安装部署、数据湖相关平台安装部署、离线数据抽取、离线数据清洗统计、实时数据采集、实时数据清洗统计、数据挖掘、数据可视化等大数据项目工作过程的训练,技能涵盖Docker环境使用、Linux系统操作、Hadoop安装部署、Spark安装部署、Flink安装部署、Hive安装部署、ZooKeeper安装部署、Kafka安装部署、Flume安装部署、HBase安装部署、ClickHouse安装部署、Hudi安装部署、Scala程序开发、Hive数仓操作、Flume操作、MySQL操作、HBase操作、ClickHouse操作、Spark算子使用、Flink算子使用、前端vue开发等大数据相关核心技术技能。内置内容包括:
1、包含大数据平台及相关组件安装包的训练集群镜像;
2、已部署完毕相关组件的大数据训练集群镜像;
3、用于数据可视化开发的数据接口服务镜像;
4、工业行业背景离线数据不少于50万条和工业实时数据生成脚本;
5、电商行业背景离线数据不少于50万条和电商实时数据生成脚本;
6、基于镜像创建好相应的训练模块及训练集群,方便用户快速开始相应训练。 |