简介JupyterHub是一个开源的共享计算平台,它为每个用户管理一个单独的 Jupyter 环境, 可以用于学生班级、企业数据科学小组或科学研究小组。它是一个多用户中心,可以生成、管理和代理多个单用户Jupyter笔记本服务器的实例。GNU Octave是一种采用高级编程语言的主要用于数值分析的软件。Octave有助于以数值方式解决线性和非线性问题,并使用与MATLAB兼容的语言进行其他数值实验。它也可以作为面向批处理的语言使用。因为它是GNU计划的一部分,所以它是GNU通用公共许可证条款下的自由软件。本期,我们就来试试Jupyter和Octave组成一个多用户的科学计算平台。实验材料:Python 3(如果没有请先安装python3)pip(如果没有安装请先安装python3-pip)Octave源代码 [color=rgba(0, 0, 0, 0.9)]一台HS-2服务器 服务器配置:CPU:SG2042(64核心)RAM:32GB硬盘容量:1TB[color=rgba(0, 0, 0, 0.9)]操作系统:Ubuntu 22.10 (GNU/Linux 6.1.31 riscv64) 实验步骤:先通过pip安装JupyterHub、JupyterLab和Jupyter Notebook:pip3 install jupyterhub jupyterlab notebook[color=rgba(0, 0, 0, 0.9)]生成配置文件(可以根据实际情况对配置文件进行修改): jupyterhub --generate-config[color=rgba(0, 0, 0, 0.9)]然后启动jupyterhub:
jupyterhub[color=rgba(0, 0, 0, 0.9)]或后台运行:
nohup jupyterhub &[color=rgba(0, 0, 0, 0.9)] 浏览器访问[服务器地址]:8000即可,访问后发现虽然我们看到了JupyerHub在运行,但是只有Python3,并没有Octave选项。
因此,我们还需要安装Octave和相关组件。安装Octave的方式有两种:编译安装和apt安装。方式1:直接使用apt安装sudo apt install octave[color=rgba(0, 0, 0, 0.9)]方式2:编译安装 下载Octave源码包wget https://mirror2.sandyriver.net/pub/software/gnu/octave/octave-8.3.0.tar.gz [color=rgba(0, 0, 0, 0.9)](如果下载速度慢,可以先提前在自己的电脑上下载好,然后将文件传到服务器上) 解压Octave源码包tar -xzvf octave-8.3.0.tar.gz[color=rgba(0, 0, 0, 0.9)]进入Octave源码文件夹 cd octave-8.3.0/[color=rgba(0, 0, 0, 0.9)]
配置:./configure [color=rgba(0, 0, 0, 0.9)]编译: make -j64(线程数根据实际情况来设置)[color=rgba(0, 0, 0, 0.9)]安装: sudo make install[color=rgba(0, 0, 0, 0.9)]运行octave shell,如果出现版本号及提示,就说明安装成功! [color=rgba(0, 0, 0, 0.9)]
[color=rgba(0, 0, 0, 0.9)]安装octave-kernel pip3 install octave-kernel[color=rgba(0, 0, 0, 0.9)]安装gnuplot
sudo apt-get install gnuplot[color=rgba(0, 0, 0, 0.9)]然后重新启动jupyterhub(如果是后台运行请先确保已杀灭所有jupyterhub相关进程再重启): jupyterhub[color=rgba(0, 0, 0, 0.9)]或者: nohup jupyterhub &(后台运行)[color=rgba(0, 0, 0, 0.9)]然后再次打开浏览器访问[服务器地址]:8000就可以看到Octave笔记了。 [color=rgba(0, 0, 0, 0.9)]
我们选择Octave新建笔记。画一个正弦函数图:graphics_toolkit("gnuplot");gnuplot_binary('/usr/bin/gnuplot'); % 设置gnuplot二进制文件的路径,具体路径可能不同% 生成一组 x 值(从 0 到 2π,间隔为 0.01)x = 0:0.01:2*pi;% 计算对应的正弦值y = sin(x);% 绘制正弦函数图plot(x, y);title("Sin Function"); % 添加标题xlabel("x"); % 添加 x 轴标签ylabel("sin(x)"); % 添加 y 轴标签grid on; % 添加网格线效果:
画个心形:[color=rgba(0, 0, 0, 0.9)]
其实Octave不仅可以画图,甚至还可以算斐波那契数列。[color=rgba(0, 0, 0, 0.9)]
甚至是算圆周率:[color=rgba(0, 0, 0, 0.9)]
结果提示缺少库。因此我们需要安装symbolic包。
得益于Octave支持安装扩展包,我们可以利用一些扩展包来实现更多功能,让Octave变得更加强大。[color=rgba(0, 0, 0, 0.9)]
进入Octave Shell后,先更新扩展包源,然后再下载并安装symbolic包:pkg updatepkg install -forge symbolic再重新尝试运行就可以了:
然后分别测试10、100、1000、10000和100000位:10位:1.1531 秒100位:1.155 秒1000位:1.1567 秒10000位:1.2044 秒100000位:3.2812 秒[color=rgba(0, 0, 0, 0.9)]接下来就是尝试多用户了,虽然Jupyterhub可以使用多用户单个笔记本管理,但是如果需要实现多用户管理,那就需要root账号了。 首先切换到root账号:su[color=rgba(0, 0, 0, 0.9)]输入密码后进入以root用户登录,然后回到家目录: cd[color=rgba(0, 0, 0, 0.9)]安装相关包: pip3 install jupyterhub jupyterlab notebook[color=rgba(0, 0, 0, 0.9)]新建一个jupyerhub文件夹:
mkdir jupyterhub[color=rgba(0, 0, 0, 0.9)]复制之前的配置文件(可以根据自身情况适当修改)
cp jupyterhub_config.py jupyterhub[color=rgba(0, 0, 0, 0.9)]或新建配置文件 jupyterhub --generate-config[color=rgba(0, 0, 0, 0.9)]启动JupyterHub
jupyterhub[color=rgba(0, 0, 0, 0.9)]以后台形式启动JupyterHub
nohup jupyterhub &[color=rgba(0, 0, 0, 0.9)]但是其他用户界面里没有Octave,于是我就直接在root用户下安装octave-kernel了。
pip3 install octave-kernel[color=rgba(0, 0, 0, 0.9)]同时启动三个用户,并计算Pi,并观察耗时,确保三个用户的Octave都处于Busy状态。
结果如下(精准到10万位小数点):perfxlab01:6.762秒python01:6.6159秒python02:6.9564秒[color=rgba(0, 0, 0, 0.9)]测试下来只有零点几秒的差距,但是相比于单个用户下算圆周率耗时会久一些。 不仅可以使用Octave笔记,也可以使用Octave命令符(Shift+Enter发送命令)。[color=rgba(0, 0, 0, 0.9)]
小贴士:执行配置或编译时,如果提示缺少所需依赖,请先安装所需依赖然后重新执行配置或编译。运行代码时,如果提示缺少所需依赖,可以先以root身份登录然后安装所需依赖,然后再重新启动该各个用户的Jupyter服务器(或直接重启整个JupyterHub)即可。实验总结:[color=rgba(0, 0, 0, 0.9)]有了JupyterHub的加持,现在HS-2服务器可以成为一个优秀的科学计算平台,再配合上Octave,你不仅可以用JupyterHub上用Python跑科学计算,你还可以使用Octave完成科学计算任务,甚至可以多个用户使用同一个JupyterHub服务器。 [color=rgba(0, 0, 0, 0.9)]参考资料: JupyterHub页面 https://jupyter.org/hub
Octave官网 https://octave.org/
Octave Packages https://gnu-octave.github.io/packages/
Configuration Reference — JupyterHub documentation https://jupyterhub.readthedocs.io/en/stable/reference/config-reference.html
[color=rgba(0, 0, 0, 0.9)]正文完
[color=rgba(0, 0, 0, 0.9)]HS-2 RISC-V通用主板是澎峰科技与合作伙伴共同研发的一款专为开发者设计的标准mATX主板,它预装了澎峰科技为RISC-V高性能服务器定制开发的软件包,包括各种标准bencmark、支持V扩展的GCC编译器、计算库、中间件以及多种典型服务器应用程序。 [color=rgba(0, 0, 0, 0.9)] [color=rgba(0, 0, 0, 0.9)]HS-2 RISC-V通用主板搭载了一颗国产RISC-V 64核处理器(SG2042)。SG2042是目前已量产的性能最高的RISC-V处理器,主要针对高性能计算领域需求设计,适用于科学计算、工程计算、AI计算、融合计算等大算力应用场景。 [color=rgba(0, 0, 0, 0.9)]
[color=rgba(0, 0, 0, 0.9)]关于RISC-V公共测试平台 [color=rgba(0, 0, 0, 0.9)]
[color=rgba(0, 0, 0, 0.9)]RISC-V高性能处理器公共测试云平台 ·快速使用指南,下载链接:https://www.kdocs.cn/l/cmnYcyFIlVRx
|