El error es el siguiente:
Solución: mi versión de python es 3.9, la versión es demasiado alta
Debe agregar tres líneas de código antes de importar el código mujoco_py, como se muestra a continuación.
import os
os.add_dll_directory("C://Users//luckyli//.mujoco//mjpro150//bin")
os.add_dll_directory("C://Users//luckyli//.mujoco//mujoco-py-1.50.1.0//mujoco_py")
import mujoco_py
Operando normalmente