コース内の解説では簡易インストール「pip3 install pyspark」を実行していますが、本手順であれば不要です。 以下のUdemyコースで有効です。

It will install a default Java kernel (currently JJava) which is then available locally on your computer. This can then be used in your local Jupyter install or via editors that support jupyter ...