Sphinxにデフォルトで組み込まれているテーマはどれもださいので、sphinx_rtd_themeをインストールします。
インストール
コマンドプロンプトから以下のコマンドを実行します。
pip install sphinx_rtd_theme
設定
conf.pyを開き、html_themeの記述を以下に変更します。
import sphinx_rtd_theme html_theme = "sphinx_rtd_theme" html_theme_path = [sphinx_rtd_theme.get_html_theme_path()]