テーマを変更する

config.py の html_theme を変更して make html すればOK

$ vim config.py
#html_theme = 'default'
html_theme = 'traditional'
$ make html

参考

• テーマの変更 — Python製ドキュメンテーションビルダー、Sphinxの日本ユーザ会