県道30号は時間問わず快適。
国道24号は朝夕方混みますが、南向きは大丈夫かな。

国道170号→国道371号のが速い可能性は捨てきれない。
あと高野山のぼるなら、国道24号から、国道370号行くより国道480号行くほうが楽。