ntpからOpenntpdに変えてみました。
ntpは瞬時に同期してくれるのですが、
Openntpdの場合は、1秒修正するだけで約30分もかかってしまいます。
こんなもんでしょうか？