情報が少なすぎてなんともいえん
ADSLなのか光なのか
有線/無線LANの有無
無線LANなら障害物（壁等）によって大きく変わる
光回線の有線LANでそうなるなら光BBユニットをレンタルして
IPv6高速ハイブリッド（IPoE IPv6+IPv4）を利用すれば改善される可能性大