コンテナ自体でパフォーマンス低下とかは起きないよ。使い方次第で遅くなったりメモリを余計に消費したりするかもしれないけど、それは普通のアプリでも一緒。