法律には犯罪に関する規定しかないから不倫は該当しないだろ。
親告罪だからわざわざ刑事告訴するケースがほぼないというだけ。