窓のサッシや窓の下に黒い小さな虫が毎日発生しています。羽はあるので…

窓のサッシや窓の下に黒い小さな虫が毎日発生しています。羽はあるのですが、飛びません。。
ゴキブリのスプレーを撒いて少しすると、結構死んでます…。3Fの寝室がそのような状態で、落ち着いたと思えば、真下の2Fのリビングが同じ状態になりました。
同じのうな状態を経験した方、いらっしゃいますか？対策などあったら教えてください。

戸建てです。