A 債権者が日中に自宅まで取り立てに来るのは違法ではありません。

貸金業法と内閣府令により、午後９時から午前８時までの間の取り立ては原則禁止されています。
ということは、午前８時～午後９時までの間なら違法ではありません。
出勤前や帰宅後を狙って来るかもしれませんので、宅配便や新聞代の集金と間違えないように注意しましょう。

インターホンで誰かを確認するのは必須です。