Вставьте частицу "не" или "ни".

... разу я ... был у него дома.