Забыть какую-либо вещь в чужом доме - к скорому возвращению туда:
Думается, тут и без всякой мистики ясно: если уж что-то забыл, то волей-неволей придется возвращаться. А поскольку при себе обычно носят необходимые на каждый день вещи (в наше время - телефонную книжку, зонтик и т.д.), то логично, что возвращаться надо будет поскорее.