Предположим, что в обоих городах ты стоишь лицом к стене дома. Если это Москва - то начало улицы будет у тебя по левую руку, а если в Питере - по правую. Поэтому, и идти нужно будет в разные стороны.

Единственное, у меня опечатка - не дом 20, а дом 21, или 19, или 23... ну ты поняла. С 20-м может не сработать, если на одной стороне дома длинные, а на другой - короткие.