Да, при пересадке в Баку гражданин РФ может выйти из аэропорта в город, если проходит въездной контроль с действительным загранпаспортом: виза для въезда в Азербайджан не нужна. Внутренний паспорт РФ для такого въезда не указан среди разрешённых документов.
При пересадке 4 ч 20 мин поездка в центр рискованна. Aero Express идёт от аэропорта до района станции «28 Мая» около 30 минут и столько же обратно; к этому прибавятся ожидание транспорта, паспортный контроль и процедуры перед рейсом в Москву. Фактическое время на прогулку заранее неизвестно: оно зависит от паспортного контроля, багажа и требований к регистрации на рейс в Москву. Если после этих процедур остаётся примерно полтора часа, разумнее остаться в аэропорту; короткий выход к району «28 Мая» имеет смысл лишь при достаточном запасе на возвращение. До поездки спросите перевозчика по вашему бронированию: нужно ли получать и снова сдавать багаж в Баку, требуется ли повторная регистрация и когда она закрывается. Сверьте ответ со временем прибытия и вылета в билете и возвращайтесь в аэропорт заблаговременно.