Здание имеет разнообразный и интересный силуэт, благодаря тому, что оно скомпоновано из трех компактных архитектурных объемов: центральный корпус и боковые крылья-флигеля. Упрощенно говоря, особняк, являясь одновременно городской усадьбой, имеет П-образную планировку с открытым в сторону въезда парадным двором. Оригинальность решения — въезд располагается не со стороны главного фасада, а в переулке, традиционная планировка оказывается как бы перевернутой. Высокий холм создает подножие зданию. Некогда перед особняком находился сад.
Планировка сада, разбитого перед домом, поражала своим великолепием: пашков классицизм фасад архитектурный Внизу два каменных бассейна с фонтанами в средине. От улицы дом отделяется решеткою чудного узора. Сад, как и пруд, кишит иноземными редкими птицами. Китайские гуси, разных пород попугаи, белые и пестрые павлины находятся здесь на свободе или висят в дорогих клетках. Эти редкости вместе с общей красотой этого дома привлекают сюда по воскресеньям и праздничным дням многочисленные толпы народа. (Иоганн Рихтер, «Moskwa. Eine Skizze», 1799).
При расширении Моховой улицы участок, примыкающий к дому, сократился до одного склона.
Единственный въезд в Пашков дом, доступный для карет, находится со стороны Староваганьковского переулка. Он размещен на одной оси с основным объемом здания, которая подчеркивается всей системой застройки дворца. Широко используется принцип контраста — противопоставлено большое и малое:
- · центральный объем здания — служебным помещениям, оградам,
- · развернутый парадный двор перед главным входом — узкой трапециевидной воронке, соединяющей въезд с парадным двором,
- · раструб воронки соответствует выступу на фасаде главного корпуса,
- · прямолинейные очертания двора и воронки соединены криволинейными стенами.
Такое построение генплана с использованием контрастов несет в себе отпечаток предыдущего периода барокко с его любовью к сложно трактованному пространству. Создается пространственная система, полная контрастных эффектов и способствующая более сильному восприятию архитектурной доминанты всего комплекса — центрального объема главного здания.
К участку примыкает церковь Святого Николая Угодника, бывшая домовой.