Ну во первых, на его глазах умерла только Лили. А во вторых, даже если он и осознал смерть родителей (знаю вы об этом не писали но многие приводят это как один из фактов в пользу своей теории) в более старшем возрасте, он всё ещё не мог её помнить и как бы не видел её лично в более менее осознанном возрасте, когда мог понять что происходит
В книге так предполагает Гермиона и как с этим обстоят дела на самом деле не описывается. Хотя, скорее всего, Гермиона во многом права однако некоторые детали всё равно могут отличаться
Если бы Северус не смог увидеть Ремуса, то можно было сослаться на то что только мародёры (и их наследники) могли видеть на карте других её создателей. А так приходится ссылаться на невнимательность близнецов. Так же возможно, когда братья смотрели на карту, Питер иногда мог находился где-нибудь в другом месте