Из дворян Ярославской губернии.

Воспитывался в Императорском Военно-Сиротском Доме, из которого в 1825 году был выпущен прапорщиком с назначением в свиту Его Величества по квартирмейстерской части (в настоящее время Генеральный Штаб).
В 1831 году в чине поручика П. был назначен старшим адъютантом Главного Штаба 1-й армии и в том же году был произведен в штабс-капитаны с переводом в Генеральный Штаб.

В 1834 году, вследствие упразднения Главного Штаба 1-й армии, П. был назначен старшим адъютантом в штаб 4-го пехотного корпуса по части Генерального Штаба и занимал эту должность три года. За это время он был награжден орденом Владимира 4-й степени и чином капитана. 27-го ноября 1838 года Панов был определен в число офицеров, полагавшихся по штату при главной квартире действующей армии, для разных работ по канцелярии и особых поручений, а в следующем году за отличие по службе был произведен в подполковники и назначен начальником 1-го отделения Управления генерал-квартирмейстера действующей армии; пробыл он в этой должности 9 лет, во время которых за отличие по службе был произведен в полковники. 1-го марта 1848 г. П. был назначен старшим адъютантом в Главный Штаб действующей армии по части Генерального Штаба и в составе штаба армии находился в Венгерской кампании 1849 г. Здесь ему пришлось принять участие в сражениях под Вайценом (5-го июля) и под Дебречином (21-го июля); за отличие, им оказанное, П. был награжден орденами: Анны 2-й степени и австрийским - Железной Короны. 2-го августа 1854 г. П. был определен в распоряжение начальника Главного Штаба и генерал-квартирмейстера действующей армии для особых поручений, а через два года был награжден орденом Владимира 3-й степени.
В начале 1857-63 - военный губернатор Семипалатинской области и произведен в генерал-майоры.
+ с 10-го апреля 1863 г. был назначен командующим войсками Семипалатинской области с оставлением в должности военного губернатора, а в следующем году был произведен в генерал-лейтенанты и награжден орденом Анны 1-й степени с короной и мечами над орденом.
В начале 1865 года П. был переведен военным губернатором Области сибирских киргизов (г. Омск) и командующим местными войсками, а через год, отозванный с этого поста, назначен состоять при министре Внутренних Дел с оставлением в Генеральном Штабе. Последней наградой ему был орден Владимира 2-й ст., полученный им 3-го мая 1867 г.

По другим данным, умер в 9 сент. 1870 г. погребен на Смоленском кладбище в Петербурге.