русский музыкальный критик, композитор и писатель из рода Толстых. Сын сенатора М. Ф. Толстого от его брака с Прасковьей Михайловной, дочерью полководца М. И. Кутузова. Брат Павла, Николая, Ивана Толстых.
В 1827 г. окончил Пажеский корпус с чином 14-го класса. С 30 апреля 1828 по 24 апреля 1832 гг. – чиновник ведомства Государственного контроля. 3 декабря 1836 г. был назначен старшим помощником столоначальника канцелярии московского военного генерал-губернатора, 23 сентября 1841 г. был переведен в канцелярию смоленского, витебского и могилевского генерал-губернатора. 25 мая 1843 г. был пожалован в звание камер-юнкера. 5 декабря 1843 г. был переведен на службу в Военное министерство, где занимался вопросами, связанными с провиантской частью; с 11 апреля 1848 г. – чиновник особых поручений при военном министре, с 15 апреля 1856 г. – одновременно заседающий с правом голоса в Провиантском департаменте Военного министерства. 17 апреля 1860 г. был пожалован в звание камергера и 23 апреля следующего года произведен в действительные статские советники. После преобразования Военного министерства в ходе реформ Д. А. Милютина с 13 октября 1864 г. состоял членом временного общего присутствия Главного интендантского управления, но 30 августа 1865 г. был отчислен от этой должности, как и от должности чиновника особых поручений, и назначен членом Совета Главного управления по делам печати; ровно год спустя пожалован в гофмейстеры Двора Е.И.В. 26 ноября 1871 г. был уволен от должности члена Совета Главного управления по делам печати и назначен состоять по Военному министерству, не неся определенных служебных обязанностей; оставался в этом качестве на службе вплоть до своей смерти.
Сочинил свыше двухсот романсов. Брал уроки пения у Джованни Рубини, совершенствовался в Италии. На итальянское либретто написал оперу «Birichino di Parigi», поставленную в Неаполе в 1832 г. и в Петербурге в 1835 г. Опера «Доктор в хлопотах» была поставлена в 1851 г. Вследствие слабого успеха опер Фиф, как его называли друзья, оставил композиторскую карьеру и посвятил себя критической деятельности. С 1850 г. принимал деятельное участие в таких изданиях, как «Северная пчела», «Голос», «Московские ведомости», «Journal de St. Petersbourg». Опубликовал разборы опер «Жизнь за царя» (1854), «Рогнеда» (1870), «Юдифь» (1871), «Вражья сила» (1871). Пропагандировал творчество М. И. Глинки, А. С. Даргомыжского и А. Н. Серова. В 1852 г. поместил в «Современнике» светскую повесть «Капитан Тольди». В 1859 г. в «Русском вестнике» появился роман Толстого «Болезни воли». Он состоял в переписке с Н. А. Некрасовым, Ф. М. Достоевским, И. А. Гончаровым.