1762 год связан с закатом стиля барокко в архитектуре, и Франческо, как яркий представитель этого стиля, остался без заказов. Граф Эрнст Бирон, вернувшийся из ссылки, нанимает Растрелли для завершения работ по достройке его Рундальского и Митавского замков, но сын графа заменил архитектора.
В 1766 году Франческо Растрелли отправился в Берлин, где попытался попасть на прием к прусскому королю, но король посоветовал ему делать гравюры по эскизам для выставок. В январе 1771 года академики Императорской Академии художеств решили принять Растрелли в число "наиболее знаменитых членов".
Когда и где скончался мастер русского барокко неизвестно. Датой смерти принято считать 29 апреля 1771 года, когда Екатерина II своим указом распорядилась выплатить пенсию Растрелли его наследнику - Франческо Бартолиати.