По моему его надо тупо ацетоном.. Нет? Даже если с оконного пластика... Он же ПВХ врде как. ПВХ от ацетона размягчается, но не сразу. Правда, цвет может поменять. Но цвет, скорее всего, там под пеной и так уже поменялся.
Если с оконной пластиковой рамы, то можно соскоблить, потом зашлифовать.