Проложите между рамами поролон и проклейте его ПВА. Получится своеобразный стеклопакет. после проложите при уже закрытом окне все щели сначала ватином, а потом поролоном и проклейте монтажным скотчем или клейкой бумагой щель между рамой и стеной и щель между рамой-подоконником.