том-то и дело что не дует. Ветра как такового нет, просто холодный подоконник, и стоять рядом с ним очень холодно. Положенное на подоконник одеяло/тряпка сразу решают эту проблему. Но это временный выход.
Скорее всего под подоконником - пусто, в месте примыкания подоконника к оконой раме....
Если делать аккуратно - пробивается дырка под подоконником, засовывается в неё монтажный пистолет и простреливается - но этот вариант недает никаких гарантий (может потеплеть, а может и нет), лучше подоконник всетаки снять....