Чем снизу заклеить его чтобы не болтался?

Пеной?

Аккуратно запень или наклей шумоизоляционный материал

пена + шумка.

просто запень. и саморезом где надо прихвати

Отлив...

Это у тебя отлив, а у него подоконник, вот и шумит :D

:D
пена, предварительно смочить отлив ( тьфу подоконник), положить кирпич.