резинки эти он в магазине покупал, они именно для этих целей продавались. Они отдираются без краски, у меня у самой старые окна со старой краской

но их отдирать не надо, их не видно. А силикон тоже мы не отдираем, муж аккуратненько промазал по краю, незаметно, т.к. стекла болтались уже в рамах, чтобы не сифонило через них.
П.С. кажется это называется уплотнительная резинка и также используется во входных дверях (железных) для герметизации и чтобы не грохотало