Проблемы с requests и url в кириллице

import requests

def check_and_save_bad_urls(input_file, output_file):
    with open(input_file, 'r', encoding='utf-8') as file:
        urls = file.read().splitlines()
                
    with open(output_file, 'w', encoding='utf-8') as error_file:
        for url in urls:
            try:
                response = requests.head(url)
                if (response.status_code == 404) or (response.status_code == 301):
                    print(f"URL {url} вернул ошибку. Записываем в файл bad_url.txt.")
                    error_file.write(url + '\n')
            except requests.RequestException as e:
                print(f"Ошибка при запросе URL {url}: {e}")

Замените 'url.txt' на имя вашего файла с URL-ами

check_and_save_bad_urls('C:\\Python\\ping_url_yd\\url.txt', 'C:\\Python\\ping_url_yd\\bad_url.txt')

Есть код который берет url из файла url.txt проверяет их на ответ сервера и если ответ с ошибкой 404 или 301 то записывает их в файл.
Если в файл url.txt поместить url вида сайт.рф, то скрипт такое ощущение, что его просто пропускает.