Спецсимволы в пароле ломают строку подключения

Сгенерировал себе новый пароль, в нём собака, двоеточие и решётка. После этого строка подключения разваливается: библиотека откусывает кусок пароля и считает его именем хоста.

Пароль условно такой: Xk7@ru:si#9. Собираю строку в лоб:

http://login:Xk7@ru:si#9@193.0.2.44:8000

Питон ругается на нечисловой порт, curl молчит и уходит стучаться на ru. Менять пароль на буквенный не хочу, он выдан вместе с пакетом. Как его скормить правильно?

Тут нечего чинить в библиотеке, строка подключения читается по правилам адреса. Разделители в ней зарезервированы, и пароль обязан быть закодирован процентами.

Ваш пароль превращается в Xk7%40ru%3Asi%239, а строка целиком:

http://login:Xk7%40ru%3Asi%239@193.0.2.44:8000

Последняя собака остаётся живой, она отделяет пару входа от адреса. Остальные закодированы, и разбор идёт по нужным границам.

Вот этот момент у меня и путался: я кодировал вообще все собаки, включая разделитель, и получал уже другую ошибку. Питон тогда жаловался на пустой хост.

А если пароль лежит в переменной окружения и строку собирает скрипт, руками же каждый раз не покодируешь?

Руками и не надо. Кодирование делает та же библиотека, которая потом читает адрес.

import os
from urllib.parse import quote

user = os.environ["PROXY_USER"] pwd = os.environ["PROXY_PASS"] host = "193.0.2.44:8000"

proxy = f"http://{quote(user, safe='')}:{quote(pwd, safe='')}@{host}" proxies = {"http": proxy, "https": proxy} ```

safe='' тут обязательно. Без него quote оставит слеш и двоеточие как есть, и вы вернётесь к тому же месту.

а в curl тоже надо кодировать? у меня там пароль с решёткой

В curl удобнее вообще не лепить пару в адрес. Есть отдельный флаг, и он берёт значение как есть.

curl -x http://193.0.2.44:8000 -U 'login:Xk7@ru:si#9' -s https://example.org/ip

Кавычки одинарные, иначе решётку съест оболочка. Двоеточий внутри пароля можно не бояться: curl режет по первому, остальное уходит в пароль целиком.

Добавлю сбоку, потому что грабли тут ходят парой и вторую половину обычно не видят.

Список у меня выгружается в формате IP:PORT:LOGIN:PASS, обновляется в реальном времени, и я его читаю скриптом построчно. Пока пароли буквенные, разбор по двоеточию работает. Как только в пароле появляется своё двоеточие, наивный split(":") рассыпается: строка режется на пять частей вместо четырёх, и последний кусок теряется. Лечится ограничением числа разрезов, в питоне это split(":", 3), и тогда всё, что после третьего двоеточия, остаётся паролем целиком.

Второе место, где это вылезает, файлы окружения. Оболочка читает решётку как начало примечания, и половина пароля пропадает ещё до старта программы. Значение в таком файле надо брать в одинарные кавычки.

Я под прогоны беру приватные серверные адреса под парсинг и пароль из кабинета кладу сразу в переменную окружения, чтобы он вообще нигде не встречался в открытом виде в командах.

Ещё проверка на месте: если сомневаетесь, что строка разобралась как задумано, разберите её той же библиотекой и посмотрите поля.

from urllib.parse import urlsplit, unquote
u = urlsplit(proxy)
print(u.hostname, u.port, u.username, unquote(u.password))

Хост и порт должны совпасть с тем, что вы вписывали. Если в хосте оказался обрывок пароля, дальше можно не гадать.

Собрал через quote с пустым safe, разобрал обратно через urlsplit, поля сошлись. Прогон пошёл, ошибок входа ноль.

Отдельное спасибо за split(":", 3), у меня ровно там и терялась последняя часть строки, я думал на выгрузку. Тема закрыта.