Какой язык учить первым под эти задачи

Второй месяц читаю форум и вижу, что тут пишут на всём подряд. В одной теме питон, в соседней баш на пятнадцать строк, потом кто-то приносит ноду, а в разборе ошибок мелькает даже го.

У меня времени на один язык, распыляться не хочу. Что брать первым под сбор данных, обвязку прогонов и мелкую автоматизацию? И насколько больно потом будет пересаживаться, если промахнусь.

Питон. Дальше можно не читать, но я поясню.

Соглашусь с выбором, добавлю про границу.

Питон нужен там, где есть логика: разобрать страницу, сложить в базу, посчитать, повторить при отказе с растущей паузой. Баш нужен там, где вы склеиваете готовые программы между собой: запустить, дождаться, переложить файл, отправить уведомление.

Граница проходит по одному признаку. Как только в скрипте на баше появляется вторая вложенная проверка или разбор текста регуляркой, вы уже перешли черту и дальше будете страдать. Переписываете на питон и живёте спокойно.

Обратное тоже верно: тащить питон ради того, чтобы скопировать три файла по расписанию, странно. Там хватает пяти строк.

Учить первым надо питон, а баш подхватится сам, по мере того как вы будете жить в терминале. Отдельно садиться за него не придётся.

а джаваскрипт совсем мимо? я его немного знаю по вёрстке

Не мимо, но как второй. Нода хороша ровно там, где страница рисуется скриптами и вам нужен настоящий браузер под управлением. Тогда вы берёте playwright или puppeteer и работаете в родной среде.

Беда в том, что асинхронность там встречает новичка на первой же строке, и вместо задачи вы месяц изучаете, почему у вас всё выполнилось не в том порядке. В питоне вы этот разговор откладываете до момента, когда он вам правда понадобится.

Вот этого и боюсь. А в питоне асинхронность когда понадобится?

Когда упрётесь в скорость. Первые полгода живёте на requests в один поток, потом на потоках, и только когда счёт пойдёт на сотни соединений, придёте к asyncio и aiohttp.

У меня порядок был такой:

Между первой и второй ступенью прошло месяца четыре. Между второй и третьей ещё год, и то потому, что задача сама выросла. Спешить туда незачем.

Про промах с выбором: его почти не бывает. Синтаксис вы перенесёте за две недели, тяжело даётся другое.

Тяжело даётся понимание, как устроен запрос, что такое заголовки, откуда берутся коды ответа, чем поток отличается от процесса, почему память кончилась на списке в миллион строк. Это знание общее и не привязано к языку вообще. Выучите его на питоне, и на любом другом языке вам останется подсмотреть, как тут называются словари.

ок, тогда питон и баш по ходу дела. спасибо

Взяла питон. Пока прошла срез списков, словари и запросы, написала первый сборщик на сорок строк.

Про баш поняла мысль: сажусь только когда надо склеить готовое. Вчера как раз склеила запуск по расписанию плюс архив логов, вышло восемь строк, и вложенных проверок там нет.

#!/bin/sh
set -eu
cd /srv/sbor
python sbor.py spisok.txt >> log/sbor.log 2>&1
gzip -f log/sbor.log
find log -name '*.gz' -mtime +14 -delete

Хороший знак, что вы поставили set -eu с первой попытки. Половина форума до этого доходит через потерянные данные.