delenie.py
3.2 KB
#python
#автоматизация
Коллеги, спешу поделиться полезным инструментом для тех, кто работает с массивными списками доменов.
Сегодня обратился коллега и мне понадобилось решить задачу:
Разделить огромный файл (5+ миллионов доменов) на части по 1 миллиону строк
Добавить "http://" перед каждым доменом
Сохранить результат в той же директории
Решение оказалось простым и эффективным.
Скрипт эффективно работает даже с многомиллионными файлами благодаря обработке строк через буфер, что экономит память. Последний файл может содержать меньше 1 миллиона строк, что удобно при неполном делении.
Как использовать:
Запустите: python delenie.py
Введите путь к вашему файлу с доменами
Надеюсь, этот инструмент пригодится кому-то еще! Делитесь в комментариях, с какими задачами обработки текстовых файлов вы сталкиваетесь 👇
#python_scripts #domainprocessing #dataprocessing
#автоматизация
Коллеги, спешу поделиться полезным инструментом для тех, кто работает с массивными списками доменов.
Сегодня обратился коллега и мне понадобилось решить задачу:
Разделить огромный файл (5+ миллионов доменов) на части по 1 миллиону строк
Добавить "http://" перед каждым доменом
Сохранить результат в той же директории
Решение оказалось простым и эффективным.
Скрипт эффективно работает даже с многомиллионными файлами благодаря обработке строк через буфер, что экономит память. Последний файл может содержать меньше 1 миллиона строк, что удобно при неполном делении.
Как использовать:
Запустите: python delenie.py
Введите путь к вашему файлу с доменами
Надеюсь, этот инструмент пригодится кому-то еще! Делитесь в комментариях, с какими задачами обработки текстовых файлов вы сталкиваетесь 👇
#python_scripts #domainprocessing #dataprocessing
👍3😱1