Python и внешние программы: эффективные методы взаимодействия

Пример 1. Запуск внешнего анализатора (grep) и обработка результатов

Предположим, требуется найти все строки с IP-адресами в лог-файле и подсчитать их количество.

import subprocess
import re

result = subprocess.run(
    ['grep', '-oE', '[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}', 'server.log'],
    capture_output=True,
    text=True
)
if result.returncode == 0:
    ips = result.stdout.strip().split('\n')
    print(f'Найдено {len(ips)} IP-адресов.')
    # Вывести уникальные адреса
    unique_ips = set(ips)
    for ip in sorted(unique_ips):
        print(ip)
else:
    print('Ошибка выполнения grep:', result.stderr)

Найдено 127 IP-адресов.
10.0.0.1
10.0.0.2
...

Пример 2. Непрерывное чтение лога (tail -f) с остановкой по условию

Выполнение команды tail -f в реальном времени и прекращение при появлении заданного паттерна.

import subprocess
import time

proc = subprocess.Popen(
    ['tail', '-f', '/var/log/syslog'],
    stdout=subprocess.PIPE,
    stderr=subprocess.PIPE,
    text=True
)
try:
    while True:
        line = proc.stdout.readline()
        if not line:
            break
        print(line, end='')
        if 'CRITICAL' in line:
            print('Обнаружено критическое событие. Останавливаем.')
            proc.terminate()
            break
except KeyboardInterrupt:
    proc.terminate()

Jan 20 12:00:01 host kernel: ...
Jan 20 12:00:05 host python: CRITICAL: out of memory
Обнаружено критическое событие. Останавливаем.

Пример 3. Взаимодействие с Excel через openpyxl и вызов макроса через win32com

Сначала формирование данных в Excel, затем запуск макроса (например, для построения диаграммы).

# Часть 1: создание данных с openpyxl
from openpyxl import Workbook

wb = Workbook()
ws = wb.active
ws['A1'] = 'Месяц'
ws['B1'] = 'Продажи'
ws.append(['Янв', 100])
ws.append(['Фев', 150])
ws.append(['Мар', 130])
wb.save('data.xlsx')

# Часть 2: вызов макроса через win32com
import win32com.client as win32

excel = win32.Dispatch('Excel.Application')
excel.Visible = False
wb_com = excel.Workbooks.Open('C:\\full\\path\\data.xlsx')
excel.Run('Макрос1')  # имя макроса
wb_com.Save()
wb_com.Close()
excel.Quit()

(Файл data.xlsx обновлён с выполненным макросом)

Пример 4. Параллельный запуск нескольких внешних программ с помощью concurrent.futures

Запуск анализа нескольких файлов одновременно.

import subprocess
from concurrent.futures import ProcessPoolExecutor

def analyze_file(filename):
    result = subprocess.run(
        ['wc', '-l', filename],
        capture_output=True,
        text=True
    )
    return result.stdout.strip()

files = ['file1.txt', 'file2.txt', 'file3.txt']

with ProcessPoolExecutor() as executor:
    results = list(executor.map(analyze_file, files))

for r in results:
    print(r)

150 file1.txt
200 file2.txt
75 file3.txt