Files
whisper-api-server/app/audio/processor.py
T
Serge ZaigraeffandClaude Sonnet 4.6 1e778cae86 Fix thread safety, implement prompt, fix resource leaks, add history rotation
- Add threading.Lock around asr_pipeline calls (thread-safe inference on shared GPU)
- Implement prompt parameter: propagate through process_file → transcribe → generate_kwargs
- Fix prompt_ids device mismatch (.to(self.device) for CUDA)
- Replace mkdtemp() with create_temp_file() in sources.py (no more leaked /tmp dirs)
- Add max_history_days (default 30) with automatic cleanup of old history directories
- Add intentional comments for SSRF and /config decisions (internal service)
- Lower normalize_audio log level from INFO to DEBUG

Co-Authored-By: Claude Sonnet 4.6 <noreply@anthropic.com>
2026-03-31 00:43:06 +03:00

181 lines
7.4 KiB
Python

"""
Модуль processor.py содержит класс AudioProcessor, предназначенный для предобработки аудиофайлов
перед их использованием в системах распознавания речи. Класс предоставляет методы для конвертации
аудио в формат WAV с частотой дискретизации 16 кГц, нормализации уровня громкости,
добавления тишины в начало записи, а также для удаления временных файлов, созданных в процессе обработки.
"""
import os
import subprocess
from typing import Dict, Tuple
import logging
from ..infrastructure.storage import create_temp_file, cleanup_temp_files
logger = logging.getLogger('app.audio_processor')
class AudioProcessor:
"""
Класс для предобработки аудиофайлов перед распознаванием.
Attributes:
config (Dict): Словарь с параметрами конфигурации.
norm_level (str): Уровень нормализации аудио.
compand_params (str): Параметры компрессора аудио.
"""
def __init__(self, config: Dict):
"""
Инициализация обработчика аудио.
Args:
config: Словарь с параметрами конфигурации.
"""
self.config = config
self.norm_level = config.get("norm_level", "-0.5")
self.compand_params = config.get("compand_params", "0.3,1 -90,-90,-70,-70,-60,-20,0,0 -5 0 0.2")
def convert_to_wav(self, input_path: str) -> str:
"""
Конвертация входного аудиофайла в WAV формат с частотой дискретизации 16 кГц (моно).
Args:
input_path: Путь к исходному аудиофайлу.
Returns:
Путь к сконвертированному WAV-файлу.
Raises:
subprocess.CalledProcessError: Если произошла ошибка при конвертации.
"""
audio_rate = self.config["audio_rate"]
# Создаем временный файл для WAV
output_path = create_temp_file(".wav")
# Команда для конвертации
cmd = [
"ffmpeg",
"-hide_banner",
"-loglevel", "warning",
"-i", input_path,
"-ar", f"{audio_rate}",
"-ac", "1", # Монофонический звук
output_path
]
logger.debug("Конвертация в WAV: %s", " ".join(cmd))
try:
subprocess.run(cmd, check=True, capture_output=True)
logger.info("Файл конвертирован в WAV: %s", output_path)
return output_path
except subprocess.CalledProcessError as e:
logger.error("Ошибка при конвертации в WAV: %s", e.stderr.decode())
raise
def normalize_audio(self, input_path: str) -> str:
"""
Нормализация аудиофайла с использованием sox.
Args:
input_path: Путь к WAV-файлу.
Returns:
Путь к нормализованному WAV-файлу.
Raises:
subprocess.CalledProcessError: Если произошла ошибка при нормализации.
"""
# Создаем временный файл для нормализованного аудио
output_path = create_temp_file("_normalized.wav")
# Команда для нормализации аудио с помощью sox
cmd = [
"sox",
input_path,
output_path,
"norm", self.norm_level,
"compand"
] + self.compand_params.split()
logger.debug("Нормализация аудио: %s", " ".join(cmd))
try:
subprocess.run(cmd, check=True, capture_output=True)
logger.info("Аудио нормализовано: %s", output_path)
return output_path
except subprocess.CalledProcessError as e:
logger.error("Ошибка при нормализации аудио: %s", e.stderr.decode())
raise
def add_silence(self, input_path: str) -> str:
"""
Добавляет тишину в начало аудиофайла.
Args:
input_path: Путь к аудиофайлу.
Returns:
Путь к аудиофайлу с добавленной тишиной.
Raises:
subprocess.CalledProcessError: Если произошла ошибка при добавлении тишины.
"""
# Создаем временный файл
output_path = create_temp_file("_silence.wav")
# Команда для добавления тишины в начало файла
cmd = [
"sox",
input_path,
output_path,
"pad", "2.0", "1.0" # Добавление тишины в начале и в конце (секунды)
]
logger.info("Добавление тишины: %s", " ".join(cmd))
try:
subprocess.run(cmd, check=True, capture_output=True)
logger.info("Тишина добавлена: %s", output_path)
return output_path
except subprocess.CalledProcessError as e:
logger.error("Ошибка при добавлении тишины: %s", e.stderr.decode())
raise
def process_audio(self, input_path: str) -> Tuple[str, list]:
"""
Полная обработка аудиофайла: конвертация, нормализация и добавление тишины.
Args:
input_path: Путь к исходному аудиофайлу.
Returns:
Кортеж: (путь к обработанному файлу, список временных файлов для удаления)
Raises:
Exception: Если произошла ошибка при обработке аудио.
"""
temp_files = []
try:
# Конвертация в WAV
wav_path = self.convert_to_wav(input_path)
if wav_path != input_path: # Если был создан временный файл
temp_files.append(wav_path)
# Нормализация
normalized_path = self.normalize_audio(wav_path)
temp_files.append(normalized_path)
# Добавление тишины
silence_path = self.add_silence(normalized_path)
temp_files.append(silence_path)
return silence_path, temp_files
except Exception as e:
logger.error("Ошибка при обработке аудио %s: %s", input_path, e)
cleanup_temp_files(temp_files)
raise