SyGra: low-code фреймворк от ServiceNow, который упрощает подготовку данных для языковых моделей
ServiceNow представила SyGra — low-code фреймворк для создания, трансформации и выравнивания данных при обучении больших и малых языковых моделей. Разбираем, как он ускоряет alignment и заменяет сложные скрипты.
Инженеры ServiceNow представили SyGra - low-code/no-code фреймворк для автоматизации подготовки данных при обучении больших и малых языковых моделей. Инструмент берет на себя рутинные операции: от превращения внутренней базы знаний в формат «вопрос-ответ» до фильтрации некачественных образцов и генерации пар предпочтений для Direct Preference Optimization. Под капотом - поддержка популярных бэкендов инференса, включая vLLM, Hugging Face TGI, Triton и Ollama.
Главная ценность SyGra - скорость. Команды, которые раньше тратили недели на написание скриптов для очистки и трансформации датасетов, теперь настраивают пайплайны через конфигурации. Это снижает порог входа в fine-tuning и alignment моделей, делая технологию доступнее для компаний без глубокой экспертизы в ML-инженерии.
