Рискованное тонкий поворот крупных языковых моделей

arXiv: 26009,08064v1 Annuales Type: New Humber Brieflow: Models Большого языка (LMS) все чаще используются в тех случаях, когда редкие, но крайне вредные поколения могут иметь значительные последствия. Существующая РЛГВ с учетом факторов риска решает этот вопрос путем оптимизации условной стоимости по отношению к риску (КВЖД), однако она занимается подготовкой политики в отношении фиксированных уровней рисков и поэтому не может корректировать желаемую степень отклонения от оценки риска на момент вывода из строя. В настоящем документе мы предлагаем использовать РЛГФ с учетом факторов риска, что является основой для разработки единой политики, обеспечивающей непрерывное взаимодействие в области контроля за рисками и позволяющей пользователям выбирать различные степени неприятия рисков без переподготовки или внедрения различных моделей, учитывающих конкретные риски. Эксперименты по многим контрольным показателям показывают, что единая политика с учетом факторов риска может адаптироваться к различным уровням рисков в момент вывода из строя и обеспечивать более гибкое внедрение ОУЗ.