Intellectual Olympiad in Prompt Engineering and Neural Networks - 2026 ongoing

Subject: Prompt Engineering and Neural Networks
Level: XI
Category: student
Quiz questions: in Russian
Example question: В эксперименте сравнивают две версии промпта на 200 примерах. Разность долей успешных ответов мала, а результаты отдельных примеров зависимы из-за повторного использования тех же входов. Какой метод наиболее уместен для оценки неопределённости разности качества? Проверка только среднего значения без интервала, Удаление всех примеров с различающимися ответами, Замена бинарного критерия субъективной оценкой одного эксперта, Парный бутстрэп по результатам на одинаковых примерах