42 lines
2.2 KiB
Markdown
42 lines
2.2 KiB
Markdown
# Повторяемый эксперимент
|
||
|
||
## Теория перед выполнением
|
||
|
||
Перед началом прочитайте:
|
||
|
||
- [`03_jupyter_seeds_logging.md`](../notes/03_jupyter_seeds_logging.md)
|
||
|
||
|
||
## Цель
|
||
|
||
Написать скрипт, дважды генерирующий одинаковую случайную выборку при фиксированном seed.
|
||
|
||
## Что сделать
|
||
|
||
1. Сформулировать ожидаемый результат до запуска эксперимента.
|
||
2. Реализовать простой baseline.
|
||
3. Реализовать основной метод самостоятельно настолько, насколько требует задание.
|
||
4. Добавить автоматические проверки ключевых вычислений.
|
||
5. Провести эксперимент, сохранить метрики и примеры ошибок.
|
||
6. Заполнить отчёт по `common/REPORT_TEMPLATE.md`.
|
||
|
||
## Результат
|
||
|
||
Код и короткий отчёт с контрольными хешами результатов.
|
||
|
||
Решение разместите рядом в `solution/`. Не коммитьте большие данные,
|
||
веса или секреты.
|
||
|
||
## Критерии приёмки
|
||
|
||
- Повторные запуски совпадают; изменение seed меняет результат.
|
||
- Код читаем, разбит на функции и запускается по инструкции.
|
||
- Выводы подтверждаются измерениями и не выходят за пределы эксперимента.
|
||
|
||
## Вопросы для самопроверки
|
||
|
||
- Почему выбран именно этот метод и какой baseline он должен превзойти?
|
||
- Где здесь возможна утечка данных или некорректная оценка?
|
||
- Как изменится результат при других данных или ограничениях?
|
||
- Какую ошибку модели вы считаете наиболее важной и почему?
|