Статус: Все скрипты и файлы созданы
~/agi-hackathon/
├── README.md # Обзор хакатона
├── USAGE.md # Руководство
├── requirements.txt # Зависимости Python
├── data/ # Папка для данных
│ ├── thlp/
│ │ └── sample_mc.csv # (созда при download_data.sh)
│ ├── ttm/
│ │ └── sample_mc.csv # (создаётся)
│ ├── tagp/
│ │ └── sample_mc.csv # (создаётся)
│ ├── tefb/
│ │ └── sample_mc.csv # (создаётся)
│ └── tscp/
│ └── sample_mc.csv # (создаётся)
├── prompts/ # AI промпты
│ ├── system_prompts.md # Базовый системный промпт
│ └── track_prompts.md # Специфические промпты для каждого трека
└── scripts/ # Скрипты
├── download_data.sh # ✅ Скачать данные с Kaggle
├── evaluate.py # ✅ Полная оценка всех 5 треков
├── test_single.py # ✅ Быстрый тест одного вопроса (уже был)
└── fix_kaggle_datasets.py # ✅ Исправить проблемы Kaggle датасетов
cd ~/agi-hackathon
python3 scripts/test_single.py --track thlpcd ~/agi-hackathon
./scripts/download_data.sh allcd ~/agi-hackathon
python3 scripts/evaluate.py --track all --responses path/to/ai_responses.jsoncd ~/agi-hackathon
python3 scripts/fix_kaggle_datasets.py --track all| Трек | Статус | Проблемы | Исправления |
|---|---|---|---|
| THLP | ✅ Онлайн | ✅ Нет | ✅ Исправлен multiline |
| TTM | ✅ Онлайн | ✅ Multiline | ✅ Исправлен multiline |
| TAGP | ✅ Онлайн | ✅ Пустое About | ✅ Есть описания |
| TEFB | ✅ Онлайн | ✅ Устарелое число | ✅ Исправлен файл |
| TSCP | ✅ Онлайн | ✅ Лицензия MIT | ✅ CC0 добавлен |
- Все скрипты исполняемы —
chmod +xприменено - Описание About на Kaggle может не обновиться автоматически — можно обновить вручную через UI Kaggle
- V5 файлы в t27 репозитории были повреждены — используются v2 файлы (ttm_mc_new.csv, tscp_mc.csv)
- Промпты созданы для Claude, Gemini и GPT-4o — можно использовать любой
- Обзор хакатона DeepMind x Kaggle
- Структура треков
- Инструкция по запуску
- Краткое руководство
- Как использовать скрипты
- Как запустить оценку
- Python >= 3.10
- anthropic >= 0.25.0
- pandas >= 2.0.0
- kaggle CLI
- system_prompts.md — Базовый промпт для всех моделей
- track_prompts.md — Специфические промпты для каждого из 5 треков
- download_data.sh — Скачть данные с Kaggle
- evaluate.py — Полная оценка с JSON выводом
- test_single.py — Быстрый тест одного вопроса
- fix_kaggle_datasets.py — Исправить проблемы и перезагрузить
- Конкурс: https://www.kaggle.com/competitions/kaggle-measuring-agi
- Kaggle Docs: https://www.kaggle.com/docs/api
- Trinity Source: https://github.com/gHashTag/t27
- Hackathon Repo: https://github.com/gHashTag/agi-hackathon
Готово к работе! 🚀