Порядок — по первому упоминанию в 01_text.md. У каждого источника указано, где проверены метаданные.
| № | Источник | Проверено | Что цитируется в тексте |
|---|---|---|---|
| 1 | Jin и др., CLadder, NeurIPS 2023, с. 31038–31065, arXiv:2312.04350 | arXiv v3 (текст §3.1–3.4 прочитан), страницы по ELLIS Tübingen | инвариант §3.1, проверка качества §3.4 (50 вопросов, 82 %), табл. 1 v1.5 (3 160/3 160/3 792), CausalCoT 70,40 % и +8,37, разрыв 5,34 пункта у исходной GPT-4 — табл. 6, версия 1.0 (в v1.5, табл. 2, бессмысленные истории у GPT-4 на 0,82 пункта лучше осмысленных) |
| 2 | Pearl J., Causality, 2-е изд., Cambridge University Press, 2009, xix + 464 с. | библиотечные каталоги (фактчек 24.10); 484 — данные книготорговца | правила вывода |
| 3 | Northcutt, Athalye, Mueller, NeurIPS 2021 D&B, arXiv:2103.14749 | arXiv, neurips.cc | ≥ 3,3 % ошибок, смена выбора модели |
| 4 | Yu, Zhou, Caliper, arXiv:2606.04915 | индекс arXiv | CLadder как мерило в 2026 г. |
| 5 | Gema и др., Are We Done with MMLU?, NAACL 2025, т. 1, с. 5069–5096, arXiv:2406.04127 | ACL Anthology 2025.naacl-long.262 | 6,49 %, таксономия |
| 6 | Vendrow и др., arXiv:2502.03461 | arXiv; сайт автора: препринт 2025 | «платиновые» бенчмарки |
| 7 | Bean и др., NeurIPS 2025 D&B, arXiv:2511.04703 | OpenReview mdA5lVvNcU, arXiv | валидность конструкта, 445 бенчмарков |
| 8 | Ye и др., arXiv:2512.19691 | arXiv v3 (текст методов прочитан) | пересчёт, невычислимые, ≥ 27 %, ±5 %, агенты с голосованием |
| 9 | Brunello и др., arXiv:2606.02837 | индекс arXiv | ошибка формализации и неоднозначность текста |
| 10 | Issue #15, causalNLP/cladder, 20.09.2026 | страница GitHub прочитана 24.10.2026 | произведение маргиналов; 7 из 10 семейств; arrowhead; 83 из 10 560; 41 из 1 644; граф без V2→Y |
| 11 | Issue #16, causalNLP/cladder, 20.09.2026 | страница GitHub прочитана 24.10.2026 | несогласованности reasoning |
| 12 | Ankan, Textor, pgmpy, JMLR 25(265):1–8, 2024 | jmlr.org, pgmpy.org/citation | оракул значений |
| 13 | Hoyt и др., Causal identification with Y₀, arXiv:2508.03167 | индекс arXiv | оракул идентифицируемости |
Правила оформления «Трудов ИСП РАН»:
При переводе на английский русских источников в списке нет, транслитерация не нужна.