Название статьи или книги, фамилия автора, DOI

Нейросетевая модель оценки кредитного риска на основе транзакционных последовательностей клиентов банка

Л.Б. Кулыгин1, К.А. Маковейчук2

научная статья УДК 004.89 Страницы: 174-183 doi.org/10.18127/j19997493-202605-22

  1. 1,2 Финансовый университет при Правительстве РФ (Москва, Россия)

Аннотация

Постановка проблемы. Традиционные скоринговые модели используют преимущественно анкетные данные, кредитную историю и агрегированные характеристики клиента, тогда как последовательность операций по расчётному счёту содержит дополнительную информацию о фактическом финансовом поведении клиента. Для практического использования такого сигнала необходимо одновременно учитывать качество модели на более позднем временном срезе, вычислительную стоимость и устойчивость к различной длине транзакционных историй.

Цель. Разработать и экспериментально оценить нейросетевую модель кредитного риска по транзакционным последовательностям клиентов банка и определить архитектурные решения, обеспечивающие приемлемое соотношение качества на out-of-time выборке и стоимости инференса.

Результаты. Выполнен эксперимент на выборке около 3 млн кредитных заявок с временным разделением train/valid/OOT примерно 2,408/0,268/0,295 млн. Отмечено, что для каждой заявки использовалась история операций расчётного счёта за год до даты скоринга; длина последовательности ограничивалась диапазоном от 9 до 550 транзакций. В основной конфигурации применены двунаправленная GRU, entity embeddings категориальных признаков и TF-IDF-взвешенное усреднение word2vec для текстовых описаний операций. Установлено, что при базовом Gini OOT внутренней модели 51,49 конфигурация BiGRU с entity embeddings и TF-IDF-word2vec достигла Gini OOT 52,1, а добавление её скора к внутренней модели обеспечило uplift Gini +4,8 п.п. xLSTM увеличила Gini OOT до 52,3 и uplift до +4,9 п.п., но сопровождалась примерно 50%-ным ростом времени инференса. Для BiGRU измеренное время инференса составляло 2,9–3,3 мс на заявку.

Практическая значимость. Транзакционная модель может использоваться как дополнительный скоринговый сигнал в ансамбле с действующей табличной моделью банка. Полученные результаты показывают, что последовательное представление операций позволяет повысить разделяющую способность ансамбля на OOT-срезе при задержке, совместимой с онлайн-скорингом. Наиболее практичным вариантом в проведённом сравнении оказалась BiGRU: небольшое преимущество xLSTM по качеству не компенсировало увеличение вычислительной стоимости.

Поступила
17.09.2026
Одобрена
25.09.2026
Принята
01.10.2026

Для цитирования

Кулыгин Л.Б., Маковейчук К.А. Нейросетевая модель оценки кредитного риска на основе транзакционных последовательностей клиентов банка // Динамика сложных систем - XXI век. 2026. Т. 20. № 5. С. 174−183. DOI: https://doi.org/10.18127/j19997493-202605-22

Список источников
  1. Li H., Feng A., Lin B., Su H., Liu Z., Duan X., Pu H., Wang Y. A Novel Method for Credit Scoring Based on Feature Transformation and Ensemble Model // PeerJ Computer Science. 2021. V. 7. Art. e579. DOI: 10.7717/peerj-cs.579.
  2. Addo P.M., Guegan D., Hassani B. Credit Risk Analysis Using Machine and Deep Learning Models // Risks. 2018. V. 6. № 2. Art. 38. DOI: 10.3390/risks6020038.
  3. Tong K., Han Z., Shen Y., Long Y., Wei Y. An Integrated Machine Learning and Deep Learning Framework for Credit Card Approval Prediction // 2024 IEEE 6th International Conference on Power, Intelligent Computing and Systems (ICPICS). 2024. P. 853–858. DOI: 10.1109/ICPICS62053.2024.10795883.
  4. Babaev D., Savchenko M., Tuzhilin A., Umerenkov D. E.T.-RNN: Applying Deep Learning to Credit Loan Applications // Proceedings of the 25th ACM SIGKDD International Conference on Knowledge Discovery & Data Mining. 2019. P. 2183–2190. DOI: 10.1145/3292500.3330693.
  5. Tobback E., Martens D. Retail Credit Scoring Using Fine-Grained Payment Data // Journal of the Royal Statistical Society: Series A (Statistics in Society). 2019. V. 182. № 4. P. 1227–1246. DOI: 10.1111/rssa.12469.
  6. Guo C., Berkhahn F. Entity Embeddings of Categorical Variables // arXiv:1604.06737. 2016.
  7. Mikolov T., Chen K., Corrado G., Dean J. Efficient Estimation of Word Representations in Vector Space // 1st International Conference on Learning Representations (ICLR 2013). Workshop Track Proceedings. 2013. arXiv:1301.3781.
  8. Beck M., Pöppel K., Spanring M., Auer A., Prudnikova O., Kopp M., Klambauer G., Brandstetter J., Hochreiter S. xLSTM: Extended Long Short-Term Memory // Advances in Neural Information Processing Systems. 2024. V. 37. P. 107547–107603. DOI: 10.52202/079017-3417.
  9. Smith L.N. Cyclical Learning Rates for Training Neural Networks // 2017 IEEE Winter Conference on Applications of Computer Vision (WACV). 2017. P. 464–472. DOI: 10.1109/WACV.2017.58.
  10. Yang Y., Uy M.C.S., Huang A. FinBERT: A Pretrained Language Model for Financial Communications // arXiv:2006.08097. 2020.
  11. Araci D. FinBERT: Financial Sentiment Analysis with Pre-trained Language Models // arXiv:1908.10063. 2019.
  12. Mollaev D., Kireev I., Orlov M., Kostin A., Karpukhin I., Postnova M., Gusev G., Savchenko A. Multimodal Banking Dataset: Understanding Client Needs through Event Sequences // Proceedings of the 34th ACM International Conference on Information and Knowledge Management (CIKM 2025). 2025. P. 6476–6480. DOI: 10.1145/3746252.3761635.
  13. Didkovskyi O., Jean N., Le Pera G., Nordio C. Cross-Domain Behavioral Credit Modeling: Transferability from Private to Central Data // arXiv:2401.09778. 2024.