Нейросетевая модель оценки кредитного риска на основе транзакционных последовательностей клиентов банка
- 1,2 Финансовый университет при Правительстве РФ (Москва, Россия)
Аннотация
Постановка проблемы. Традиционные скоринговые модели используют преимущественно анкетные данные, кредитную историю и агрегированные характеристики клиента, тогда как последовательность операций по расчётному счёту содержит дополнительную информацию о фактическом финансовом поведении клиента. Для практического использования такого сигнала необходимо одновременно учитывать качество модели на более позднем временном срезе, вычислительную стоимость и устойчивость к различной длине транзакционных историй.
Цель. Разработать и экспериментально оценить нейросетевую модель кредитного риска по транзакционным последовательностям клиентов банка и определить архитектурные решения, обеспечивающие приемлемое соотношение качества на out-of-time выборке и стоимости инференса.
Результаты. Выполнен эксперимент на выборке около 3 млн кредитных заявок с временным разделением train/valid/OOT примерно 2,408/0,268/0,295 млн. Отмечено, что для каждой заявки использовалась история операций расчётного счёта за год до даты скоринга; длина последовательности ограничивалась диапазоном от 9 до 550 транзакций. В основной конфигурации применены двунаправленная GRU, entity embeddings категориальных признаков и TF-IDF-взвешенное усреднение word2vec для текстовых описаний операций. Установлено, что при базовом Gini OOT внутренней модели 51,49 конфигурация BiGRU с entity embeddings и TF-IDF-word2vec достигла Gini OOT 52,1, а добавление её скора к внутренней модели обеспечило uplift Gini +4,8 п.п. xLSTM увеличила Gini OOT до 52,3 и uplift до +4,9 п.п., но сопровождалась примерно 50%-ным ростом времени инференса. Для BiGRU измеренное время инференса составляло 2,9–3,3 мс на заявку.
Практическая значимость. Транзакционная модель может использоваться как дополнительный скоринговый сигнал в ансамбле с действующей табличной моделью банка. Полученные результаты показывают, что последовательное представление операций позволяет повысить разделяющую способность ансамбля на OOT-срезе при задержке, совместимой с онлайн-скорингом. Наиболее практичным вариантом в проведённом сравнении оказалась BiGRU: небольшое преимущество xLSTM по качеству не компенсировало увеличение вычислительной стоимости.
- Поступила
- 17.09.2026
- Одобрена
- 25.09.2026
- Принята
- 01.10.2026
Для цитирования
Кулыгин Л.Б., Маковейчук К.А. Нейросетевая модель оценки кредитного риска на основе транзакционных последовательностей клиентов банка // Динамика сложных систем - XXI век. 2026. Т. 20. № 5. С. 174−183. DOI: https://doi.org/10.18127/j19997493-202605-22
Список источников
- Li H., Feng A., Lin B., Su H., Liu Z., Duan X., Pu H., Wang Y. A Novel Method for Credit Scoring Based on Feature Transformation and Ensemble Model // PeerJ Computer Science. 2021. V. 7. Art. e579. DOI: 10.7717/peerj-cs.579.
- Addo P.M., Guegan D., Hassani B. Credit Risk Analysis Using Machine and Deep Learning Models // Risks. 2018. V. 6. № 2. Art. 38. DOI: 10.3390/risks6020038.
- Tong K., Han Z., Shen Y., Long Y., Wei Y. An Integrated Machine Learning and Deep Learning Framework for Credit Card Approval Prediction // 2024 IEEE 6th International Conference on Power, Intelligent Computing and Systems (ICPICS). 2024. P. 853–858. DOI: 10.1109/ICPICS62053.2024.10795883.
- Babaev D., Savchenko M., Tuzhilin A., Umerenkov D. E.T.-RNN: Applying Deep Learning to Credit Loan Applications // Proceedings of the 25th ACM SIGKDD International Conference on Knowledge Discovery & Data Mining. 2019. P. 2183–2190. DOI: 10.1145/3292500.3330693.
- Tobback E., Martens D. Retail Credit Scoring Using Fine-Grained Payment Data // Journal of the Royal Statistical Society: Series A (Statistics in Society). 2019. V. 182. № 4. P. 1227–1246. DOI: 10.1111/rssa.12469.
- Guo C., Berkhahn F. Entity Embeddings of Categorical Variables // arXiv:1604.06737. 2016.
- Mikolov T., Chen K., Corrado G., Dean J. Efficient Estimation of Word Representations in Vector Space // 1st International Conference on Learning Representations (ICLR 2013). Workshop Track Proceedings. 2013. arXiv:1301.3781.
- Beck M., Pöppel K., Spanring M., Auer A., Prudnikova O., Kopp M., Klambauer G., Brandstetter J., Hochreiter S. xLSTM: Extended Long Short-Term Memory // Advances in Neural Information Processing Systems. 2024. V. 37. P. 107547–107603. DOI: 10.52202/079017-3417.
- Smith L.N. Cyclical Learning Rates for Training Neural Networks // 2017 IEEE Winter Conference on Applications of Computer Vision (WACV). 2017. P. 464–472. DOI: 10.1109/WACV.2017.58.
- Yang Y., Uy M.C.S., Huang A. FinBERT: A Pretrained Language Model for Financial Communications // arXiv:2006.08097. 2020.
- Araci D. FinBERT: Financial Sentiment Analysis with Pre-trained Language Models // arXiv:1908.10063. 2019.
- Mollaev D., Kireev I., Orlov M., Kostin A., Karpukhin I., Postnova M., Gusev G., Savchenko A. Multimodal Banking Dataset: Understanding Client Needs through Event Sequences // Proceedings of the 34th ACM International Conference on Information and Knowledge Management (CIKM 2025). 2025. P. 6476–6480. DOI: 10.1145/3746252.3761635.
- Didkovskyi O., Jean N., Le Pera G., Nordio C. Cross-Domain Behavioral Credit Modeling: Transferability from Private to Central Data // arXiv:2401.09778. 2024.
