Методология расчета рейтинга
Мы рассчитываем рейтинг компаний по банкротству на основе Big Data с привлечением разработчиков и эксперта по аналитике данных. Общий балл рассчитывается как взвешенная сумма типизированных метрик с поправкой на балансирующие коэффициенты.
Актуализация и пересчет рейтинга происходит по мере обновления сырых данных в нашей базе, но не реже, чем раз в месяц.
Вот основные наборы метрик, которые мы используем для проведения скоринга и построения рейтинга:
| Метрика | Описание | Вес* |
|---|---|---|
| Количество завершенных дел (12 мес.) | Эта метрика позволяет нам оценить масштабы деятельности компании. | 25–35% |
| Отзывы клиентов (с учетом антифрода) | Как клиенты оценивают компанию: какие положительные и отрицательные моменты отмечают в ее работе. | 15–20% |
| % успешных дел | Анализ эффективности работы компании: какой процент от общего пула клиентских дел заканчиваются успешно, т.е. признанием клиента банкротом со списанием долгов перед кредиторами согласно положениям Федерального закона №127-ФЗ. | 15–20% |
| Сроки завершения (медиана) | Завершение клиентских дел в разумные сроки — один из критериев качества оказания услуг. Затягивание сроков и отклонение значений и от средних показателей по индустрии является тревожным знаком и признаком возможных проблем с компетенцией юристов или способностью персонала компании справляться с имеющимся потоком клиентов. | 10–15% |
| Цена «под ключ» (отклонение от рынка) | Агрегируем данные из открытых источников, формируем среднее значение и оцениваем отклонение прайсов конкретной компании от среднерыночных. | 5–10% |
| География присутствия | Это региональная компания или федеральная сеть с присутствием во многих городах России? Оцениваем каждую компанию исключительно в регионах ее присутствия и относительно местных конкурентов. | 5–10% |
| Специализация на банкротстве | Имеет ли компания специализацию на делах о банкротстве или является юридической компанией широкого профиля, для которой сопровождение БФЛ является одной из многих услуг, и не всегда приоритетной? | 5–10% |
* — примерные цифры, точная формула расчета рейтинга с учетом балансирующих коэффициентов является ноу-хау ООО «Актив».
Методология разработана командой аналитиков ООО «Актив» совместно с внешним юридическим экспертом, специализирующимся на банкротстве физических лиц.
Источники данных
- Агрегаторы отзывов: Яндекс.Карты, Google Maps, 2ГИС, Flamp, Zoon, Yell
- ЕФРСБ
- Картотека арбитражных дел
- Договоры-оферты и прайс-листы.
ИИ-анализ отзывов и система «Антифрод»
Все собранные из открытых источников отзывы проходят расширенный анализ с использованием локально обученной LLM-модели, которая вычленяет из текстов ключевые моменты: обслуживание, сроки, качество оказания услуги, оперативность предоставления обратной связи менеджерами компании.
Это позволяет нам использовать на этапе скоринга компании не только финальную оценку из отзыва, но и раскладывать степень удовлетворенности / недовольства клиента по отдельным параметрам.
Также на базе LLM-модели мы используем и развиваем систему «Антифрод», которая позволяет:
- Оценивать содержимое отзывов на достоверность и выявлять признаки накрутки фейковых положительных отзывов. Отзывы, достоверность которых вызывает у нас сомнение, продолжают отображаться в карточке компании, однако не учитываются на этапе формирования рейтинга.
- Выявлять аномалии в статистических данных: например, резкий всплеск активности по одному из параметров, не имеющий косвенных подтверждений в виде изменения других связанных с ним параметров.
- Вводить внутренний показатель «честности» компании, строящийся на базе наличия и количества фактов срабатывания Антифрода в ходе анализа данных.
Взвешенные и балансирующие коэффициенты
Метрики, которые мы используем для расчета рейтинга компании, нельзя считать равнозначными. Например, у компании с отличными результатами может быть мало клиентских отзывов, но это не свидетельствует о том, что она плохо работает. Поэтому мы используем коэффициенты удельного веса каждой метрики в расчете финального рейтинга.
Также мы используем балансирующие коэффициенты, цель которых — избегать возможности внесения дисбаланса в рейтинг путем доминирования по одной или нескольким ключевым метрикам. Например, компании федерального уровня не должны получать несправедливое преимущество перед небольшими региональными компаниями по банкротству. Для минимизации влияния подобных аномалий мы используем собственную систему балансирующих коэффициентов, гибко включающуюся в работу скоринга в исключительных случаях.
Отдельная группа условий для применения балансирующих коэффициентов завязана на работу системы «Антифрод» и количество ее срабатываний при скоринге отдельной организации.
Размеры и условия применения балансирующих коэффициентов являются ноу-хау ООО «Актив» и не подлежат разглашению третьим лицам для избежания возможности манипуляции данными в целях искусственной накрутки позиции компании в рейтинге.