ResNetV2 (BiT)

Категория: CNN · Код: timm/models/resnetv2.py · Архитектуры: 20 · Предобученные веса: 24 (18 с результатами на ImageNet-1k)

Pre-activation ResNet (v2) с Group Normalization и Weight Standardization, как используется в Big Transfer (BiT), с исходными весами BiT. Также поддерживает вариант без pre-activation, используемый в качестве гибридного ядра Vision Transformer.

Статьи

• Big Transfer (BiT): обучение общим визуальным представлениям
• Изображение стоит 16x16 слов: трансформеры для распознавания изображений в масштабе
• Дистилляция знаний: хороший учитель терпелив и последователен
• Идентичные отображения в глубоких остаточных сетях

Использование

См. раздел Быстрый старт для загрузки предобученных весов, предобработки изображений и дообучения, а также раздел Извлечение признаков для использования моделей в качестве базовых архитектур.

>>> import timm
>>> model = timm.create_model('resnetv2_50.a1h_in1k', pretrained=True)
>>> data_config = timm.data.resolve_model_data_config(model)

Поддержка Model API

✓ поддерживается, ✓ (квадрат) работает только для квадратных размеров, ✗ не поддерживается, – не требуется (модель уже принимает входные данные любого размера). Проверено путём запуска каждой функции на случайно инициализированной модели (ResNetV2 с resnetv2_18 при размере 224); ожидается, что другие архитектуры того же класса будут вести себя аналогично. Подробности см. на странице Model API.

Архитектуры

GMACs и количество параметров указаны для размера входных данных и классификатора по умолчанию для каждой архитектуры, согласно результатам бенчмарков.

Предобученные веса

Top-1 — это точность на валидационном наборе ImageNet-1k из results-imagenet.csv для указанного размера оценки, - если для весов нет результата ImageNet-1k (например, веса для предобучения или изображения-текст). Classes — размер предобученного классификатора, none для весов без классификатора.

Веса группируются по источнику: статья или происхождение, указанные в конфигурации предобученной модели, иначе организация на Hugging Face, отличная от timm, иначе первая часть тега предобученной модели (architecture.tag). Источники с одним весом перечислены в разделе other.

goog tags

теги ra4

a1h теги

ah tags