Coral Reef annotation, localisation and pixel-wise classification using Mask R-CNN and Bag of Tricks

Abstract

Tento článek popisuje článek pro automatickou detekci, klasifikaci a segmentací substrátů korálů na snímcích pořízených pod vodou. Navržený systém dosáhl nejlepších výsledků v obou úlohách druhé edice soutěže ImeCLEFcoral. Konkrétně hodnoty mAP@0.5 0.482 v případě anotace a lokalizace. Dále pak mAP@0.5 0.678 v úloze klasifikace na úrovni pixelů. Systém byl postaven na základě metody Mask R-CNN s zlepšené pomocí pokročilých trénovacích strategií, pseudo-labelingem, test-time augmentacemi a normalizací akumulovaných gradientů. Z důvodu podpory dalšího výzkumu v této oblasti byl kód zveřejněn na https://github.com/picekl/ImageCLEF2020-DrawnUI.