MedSAM
Segment Anything dostosowany do obrazów medycznych: model segmentacji sterowany podpowiedziami, dostrojony na ponad 1,5 mln par obraz–maska z 10 modalności obrazowych i ponad 30 typów nowotworów.
🤗 3 637 pobrań / mies. ♥ 24 aktualizacja 2023-05-03W skrócie
Co robi
Po wskazaniu ramki na obrazie TK, MRI, USG, endoskopii, patomorfologii lub RTG zwraca maskę segmentacji struktury lub zmiany wewnątrz; przydatny do szybkiej adnotacji i jako punkt startowy do dostrajania pod narząd lub guz.
Zadania, typy danych i nowotwory
Architektura
Dane treningowe
1 570 263 pary obraz–maska zebrane z publicznych zbiorów (w tym wielu kolekcji TCIA i zbiorów konkursowych) z 10 modalności; wolumeny 3D pocięte na przekroje 2D.
Powiązane zbiory danych
- trening TCIA — The Cancer Imaging Archive Otwarte pobieranie — wiele kolekcji TCIA wchodzi w 1,57 mln par treningowych
Ewaluacja
| Benchmark / zbiór | Miara | Wartość | Walidacja zewnętrzna | Źródło |
|---|---|---|---|---|
| 86 internal validation tasks + 60 external tasks | Dice | consistently above SAM and specialist U-Nets on external tasks (paper) | tak | Źródło |
Jak uruchomić
# generic transformers loader — see the model card for the task-specific head and preprocessing
from transformers import AutoModel, AutoProcessor
model = AutoModel.from_pretrained('wanglab/medsam-vit-base')
processor = AutoProcessor.from_pretrained('wanglab/medsam-vit-base')
Box prompts only in the released model (no point prompts). Works slice by slice — 3D consistency is up to you.
Status regulacyjny i przeznaczenie
Status regulacyjny cytujemy ze wskazanego źródła i może się zmienić. Modele „tylko do badań” nie służą do decyzji klinicznych.
Ograniczenia i błędy systematyczne
- Tylko 2D; struktury wolumetryczne wymagają podpowiedzi przekrój po przekroju.
- Zależy od ramki użytkownika: luźna ramka daje luźną maskę.
- Dane treningowe to suma zbiorów publicznych — sprawdź nakładanie się z własnym zbiorem testowym.
Źródła
Ta strona ma charakter edukacyjny — nie stanowi porady medycznej i nie zastępuje konsultacji z onkologiem. Decyzje diagnostyczne i terapeutyczne podejmuje wyłącznie lekarz specjalista.