Comparthing Logo
объектти аныктоокомпьютердик көрүүтерең окутуутрансформаторлорЖасалма интеллект

Топтомго негизделген объектти аныктоо жана анкерге негизделген объектти аныктоо

Орундарга негизделген объекттерди аныктоо аныктоону белгиленген божомолдоо маселеси катары карайт, алдын ала аныкталган анкерлерсиз түздөн-түз чектөөчү кутучаларды чыгарат. Анкерге негизделген аныктоо бир нече масштабдагы жана аспекттик катыштагы алдын ала аныкталган кутучаларга таянат, андан кийин аларды өркүндөтөт. Экөө тең заманбап компьютердик көрүү системаларын иштетет, бирок объекттерди кантип локалдаштыруусу боюнча түп-тамырынан бери айырмаланат.

Көрүнүктүү нерселер

  • Топтомдорго негизделген аныктоо анкер кутучаларын толугу менен жок кылат, аныктоону түз топтомдорду алдын ала айтуу көйгөйү катары карайт.
  • Якорьго негизделген аныктоо классификация жана регрессия аркылуу такталган миңдеген алдын ала аныкталган кутучаларга таянат.
  • Топтомго негизделген ыкмалар эки тараптуу дал келтирүү аркылуу максималдуу эмес басуу зарылдыгын жокко чыгарат.
  • DINO сыяктуу заманбап топтомдорго негизделген детекторлор азыр COCO эталондук тактыгы боюнча якордук моделдерден ашып түшөт.

Орнотууга негизделген объектти аныктоо эмне?

Кол менен жасалган анкер кутучаларына болгон муктаждыкты жокко чыгарып, объектилерди иретсиз топтомдор катары алдын ала айткан заманбап аныктоо парадигмасы.

  • DETR (DEtection TRansformer) тарабынан демилгеленген жана 2020-жылы Facebook AI Research тарабынан сунушталган.
  • Уникалдуу божомолдор үчүн эки бөлүктүү дал келүүсү бар трансформатордун коддогуч-декоддогуч архитектурасын колдонот.
  • Объекттерди аныктоону түз коюлган божомолдоо маселеси катары карайт, максималдуу эмес басуу зарылдыгын жокко чыгарат.
  • COCO эталонунда якорь түзүү же сунуш түзүү сыяктуу компоненттерсиз атаандаштык тактыгына жетишет.
  • Машыгуунун туруктуулугун жана ылдамдыгын жакшырткан Deformable DETR, DINO жана Co-DETR сыяктуу көптөгөн мураскерлерге шыктандырды.

Якорь негизиндеги объектти аныктоо эмне?

Сүрөттөрдөгү объекттерди локалдаштыруу үчүн ар кандай өлчөмдөгү жана катыштагы алдын ала аныкталган анкер кутучаларын колдонгон салттуу аныктоо ыкмасы.

  • Faster R-CNN жана SSD боюнча мурунку иштердин негизинде 2015-жылы Faster R-CNN менен биргеликте киргизилген.
  • Ар бир мейкиндик жайгашкан жерде бир нече функциялык карта деңгээлдеринде миңдеген талапкер анкер кутучаларын түзөт.
  • Кайталанма аныктоолорду алып салуу үчүн максималдуу эмес басуу сыяктуу кийинки иштетүү кадамдарын талап кылат.
  • RetinaNet, YOLOv3, YOLOv4 жана Faster R-CNN сыяктуу кеңири таралган детекторлордун негизин түзөт.
  • Иштөө масштабдарды, аспект катыштарын жана IoU босоголорун камтыган якордун дизайн тандоолорунан абдан көз каранды.

Салаштыруу таблицасы

Мүмкүнчүлүк Орнотууга негизделген объектти аныктоо Якорь негизиндеги объектти аныктоо
Негизги ыкма Трансформаторлорду колдонуп, түз топтомдорду алдын ала айтуу Алдын ала аныкталган якорлордун классификациясы жана регрессиясы
Анкер кутучалары талап кылынат Жок Ооба
Кийинки иштетүү Минималдуу же такыр жок (NMSсиз) Максималдуу эмес басуу талап кылынат
Машыгуунун туруктуулугу Тарыхый жактан татаал, жаңы варианттарда жакшыртылган Жалпысынан алганда, жакшы жөндөлгөн гиперпараметрлер менен туруктуу
Машыгуу убактысы Узунураак, айрыкча DETRдин алгачкы моделдери үчүн Адатта тезирээк конвергенция
Гиперпараметр сезгичтиги Төмөн (дизайн тандоолору азыраак) Жогорку (анкердик шкала, катыштар, IoU босоголору)
Өкүлчүлүктүү моделдер DETR, деформациялануучу DETR, DINO, Co-DETR Тезирээк R-CNN, RetinaNet, SSD, YOLOv3/v4/v5
COCO мАП (типтүү) Вариантка жараша 50-63% Вариантка жараша 37-50%
Кайталанган божомолдор Эки тараптуу дал келүү аркылуу алынып салынды NMS аркылуу иштетилет

Толук салыштыруу

Аныктоо философиясы

Топтомдорго негизделген аныктоо моделден бир жолку өтүүдө белгиленген өлчөмдөгү божомолдор топтомун чыгарууну сурануу менен көйгөйдү түп-тамырынан бери кайра карап чыгат, мында ар бир элемент бир объектке туура келет. Бул кол менен иштелип чыккан компоненттерге болгон муктаждыкты жокко чыгарат. Ал эми, якорго негизделген аныктоо алдын ала аныкталган кутучалардын тыгыз торчосунан башталат жана моделден ар бирин классификациялоону жана тактоону суранат, бул концептуалдык жактан жөнөкөй, бирок көптөгөн дизайн чечимдерин киргизет.

Архитектурадагы айырмачылыктар

Топтомдорго негизделген детекторлор, адатта, өзүнө көңүл буруу жана кайчылаш көңүл буруу механизмдери бар трансформатор архитектураларын колдонушат, бул моделге объекттик мамилелер жөнүндө глобалдык ой жүгүртүүгө мүмкүндүк берет. Якорьго негизделген ыкмалар негизинен аймактык сунуш тармактары же өзгөчөлүк пирамида тармактары бар конволюциялык магистралдарга таянат. CNNден трансформаторлорго архитектуралык өтүү ар кандай индуктивдик бир жактуулуктарды жана эсептөө мүнөздөмөлөрүн алып келет.

Окутуу динамикасы

DETR сыяктуу алгачкы топтомдорго негизделген моделдер жай конвергенциясы менен белгилүү болгон, көбүнчө Faster R-CNNдин 50 доордогу көрсөткүчүнө дал келүү үчүн 500 доор талап кылынган. Кийинки Deformable DETR жана DINO боюнча иштер көңүл бурууну жакшыртуу механизмдери жана ызы-чууну басаңдатуу ыкмалары аркылуу машыгуу убактысын кескин кыскарткан. Якорьго негизделген моделдер жакшы түшүнүлгөн машыгуу рецепттеринен пайда алышат жана жалпысынан стандарттуу жөндөөлөр менен тезирээк конвергенцияланышат.

Практикалык жайылтуу

Якорь негизиндеги детекторлор өздөрүнүн жетилгендиги, кеңири куралдануусу жана алдын ала айтууга боло турган жүрүм-турумунан улам өндүрүш системаларында үстөмдүк кылууда. Орнотулган детекторлор изилдөөлөрдө жана кээ бир коммерциялык колдонмолордо кеңири колдонулуп келе жатат, анткени алардын баштан аяк мүнөзү жайылтуу түтүктөрүн жөнөкөйлөтөт. Орнотулган моделдерде NMSтин жоктугу, айрыкча, иштетүүдөн кийинки кечигүү маанилүү болгон реалдуу убакыттагы системалар үчүн баалуу.

Натыйжалуулуктун компромисстери

COCO эталонунда, DINO жана Co-DETR сыяктуу заманбап топтомдорго негизделген детекторлор якорьго негизделген ыкмаларды ашып өтүп, 63% mAPтан ашты. Бирок, YOLOv8 жана EfficientDet сыяктуу якорьго негизделген моделдер, айрыкча, тыянак чыгаруу ылдамдыгын эске алганда, жогорку атаандаштыкка жөндөмдүү бойдон калууда. Тандоо көбүнчө тактык же эсептөө натыйжалуулугу артыкчылыктуубу же жокпу, ошого жараша болот.

Артыкчылыктары жана кемчиликтери

Орнотууга негизделген объектти аныктоо

Артыкчылыктары

  • + Якорь дизайнынын кереги жок
  • + NMSсиз түтүк
  • + Көңүл буруу аркылуу глобалдык ой жүгүртүү
  • + Жөнөкөйлөштүрүлгөн баштан аяк окутуу

Конс

  • Машыгуунун жайыраак конвергенциясы
  • Эсептөөнүн жогорку баасы
  • Жетилген эмес шаймандар
  • Чоң маалымат топтомдорун талап кылат

Якорь негизиндеги объектти аныктоо

Артыкчылыктары

  • + Жетилген жана жакшы оптималдаштырылган
  • + Тезирээк машыгуу
  • + Кеңири коомчулук колдоосу
  • + Алдын ала айтууга боло турган көрсөткүч

Конс

  • Якорьду жөндөөнү талап кылат
  • NMSтен кийинки иштетүүнү талап кылат
  • Көптөгөн гиперпараметрлер
  • Кайталанган божомолдор кеңири таралган

Жалпы каталар

Мит

Иш жүзүндө топтомдорго негизделген аныктоо анкерге негизделген аныктоону толугу менен алмаштырат.

Чындык

Топтомдорго негизделген ыкмалар изилдөөгө олуттуу көңүл бурулганы менен, YOLO варианттары сыяктуу якордук детекторлор өндүрүш системаларында кеңири колдонулууда. Эки ыкма тең биргелешип колдонулат, тандоо белгилүү бир колдонуу учурларына, жабдыктардын чектөөлөрүнө жана тактык талаптарына жараша болот.

Мит

Орнотулган детекторлор эч кандай кийинки иштетүүнү талап кылбайт.

Чындык

Топтомго негизделген ыкмалар машыгуу учурунда эки тараптуу дал келүү аркылуу максималдуу эмес басууну жок кылса да, кээ бир варианттар дагы эле жыйынтык чыгарууда жеңил чыпкалоону колдонушат. Негизги артыкчылыгы - кол менен жөндөлгөн NMS босогосун алып салуу, толугу менен кийинки иштетүү эмес.

Мит

Якорьго негизделген аныктоо эскирген жана эскирген.

Чындык

Якорьго негизделген ыкмалар өнүгүп жатат жана атаандаштыкка жөндөмдүү бойдон калууда. YOLOv8, EfficientDet жана акыркы варианттар сыяктуу моделдер реалдуу убакыттагы сценарийлерде орнотулган ыкмалар толук дал келбеген эң сонун ылдамдык-тактык компромисстерине жетишет.

Мит

Орнотууга негизделген аныктоо ар дайым трансформаторлорду талап кылат.

Чындык

Көпчүлүк топтомдорго негизделген детекторлор трансформатордук архитектураларды колдонушат, бирок топтомдорду алдын ала айтуу алкагынын өзү архитектурага агностикалык. Уникалдуу дайындоолор менен иреттелбеген топтомду алдын ала айтуунун негизги идеясын теориялык жактан башка архитектуралар менен ишке ашырууга болот, бирок трансформаторлор иш жүзүндө эң натыйжалуу экени далилденген.

Мит

Якорь кутучалары каалагандай болот жана моделдин иштешине анчалык таасир этпейт.

Чындык

Якордун дизайны якорго негизделген детектордун иштешине олуттуу таасир этет. Оң/терс дайындоо үчүн масштабдар, аспект катыштары жана IoU босоголору боюнча тандоолор mAPты бир нече пайыздык пунктка өзгөртүшү мүмкүн. Начар якордун дизайны объектилердин байкалбай калышына алып келет, айрыкча адаттан тыш формалар же масштабдар үчүн.

Көп суралуучу суроолор

Топтомго негизделген жана анкерге негизделген объектти аныктоонун негизги айырмасы эмнеде?
Негизги айырмачылык талапкер объектилердин жайгашкан жерлери кантип түзүлөөрүндө жатат. Топтомго негизделген аныктоо трансформаторго негизделген архитектураларды жана эки бөлүктүү дал келүүнү колдонуп, чектөөчү кутучалардын жыйындысын түздөн-түз алдын ала айтат жана аныктоону топтомду алдын ала айтуу маселеси катары карайт. Якорьго негизделген аныктоо ар кандай масштабдагы жана аспекттик катыштагы миңдеген алдын ала аныкталган якорь кутучаларынан башталат, андан кийин ар бирин классификациялайт жана тактайт. Топтомго негизделген ыкмалар кол менен жасалган якорьлордун жана максималдуу эмес басуунун зарылдыгын жокко чыгарат.
Эмне үчүн DETR топтомго негизделген объекттерди аныктоону киргизген?
DETR 2020-жылы Facebook AI Research тарабынан кол менен иштелип чыккан, анкердик генерация жана максималдуу эмес басуу сыяктуу компоненттерди алып салуу менен аныктоо түтүгүн жөнөкөйлөтүү үчүн киргизилген. Авторлор бардык компоненттер боюнча бирдей жоготуу функциясы менен үйрөтүлө турган чындап эле баштан аяк детекторду түзүүнү каалашкан. Алар ар бир жердеги чындык объектиси үчүн уникалдуу божомолдорду камсыз кылуу үчүн трансформаторлорду жана эки бөлүктүү дал келүүнү колдонуп, аныктоону белгиленген божомолдоо маселеси катары кайра түзүшкөн.
Орнотууга негизделген аныктоо якорьго негизделген аныктоого караганда такыраакпы?
DINO жана Co-DETR сыяктуу заманбап топтомдорго негизделген детекторлор көпчүлүк анкердик ыкмаларга караганда жогорку COCO mAP упайларына жетишип, 63% дан ашык mAP көрсөткүчүнө жетишти. Бирок, тактык моделдин конкреттүү вариантына, окутуу конфигурациясына жана баалоо шарттарына көз каранды. Айрым анкердик моделдер, айрыкча, тактык менен бирге тыянак чыгаруу ылдамдыгын эске алганда, атаандаштыкка жөндөмдүү бойдон калууда.
Эмне үчүн топтомдорго негизделген детекторлорду окутуу көбүрөөк убакытты талап кылат?
Баштапкы DETR сыяктуу алгачкы топтомдорго негизделген моделдер эки бөлүктүү дал келүүнү оптималдаштыруунун кыйынчылыгынан жана объекттик мамилелерди нөлдөн баштап үйрөнүү үчүн көңүл буруу механизминин зарылдыгынан улам жай конвергенциядан жапа чеккен. Faster R-CNN үчүн 50 доорго салыштырмалуу окутуу 500 доорду талап кылышы мүмкүн. Deformable DETR жана DINO сыяктуу жаңы варианттар муну көңүл буруу механизмдерин жакшыртуу, ызы-чууну басаңдатуу жана жакшыраак инициализациялоо аркылуу чечип, окутуу убактысын бир топ кыскартты.
Орнотулган детекторлорго максималдуу эмес басуу керекпи?
Жок, топтомго негизделген детекторлор окутуу учурунда эки тараптуу дал келүү аркылуу максималдуу эмес басуу зарылдыгын жокко чыгарат. Венгриялык алгоритм ар бир негизги чындык объектисинин так бир божомолго дал келишин камсыздайт, кайталанмалардын алдын алат. Бул топтомго негизделген ыкманын негизги артыкчылыктарынын бири, анткени NMS кол менен жөндөлгөн босоголорду талап кылат жана эсептөө чыгымдарын кошот.
Реалдуу убакыт режиминде объекттерди аныктоо үчүн кайсы ыкма жакшыраак?
Якорьго негизделген ыкмалар учурда эсептөө натыйжалуулугу жана жетилген оптималдаштыруусунан улам реалдуу убакыттагы колдонмолордо үстөмдүк кылат. YOLOv8 жана EfficientDet сыяктуу моделдер ылдамдыктын тактыгы боюнча эң сонун компромисстерди сунуштайт. Бирок, топтомго негизделген детекторлор трансформаторлордун архитектуралык артыкчылыктарын сактап калуу менен атаандаштыкка жөндөмдүү тыянак чыгаруу ылдамдыгына жетишип, аларды кууп жетүүдө.
Топтомго негизделген жана анкерге негизделген ыкмаларды айкалыштырууга болобу?
Ооба, гибриддик ыкмалар изилденген. Айрым изилдөөчүлөр анкер сыяктуу приоритеттерди топтомго негизделген алкактарга киргизишкен, ал эми башкалары анкерге негизделген түтүктөрдүн ичинде трансформатордук көңүл буруу механизмдерин колдонушкан. Бул гибриддик ыкмалар эки ыкманын тең күчтүү жактарын айкалыштырууга багытталган, бирок ар бир парадигманын таза ишке ашыруулары изилдөөдө жана жайылтууда көбүрөөк кездешет.
2024-2025-жылдары эң мыкты топтомдорго негизделген объекттерди аныктоо моделдери кайсылар?
Алдыңкы топтомдорго негизделген детекторлорго контрастты ызы-чууну азайтуу боюнча окутууну киргизген DINO жана COCOдо эң заманбап натыйжаларга жетишкен Co-DETR кирет. Деформациялануучу DETR натыйжалуу көңүл буруу механизми менен таасирдүү бойдон калууда. Бул моделдер тактык чектерин кеңейтүү менен бирге баштапкы DETRдин окутуу туруксуздугу жана жай конвергенция маселелерин негизинен чечкен.
Анкердик кутучалар аныктоо ишине кандай таасир этет?
Якорь кутучалары алардын масштабдары, аспекттик катыштары жана тыгыздыгы аркылуу якорьго негизделген детектордун иштешине олуттуу таасир этет. Маалыматтар топтомунун объекттик бөлүштүрүлүшүнө дал келген жакшы иштелип чыккан якорьлор эске тутууну жакшыртат, ал эми начар тандалган якорьлор байкалбай калган аныктоолорго алып келет. Функция пирамидалык тармактар бир нече масштабда якорьлорду камсыз кылуу менен жардам берет, бирок якорьдун дизайнына болгон фундаменталдык көз карандылык топтомго негизделген ыкмалар качкан чектөө бойдон калууда.
Якорьсуз аныктоо топтомго негизделген аныктоо менен бирдейби?
Жок, бул терминдер ар кандай түшүнүктөрдү билдирет. Якорьсуз аныктоого CenterNet жана FCOS сыяктуу алдын ала аныкталган кутучаларсыз объект борборлорун же негизги чекиттерди алдын ала айткан, бирок дагы эле пост-процессти колдонгон ыкмалар кирет. Топтомго негизделген аныктоо, айрыкча, DETR тарабынан киргизилген трансформаторго негизделген топтомду алдын ала айтуу парадигмасын билдирет. Айрым якорьсуз ыкмалар топтомго негизделген эмес, ал эми кээ бир топтомго негизделген түшүнүктөр теориялык жактан трансформатор эмес архитектураларга колдонулушу мүмкүн.

Чыгарма

Эгерде сизге кийинки иштетүүсүз толук кандуу түтүк керек болсо, изилдөө долбоорлорунун үстүндө иштеп жатсаңыз же глобалдык ой жүгүртүү үчүн трансформатордук архитектураларды колдонгуңуз келсе, топтомго негизделген объекттерди аныктоону тандаңыз. Эгерде сизге кеңири коомчулук колдоосуна, тезирээк окутууга жана ар кандай жайылтуу сценарийлеринде жакшы түшүнүктүү жүрүм-турумга ээ далилденген, өндүрүшкө даяр моделдер керек болсо, анкерге негизделген аныктоону тандаңыз.

Тиешелүү салыштыруулар

CLIP кыстаруулары жана ачкыч сөзгө негизделген сүрөттү издөө

CLIP киргизүүлөрү сүрөттөрдү жана текстти жалпы семантикалык мейкиндикте түшүнүү үчүн терең үйрөнүүнү колдонот, ал эми ачкыч сөздөргө негизделген сүрөттү издөө кол менен дайындалган тегдерди же айланасындагы текстти дал келтирүүгө негизделген. CLIP заманбап визуалдык издөө тапшырмалары үчүн алда канча чоң ийкемдүүлүктү жана тактыкты сунуштайт, ал эми ачкыч сөздөрдүн ыкмалары тар, жакшы тандалган контексттерде пайдалуу бойдон калууда.

DeepSeek V4 жана GPT-4-класстагы моделдер

DeepSeek V4 - бул кытайлык жасалма интеллект лабораториясынан чыккан ачык салмактагы чоң тил модели, ал эми GPT-4 классындагы моделдер OpenAIдин флагмандык жабык булактуу системаларына тиешелүү. Бул салыштыруу иштеп чыгуучуларга жана бизнеске акылдуулук менен тандоо жасоого жардам берүү үчүн алардын архитектурасын, мүмкүнчүлүктөрүн, баасын, жеткиликтүүлүгүн жана реалдуу дүйнөдөгү иштешин изилдейт.

Google издөө алгоритми жана жөнөкөйлөштүрүлгөн класстык моделдер

Google издөө алгоритми миллиарддаган веб-баракчаларды машиналык окутууну жана жүздөгөн сигналдарды колдонуп рейтингге киргизет, ал эми жөнөкөйлөтүлгөн класстык моделдер жасалма интеллект концепцияларын үйрөтүүгө боло турган, жеткиликтүү алкактарга бөлөт. Бири өндүрүштө планетардык масштабда иштейт; экинчиси окуучулар үчүн жасалма интеллекттин чындыгында кандай иштээрин үйрөнүү үчүн педагогикалык көпүрө катары кызмат кылат.

Google издөө жана билим графиги боюнча издөө

Google Издөө – көпчүлүк адамдар күн сайын колдонгон кеңири веб индекстөө системасы, ал эми Knowledge Graph Search – бул түз жоопторду жана маалымат панелдерин колдогон Google'дун структураланган объект маалымат базасы. Алардын кандайча айырмаланарын түшүнүү эмне үчүн кээ бир сурамдар бай маалыматтарды кайтарарын, ал эми башкалары салттуу көк шилтемелерди кайтарарын түшүндүрүүгө жардам берет.

GPT стилиндеги архитектуралар жана Мамба негизиндеги тил моделдери

GPT стилиндеги архитектуралар бай контексттик түшүнүктү түзүү үчүн өзүнө көңүл бурган Трансформер декодер моделдерине таянат, ал эми Мамбага негизделген тил моделдери ырааттуулуктарды натыйжалуураак иштетүү үчүн структураланган абал мейкиндигин моделдөөнү колдонушат. Негизги компромисс - GPT стилиндеги системалардагы экспрессивдүүлүк жана ийкемдүүлүк, ал эми Мамбага негизделген моделдердеги масштабдуулук жана узак контексттик натыйжалуулук.