Құрылғыдағы кесу үлгісі нені көреді

By Technical specialist

Құрылғыдағы кесу үлгісі адам мағынасында адамды, аяқ киімді, үй жануарларын немесе орындықты көрмейді. Ол кескіннің сандық көрінісін және негізгі тақырыпқа жататын аймақтарды пиксель бойынша бағалауды алады. Оның пайдалы нәтижесі маска болып табылады: нәтиженің мөлдірлік арнасы бола алатын сұр түсті карта.

Бұл айырмашылық автоматты кесу жылдамдығын да, олардың шектерін де түсіндіреді. Модель жаттығу кезінде үйренген көрнекі үлгілерді пайдалана алады, бірақ ол сіздің ниетіңізді білмейді. Орталыққа жақын орналасқан үшкір зат маңызды болып көрінуі мүмкін; әлсіз әйнек жиегі немесе бос шаш талы фонға ұқсауы мүмкін.

Сурет файлынан үлгі енгізуіне дейін

Алдымен сіз таңдаған файлды декодтау керек. Сығылған фотосурет файл байттары блогы ретінде модельге тікелей берілмейді. Браузер оны ені, биіктігі және түс мәндері бар пикселдерге айналдырады.

Содан кейін шығару құбыры үлгі өлшеміндегі енгізуді дайындайды. Модельге және орындалу уақытына байланысты дайындық мыналарды қамтуы мүмкін:

• декодталған кескіннің өлшемін модель күткен өлшемдерге өзгерту;
• қызыл, жасыл және көк мәндерді сандық арналар ретінде орналастыру;
• сол мәндерді масштабтау немесе нормалау;
• оларды тензорға орау, қорытындының орындалу уақыты пайдаланатын массив пішімі.

Нақты өлшемдер мен қалыпқа келтіру ережелері үлгіні жүзеге асыруға жатады. Маңызды практикалық мәселе, қорытынды әдетте бастапқы өлшемдегі әрбір бастапқы пикселден емес, дайындалған көріністен жұмыс істейді.

Easy Background Remover бұл қорытынды қадамын құрылғыдағы сегменттеу үлгісімен шолғышта іске қосады. Модель файлын бірінші кесуден бұрын жүктеп алу қажет болуы мүмкін, бірақ кескінді өңдеу жолы модель дайын болғаннан кейін жергілікті болып қалатындай етіп жасалған. Үлгіні жүктеп алу - актив сұрауы; бұл қашықтан қорытынды жасау үшін таңдалған фотосуретті жүктеп салумен бірдей емес.

Шығару - сенімділік сияқты маска

Шығарылымдағы әрбір орын үшін модель көбірек тақырыпқа ұқсас немесе көбірек фонға ұқсас мәнді шығарады. Мұны сұр түсті кескін ретінде бейнелеу пайдалы:

• ақ бұл аймақты сақтайды;
• қара бұл аймақты алып тастайды;
• сұр түс жартылай жабуды немесе шетке жақын белгісіздікті білдіреді.

Браузер бұл шығысты жұмыс істейтін альфа маскасына түрлендіреді. Түпнұсқа түсті пикселдерді шахмат тақтасы, тұтас толтыру, градиент немесе басқа кескіннің үстіне біріктіруге болады. Мөлдір экспорттау файлға шахмат тақтасын бояудың орнына альфа ретінде масканы сақтайды.

Жұмсақ мәндер маңызды. Егер масканың әрбір мәні бірден таза қара немесе ақ түске ауыстырылса, шаш, жүн, мата талшықтары, қозғалыс бұлыңғырлығы және дефокус емес жиектер табиғи емес қатты болады. Жартылай альфа біркелкі өтуді сақтай алады. Ол сондай-ақ ескі фонда түс жиегін көрсете алады, сондықтан нәтиже әлі де визуалды тексеруге лайық.

Модельге қандай көрнекі дәлелдер көмектеседі

Сегменттеу моделі бірден бірнеше анықтаманы ала алады. Күшті белгілер жиі мыналарды қамтиды:

• тақырып пен фон арасындағы қарама-қайшылық;
• басым объектінің айналасындағы үздіксіз шекаралар;
• пішіннің, текстураның және позицияның таныс комбинациялары;
• фокус айырмашылығы сияқты тереңдік белгілері;
• көрнекі түрде бір-біріне жататын аймақтар.

Бұл белгілердің ешқайсысы кепілдік емес. Қараңғы қабырғаға қарсы қою күрте әлсіз шекаралық контрастты ұсынады. Тар саңылаулары бар орындық нысанға ұқсайтын фондық аймақтарды қамтуы мүмкін. Үлгі бар фон назар аудару үшін нақты нысанмен бәсекелесе алады.

Модель қол жетімді пикселдер бойынша ең жақсы бағалауды жасайды. Ол сурет ешқашан түсірілмеген мәліметтерді қалпына келтіре алмайды.

Модель нені білмейді

Модель бірнеше нысан болған кезде қандай нысанды сақтағыңыз келетінін автоматты түрде білмейді. Мөлдір ішетін стаканның коммерциялық маңызды екенін, реализм үшін көлеңке қалуы керек екенін немесе кішкентай баудың сөмкеге тиесілі екенін білмейді.

Сондай-ақ ол бұлыңғыр көздің жасырын жоғары ажыратымдылық нұсқасын алмайды. Қысу блоктары, кесілген ерекшеліктер, қозғалыс бұлыңғырлығы және өте ұсақ бөлшектер қол жетімді дәлелдерді шектейді. Алдын ала қарау масштабын ұлғайту экрандағы пикселдерді үлкейтеді; ол жетіспейтін ақпаратты жасамайды.

Сондықтан «AI оны анықтады» және «жиегі жариялауға дайын» ​​деген әртүрлі талаптар. Анықтау өңдеуді бастайды. Қарап шығу оны аяқтайды.

Неліктен жұқа және мөлдір бөлшектер қиын

Жұқа нысандар бірнеше пиксельді алады. Қорытынды жасау үшін кескіннің өлшемі өзгертілгенде, бір пиксельді сым немесе шаш жолын оның айналасындағы фонмен орташалауға болады. Мөлдір нысандар басқа себеппен қиын: олардың көрінетін түсі ішінара ескі фон. Шекара объектіні түсінетін адамға түсінікті болуы мүмкін, ал пиксель үлгісі анық емес болып қалады.

Жұмсақ көлеңкелер әдейі екіұштылықты тудырады. Олардың сыртқы шеті бірте-бірте жоғалады және бірде-бір объективті дұрыс кесу жоқ. Толық көлеңкені сақтау ұқсас фонда табиғи көрінуі мүмкін, бірақ жарқын жаңа бояуда лас болып көрінуі мүмкін. Оны алып тастау нысанды қалқып тұрғандай етіп көрсетуі мүмкін.

Бұл модельдік есептер сияқты пайымдау мәселелері.

Үлгі маскасы, жұмыс маскасы және экспорттық маска

Бұл үш кезеңді бөлуге көмектеседі:

1. Үлгі маскасы: қорытынды арқылы қайтарылатын автоматты бағалау.
2. Жұмыс маскасы: кез келген «Қосу немесе Өшіру» нақтылауынан кейін редакторда көрсетілетін маска.
3. Экспорттық маска: ағымдағы нәтиже жүктеп алынғанда немесе көшірілгенде қолданылатын жұмыс маскасы.

Easy Background Remover ішінде қылшықты нақтылау жұмыс маскасын өңдейді. Экспортталмаған автоматты маскаға үнсіз оралудың орнына ағымдағы өңделген нәтижені пайдаланады. Бұл ниетке байланысты мәліметтерді түзетіп жатқанда, үлгіге кең бөлуді өңдеуге мүмкіндік береді.

Көрсетілген алдын ала қарау өңдегішке сәйкестендіру үшін масштабталуы мүмкін. Бұл дисплей өлшемі масканың ішкі бөлшектерінің сенімді өлшемі емес. Айырмашылық үшін маска ажыратымдылығы мен алдын ала қарау өлшемі бөлімін оқыңыз.

Жергілікті қорытындыда әлі орнату қадамы бар

Модельді құрылғыда іске қосу үлгі салмақтары мен үйлесімді шолғыштың жұмыс уақытын қажет етеді. Салмақтары қарапайым интерфейс кодынан әлдеқайда үлкен, сондықтан әрбір редакторды іске қосқанда бәрін жүктеу ысырап болар еді. Бірінші сеанс үлгіні жүктеп алып, кэштей алады; кейінгі кәдімгі сеанстар оны әдетте қайта пайдалана алады.

Неліктен алдымен жүктеп алу үлгісін іске қосу бұл шекараны модель активін жүктеп алу мен фотосуретті жүктеп салуды шатастырмай түсіндіреді. Ауыр қорытынды да негізгі интерфейс ағынынан қашады; Web Worker кескінін өңдеу негіздері бөлімін қараңыз.

Нәтижені бағалаудың практикалық тәсілі

Нысанның ортасын ғана тексермеңіз. Дәлелдер ең әлсіз жерде масканы тексеріңіз:

• шаш, жүн, мұрт және мата талшықтары;
• көзілдіріктер, белдіктер, сымдар және тар саңылаулар;
• төмен контрастты шеттер;
• жартылай мөлдір материал;
• контактілі көлеңкелер;
• ескі фон түсі қалуы мүмкін бұрыштар.

Соңғы баратын жер белгісіз болса, нәтижені ашық және қараңғы фонда қараңыз. Бозғылт ореол ақ түсте жоғалып, қара түсте айқын көрінуі мүмкін. Содан кейін мақсатты пайдалануға әсер ететін аймақтарды ғана нақтылаңыз.

Автоматты сегменттеу мінсіз түсіну мәлімдемесі емес, күшті бірінші өту ретінде қарастырылған кезде өте пайдалы. Толық жергілікті кесу және нақтылау ағынын көру үшін Бастау бөлімін қараңыз.