Zajem podatkov iz dokumentov: od PDF-ja do ERP brez prepisovanja
Zajem podatkov iz dokumentov: od PDF-ja do ERP brez prepisovanja

Zajem podatkov iz dokumentov pomeni, da sistem sam prebere naročilo, račun, dobavnico ali pogodbo. Iz dokumenta izlušči podatke, ki jih potrebujete (kupca, šifre artiklov, količine, cene, datume), jih preveri in zapiše v vaš ERP. Sam OCR, ki sliko pretvori v besedilo, je le prvi korak. Rezultat dobite šele, ko so zajem, preverjanje in prenos v poslovni sistem povezani v en proces, prilagojen vašim dokumentom in vašim pravilom. Pri NovaCore Group takšno avtomatizacijo dokumentov gradimo z umetno inteligenco: od zajema in klasifikacije do preverjanja in prenosa v ERP.
Novacore-groupnovacore-group.siManj ročnega vnosa, hitrejša obdelavaNovaCore Group avtomatizira zajem podatkov iz dokumentov z umetno inteligenco, od prepoznave do prenosa v ERP.ObiščiteNa kratko
- OCR prebere besedilo, AI-ekstrakcija pa razume dokument. Šele ta prepozna, katera številka je količina in katera cena, tudi ko se oblika dokumenta spremeni.
- Pristopi s strojnim učenjem so pri računih bistveno natančnejši od predlog: v slovenski raziskavi je bila mera F1 0,89 proti 0,70.
- Napake ustavi preverjanje, ne samo branje. Zato mora sistem podatke primerjati z matičnimi podatki v ERP.
- Hramba ima zakonska pravila: ZDavP-2 zahteva berljivost, celovitost in sledljivost elektronskih zapisov, od leta 2028 pa bodo e-računi med podjetji v Sloveniji obvezni.
- Rezultat je merljiv: pri eni od naših uvedb se je čas obdelave naročil skrajšal za 68 %, naložba pa se je povrnila v 8 do 10 mesecih.
Kazalo
- Katere dokumente in podatke lahko zajamete
- OCR, ekstrakcija in AI: v čem je razlika
- Kako poteka zajem, korak za korakom
- Kaj določa kakovost rezultatov
- Preverjanje in izjeme: tu se napake pri naročilih ustavijo
- Povezava z ERP, skladiščem in proizvodnjo
- Hramba, sledljivost in zakonodaja
- Koliko prihranite in kako to izmerite
- Naš pogled
- Avtomatizacija dokumentov z NovaCore Group
- Pogosta vprašanja
- Viri
Katere dokumente in podatke lahko zajamete
Za proizvajalca, distributerja ali logistično ekipo je dokument vhodna točka skoraj vsakega procesa. Naročilo kupca sproži proizvodnjo ali komisioniranje, dobavnica potrdi prevzem, račun gre v knjiženje, certifikat ali specifikacija pa v oddelek kakovosti. Če te podatke še vedno nekdo ročno prepisuje, je vsak prepis priložnost za napako.
Avtomatski zajem najpogosteje obdeluje:
- naročila kupcev v PDF-ju, po e-pošti ali kot skenirane priloge: kupec, naslov dostave, šifre artiklov, količine, cene, želeni datum dobave;
- prejete račune: dobavitelj, davčna številka, številka računa, datumi, zneski, DDV, sklic;
- dobavnice in prevzemnice: artikli, količine, serije ali loti, podpis prevzema;
- pogodbe in okvirne sporazume: pogodbeni stranki, veljavnost, cenovni pogoji;
- spremno dokumentacijo v prehranski industriji in farmaciji: certifikati analize, deklaracije, roki uporabnosti, številke serij.
Vsem je skupno, da podatek že obstaja. Težava je v tem, da je zaklenjen v obliki, ki jo človek prebere hitro, poslovni sistem pa sploh ne.
OCR, ekstrakcija in AI: v čem je razlika
Ti trije izrazi se pogosto uporabljajo kot sopomenke, a opisujejo različne korake.
OCR (optično prepoznavanje znakov) pretvori sliko ali skeniran PDF v besedilo. Pove, da na strani piše »250«, ne pa, ali je to količina, cena ali številka artikla.
Ekstrakcija podatkov iz PDF-ja iz tega besedila izlušči konkretna polja. Pri digitalno ustvarjenem PDF-ju je besedilo že v datoteki, zato OCR ni potreben. Ekstrakcija pa je še vedno potrebna, ker je treba razbrati pomen.
AI-ekstrakcija se nauči, kje in kako se podatki pojavljajo, namesto da bi za vsakega dobavitelja ali kupca ročno risali predlogo. To je odločilno, ko dokumente prejemate od desetin ali stotin partnerjev in vsak uporablja svojo obliko.
Razliko dobro pokaže magistrsko delo na Fakulteti za računalništvo in informatiko UL, ki je primerjalo tri pristope k avtomatski ekstrakciji podatkov iz računov. Mera F1 združuje natančnost in popolnost zajema v eno število, kjer 1 pomeni popoln rezultat. Strojno učenje je doseglo F1 0,89, grafovske nevronske mreže 0,87, pristop s predlogami pa 0,70. Najboljši pristop je bil hkrati računsko manj zahteven.

Za vas to pomeni preprosto pravilo: sistem, ki temelji samo na fiksnih predlogah, deluje na dokumentih, za katere je bil nastavljen, in se zatika pri vsakem novem partnerju. Sistem, ki se uči na vaših dokumentih, se novim oblikam prilagaja.
Poseben izziv so tabele, torej postavke na naročilih in dobavnicah. Prav tu je največ poslovne vrednosti in največ zahtevnosti. Diplomsko delo na FRI UL je v slovenskem dokumentnem sistemu preizkusilo model za prepoznavanje tabel v PDF-jih in slikah. Novi model je bil pri prepoznavanju tabel nekoliko slabši, pri prepoznavanju njihove strukture pa nekoliko boljši od obstoječega, zato je podjetje obdržalo dosedanji model. Izbira pristopa se torej odloči na dejanskih dokumentih. Zato pri uvedbi ne začnemo s tehnologijo, temveč z vzorcem vaših dokumentov.
Kako poteka zajem, korak za korakom
Celoten proces od prejema dokumenta do zapisa v ERP ima sedem korakov. Pri vsakem je navedeno, kje se najpogosteje zalomi.
-
Prejem. Dokumenti prihajajo po e-pošti, iz skenerjev in portalov ali kot fotografije voznikov. Kje se zalomi: vsak kanal ima svojo mapo in svojega skrbnika, zato del dokumentov obleži. Rešitev je en vhodni tok, v katerega se stekajo vsi kanali.
-
Klasifikacija. Sistem določi, ali je dokument naročilo, račun, dobavnica ali kaj drugega, in ga usmeri v pravi proces. Kje se zalomi: ena priloga vsebuje več dokumentov ali pa je naročilo poslano kot slika v telesu e-pošte. Naša AI-klasifikacija dokumente razvrsti samodejno, tudi ko pridejo v različnih oblikah.
-
Branje (OCR). Skenirane strani in slike se pretvorijo v besedilo. Kje se zalomi: nizka ločljivost, zamaknjeni skeni, žigi čez besedilo, ročno pripisane količine.
-
Ekstrakcija. Iz besedila se izluščijo polja in postavke. Kje se zalomi: postavke, ki se prelomijo čez dve strani, različne enote mere, kupčeve šifre namesto vaših šifer artiklov.
-
Preverjanje. Izluščeni podatki se primerjajo z matičnimi podatki in poslovnimi pravili. Kje se zalomi: če tega koraka ni, se napaka iz dokumenta ali iz branja neopazno prenese v ERP. Preverjanje je del naše avtomatizacije dokumentov, ne dodatek.
-
Obravnava izjem. Kar ne prestane preverjanja, gre v pregled človeku, ki vidi dokument in označeno sporno polje. Kje se zalomi: izjeme se rešujejo po e-pošti in v Excelu, zato ni sledi, kdo je kaj popravil.
-
Prenos v ERP in hramba. Potrjeni podatki se zapišejo v ERP kot naročilo, prejem ali knjižba, dokument pa se shrani skupaj s podatki o obdelavi. Kje se zalomi: ročni uvoz datotek ali vmesniki, ki ob spremembi ERP prenehajo delovati. Prenos v ERP uredimo kot del rešitve.
Koraki se slišijo preprosto. Zahtevnost je v tem, da morajo delovati skupaj, na vaših dokumentih in v vašem sistemu. Širši okvir, v katerega sodi tak tok, opisujemo v vodniku o avtomatizaciji poslovnih procesov z AI.
Kaj določa kakovost rezultatov
Ko se podjetja odločajo o zajemu, pogosto sprašujejo po »odstotku natančnosti«. Ta številka ima pomen samo na vaših dokumentih. Na kakovost vplivajo:
- Kakovost vhoda. Digitalni PDF iz ERP-ja partnerja se prebere bolje kot fotografija zmečkane dobavnice. Smiselno je partnerje spodbuditi, da pošiljajo izvirne PDF-je.
- Raznolikost oblik. Pet stalnih kupcev z ustaljenimi naročilnicami je drugačen izziv kot tristo trgovin z ročno sestavljenimi naročili.
- Tabele in postavke. Glave dokumentov so razmeroma enostavne, večvrstične postavke pa ne.
- Matični podatki. Če šifrant artiklov in partnerjev v ERP ni urejen, tudi popolno prebran dokument ne najde para. Kako se pripraviti, opisujemo v vodniku o pripravi podatkov za AI.
- Jezik in pisava. Distributerji in izvozniki prejemajo dokumente v več jezikih, kar mora sistem upoštevati od začetka.
- Učenje iz popravkov. Vsak popravek v koraku izjem je podatek, ki sistemu pomaga, da naslednjič ne zgreši.
Preverjanje in izjeme: tu se napake pri naročilih ustavijo
Za logistične ekipe in distributerje je napačno naročilo dražje od počasnega: napačna količina pomeni povratno vožnjo, napačen artikel reklamacijo, napačen naslov izgubljen dan. Zato je preverjanje osrednji del zajema.
Dobro nastavljeno preverjanje primerja:
- šifre in nazive artiklov z vašim šifrantom, vključno s preslikavo kupčevih šifer v vaše;
- cene s cenikom ali pogodbenimi pogoji kupca;
- količine z običajnimi vzorci naročanja in pakirnimi enotami (naročilo 1.000 kosov namesto običajnih 100 zasluži pregled);
- datume dobave z zmogljivostjo skladišča ali proizvodnje;
- račune z naročilnico in prevzemom, preden gredo v plačilo;
- dvojnike, da isto naročilo, poslano dvakrat, ni izvedeno dvakrat.
Kar se ujema, gre naprej brez ročnega posega. Kar se ne ujema, gre k referentu z jasno oznako, kaj je narobe. Tako ljudje ne prepisujejo več, temveč odločajo o izjemah, kar je zanimivejše delo in prinese bistveno manj napak.
Povezava z ERP, skladiščem in proizvodnjo
Zajem, ki se konča v Excelu, ni avtomatizacija. Vrednost nastane, ko podatek iz dokumenta neposredno sproži naslednji korak: odprto naročilo v ERP, rezervacijo zaloge, delovni nalog, transport.
Pri povezavi je treba razjasniti:
- v kateri modul ERP se podatek zapiše in s katerim statusom (osnutek ali potrjeno naročilo);
- kako se ravna ob spremembah, na primer ko kupec pošlje popravljeno naročilo;
- kdo je lastnik matičnih podatkov in kako se dodajajo novi artikli ali partnerji;
- kje teče sistem, v vašem okolju ali v oblaku, kar opisujemo v primerjavi on-premise ali oblak za AI.
Pri NovaCore Group zajem dokumentov povezujemo tudi z upravljanjem proizvodnje: planiranjem, razporejanjem, upravljanjem naročil in transporta, aplikacijami za voznike in sledenjem dostavam, vse povezano z ERP. Naročilo, ki ga sistem prebere zjutraj, je tako lahko še isti dan v planu. Podrobneje o povezovanju pišemo v praktičnem vodniku za integracijo AI z ERP.
Hramba, sledljivost in zakonodaja
Ko dokumente obdeluje sistem, mora biti obdelava sledljiva. Za poslovne in davčne dokumente v Sloveniji velja 38. člen ZDavP-2. Ta od zavezanca zahteva, da elektronske podatke hrani v elektronski obliki z dostopom do njih ter za predpisano obdobje zagotovi njihovo berljivost, avtentičnost in celovitost. Program ne sme omogočati spreminjanja shranjenih zapisov brez hrambe izvornih podatkov in vseh poznejših sprememb.
Za zajem to pomeni:
- izvirni dokument se shrani nespremenjen, ločeno od izluščenih podatkov;
- vsak popravek v koraku izjem se zabeleži: kdo, kdaj, katera vrednost;
- spremembe same rešitve so dokumentirane v časovnem zaporedju;
- dostop do dokumentov je urejen s pravicami.
Za farmacevtska podjetja veljajo še strožje zahteve glede elektronskih zapisov, ki jih povzemamo v vodniku o zahtevah 21 CFR Part 11.
Pomembna sprememba prihaja pri računih. Zakon o izmenjavi elektronskih računov in drugih elektronskih dokumentov uvaja obvezno izmenjavo e-računov med podjetji, uporabljati pa se začne 1. januarja 2028. Strukturirani e-računi bodo prihajali v obliki, ki jo sistem bere neposredno. Naročila, dobavnice, certifikati, specifikacije in pogodbe pa bodo še naprej prihajali v PDF-jih in e-poštnih sporočilih, zato zajem ostaja ključen za vse, kar se zgodi pred računom. Podjetje, ki zajem uvede zdaj, ima do leta 2028 že urejen tok, preverjanje in povezavo z ERP, v katero se e-računi le priklopijo.
Koliko prihranite in kako to izmerite
Prihranek pri zajemu izhaja iz treh virov: manj ročnega dela, manj napak in hitrejšega odziva do kupca. Pri eni od naših uvedb se je čas obdelave naročil skrajšal za 68 %, naložba pa se je povrnila v 8 do 10 mesecih. Tudi raziskava o digitalizaciji dokumentarnega gradiva na Uradu RS za intelektualno lastnino ugotavlja, da se naložba v digitalizacijo srednjeročno povrne s povečanjem učinkovitosti in zmanjšanjem stroškov.
Da boste rezultat lahko dokazali, pred uvedbo izmerite izhodišče:
| Kazalnik | Kaj meri | Kako ga izmerite |
|---|---|---|
| Čas obdelave dokumenta | od prejema do zapisa v ERP | časovni žig prejema in vnosa |
| Delež brez ročnega posega | dokumenti, ki gredo skozi brez popravka | število samodejno potrjenih / vsi dokumenti |
| Napake pri vnosu | napačne količine, artikli, cene | reklamacije in popravki naročil na mesec |
| Čas do potrditve kupcu | kako hitro kupec dobi potrditev | čas od prejema naročila do potrditve |
| Obremenitev referentov | ure ročnega vnosa na teden | evidenca dela pred uvedbo in po njej |
Zbirajte vsaj mesec dni podatkov pred uvedbo in enako obdobje po njej. Tako vidite učinek na vaših dokumentih, ne na povprečju trga. Če še ocenjujete, kje začeti, vam pomaga vodnik za oceno zrelosti podjetja za AI.
Naš pogled
Večina podjetij, ki se odloča za zajem podatkov iz dokumentov, najprej vpraša, kateri OCR je najboljši. Vprašanje je razumljivo, a je napačen začetek. Branje je danes najmanjši del izziva. Odločilno je, ali sistem razume vaše poslovanje: katere šifre uporabljajo vaši kupci, kakšne so vaše pakirne enote, kdaj je naročilo nenavadno in kam v ERP mora podatek priti.
Zato pri NovaCore Group združujemo več specializiranih strokovnih ekip, ki poglobljeno poznajo panoge, v katerih delujejo naše stranke: proizvodnjo, logistiko, distribucijo in farmacijo. Rešitev individualno prilagodimo vašim procesom, namesto da bi procese prilagajali orodju.
Enako pomembno je, kaj se zgodi po zagonu. Dokumenti se spreminjajo, prihajajo novi partnerji, ERP se nadgrajuje. Stalna podpora po uvedbi je zato del našega dela, ne izjema. Tako zmanjšamo tveganje uvedbe in poskrbimo, da sistem čez leto dni deluje bolje kot prvi dan.
Martin
Avtomatizacija dokumentov z NovaCore Group
Če vaša ekipa še vedno prepisuje naročila, račune ali dobavnice v ERP, je to mesto, kjer najhitreje dosežete merljiv rezultat. Naša avtomatizacija dokumentov pokriva AI-zajem, klasifikacijo, preverjanje in prenos v ERP, po potrebi pa jo povežemo z upravljanjem proizvodnje in prediktivnim planiranjem.

→ Oglejte si naše rešitve za avtomatizacijo dokumentov ali preverite sisteme, ki pri strankah že tečejo v produkciji.
Pogosta vprašanja
Ali za zajem podatkov iz PDF-ja vedno potrebujem OCR?
Ne. Če je PDF ustvarjen digitalno, na primer izvožen iz ERP-ja partnerja, je besedilo že v datoteki in OCR ni potreben. Še vedno pa potrebujete ekstrakcijo, ki prepozna, kaj posamezna vrednost pomeni, in preverjanje, preden gre podatek v ERP.
Kako natančen je avtomatski zajem?
Natančnost je odvisna od vaših dokumentov, kakovosti skenov in urejenosti matičnih podatkov. V slovenski raziskavi na računih so pristopi s strojnim učenjem dosegli F1 0,89, pristop s predlogami pa 0,70. Ključno je, da sistem negotove podatke zazna in jih pošlje v pregled, namesto da bi jih neopazno vnesel.
Ali je zajem še smiseln, ko bodo e-računi obvezni?
Da. Obveznost od leta 2028 velja za račune med podjetji, naročila, dobavnice, certifikati in pogodbe pa bodo še naprej prihajali v različnih oblikah. Urejen tok zajema, preverjanja in povezave z ERP je tudi osnova, v katero se strukturirani e-računi enostavno vključijo.
Koliko časa traja uvedba?
Trajanje je odvisno od števila vrst dokumentov, raznolikosti partnerjev in povezave z vašim ERP. Najbolje je začeti z enim tokom, na primer z naročili kupcev, in ga nato razširiti. Pri eni od naših uvedb se je naložba povrnila v 8 do 10 mesecih.
Viri
- Avtomatska ekstrakcija podatkov iz računov, magistrsko delo, FRI UL
- Prepoznavanje tabel in njihovih struktur, diplomsko delo, FRI UL
- 38. člen ZDavP-2: elektronsko obdelovanje podatkov
- Nov zakon: obvezna izmenjava e-računov pri B2B poslovanju
- Izzivi digitalizacije dokumentarnega gradiva, diplomsko delo, UL