← All articles

Ekstrakcija podatkov iz pogodb: od PDF-ja do ERP z AI

Ekstrakcija podatkov iz pogodb: od PDF-ja do ERP z AI

Pregled pogodbenih pogojev in prilog

Ekstrakcija podatkov iz pogodb pomeni, da iz pogodbe, aneksa ali okvirnega sporazuma samodejno izluščite ključne podatke, kot so pogodbene stranke, cene, plačilni roki, dobavni pogoji in datumi podaljšanja, ter jih kot strukturiran zapis prenesete v ERP, nabavni ali logistični sistem. Najzanesljivejše rezultate da kombinacija OCR, poslovnih pravil in umetne inteligence, ki ji človek potrdi le negotove vrednosti. Pri NovaCore Group takšno avtomatizacijo dokumentov gradimo kot celoto: AI zajem, klasifikacijo, preverjanje in prenos v ERP. Tako pogodbeni pogoji iz predala pridejo v sistem, kjer dejansko vplivajo na naročila, cene in dobave.

Novacore-groupnovacore-group.siPogodbeni podatki, pripravljeni za ERPNovaCore Group avtomatizira zajem in obdelavo dokumentov z umetno inteligenco, da pogodbeni podatki lažje dosežejo poslovne sisteme.Obiščite

Na kratko

  • Cilj ni samo prebrati pogodbo. Pogoji morajo pristati v ERP, kjer vplivajo na cene, rabate, roke plačil in dobave.
  • Hibridni pristop je najtočnejši. V raziskavi o samodejni obdelavi naročil je kombinacija jezikovnega modela, prepoznave entitet in pravil dosegla 93 % točnosti, posamezne metode pa od 75 do 88 %.
  • Človek ostane v zanki. Sistem sam potrdi zanesljive vrednosti, negotove pa skupaj s kontekstom pokaže v pregled.
  • Najprej določite polja. Natančen seznam podatkov in njihovih pravil za preverjanje prihrani več dela kot katerikoli model.
  • Pogodbe vsebujejo osebne podatke, zato mora obdelava temeljiti na pravni podlagi po GDPR in ZVOP-2.

Kazalo

Kaj pomeni ekstrakcija podatkov iz pogodb

Pogodba je za pravnika dokument, za operativo pa nabor pravil: po kateri ceni kupec naroča, v kakšnem roku plača, kdo nosi stroške prevoza, kdaj se pogodba sama podaljša in kakšna je kazen za zamudo. Težava je, da so ti podatki razpršeni po členih, prilogah in aneksih, pogosto v skeniranem PDF-ju.

Ekstrakcija te podatke najde, jih poimenuje in zapiše v enotno obliko. Namesto 14 strani besedila dobite zapis z jasnimi polji, ki ga ERP razume.

Podatki, ki jih slovenska proizvodna, prehranska in distribucijska podjetja najpogosteje zajemajo:

Skupina podatkov Primeri polj Kam gredo v sistemu
Pogodbene stranke naziv, davčna številka, naslov, kontaktna oseba šifrant partnerjev
Trajanje datum podpisa, začetek veljavnosti, rok trajanja, samodejno podaljšanje, odpovedni rok modul pogodb, opomniki
Cene in rabati cenik, količinski rabati, valuta, indeksacija cen cenik kupca ali dobavitelja
Plačila plačilni rok, zamudne obresti, zavarovanje plačil finance, terjatve
Dobava dobavni rok, paritete (Incoterms), mesto dobave, minimalna količina nabava, logistika
Kakovost in odgovornost reklamacijski rok, pogodbena kazen, garancija kakovost, reklamacije
Posebni pogoji ekskluziva, rok uporabnosti ob dobavi, embalaža prodaja, skladišče

Za prehransko industrijo so pogosto ključna polja, ki jih splošni seznami izpustijo: zahtevan preostali rok uporabnosti ob dobavi, pogoji vračila blaga in dogovorjeni dobavni okni pri trgovskih verigah. Prav ta podrobnost odloča, ali je ekstrakcija uporabna ali le lep izpis.

Zakaj ročni prepis ne zadošča več

V večini podjetij pogodbo prebere ena oseba, pogoje pa ročno vpiše druga. Vsak prepis je priložnost za napako: napačen plačilni rok, pozabljen količinski rabat ali spregledan aneks, ki je spremenil ceno. Posledice se ne pokažejo ob vnosu, ampak tedne kasneje, pri reklamaciji, napačnem računu ali zamujenem odpovednem roku.

Za logistične in distribucijske ekipe je težava še bolj neposredna. Pogodbeni pogoji določajo, kako se obdela vsako naročilo. Če v sistemu ni pravega dobavnega roka ali minimalne količine, napaka iz pogodbe postane napaka pri naročilu, in to pri vsakem naslednjem.

Avtomatizacija tega ne reši tako, da odstrani ljudi, ampak tako, da jih premakne z vnosa na preverjanje. Več o tem, kje takšen pristop prinese največ, smo zapisali v vodniku o inteligentni avtomatizaciji.

Kako delujejo OCR, pravila in umetna inteligenca

Sodobna ekstrakcija združuje tri tehnologije, vsaka pa opravi svoj del:

  • OCR (optično prepoznavanje znakov) pretvori sliko skeniranega dokumenta v berljivo besedilo. Brez njega sistem skena sploh ne more brati.
  • Pravila so vnaprej določeni vzorci, na primer da je davčna številka osemmestna ali da plačilni rok sledi besedam »v roku«. So hitra in predvidljiva pri ustaljenih dokumentih.
  • Umetna inteligenca razume pomen besedila. Prepozna, da »plačilo v 60 dneh od prejema računa« in »rok zapadlosti: 60 dni« pomenita isto, tudi če ju zapišeta različna partnerja.

Koliko prinese njihova kombinacija, kaže raziskava o samodejni obdelavi naročil, prejetih po e-pošti, objavljena leta 2026. OCR je dosegel 82–88 % točnosti, veliki jezikovni model 88 %, prepoznava imenovanih entitet (samodejno označevanje imen, zneskov in datumov v besedilu) 82 %, sama pravila pa 75 %. Hibridni pristop, ki upošteva tudi stopnjo zaupanja v vsako vrednost, je dosegel 93 %. Obdelava je trajala 8–12 sekund na sporočilo, ročnega dela pa je bilo za 75–85 % manj.

Raziskava se nanaša na naročila, ne na pogodbe, vendar je sklep enak: nobena metoda sama ni dovolj, skupaj pa ustvarijo sistem, ki ve, česa ne ve.

Kako delujejo OCR, pravila in umetna inteligenca

Kdaj je potreben človeški pregled

Akademska študija platforme za pregled pogodb DICR, predstavljena na konferenci AAAI leta 2020, opisuje pristop »user-in-the-loop«. Pogodba se po OCR razdeli na manjše enote, uporabnik pa vsak podatkovni element opiše s tipom, ključnimi besedami, sinonimi in opisom. Sistem prepoznane vrednosti poudari in pokaže okoliško besedilo, da človek hitro presodi, ali so pravilne.

V praksi to pomeni preprosto delitev dela:

  • visoko zaupanje: vrednost gre neposredno v sistem,
  • nizko zaupanje ali neskladje s pravili: vrednost čaka na potrditev, skupaj s stavkom, iz katerega je izluščena,
  • manjkajoč obvezen podatek: dokument gre v izjeme z opisom, kaj manjka.

Referent tako ne bere celotne pogodbe, ampak potrdi tri označena polja.

Postopek od prejema pogodbe do vnosa v ERP

Ta koraki veljajo, ne glede na to, ali obdelujete deset pogodb na mesec ali več sto.

Šest korakov od prejema pogodbe do ERP

1. Prejem in zbiranje dokumentov

Pogodbe prihajajo po e-pošti, iz sistema za e-podpis, kot sken iz vložišča ali iz skupne mape. Prvi korak je en vhod za vse vire. Kjer gre narobe: aneksi pridejo ločeno in jih nihče ne poveže z osnovno pogodbo. Pri avtomatizaciji dokumentov, ki jo uvajamo pri NovaCore Group, je zajem prvi del rešitve, zato dokumenti ne obtičijo v posameznih nabiralnikih.

2. Zajem besedila in klasifikacija

OCR pretvori skene v besedilo, sistem pa dokument razvrsti: kupoprodajna pogodba, okvirni sporazum, aneks, splošni pogoji. Kjer gre narobe: aneks se obravnava kot nova pogodba in prepiše pravilne podatke. Klasifikacija z AI je del naše rešitve za dokumente, ker od nje zavisi, katera pravila se uporabijo v naslednjem koraku.

3. Izluščenje polj

Model poišče vrednosti za vsako določeno polje in vsaki pripiše stopnjo zaupanja. Kjer gre narobe: datumi v različnih zapisih, zneski brez valute, sklici na priloge (»cene po Prilogi 2«), ki jih je treba prav tako prebrati.

4. Preverjanje in obravnava izjem

Izluščene vrednosti se preverijo s pravili in z obstoječimi podatki: ali partner obstaja v šifrantu, ali je plačilni rok v dovoljenem razponu, ali se cena ujema s cenikom. Pri nas je preverjanje vgrajeno v rešitev, zato izjeme pridejo k pravi osebi, z razlogom, zakaj so izjeme.

5. Prenos v ERP

Potrjen zapis se prenese v ERP: v šifrant partnerjev, cenike, plačilne pogoje in modul pogodb. Kjer gre narobe: prenos brez preverjanja šifrantov ustvari podvojene partnerje in artikle. Prenos v ERP je pri nas sestavni del avtomatizacije dokumentov, ne ločen projekt. Kako takšno povezavo načrtovati, opisujemo v praktičnem vodniku za integracijo AI z ERP.

6. Spremljanje in izboljševanje

Vsaka potrjena ali popravljena vrednost je povratna informacija. Če referent pri istem partnerju vedno popravi isto polje, je to znak za novo pravilo. Tu je ključna podpora po uvedbi, ki jo pri NovaCore Group izpostavljamo kot eno svojih glavnih prednosti: sistem se prilagaja vašim dokumentom tudi po zagonu.

Kako pripraviti pogodbe in določiti polja

Najpogostejša napaka pri uvedbi je začetek pri tehnologiji namesto pri podatkih. Preden izberete pristop, odgovorite na tri vprašanja:

  1. Kateri podatki dejansko sprožijo dejanje? Plačilni rok sproži izdajo računa, odpovedni rok opomnik, cena izračun naročila. Polja, ki ne sprožijo ničesar, lahko počakajo.
  2. Kakšna je pravilna oblika vsakega polja? Datum v enotnem zapisu, znesek z valuto, paritete iz nabora Incoterms, partner s šifro iz ERP.
  3. Kdo potrdi izjeme? Pri cenah nabava ali prodaja, pri rokih pravna služba, pri dobavnih pogojih logistika.

Pomaga tudi zbirka vzorčnih pogodb: po nekaj primerov za vsako vrsto dokumenta in vsakega večjega partnerja, vključno s tistimi s slabimi skeni. Več o tem, kako podatke pripraviti za umetno inteligenco, najdete v našem vodniku priprava podatkov za AI.

Ne spreglejte šifrantov. Ekstrakcija je toliko dobra, kolikor so urejeni podatki, s katerimi jo primerjate. Če ima isti kupec v ERP tri različne šifre, ga sistem ne more zanesljivo povezati s pogodbo. Pravila in kontrole za ta del opisujemo v članku o upravljanju šifrantov v ERP.

Povezava z ERP, nabavo in logistiko

Pravo vrednost ekstrakcije vidite šele, ko izluščeni podatki začnejo delati v drugih procesih:

  • Nabava: dogovorjene cene, minimalne količine in dobavni roki dobaviteljev se samodejno upoštevajo pri naročanju. Naročilo po napačni ceni sistem zazna pred odpošiljanjem.
  • Prodaja in distribucija: rabati in plačilni pogoji kupca so v sistemu takoj po podpisu, ne šele, ko jih nekdo prepiše.
  • Logistika: paritete in mesta dobave določajo, kdo organizira prevoz in kdo nosi stroške. Ti podatki lahko neposredno napajajo upravljanje naročil in transporta.
  • Finance: plačilni roki in zamudne obresti se ujemajo s pogodbo, kar zmanjša spore pri izterjavi.
  • Uprava: pregled vseh pogodb, ki se v naslednjih 90 dneh iztečejo ali samodejno podaljšajo.

Za proizvodna in logistična podjetja je to naravni most do širše digitalizacije. Pri NovaCore Group poleg avtomatizacije dokumentov uvajamo tudi digitalizacijo proizvodnje z upravljanjem naročil in transporta ter prediktivno planiranje, povezano z ERP in MES. Pogodbeni pogoji, ki so v sistemu pravilno zapisani, so vhod za vse to.

Pri izbiri, kje naj sistem teče, pretehtajte zaupnost pogodb in obstoječo infrastrukturo. Razlike med lokalno namestitvijo in oblakom smo razložili v vodniku on-premise ali oblak za AI.

Varstvo osebnih podatkov pri obdelavi pogodb

Pogodbe skoraj vedno vsebujejo osebne podatke: imena podpisnikov, kontaktne osebe, telefonske številke, pri samostojnih podjetnikih tudi naslove. Zato za njihovo samodejno obdelavo veljajo enaka pravila kot za vsako drugo obdelavo.

Zakon o varstvu osebnih podatkov (ZVOP-2) določa, da se osebni podatki lahko obdelujejo le, kadar in v obsegu, ko je to skladno s pravnimi podlagami iz 6. in 9. člena GDPR, splošne uredbe EU o varstvu podatkov. Pri pogodbah je podlaga praviloma izvajanje pogodbe, a obseg obdelave mora ostati v mejah tega namena.

Če obdelavo izvaja zunanji izvajalec, je ta pogodbeni obdelovalec. Informacijski pooblaščenec je v mnenju o pogodbeni obdelavi osebnih podatkov poudaril, da mora obdelovalec za vključitev podobdelovalca pridobiti predhodno pisno dovoljenje upravljavca in ga obveščati o spremembah, da jim ta lahko ugovarja. Mnenje je bilo izdano še na podlagi prejšnjega zakona, zato podrobnosti svoje pogodbe o obdelavi preverite s pooblaščeno osebo za varstvo podatkov ali pravnikom.

Prakticno to pomeni:

  • sklenite pogodbo o obdelavi z izvajalcem rešitve,
  • vedite, kje se dokumenti in izluščeni podatki hranijo,
  • omejite dostop do pogodb na vloge, ki jih potrebujejo,
  • določite, kako dolgo se hranijo izvirni dokumenti in vmesni rezultati.

Naš pogled

Pri ekstrakciji podatkov iz pogodb se redko zalomi pri branju besedila. Zalomi se pri tem, kar sledi: ali podatek pristane v pravem polju ERP, ali ga sistem poveže s pravim partnerjem in ali nekdo opazi, da je aneks spremenil ceno.

Zato avtomatizacije dokumentov ne gradimo kot samostojno orodje za branje PDF-jev. Zajem, klasifikacija, preverjanje in prenos v ERP so pri nas en proces, ker vsaka vrzel med njimi pomeni nov ročni korak.

Drugo, kar se je izkazalo za ključno, je poznavanje panoge. Pogodba distributerja prehrambenih izdelkov, okvirni sporazum v proizvodnji in pogodba s prevoznikom imajo različna kritična polja. Naš model združuje več strokovno specializiranih ekip, zato rešitev prilagodimo vašim procesom, ne obratno.

In tretje: uvedba ni konec. Partnerji spreminjajo predloge, prihajajo novi aneksi, pravila se dopolnjujejo. Stalna podpora po uvedbi je tisto, kar zmanjša tveganje in ohranja točnost skozi leta.

Martin

Avtomatizacija dokumentov z NovaCore Group

Če pogodbe, naročila in spremne dokumente danes še prepisujete ročno, je avtomatizacija dokumentov najhitrejša pot do manj napak in krajšega časa obdelave. Naša rešitev dokumente z AI zajame, razvrsti, preveri in prenese v ERP. V enem od uspešnih projektov smo čas obdelave naročil skrajšali za 68 %, naložba pa se je povrnila v 8–10 mesecih.

Novacore-group

Poglejte, kaj zajema avtomatizacija dokumentov in naše druge rešitve, ali si oglejte sisteme, ki že delujejo v proizvodnji, logistiki in farmaciji. Če še niste prepričani, ali je vaše podjetje pripravljeno, začnite z oceno zrelosti za umetno inteligenco.

→ Pošljite nam nekaj vzorčnih pogodb in skupaj določimo, katera polja vam prinesejo največ.

Pogosta vprašanja

Ali lahko AI prebere tudi skenirane pogodbe?

Da. Skeniran dokument najprej obdela OCR, ki sliko pretvori v besedilo, nato pa AI iz njega izlušči polja. Pri slabih skenih sistem nižje zaupanje sporoči in vrednost pošlje v človeški pregled, namesto da bi jo tiho vnesel.

Kako točna je samodejna ekstrakcija podatkov?

Točnost je odvisna od pristopa in kakovosti dokumentov. V raziskavi o obdelavi naročil je hibridni pristop dosegel 93 % točnosti, posamezne metode pa 75–88 %. Ključno je, da sistem zanesljive vrednosti potrdi sam, negotove pa pokaže človeku.

Ali potrebujemo nov ERP za avtomatizacijo pogodb?

Ne. Ekstrakcija se poveže z obstoječim ERP, izluščeni podatki pa se zapišejo v šifrante, cenike in pogodbene module, ki jih že uporabljate. Pomembnejše od novega sistema so urejeni šifranti partnerjev in artiklov.

Kaj pa aneksi in spremembe pogodb?

Sistem aneks prepozna kot svojo vrsto dokumenta in ga poveže z osnovno pogodbo. Spremenjene vrednosti, na primer novo ceno ali podaljšan rok, posodobi in ohrani zgodovino, da je jasno, kateri pogoj velja od katerega datuma.

Koliko časa traja uvedba?

Trajanje je odvisno od števila vrst dokumentov, polj in sistemov, s katerimi se rešitev povezuje. Najhitreje gre, kadar so polja in odgovorne osebe za izjeme določene vnaprej. Obseg in časovnico določimo skupaj z vami po pregledu vzorčnih dokumentov.

Viri

Priporočeno