AI vs avocati – Confruntarea suprema

„Observam intreruperi in mai multe industrii prin utilizari din ce in ce mai sofisticate ale inteligentei artificiale. Domeniul dreptului nu face exceptie.”

Dar cine crezi ca ar castiga intr-un concurs de revizuire a contractelor – un avocat sau AI

Si cum ati defini parametrii „castigarii”? 

Mai repede? Mai exact? Cu totul altceva?

Intr-un studiu de referinta realizat de marca de intreprindere a Superlegal Lawgeex – AI vs Lawyers – 20 de avocati au fost supusi la incercare impotriva AI-ului nostru revolutionar si veti fi socati de rezultate!

Douazeci de avocati formati in SUA, cu zeci de ani de experienta juridica, au fost rugati sa elibereze probleme juridice in cinci NDA standard. Acesti avocati au concurat cu un sistem AI care a fost instruit pe zeci de mii de contracte.

Acest studiu reprezinta un reper major in istoria tehnologiei juridice.

Inainte de a ne arunca o privire asupra rezultatelor revolutionare ale AI vs Lawyers – haideti sa vedem cum AI a fost creat personalizat pentru provocarea revizuirii contractelor.

AI pentru revizuirea contractului

Compania tipica Fortune 1000 are intre 20.000 si 40.000 de contracte active la un moment dat.

Iar Asociatia Internationala pentru Managementul Contractelor si Comerciale (IACCM) a constatat ca 83% dintre companii sunt nemultumite de procesul de contractare al organizatiei lor. 

Asadar, necesitatea unei solutii de revizuire a contractelor care sa poata avea grija de miile de contracte de rutina pe care companiile trebuie sa le semneze zilnic este evidenta si in crestere!

Dar antrenarea AI pentru a lucra la fel ca un avocat are provocarile sale!

Provocari legale AI

  1. Legalese

„Legalese” este un limbaj tehnic juridic care este adesea complex si contraintuitiv. 

In scopul instruirii Al, aceasta forma de limbaj nu poate fi considerata o limba naturala. Pentru revizuirea contractului, procesarea limbajului natural (NLP) si solutiile de la raft pur si simplu nu functioneaza. 

Niciun model de limbaj computational existent nu ar putea citi legala in mod coerent.

  1. Precizie ridicata

Rolul principal al avocatului este de a minimiza riscul juridic pentru clientii lor, astfel incat acuratetea este vitala.

In formarea juridica, analiza unui singur document necesita niveluri de acuratete mult mai ridicate decat, de exemplu, analiza „sentimentului” de date mari (care este procesul de utilizare a analizei de text pentru a extrage surse de date pentru opinii pentru a prezice tendinte).

Antrenarea AI

Tehnologia Superlegal a fost dezvoltata printr-o combinatie de tehnici de invatare supravegheata si nesupravegheata, care, potrivit profesorului Yonatan Aumann, lector in cadrul Departamentului de Informatica de la Universitatea Bar Ilan, a creat: 

„cea mai avansata tehnologie pentru analiza automata a documentelor juridice.” 

Superlegal Al a fost instruit pe zeci de mii de contracte, folosind tehnologia de invatare automata si de invatare profunda personalizata. 

Acest nivel de tehnologie pentru analiza documentelor juridice a fost posibil doar cu progresele in calcul din ultimii zece ani. 

Al a fost instruit sa detecteze probleme in mai mult de o duzina de contracte legale diferite, de la acorduri de software la acorduri de servicii pana la comenzi de cumparare. 

Tehnici de antrenament AI

Urmatoarele tehnici au fost aplicate la antrenamentul AI:

  • Invatarea nesupravegheata a fost folosita pentru a preda motorului Al limbajul de baza legalizat.
  • Invatarea supravegheata, folosind LSTM multi-strat de invatare profunda si tehnologia de convolutie, a fost apoi folosita pentru a antrena sistemul pentru identificarea fina a problemelor.
  • A fost aplicat un algoritm unic de crestere pentru a stimula invatarea AI din documentele adnotate de oameni.
  • Avand in vedere ca NLP si alte solutii de la raft nu l-ar reduce, au trebuit create noi modele pentru sarcina de revizuire juridica AI: New Legal Language Processing (LLP) si Legal Language Understanding (LLU).

Legalese

Echipe de avocati si ingineri au predat Al legalese expunandu-l la o gama larga de documente juridice. 

Pregatirea unui motor Al este similara cu formarea unui nou avocat – expunerea la diferite exemple este cruciala in dezvoltarea unei intelegeri profunde a practicii juridice.

Odata ce Al a invatat limbajul juridic, formatorii juridici au subliniat conceptele pe care trebuie sa le recunoasca. 

Tehnologia LLP permite apoi algoritmului sa identifice aceste concepte – chiar daca au fost formulate in moduri nemaivazute pana acum.

Concepte, nu cuvinte cheie

Concepte de monitorizare, nu cuvinte cheie – Al functioneaza intr-o maniera mult mai sofisticata decat o „cautare de cuvinte cheie”.

Cautarile prin cuvinte cheie pot fi excesive sau insuficiente, deoarece cuvintele pot fi absente din documentele relevante sau pot fi prezente in documente irelevante.

True Al recunoaste un concept oriunde este formulat sau oriunde apare intr-un document.

AI vs avocati – studiul

Este timpul sa intri in studiul de reper.

In studiul AI vs avocati, douazeci de avocati au revizuit cinci NDA alaturi de AI. 

Avocatii americani cu zeci de ani de experienta in dreptul corporativ si revizuirea contractelor au fost infrunti cu algoritmul AI pentru a identifica probleme in cinci Acorduri de nedivulgare (NDA).

De ce au fost alese NDA-urile

NDA-urile sunt contracte de afaceri de rutina utilizate pentru a proteja informatiile furnizate de o afacere catre alta. 

Aceste acorduri de confidentialitate stabilesc conditiile privind modul in care informatiile predate pot si nu pot fi utilizate. 

NDA-urile reprezinta cele mai frecvent utilizate contracte in relatiile de afaceri, astfel incat revizuirea si aprobarea lor este cruciala. 

Cu toate acestea, NDA-urile dureaza companiilor o saptamana sau mai mult pentru a fi aprobate, un proces care frustreaza alte echipe si incetineste tranzactiile.

Faceti clic aici pentru a afla mai multe despre NDA-uri – inclusiv primii 3 ucigasi ai negocierilor NDA conform datelor Superlegal!

Infiintarea studiului

Studiul a fost realizat cu contributii din partea cadrelor universitare, a cercetatorilor de date si a expertilor juridici si de invatare automata si a fost supravegheat de un avocat consultant independent.

O echipa de prestigiosi profesori de drept si avocati veterani a stabilit si revizuit o lista de 30 de probleme juridice propuse care ar putea aparea intr-un NDA standard.

Aceste probleme juridice au stat apoi la baza celor utilizate pentru a testa acuratetea depistarii problemelor avocatilor participanti si Al.

Acest test a replicat un scenariu real in care un nou contract este incarcat pentru prima data pe platforma de catre unul dintre clientii nostri.

Avocatii

Avocatii alesi pentru acest studiu au fost verificati cu atentie pentru a asigura participarea doar a avocatilor cu inalta experienta si pregatiti in SUA, cu o experienta comerciala semnificativa, in aceasta forma exacta de revizuire a NDA.

Acordurile

Acordurile pentru aceasta provocare avocati vs AI alese au fost cinci acorduri NDA disponibile public din Setul de date Enron (standardul industrial pentru astfel de documente). 

Aceste documente nu fusesera niciodata procesate de algoritmul AI inainte.

Instructiuni de testare

Avocatilor care au participat la studiu li sa acordat patru ore pentru a identifica si evidentia problemele relevante in care au aparut in toate cele cinci NDA. 

Avocatii au fost rugati sa:

  1. Lasati deoparte ceea ce stiau despre probleme specifice si ramaneti in schimb la definitiile oferite.
  2. Utilizati un meniu derulant simplu pentru a identifica problemele corecte si unde au aparut in fiecare dintre cele cinci contracte.

In chestionarul post-interviu, 100% dintre participanti au spus ca testul a fost clar, credibil si modelat cu precizie pe modul in care examineaza in prezent NDA-urile.

Cum a fost diferit acest studiu

Desi acest studiu nu a fost primul care a pus Al impotriva oamenilor in domeniul dreptului, este cu siguranta scenariul cel mai egal intreprins vreodata.

Provocarea Al vs Lawyers a fost spre deosebire de orice studiu anterior, in felul in care studiul a asigurat: 1) expertiza semnificativa a avocatilor in domeniul exact al dreptului pe care il evalua 

2) ca toti participantii au indeplinit exact aceeasi sarcina. 

AI vs avocati – rezultatele

Cand vine vorba de avocati vs AI – nu ar fi o mare surpriza daca ti-am spune ca AI-ul este mai rapid, dar ne-ai crede daca ti-am spune ca AI-ul este si mai precis?

Rezultate:

  • In medie, avocatilor le-a luat 92 de minute pentru a termina revizuirea contractelor, in comparatie cu IA care a durat 26 de secunde.
  • AI a terminat testul cu un rating mediu de precizie de 94%, in timp ce avocatii au obtinut o medie de 85%. 

In medie, a durat 92 de minute pentru ca avocatii sa finalizeze toate cele cinci NDA. Cel mai lung timp necesar unui avocat pentru a finaliza testul a fost de 156 de minute, iar cel mai scurt timp pentru finalizarea sarcinii de catre un avocat a fost de 51 de minute. 

In schimb, motorul Al a finalizat sarcina de detectare a problemelor in cateva secunde. Accelerarea examinarii initiale a contractului de la o medie de 92 de minute la 26 de secunde.

Este timpul sa vorbim despre acuratete.

Putini ar fi surprinsi ca Inteligenta Artificiala functioneaza mai repede decat avocatii in anumite sarcini juridice care nu sunt esentiale. 

Cu toate acestea, consensul general este ca masinile nu pot egala intelectul uman pentru acuratete in munca juridica fundamentala. Avand in vedere ca avocatii sunt pregatiti riguros, cu abilitati de cercetare meticuloase bazate pe un studiu profund al jurisprudentei. 

Dar motorul Al a obtinut o precizie de 100% intr-unul dintre contracte. Cel mai mare punctaj individual pentru un avocat la un singur contract a fost de 97%.

Cum poate AI sa fie mai precisa decat avocatii?!

Dupa cum am vorbit la inceputul articolului, se reduce la modul in care a fost antrenat AI Superlegal:

  1. Tehnologia de invatare automata si de invatare profunda personalizata 
  2. Expunerea la zeci de mii de contracte
  3. Crearea de noi modele de limbaj 
  4. Prin echipe de avocati si ingineri de top din industrie 

Acest lucru este confirmat de profesorul Erika Buell, Director al Programului de Drept si Antreprenoriat la Duke Law, care considera ca 

„Utilizarea Al ar trebui sa ofere consistenta si predictibilitate in contractele unui client, oferind o mai buna protectie a clientului.”

Concluzie

Deci juriul este in lucru – AI este mai buna decat avocatii pentru revizuirea de rutina a contractelor. Si prin mai bine, ne referim la mai rapid si mai precis!

De fapt, potrivit profesorului Gillian Hadfield:

„Acest experiment subestimeaza de fapt castigul de la Al. 

Avocatii care au examinat aceste documente s-au concentrat pe deplin pe sarcina: nu s-a scufundat la capatul unei liste de lucruri de facut si nici nu a fost grabit in timp ce astepta un avion. 

Marja de eficienta poate fi chiar mai mare decat rezultatele prezentate aici.”

Ca sa nu mai vorbim ca AI este infinit mai ieftin!

Hua Wang, un avocat participant la studiu a comentat:

„Firmele de avocatura ar percepe mii de dolari pentru o astfel de misiune!”

Comentariu final

Deci este stabilit. AI legala este mai buna, iar AI legala este viitorul. 

In cuvintele lui John O. McGinnis, profesor de drept constitutional la Northwestern University School of Law si profesor Russell G Pearce la Fordham University School of Law: 

„Masinile inteligente vor deveni mai bune, atat in ​​ceea ce priveste performanta, cat si costul. Si, spre deosebire de oameni, ei pot lucra neincetat non-stop, fara somn sau cofeina. 

O astfel de accelerare tehnologica continua a puterii de calcul este diferenta dintre imbunatatirile tehnologice anterioare ale serviciilor juridice si cele determinate de inteligenta masinilor.”

Superlegal

La patru ani de la studiul revolutionar AI vs avocati, Superlegal inca mai valorifica puterea acestui AI revolutionar si este doar din ce in ce mai bun, mai rapid si mai puternic!

In plus, revizuirile contractelor noastre sunt verificate de profesionisti din domeniul juridic de top pentru a garanta rapiditate, acuratete si eficienta a costurilor – astfel incat sa puteti obtine tot ce este mai bun din ambele lumi!