Add verifyToken field to verify evaluation results are produced by Hugging Face's automatic model evaluator (#2)

- Add verifyToken field to verify evaluation results are produced by Hugging Face's automatic model evaluator (7e429dc65d4b2a6364bab2b8aed8766032482e3e)


Co-authored-by: Evaluation Bot <[email protected]>

README.md

@@ -2,8 +2,12 @@
 language:
 - pt
 license: mit
+tags:
+- generated_from_trainer
 datasets:
 - joelito/brazilian_court_decisions
+metrics:
+- accuracy
 train-eval-index:
 - config: joelito--brazilian_court_decisions
   task: text-classification
@@ -13,10 +17,65 @@ train-eval-index:
   col_mapping:
     decision_description: text
     judgment_label: target
-tags:
-- generated_from_trainer
-metrics:
-- accuracy
+widget:
+- text: 'AGRAVO DE INSTRUMENTO. AÇÃO REVISIONAL DE CONTRATO. DEPÓSITO DO VALOR INCONTROVERSO.
+    IMPOSSIBILIDADE. NÃO PREENCHIMENTO DOS REQUISITOS PELO DEVEDOR. MANUTENÇÃO NA
+    POSSE DO BEM E VEDAÇÃO DE INSCRIÇÃO NOS ÓRGÃOS DE PROTEÇÃO AO CRÉDITO MEDIANTE
+    O DEPÓSITO DO VALOR ORIGINALMENTE CONTRATADO. 1. O autor requereu a sua manutenção
+    na posse do bem, o depósito em juízo dos valores que entende incontroversos, a
+    proibição de inscrição de seu nome nos órgãos de proteção ao crédito e a suspensão
+    de eventual ação de busca e apreensão do veículo. 2. O artigo 330, PARAGRAFO 2
+    e PARAGRAFO 3 do CODIGO DE PROCESSO CIVIL autoriza expressamente o depósito do
+    valor incontroverso nas ações revisionais de contrato mediante presença de três
+    requisitos concomitantes: a) propositura de ação contestando a existência integral
+    ou parcial do débito; b) efetiva demonstração de que a contestação da cobrança
+    indevida se funda na aparência do bom direito; e, c) que a parte efetue o depósito
+    do valor incontroverso ou preste caução idônea. Contudo, tal conduta não afastará
+    a incidência das restrições legais decorrentes da dívida, porquanto os valores
+    considerados incontroversos são inferiores àqueles contratados. 3. A jurisprudência
+    é pacífica no sentido de ser necessário o depósito do valor integral da parcela
+    da dívida para inibir os efeitos da mora e suas consequências. 4. Nos termos da
+    jurisprudência consolidada nesta Corte, deverá o devedor depositar os valores
+    pactuados originalmente no contrato, tanto para as parcelas vencidas, quanto para
+    as vincendas, nas datas pactuadas, se desejar se manter na posse do bem e obstacular
+    sua inscrição de seu nome nos cadastros restritivos de crédito.'
+- text: O constrangimento ilegal deve ser aferido segundo as circunstancias do caso
+    concreto, especialmente diante da complexidade e das diligências necessárias,
+    ainda mais quando tais elementos são necessários para embasar a própria denúncia
+    em si. Intensa movimentação processual no sentido de angariar as informações necessárias.
+    Prazo que merece ser mitigado. Denúncia oferecida nos autos da ação penal 0800162-9820188020001.
+    II - Presentes a materialidade dos delitos e seus indícios de autoria, mormente
+    diante das colaborações premiadas colhidas durante as investigações, não há falar
+    em embasamento abstrato da decisão especialmente quando esta expressamente apontou
+    que o paciente era proprietário de empresas supostamente fantasmas, que recebiam
+    benefícios de diversas prefeituras. III - Ausência de constrangimento ilegal,
+    tanto pela presença dos requisitos para a prisão preventiva em questão, quanto
+    pelo fato de que resta evidenciado que o paciente ficou foragido. Precedentes.
+    IV - Especificamente em relação ao pedido de extensão dos efeitos dos benefícios
+    concedidos a outros investigados (Josimar Campos, Raphael de Barros Lima e Raulene
+    Karoline Barros e Gabriel Brandão), entendo, a partir do narrado pela própria
+    petição inicial, que a situação do paciente é diferente dos demais investigados,
+    uma vez que, além de ele ter foragido do distrito da culpa e responder a outras
+    ações penais, aparentemente não está colaborando com as investigações (os outros
+    investigados firmaram acordo de colaboração premiada). V - No que tange ao pedido
+    relacionado aos ex-prefeitos (Márcia Coutinho Nogueira de Albuquerque, José Jacob
+    Gomes Brandão, Fábio Rangel Nunes de Oliveira) que se encontram em liberdade,
+    entendo que a situação do paciente também é diferente, uma vez que a decisão de
+    origem da conta que existem indicativos de que o esquema tenha ocorrido em 80
+    (oitenta) prefeituras. VI - A partir da leitura da decisão prolatada pelos juízes
+    impetrados, verifica-se que o decreto de prisão não é fundamentado apenas no risco
+    de a liberdade do paciente atrapalhar as investigações, mas também, para, sobretudo,
+    garantir a aplicação da lei penal pelo fato de o paciente ter foragido do distrito
+    da culpa.
+- text: APELAÇÃO CÍVEL. AÇÃO ORIGINÁRIA DE USUCAPIÃO. JULGAMENTO ANTECIPADO DA LIDE.
+    SENTENÇA DE IMPROCEDÊNCIA AO PLEITO AUTORAL ANTE A AUSÊNCIA DOS REQUISITOS DO
+    ARTIGO 1238 DO CÓDIGO CIVIL/02. AUSÊNCIA DE CITAÇÃO DO PROPRIETÁRIO DO BEM A SER
+    USUCAPIDO. AUTOR COMPROVA POR DOCUMENTO EXPEDIDO PELA MUNICIPALIDADE O REGISTRO
+    DO IMÓVEL USUCAPIENDO EM SEU NOME DESDE 1990. POSSIBILIDADE DO PREENCHIMENTO DO
+    REQUISITO TEMPORAL (PRAZO PARA USUCAPIR) PREVISTO EM LEI A SER IMPLEMENTADO NO
+    CURSO DA DEMANDA. OFENSA AO DEVIDO PROCESSO LEGAL MATÉRIA DE ORDEM PÚBLICA, RECONHECIDA
+    DE OFÍCIO NO JUÍZO AD QUEM. NULIDADE DA SENTENÇA COM RETORNO DOS AUTOS À ORIGEM
+    PARA DAR SEGUIMENTO A INSTRUÇÃO COM PROLAÇÃO DE NOVA DECISÃO.
 model-index:
 - name: bertimbau-base-finetuned-brazilian_court_decisions
   results:
@@ -29,116 +88,61 @@ model-index:
       config: joelito--brazilian_court_decisions
       split: test
     metrics:
-    - name: Accuracy
-      type: accuracy
+    - type: accuracy
       value: 0.7753086419753087
+      name: Accuracy
       verified: true
-    - name: Precision Macro
-      type: precision
+      verifyToken: eyJhbGciOiJFZERTQSIsInR5cCI6IkpXVCJ9.eyJoYXNoIjoiN2Q0N2I5ZThjOTdmYjJmNjQ2M2EwYzllOGZlZmUzMzQ3ZTNmMDYwN2Y4NTk3MjA4NTBiYzBkNGRmMDVjMWE0YiIsInZlcnNpb24iOjF9.azo0rnA6IBxWvLcVuY37hgCQ2Krss0pqrqzHJ_cu4y6hb5IHupoPUzvkAXpv5_U_iOVAq_xPS8Ow9CU9YLDjAg
+    - type: precision
       value: 0.7250426732752088
+      name: Precision Macro
       verified: true
-    - name: Precision Micro
-      type: precision
+      verifyToken: eyJhbGciOiJFZERTQSIsInR5cCI6IkpXVCJ9.eyJoYXNoIjoiNDFlNGMzM2VlMGNkOGYwNWU1N2U1NDVmNjlmMjZmYTI1YzVmNTJkZTVlMmY1NTQ3NDkzOWRlMjBmZDZlMDlkMiIsInZlcnNpb24iOjF9.2xet0XJ9AzIF4WvH-QPborSKwNYxrnjI88yYbx5rmt82Uw5_KutBG_LLHl-H7ZDLcBmbLrCGq9kAz7FsDR8DDg
+    - type: precision
       value: 0.7753086419753087
+      name: Precision Micro
       verified: true
-    - name: Precision Weighted
-      type: precision
+      verifyToken: eyJhbGciOiJFZERTQSIsInR5cCI6IkpXVCJ9.eyJoYXNoIjoiNTRmYTY2MWZhY2ZlZjYwMmQ5NzBkZjNkYzZiMGU0NmI5OTA5MDZjMGZkNDczNzc1OWVjNDE0YzFlMDE3MjU5YyIsInZlcnNpb24iOjF9.2smiUGVwRxTXdTcWm9wT_7HfYMQBGtNGiRECC-VqDgJalFiJL8z42RhaL0PpX29P9Gs2AqHj_CC2yOpcF9-dBQ
+    - type: precision
       value: 0.772642124493271
+      name: Precision Weighted
       verified: true
-    - name: Recall Macro
-      type: recall
+      verifyToken: eyJhbGciOiJFZERTQSIsInR5cCI6IkpXVCJ9.eyJoYXNoIjoiMGYwN2I2MzcwODBjZTI0MjRjZjZmYzg5OGQyYzI3MzNiNDg3OTRlOGY0ZjBhM2NkMzdmM2Q1MGY1OTg3NGQ4YyIsInZlcnNpb24iOjF9.alVSoPTd0sN2WnlwUsvjMB3FMwgq4idmBg61VvZEGGjMheq-gantO2LEjghOLvyqV2ykHKZ3HtsaBZg3MFh1BQ
+    - type: recall
       value: 0.7165701681830714
+      name: Recall Macro
       verified: true
-    - name: Recall Micro
-      type: recall
+      verifyToken: eyJhbGciOiJFZERTQSIsInR5cCI6IkpXVCJ9.eyJoYXNoIjoiMzdhMGFlOTk1ZDY5NmNkMjQ0ZDJjOWI1NzMxYmFiNTZiNzM3N2ZhY2ZmZGRkYjBlMmY1ZjM4MDAzYWRhZmYxYyIsInZlcnNpb24iOjF9.iOY4HQhYtb0j4Aj0Q1pohB39QNNzBfeF3KjMeN33hgaRrK5BgoL_6VH_g_-n7oY00Pmw5sXbaLdO7obCpQooAQ
+    - type: recall
       value: 0.7753086419753087
+      name: Recall Micro
       verified: true
-    - name: Recall Weighted
-      type: recall
+      verifyToken: eyJhbGciOiJFZERTQSIsInR5cCI6IkpXVCJ9.eyJoYXNoIjoiZDFlY2ViMjdmM2MzNDVkNGVjM2UxMzk5N2MyOWM3NTE5ZjQ2ZTJjMGMzNDViNmYzNWZiN2E0MmM3MTFhZmJhNCIsInZlcnNpb24iOjF9.MrfbjuTh4fNTjeNz6SNJ9L5bAxOQYtfXFArg0lMN7dzji8BtpSep_pVwb-27A6Bem7V2xlc27PdCMayVu08oCw
+    - type: recall
       value: 0.7753086419753087
+      name: Recall Weighted
       verified: true
-    - name: F1 Macro
-      type: f1
+      verifyToken: eyJhbGciOiJFZERTQSIsInR5cCI6IkpXVCJ9.eyJoYXNoIjoiOTFkOGJhODNjZWI3OWM2ZDQwNWNkNWViYjZmOWQ3NDAzNWIzMjM1ZmRlNThiMjhkYjhkMDM0ZGU5MTdhOWYyOSIsInZlcnNpb24iOjF9.sxK_3TdQnAcCttSHzVvPOGxGlOfpeKYBZ9z6rTEAUw2G6HlC09jcxhlcl5nQRvpfMcMAzgVTrL6X3kgRjB9VBg
+    - type: f1
       value: 0.7202933364810833
+      name: F1 Macro
       verified: true
-    - name: F1 Micro
-      type: f1
+      verifyToken: eyJhbGciOiJFZERTQSIsInR5cCI6IkpXVCJ9.eyJoYXNoIjoiZWZkMzNmZjJmNDhjZWU3MWM3ODdjNDA1OTY3ZGY3MmJmM2VjOTk2YTdkYzk2NWYxMGVjYjNmZTA1YTAxYjdjZiIsInZlcnNpb24iOjF9.tJ0qIvWo2pz1nzxCx-nCXm9BQPP94VV7cOEVQLPE2U3YRgOuIFMO99CW4a_Ge70XPLyFTIRCbr2-xDpMrC03Cw
+    - type: f1
       value: 0.7753086419753087
+      name: F1 Micro
       verified: true
-    - name: F1 Weighted
-      type: f1
+      verifyToken: eyJhbGciOiJFZERTQSIsInR5cCI6IkpXVCJ9.eyJoYXNoIjoiOGJiZDA4ZWU3NzA3OWU0N2YzNTU1NTQ1MmI2MzdlNWMwYTFhYjk1ZTQ5NDA0NzIyYTEwYWU2NGYxMDg5MzE5NyIsInZlcnNpb24iOjF9.HrC1_am-qUC4HboPtIanE1np2faZVqSPy58VlY3oK-nTPHYyEt_6FfgJoP2M6roVGKLjiXDs7gVljplAAG1XBQ
+    - type: f1
       value: 0.7736389495276883
+      name: F1 Weighted
       verified: true
-    - name: loss
-      type: loss
+      verifyToken: eyJhbGciOiJFZERTQSIsInR5cCI6IkpXVCJ9.eyJoYXNoIjoiYjgzYjc2Y2JjYTI0MDFhYWZmOGY1YTc5ZTQ1NzI3ZDUxNWY5NzdhZmIyYzE1MTA5NTEyOTA4NjFkMmQ4ODI5ZCIsInZlcnNpb24iOjF9.TCvj3Rqei3q2ajB6L9dqIxTyKXhNFQuQrU4ymc7kWnEyPuKgB9ty2JTqjeRYPWpY2RicABU9UFDXEhrdcfbKCw
+    - type: loss
       value: 0.6030029058456421
+      name: loss
       verified: true
-widget:
-- text: "AGRAVO DE INSTRUMENTO. A\xC7\xC3O REVISIONAL DE CONTRATO. DEP\xD3SITO DO\
-    \ VALOR INCONTROVERSO. IMPOSSIBILIDADE. N\xC3O PREENCHIMENTO DOS REQUISITOS PELO\
-    \ DEVEDOR. MANUTEN\xC7\xC3O NA POSSE DO BEM E VEDA\xC7\xC3O DE INSCRI\xC7\xC3\
-    O NOS \xD3RG\xC3OS DE PROTE\xC7\xC3O AO CR\xC9DITO MEDIANTE O DEP\xD3SITO DO VALOR\
-    \ ORIGINALMENTE CONTRATADO. 1. O autor requereu a sua manuten\xE7\xE3o na posse\
-    \ do bem, o dep\xF3sito em ju\xEDzo dos valores que entende incontroversos, a\
-    \ proibi\xE7\xE3o de inscri\xE7\xE3o de seu nome nos \xF3rg\xE3os de prote\xE7\
-    \xE3o ao cr\xE9dito e a suspens\xE3o de eventual a\xE7\xE3o de busca e apreens\xE3\
-    o do ve\xEDculo. 2. O artigo 330, PARAGRAFO 2 e PARAGRAFO 3 do CODIGO DE PROCESSO\
-    \ CIVIL autoriza expressamente o dep\xF3sito do valor incontroverso nas a\xE7\xF5\
-    es revisionais de contrato mediante presen\xE7a de tr\xEAs requisitos concomitantes:\
-    \ a) propositura de a\xE7\xE3o contestando a exist\xEAncia integral ou parcial\
-    \ do d\xE9bito; b) efetiva demonstra\xE7\xE3o de que a contesta\xE7\xE3o da cobran\xE7\
-    a indevida se funda na apar\xEAncia do bom direito; e, c) que a parte efetue o\
-    \ dep\xF3sito do valor incontroverso ou preste cau\xE7\xE3o id\xF4nea. Contudo,\
-    \ tal conduta n\xE3o afastar\xE1 a incid\xEAncia das restri\xE7\xF5es legais decorrentes\
-    \ da d\xEDvida, porquanto os valores considerados incontroversos s\xE3o inferiores\
-    \ \xE0queles contratados. 3. A jurisprud\xEAncia \xE9 pac\xEDfica no sentido de\
-    \ ser necess\xE1rio o dep\xF3sito do valor integral da parcela da d\xEDvida para\
-    \ inibir os efeitos da mora e suas consequ\xEAncias. 4. Nos termos da jurisprud\xEA\
-    ncia consolidada nesta Corte, dever\xE1 o devedor depositar os valores pactuados\
-    \ originalmente no contrato, tanto para as parcelas vencidas, quanto para as vincendas,\
-    \ nas datas pactuadas, se desejar se manter na posse do bem e obstacular sua inscri\xE7\
-    \xE3o de seu nome nos cadastros restritivos de cr\xE9dito."
-- text: "O constrangimento ilegal deve ser aferido segundo as circunstancias do caso\
-    \ concreto, especialmente diante da complexidade e das dilig\xEAncias necess\xE1\
-    rias, ainda mais quando tais elementos s\xE3o necess\xE1rios para embasar a pr\xF3\
-    pria den\xFAncia em si. Intensa movimenta\xE7\xE3o processual no sentido de angariar\
-    \ as informa\xE7\xF5es necess\xE1rias. Prazo que merece ser mitigado. Den\xFA\
-    ncia oferecida nos autos da a\xE7\xE3o penal 0800162-9820188020001. II - Presentes\
-    \ a materialidade dos delitos e seus ind\xEDcios de autoria, mormente diante das\
-    \ colabora\xE7\xF5es premiadas colhidas durante as investiga\xE7\xF5es, n\xE3\
-    o h\xE1 falar em embasamento abstrato da decis\xE3o especialmente quando esta\
-    \ expressamente apontou que o paciente era propriet\xE1rio de empresas supostamente\
-    \ fantasmas, que recebiam benef\xEDcios de diversas prefeituras. III - Aus\xEA\
-    ncia de constrangimento ilegal, tanto pela presen\xE7a dos requisitos para a pris\xE3\
-    o preventiva em quest\xE3o, quanto pelo fato de que resta evidenciado que o paciente\
-    \ ficou foragido. Precedentes. IV - Especificamente em rela\xE7\xE3o ao pedido\
-    \ de extens\xE3o dos efeitos dos benef\xEDcios concedidos a outros investigados\
-    \ (Josimar Campos, Raphael de Barros Lima e Raulene Karoline Barros e Gabriel\
-    \ Brand\xE3o), entendo, a partir do narrado pela pr\xF3pria peti\xE7\xE3o inicial,\
-    \ que a situa\xE7\xE3o do paciente \xE9 diferente dos demais investigados, uma\
-    \ vez que, al\xE9m de ele ter foragido do distrito da culpa e responder a outras\
-    \ a\xE7\xF5es penais, aparentemente n\xE3o est\xE1 colaborando com as investiga\xE7\
-    \xF5es (os outros investigados firmaram acordo de colabora\xE7\xE3o premiada).\
-    \ V - No que tange ao pedido relacionado aos ex-prefeitos (M\xE1rcia Coutinho\
-    \ Nogueira de Albuquerque, Jos\xE9 Jacob Gomes Brand\xE3o, F\xE1bio Rangel Nunes\
-    \ de Oliveira) que se encontram em liberdade, entendo que a situa\xE7\xE3o do\
-    \ paciente tamb\xE9m \xE9 diferente, uma vez que a decis\xE3o de origem da conta\
-    \ que existem indicativos de que o esquema tenha ocorrido em 80 (oitenta) prefeituras.\
-    \ VI - A partir da leitura da decis\xE3o prolatada pelos ju\xEDzes impetrados,\
-    \ verifica-se que o decreto de pris\xE3o n\xE3o \xE9 fundamentado apenas no risco\
-    \ de a liberdade do paciente atrapalhar as investiga\xE7\xF5es, mas tamb\xE9m,\
-    \ para, sobretudo, garantir a aplica\xE7\xE3o da lei penal pelo fato de o paciente\
-    \ ter foragido do distrito da culpa."
-- text: "APELA\xC7\xC3O C\xCDVEL. A\xC7\xC3O ORIGIN\xC1RIA DE USUCAPI\xC3O. JULGAMENTO\
-    \ ANTECIPADO DA LIDE. SENTEN\xC7A DE IMPROCED\xCANCIA AO PLEITO AUTORAL ANTE A\
-    \ AUS\xCANCIA DOS REQUISITOS DO ARTIGO 1238 DO C\xD3DIGO CIVIL/02. AUS\xCANCIA\
-    \ DE CITA\xC7\xC3O DO PROPRIET\xC1RIO DO BEM A SER USUCAPIDO. AUTOR COMPROVA POR\
-    \ DOCUMENTO EXPEDIDO PELA MUNICIPALIDADE O REGISTRO DO IM\xD3VEL USUCAPIENDO EM\
-    \ SEU NOME DESDE 1990. POSSIBILIDADE DO PREENCHIMENTO DO REQUISITO TEMPORAL (PRAZO\
-    \ PARA USUCAPIR) PREVISTO EM LEI A SER IMPLEMENTADO NO CURSO DA DEMANDA. OFENSA\
-    \ AO DEVIDO PROCESSO LEGAL MAT\xC9RIA DE ORDEM P\xDABLICA, RECONHECIDA DE OF\xCD\
-    CIO NO JU\xCDZO AD QUEM. NULIDADE DA SENTEN\xC7A COM RETORNO DOS AUTOS \xC0 ORIGEM\
-    \ PARA DAR SEGUIMENTO A INSTRU\xC7\xC3O COM PROLA\xC7\xC3O DE NOVA DECIS\xC3O."
+      verifyToken: eyJhbGciOiJFZERTQSIsInR5cCI6IkpXVCJ9.eyJoYXNoIjoiMmUyZjdjMTNiOGQ4OGJmZTg3MjU2MjczNDY0OWNhODNjZTIzYjhhOWFmZWI2M2Q4NTI3MjU1YzcwOWNiMDI0MCIsInZlcnNpb24iOjF9.DZoUcmXU7RWW_AGR5ezU7ZbM9YobJ5nzQSgrtLVJtZjd6bELzCyafbsCCJE1Uia7Uz0HcW1B1J6mbev_z6TlAg
 ---
 
 <!-- This model card has been generated automatically according to the information the Trainer had access to. You