Formato dati parco di token | Dweve HEDL

Choose the audience that matches your question

The page contains three selectable readings of the same subject.

HEDL. Un formato dati efficiente in termini di token

HEDL (Hierarchical Entity Data Language) è un formato dati testuale open-source ed efficiente in termini di token, con licenza Apache 2.0, per LLM e record strutturati. Il suo reader, writer, validatori e server in Rust mantengono il formato ispezionabile e reversibile.

HEDL (Hierarchical Entity Data Language) è un formato tabellare open-source ed efficiente in termini di token, con licenza Apache 2.0, per richieste LLM. Inizia localmente con cargo add hedl; le etichette ripetute scompaiono mentre la conversione rimane locale e reversibile. In una misurazione, 500 record piatti erano più piccoli del 48,7% rispetto a JSON minificato.

HEDL (Hierarchical Entity Data Language) è un formato testuale open-source con licenza Apache 2.0 per liste inviate a LLM. Scrive le etichette delle colonne una volta in cima, poi mantiene gli stessi fatti in ogni riga.

Aggiungi la libreria Rust con cargo add hedl oppure installa la CLI con cargo install hedl-cli. Esegui il reader localmente e ispeziona i byte tu stesso.

Una pipeline di parsing addressable per contenuto.

Recupero sub-millisecondo per prompt più ricchi.

Orchestrazione multi-agente con HEDL ovunque.

Il corpus di benchmark e la metodologia sono inclusi nel repository.

più risposte corrette per token rispetto a JSON

Più alto è meglio. HEDL restituisce 2,4 volte più risposte corrette per token rispetto a JSON.

Più alto è meglio. HEDL estrae l'80,4%, 10,3 punti sopra JSON.

Più breve è meglio. HEDL trasporta le stesse risposte con il 56% di token in meno rispetto a JSON.

JSON · YAML · XML · CSV · Parquet · TOON

48,7% più piccolo rispetto al JSON minificato in questa esecuzione

Conversione bidirezionale e senza perdite. Le stesse semantiche dei dati, codificate in modo più denso, ripristinate esattamente.

Un proxy sostitutivo. Rimuovilo e il tuo stack torna al semplice JSON, senza migrazioni da annullare.

Il core Rust ha zero dipendenze e nessun codice non sicuro; gli strumenti distribuiti mantengono esplicite le loro dipendenze runtime.

Nessun fornitore si interpone nel percorso. La conversione avviene localmente, quindi i record non lasciano mai la tua infrastruttura.

Entrambe le lettere arrivano nello stesso posto

Un pugno di funzionalità AI usate con costanza.

Estrazione in blocco fatturata a volume.

stessi dati, 56 percento di token in meno

Le cifre seguono il riferimento pubblicato: un servizio a 1 miliardo di token al mese risparmia 1.680 dollari al mese.

Non inizi mai nulla di tutto questo. Accade da solo, ogni volta che un assistente è al lavoro, qualunque di queste cose tu stia facendo.

HEDL cambia solo la forma del messaggio per il viaggio di andata e ritorno. Ciò con cui inizi torna esattamente lo stesso, senza nulla aggiunto e senza nulla perso.

Chiedi all'assistente di prendere qualcosa in una forma e restituirtela in un'altra, ordinata e pronta all'uso.

Un elenco semplice ripete le stesse piccole etichette su ogni riga. HEDL scrive le etichette una volta in cima, poi solo le voci, così l'elenco richiede molte meno parole da inviare.

Chiedi all'assistente di scorrere un lungo elenco, un elenco di nomi, ordini o appuntamenti, e di sistemarlo.

Un documento lungo è un sacco di parole da inviare. Ripiegato alla maniera di HEDL, ce ne sta il doppio in una volta sola, così l'assistente vede più pagina in una volta.

Consegni all'assistente una lunga lettera o relazione e gli chiedi di estrarre le parti che ti interessano.

Dietro le quinte, l'assistente ha dovuto leggere molti retroscena prima. HEDL li ripiega in piccolo, così legge la stessa cosa con molto meno da digerire.

Scrivi una domanda in uno di quegli assistenti AI e lui risponde in un attimo.

Stessa risposta, detta con meno parole. Tutto qui.

Puoi trasformare il modo breve di nuovo nel modo lungo in qualsiasi momento, parola per parola.

Ti chiedi se potrai mai riavere la versione completa se ti serve.

Non viene tralasciato nulla. Il modo breve porta esattamente lo stesso significato del modo lungo.

Temi che dire le cose in modo più breve possa tralasciare qualcosa o cambiare il significato.

Lo stesso messaggio, detto con molte meno parole, così alla fine il conto è più basso.

Ogni parola che l'assistente legge viene pagata, anche le parole che ripete all'infinito.

Dimensione file misurata · 500 record piatti

Si posiziona davanti ai tuoi strumenti di intelligenza artificiale e converte al limite. I tuoi sistemi esistenti continuano a inviare e ricevere i formati che già utilizzano.

I tuoi database, report e fogli di calcolo vedono le stesse strutture di prima. Il formato più denso esiste solo nel viaggio verso e dal modello.

Sette formati entrano ed escono attraverso lo stesso ponte senza perdite; la rappresentazione compatta esiste solo attorno alla chiamata al modello.

importazione ed esportazione in entrambe le direzioni

I tuoi strumenti di intelligenza artificiale

Il modello riceve la versione densa. Il tuo stack continua a parlare i formati che ha sempre usato.

56 percento in meno di token nel viaggio

Un convertitore drop-in si posiziona tra i tuoi sistemi e il modello.

risparmiati al mese con un miliardo di token passando da JSON a HEDL.

sprecati per chiamata API su chiavi ripetute per un dataset di 10.000 utenti.

Schema una volta. Poi solo i dati, separati da virgole.

Ora moltiplica i byte strutturali per diecimila record.

passa il mouse su una parte per isolarla

I valori che intendevi davvero inviare. In HEDL, questo è quasi tutto ciò che rimane.

Una coppia di virgolette attorno a ogni stringa, anche a quelle non ambigue.

Parentesi graffe e quadre che marcano una struttura che lo schema già conosce.

Gli stessi nomi di campo, "id", "name", "role", pagati di nuovo su ogni singolo record.

Un unico livello compatto si trova prima del modello mentre il resto del tuo stack continua a parlare JSON.

Parla HEDL al modello e JSON semplice ai tuoi sistemi, quindi il resto del tuo stack non cambia. Rimuovilo e sei esattamente dove avevi iniziato.

La conversione può essere eseguita sui tuoi server, in una regione UE, o completamente offline senza un servizio esterno nel percorso.

La riduzione dei token, l'accuratezza delle risposte e i round trip senza perdite vengono misurati su dataset reali prima del lancio.

Inseriscilo prima di un workflow, confronta il risultato, poi espandi solo dove conviene.

HEDL è un piccolo componente che rende più economici da eseguire gli assistenti AI, senza cambiare ciò che ti rispondono. Non lo installi, non lo configuri e non devi capirlo. Ecco la versione breve di ciò che promette.

Puoi smettere di preoccuparti di questa parte.

Poiché dice la stessa cosa con meno parole, gli assistenti che lo usano costano meno da eseguire.

Ogni messaggio compatto viene ripristinato e controllato prima che l'assistente lo usi, quindi nulla scompare per strada.

Cambia solo il modo in cui il messaggio viene piegato per l'invio. Il significato rimane esattamente lo stesso.

Non vedi mai HEDL né lo tocchi. Sta dietro all'assistente AI e fa il suo lavoro da solo.

Se non sei ancora sicuro, va bene. Non devi mai toccare HEDL perché faccia il suo lavoro.

Tocca una domanda per leggere la risposta semplice. Non ci sono domande sbagliate da fare.

Le domande che le persone fanno per prime

Gli assistenti che usi costano denaro per funzionare, contato un po' come una bolletta telefonica a parole. Dire la stessa cosa con meno parole significa una bolletta più piccola, il che rende questi assistenti più economici da offrire.

Ogni messaggio compatto viene ripristinato e controllato prima di essere utilizzato. Se la versione completa non torna esattamente, la conversione fallisce invece di perdere silenziosamente una parte.

Come faccio a sapere che non va perso nulla?

Sì. Il modo breve si ripiega nel modo lungo ogni volta che serve, parola per parola, senza aggiungere nulla e senza perdere nulla. È come piegare una lettera per spedirla, poi spiegarla per leggerla.

La versione completa può essere sempre recuperata?

No. Cambia solo il modo in cui il messaggio viene piegato per il viaggio verso l'assistente e ritorno. Il significato rimane esattamente lo stesso, quindi la risposta che leggi è quella che avresti ricevuto comunque.

Potrebbe cambiare la risposta che ricevo?

No. Non c'è nulla da scaricare, attivare o imparare. HEDL sta dietro agli assistenti AI che altri costruiscono, e fa il suo lavoro da solo. Non lo vedrai mai.

Non devi installare nulla né capire nulla di tutto questo. Funziona silenziosamente in background, così gli assistenti che usi costano meno e restano altrettanto chiari.

Immagina di scrivere lo stesso indirizzo su cento buste. Potresti scrivere l'indirizzo completo ogni volta. Oppure potresti scriverlo una volta sola, e poi solo il numero civico sulle altre. Le lettere arrivano comunque. Hai semplicemente scritto di meno. Questa è l'idea alla base di HEDL.

Puoi trasformare la forma abbreviata di nuovo in quella estesa quando vuoi, parola per parola, senza che nulla cambi. Come piegare una lettera per farla stare in una busta, e poi spiegarla più tardi per leggerla.