al-jshen /
flashmap
Il nécessite torch et transformers 4.56 ou plus récent, et le service via SGLang ou vLLM demande une installation supplémentaire. Il s’utilise comme bibliothèque Python sur des modèles Hugging Face, le drafter étant chargé avec un modèle cible.
Résumé écrit par une IA à partir de la description et du README du dépôt.
Mis à jour il y a 15 min
+17 étoiles gagnées cette semaine
Étoiles gagnées chaque jour, sur 30 jours
4 oct.19 oct.Aujourd’hui
Cette semaine Avant
Sur GitHub
Flow Map Speculative Decoding
La description écrite par ses auteurs sur GitHub.
al-jshen / flashmap
Voir sur GitHub(nouvel onglet)