• FuzzChef
    link
    fedilink
    Deutsch
    arrow-up
    2
    ·
    6 days ago

    Meta hat gestern erst ein Paper zu Byte Latent Transformern veröffentlicht, das beachtliche Fortschritte bei der Ablösung von Tokenisierung aufzeigt. Tokenisierung ist derzeit noch eine Herausforderung für mehrsprachige Modelle, weil die Zerlegung nicht sprachangepasst ist.