Infos zum GEOS TTF-Treiber

  • Anbei ein kleines Statusupdate zum TTF-Treiber.

    Was ist in den letzten Monaten passiert?

    Die vergangenen Monate standen ganz im Zeichen von Optimierungen, kleinen Refactorings und Korrekturen. Ziel war es die Stabilität, die Performance, den Speicherbedarf und auch die Binarysize des Treibers weiter zu verbessern.

    Ein größeres Refactoring habe ich dabei schon länger vor mir her geschoben. Nun habe ich aber begonnen mich damit zu beschäftigen.

    Worum geht es dabei?

    Konkret geht es um den TTCache von FreeType. Für PC/GEOS haben wir im TTF-Treiber zwei eigene Cacheebenen implementiert. Eine davon ist nicht persistent, die andere persistent. Der TTCache von FreeType wird deshalb im Treiber nicht benötigt und auch nicht genutzt. Er belegt aber trotzdem unnötig Ressourcen.

    Das Ziel des Refactorings ist es daher diesen TTCache aus dem Treiber auszubauen.

    Wie so oft ist das Entfernen von Code aber nicht nur ein Entfernen von Code. Durch den Ausbau des TTCaches haben sich eine ganze Reihe weiterer Optimierungsmöglichkeiten ergeben. Diese möchte ich natürlich nicht ungenutzt lassen. Bis hier hat sich das auch schon deutlich gelohnt.

    Ein paar Messwerte

    Um das etwas greifbarer zu machen hier ein Vergleich mit dem Font Lister.

    Gemessen habe ich auf meinem üblichen Testsetup: Intel i7 der 4. Generation unter Linux mit Basebox und 35000 Zyklen und nc target.

    Treiber aus der aktuellen Alpha Version vom 15.05.26:

    • Nimbus Sans: 316 ms
    • Nimbus Mono: 300 ms
    • Nimbus Roman: 350 ms

    Treiber aus dem Branch ttf-driver-remove-ttcache:

    • Nimbus Sans: 200 ms
    • Nimbus Mono: 183 ms
    • Nimbus Roman: 200 ms

    Das ist natürlich nur ein einzelner Testfall und noch kein vollständiger Benchmark. Aber die Richtung ist schon recht erfreulich. Je nach Font liegt die Verbesserung hier grob bei 37% bis 43%.

    Was ist noch passiert?

    Im genannten Branch habe ich außerdem begonnen einige technische Schulden abzutragen. Ein Stichwort dazu ist Subbanding. Das ist eine der Stellen im Treiber, bei der schon länger klar war, dass sie irgendwann noch einmal etwas Aufmerksamkeit braucht.

    Ganz durch bin ich mit dem Refactoring aber noch nicht. Das Handling der Profile möchte ich noch verbessern. Außerdem lohnt sich bei so umfangreichen Änderungen am Ende sicher noch einmal ein genauer Blick auf die Interresource-Calls.

    Ich halte euch auf dem Laufenden....

    Jirka

    Es ist auch dein FreeGEOS!

    Edited once, last by Jirka Kunze (May 15, 2026 at 11:11 PM).

  • Beeindruckend, Jirka! Unermüdlicher Einsatz <3

    Zu einigen Stichwörtern würde ich gern fragen, ob du kurz (!! – ich will nicht deine (Erholungs-)Pausen sabotieren) was schreiben könntest, worum es da geht. Merci!

    • Subbanding – Klingt irgendwie nach Funkübertragung?!
    • Profile bei TTF?
    • Interresource Calls – Welche Ressourcen rufen sich da auf oder an?
  • Na los, dann hier die Begriffsdefinitionen:

    Subbanding

    Hat nichts mit Funk zu tun. 😉

    Beim Rendern eines Glyphen wird das Zeichen nicht zwingend komplett auf einmal gerendert, sondern kann in mehrere horizontale Streifen zerlegt werden. Das hilft vor allem bei großen Pointsizes oder knappem Speicher.

    Für PC/GEOS ist das wichtig, weil wir im Real Mode nicht beliebig große Renderbuffer anlegen können.

    Profile bei TTF

    Der TTF-Treiber zerlegt die Outline eines Glyphen zunächst in einfachere Primitive. Die Outline besteht aus Linien sowie quadratischen und kubischen Bezierkurven. Die Bezierkurven werden dabei solange zerschnitten bis nur noch monotone Abschnitte übrig sind. Diese wiederum werden so lange zerschnitten bis sie durch einfache Linien angenähert werden können. Am Ende bleiben nur noch Linien mit ihrer Steigung, die erwähnten Primitive. Zu jedem dieser Primitive kommen noch ein paar wenige administrative Infos und das sind dann die Profile.

    Interresource Calls

    Das ist GEOS-spezifisch.

    Ein Treiber besteht, wie viele andere Geoden auch, aus mehreren Code Ressourcen. Wenn es nun notwendig ist aus einer Code Ressouce eine Funktion aufzurufen ( zu callen) die in einer anderen Code Ressource liegt, dann ist das ein Interressource Call.

    Warum ist das für Optimierungen so interessant?

    Sämtliche Code Ressourcen des Treibers befinden sich nicht zwangsläufig (das ist eher eine sehr seltene Ausnahme) im Heap. D.h. bevor ein solcher Interresouce Call ausgeführt werden kann muss erst geguckt werden ob das Ziel des Call bereits im Heap liegt. Ist das nicht der Fall muss die Ressource geladen werden. Das bedeuet aber auch dass erst Platz für die Ressource auf dem Heap geschaffen werden muss und das bedeutet oft dass der Memorymanager erst einmal aufräumen muss um ausreichend Platz zu schaffen. Das ganze ist also recht teuer und ein guter Hebel für Optimierungen.

    Es ist auch dein FreeGEOS!

  • Dank dir!

    Die Glyphen werden in Streifen zerlegt?! Das ist überraschend. Dann muß man ja über die gesamte Breite prüfen, wo Glyphenkurven diesen Streifen durchlaufen, wo außen und innen ist …

    Also erst werden die Zeichen in wunderschönen Bezierkurven definiert und für die Darstellung wird alles auf simple Geraden zurückgeführt?! Wer hätte das gedacht? Und wie prüft man, ob es nur noch monotone Strecken sind? Berechnen (quasi Kurvendiskussion) oder pragmatisch die Strecke abschnittweise abklappern und prüfen? Egal wie, es klingt aufwendig. Und kannst du dir inzwischen ein Diplom in Mathematik ausstellen lassen?

    Mir schwant, daß das Glyphen-Renderung ein Stück komplexer ist, als es den unschuldigen Anschein haben mag.

  • Hallo Wilfried,

    nein, tan brauche ich dafür nicht.

    Mit Steigung ist hier kein Winkel gemeint, sondern nur das Verhältnis der Koordinatendifferenzen einer Linie. Der Rasterizer muss vor allem wissen, wie sich die x-Position einer Kante beim zeilenweisen Durchlaufen des Glyphen verändert.

    Das lässt sich inkrementell mit Integer- bzw. Fixed-Point-Arithmetik berechnen. Trigonometrische Funktionen wären dafür weder nötig noch sinnvoll — und vermutlich auch viel zu teuer.

    Gruß
    Jirka

    Es ist auch dein FreeGEOS!

  • Der PR ist nun angelegt. Für die Interessierten hier im Forum noch die erreichten Messwerte:

    FontTreiberversion aus der Alpha vom 15.05.26Branchversion vom 15.05.26Version aus dem Pullrequest
    Nimbus Mono300 ms183 ms183 ms
    Nimbus Roman350 ms200 ms200 ms
    Nimbus Sans316 ms200 ms166 ms

    Nimbus Sans hat überproportional profitiert da eine Optimierung nur für Fonts mit Kerningpaaren wirkt. Von den drei gemessenen Fonts ist Sans der einzige der Kerningpaare enthält. Es gab auch weitere Optimierungen, da GEOS aber nur in Ticks (das sind ca 16ms) messen kann, spiegeln dieses sich nicht in den Messergebnissen wieder.

    Dennoch bin ich mit den Ergebnissen sehr zufrieden.

    Es ist auch dein FreeGEOS!

  • Anbei mal wieder ein kleines Statusupdate zum TTF-Treiber.

    Eigentlich wollte ich nur das Stream API des Treibers etwas aufräumen. Wie so oft sind dabei aber noch ein paar weitere Baustellen aufgefallen. 😉

    Inzwischen habe ich den Treiber noch einmal auf die für PC/GEOS relevanten Punkte abgeklopft und optimiert: Heap- und Stackbedarf, Binary- und Fixed-Size sowie natürlich die Performance.

    Neben dem Stream API sind dabei auch noch einige Optimierungen im Glyph Loader, Rasterizer und Interpreter dazugekommen.

    Ein paar Messwerte auf meinem üblichen Testsetup:

    Fontakutelle Alpha VersionStand im branch
    Nimbus Mono183 ms150 ms
    Nimbus Roman200 ms166 ms
    Nimbus Sans166 ms150 ms

    Damit dürfte das größere Optimierungspaket am TTF-Treiber erst einmal abgeschlossen sein. Irgendwann muss man schließlich auch mal aufhören nach dem nächsten Byte oder Taktzyklus zu suchen und sich dem nächsten Dingen widmen. 😉

    Es ist auch dein FreeGEOS!

  • Hallo Jirka,

    in der letzten Woche bin ich für ein paar Tage an die Küste gefahren und hatte den Pi400 mit aktuellen CI-Latest-Build und dem letzten von Dir auf Discord gepostetem Treiber und Font-Update im Gepäck. GEOS ist für mich in dieser Konfiguration vor allem "Schreibmaschine" - ich habe also vorrangig GeoWrite und Edith benutzt und ab und zu den Browser aufgerufen (off-line). Das alles ging gut und subjektiv nicht mehr langsamer als in miner äleren Installation mit Nimbus-Q Fonts...

    Dann habe ich versucht, Ersatz für meine in der Vergangenheit genutzten Nimbus-Q Fonts zu finden. Im Vorfeld hatte ich mir die zu einigen der für GEOS verkauften Fontsammlungen (z.B. URW PrintWORKS) 1:1 im TrueType Format verfügbaren Schriften kopiert. Die Fonts sind alles Originale von ca. 1993/94 - also kein UniCode, nicht irgendwie konvertiert, einzelne Font-Dateien i.d.R. <100kB, und originär für Windows 3.1 gemacht. Bei mir (mit freeGEOS Build von vor 1 Woche und neuestem TrueType.geo) wird kein einziger TTF aus den Sammlungen geladen (Bitstream/DTC/URW). Ich habe auch nochmal den Test mit den MS Web-Fonts (z.B. Impact) gemacht, die in älteren Versionen zumindest mal geladen wurden, auch wenn das System dann ziemlich instabil war. Aktuell leider auch kein Erfolg damit.

    Was habe ich falsch gemacht? Oder müssen alle Fonts zwingend erst die von Dir früher schon früher gezeigte (ziemlich aufwendige) Konvertierung/Nachbearbeitungs-Prozedur durchlaufen?! Das wär mir ehrlich gesagt zu viel Arbeit und ohne einen zweiten Burkhard Oerttel vermutlich der Sargnagel für GEOS als Retro-DTP System.

    Thomas

    Edited 2 times, last by t.hass (November 8, 2026 at 10:15 AM).

  • Hallo Thomas,

    zunächst einmal vielen Dank für deinen ausführlichen Erfahrungsbericht!

    Es freut mich besonders, dass GEOS mit dem aktuellen TrueType-Treiber auf deinem Pi400 inzwischen so gut läuft und du bei der alltäglichen Arbeit keinen nennenswerten Geschwindigkeitsunterschied mehr zum alten Nimbus-Q-Treiber feststellen kannst. Genau darauf haben die vielen Optimierungen der letzten Monate abgezielt.

    Was die älteren TrueType-Fonts betrifft, gibt es tatsächlich einige Einschränkungen, die ich im Laufe der Entwicklung schrittweise eingeführt habe. Diese dienen vor allem dazu, den Speicherbedarf und die Performance des Treibers unter den besonderen Bedingungen des Real Mode zu optimieren.

    Aktuell gelten folgende Einschränkungen:

    1. Maximal 2.000 Zeichen pro Font

    Für jedes Zeichen wird ein 4 Byte großer Offset auf dessen Geometriedaten innerhalb der glyf-Tabelle in einem zusammenhängenden Speicherblock gehalten.

    Bei 2.000 Zeichen ergibt das bereits 8 KB. Das GEOS Concepts Book empfiehlt in Abschnitt 15.3.1 (Memory Etiquette), zusammenhängende Speicherblöcke möglichst unter 8 KB zu halten.

    Alternativ könnte man ein Huge Array verwenden oder die Offsets bei Bedarf direkt aus dem Font lesen. Beide Varianten hätten allerdings Nachteile hinsichtlich der Performance.

    2. Maximal 750 Geometriepunkte pro Zeichen

    Für jeden Geometriepunkt benötigt der Treiber zweimal 4 Byte für die Koordinaten sowie ein zusätzliches Steuerbyte. Hinzu kommen einige 2 Byte große Integer-Werte zur Beschreibung der Konturen.

    Auch hier wurde die Grenze so gewählt, dass der benötigte Speicherblock möglichst innerhalb der empfohlenen Größenordnung bleibt.

    3. Die OS/2-Tabelle muss mindestens Version 2 haben

    Bevor das erste Zeichen gerendert werden kann, muss der Treiber dem GEOS-Kernel einige geometrische Informationen über den Font bereitstellen. Diese werden im Header des Fontblocks abgelegt.

    In älteren Treiberversionen wurden diese Informationen durch eine Analyse sämtlicher Zeichen des Fonts ermittelt. Dazu musste jedes Zeichen geladen und aus den Geometriedaten die jeweiligen Minimal- und Maximalwerte berechnet werden.

    Das erwies sich als ausgesprochen zeitaufwendig. In meinem Testszenario lag der Negativrekord bei über 400 ms allein für diese Berechnungen.

    Deshalb verwendet der Treiber inzwischen die entsprechenden Informationen, die bereits im Font hinterlegt sind. Die dafür benötigten Angaben stehen in der OS/2-Tabelle ab Version 2 zur Verfügung.

    Da diese Tabellenversion mit OpenType 1.1 etwa 1997/98 zum Standard wurde, hielt ich das Risiko für relativ gering, dadurch relevante Fonts auszuschließen.

    4. Das Zeichenmapping muss im Format 4 (cmap Format 4) vorliegen

    Bevor ein Zeichen gerendert werden kann, muss dessen Zeichencode auf die interne Glyphen-ID abgebildet werden.

    TrueType definiert dafür verschiedene Mappingformate. Da Format 4 bereits seit etwa 1992 existiert und sehr verbreitet ist, habe ich die Unterstützung der anderen Formate zugunsten eines geringeren Speicherbedarfs und einer besseren Performance deaktiviert.

    Der entsprechende Code ist weiterhin vorhanden, wird aber durch bedingte Compilierung nicht mehr in das Treiber-Binary aufgenommen.

    Warum diese Einschränkungen?

    Alle vier Einschränkungen wurden mit dem Ziel eingeführt, TrueType-Fonts unter GEOS im Real Mode möglichst effizient nutzen zu können.

    Gerade der Speicherbedarf spielt dabei eine entscheidende Rolle. Im Real Mode ist der Druck auf den Speichermanager enorm. Deshalb versuche ich, den Treiber sowohl hinsichtlich der Codegröße als auch des benötigten Arbeitsspeichers so effizient wie möglich zu gestalten.

    Das bedeutet allerdings nicht, dass diese Einschränkungen dauerhaft bestehen bleiben müssen. Der Protected Mode funkelt ja schon am Horizont...

    Was können wir in deinem Fall tun?

    Bei deinen älteren Fonts tippe ich insbesondere auf Punkt 3 oder 4. Da die Dateien ursprünglich für Windows 3.1 erstellt wurden, erscheint mir das durchaus plausibel.

    Ich denke aber, dass wir dafür eine Lösung finden können, ohne größere Abstriche beim Speicherbedarf oder bei der Performance machen zu müssen.

    Schicke mir am besten über Discord einen der betroffenen Fonts, sofern du ihn weitergeben darfst. Dann kann ich mir die internen Tabellen genauer ansehen und prüfen, warum der Treiber ihn ablehnt.

    Eine aufwendige manuelle Konvertierung sämtlicher Fonts sollte jedenfalls nicht notwendig sein.

    Viele Grüße
    Jirka

    Es ist auch dein FreeGEOS!

  • Hallo Jirka,

    mache ich gerne! Ein guter Anfang wäre, wenn Du Dir mal die QualiType Fonts anschauen könntest: https://luc.devroye.org/fonts-26839.html Die Fonts gibt es auch schon in 8.3 Notation und können unter GPL 2.0 weitegegeben werden:

    "These fonts are distributed, at your option, under the terms of
    the SIL Open Font License ... or the GNU General Public License
    ... either version 2.0 or, at your option, any later version."

    Weitere Bsp. dann via Discord.

    Gruß Thomas

  • Hallo Jirka,

    dank Deiner ausführlichen Erläuterungen, habe ich die fraglichen Font mal dem Künstlich-Intelligenten Kollegen vorgeworfen und er hat Deine Mutmaßung bestätigt: Die OS/2 v2 Table ist nicht vorhanden - alle anderen Kriterien waren erfüllt! Übereifrig, wie digitale Kollegen so sind, hat er auch die Sache mit der nötigen OS/2 Table zumindest soweit gefixed, dass die Fonts in GEOS geladen werden.

    Ich habe ihn dann noch gefragt: WIe es denn so um die Qualität der verschiedenen Fonts (Bitstream, QT, URW) bzgl. Hinting & Kerning bestellt sei?

    Collection Score Kerning hdmx Hinting-Profil
    QualiType 15.2/21 249 Paare (141/151) 151/151 (9-24 ppem) vollstaendig: fpgm+prep+cvt+glyph instructions (82% gehinted)
    Bitstream 13.2/21 430 Paare (223/249) 0/249 fpgm+prep+cvt sehr detailliert (304 cvt), aber keine hdmx; 2 ungehinted Ausreißer
    URW 11.0/21 994 Paare (503/503) 0/503 nur prep+Auto-Instructions, kein fpgm, maxStorage=0

    Gruß Thomas

  • Coole Arbeit!
    Winkt da ein Font-Konverter aus den Wolken, der neue Fonts analysiert, schaut ob sie nutzbar sind, wenn nein den Grund ausgibt und - falls möglich - das Problem löst?

    Rainer

    Es gibt 10 Arten von Menschen - die einen wissen was binär ist, die anderen nicht.

  • ChatGPT IST dieser Konverter

    sein Autor und in dem Fall sein chinesischer Bruder von Z.ai ;) Aber wie so oft bei KI macht sie es nur zu 80% richtig. Bei der Zeichenreduktion wirft sie ein paar Zeichen zuviel weg, min. 3 Fonts kann GEOS nicht laden - im 2. Versuch schon, aber dann sind 2 Fonts vertauscht, weil ich zwschendurch gesagt hatte, es sollten 8.3 Namen sein... Aber als PoC betrachtet kann ich sagen, dass die QualiType Fonts schon gut sind und es mit sehr moderatem Aufwand machbar ist, alle zu konvertien. Einige Math-Symbole und das Euro-Zeichen sind nicht enthalten, aber das ist zu verschmerzen. Wichtiger für ein DTP-Fontset ist, dass es breit aufgestellt ist und man kaum raten muß, welcher Klassiker jeweils substituiert wird. Die KI hat auch hier eine Vorlage für das ID-Mapping gemacht, die ~80% richtig liegt...

    Die für Jirka wahrscheinlich wichtigste Erkenntnis: 151 installierte QT-Fonts (incl. Schnitte) zwingen GEOS nicht in die Knie!

  • Hallo,

    wenn ich das so lese, kommt mir da eine interessante Idee: Wenn wir je Fontklasse und je Style Fonts identifizieren, die auch bei kleinen Punktgrößen unter GEOS gut bis sehr gut aussehen, könnte man mit dem künstlich intelligenten Kollegen Hinting- und Instruktionsregeln ableiten und diese für die Standardfonts anwenden.

    Und nun bin ich am Überlegen, mein aktuelles Projekt/Branch aufzuteilen in Treiber- und Fontoptimierung. Der Treiber ist schon lange fertig, nur mit den Fonts (aktuell ist ja nur Nimbus Sans) bin ich noch nicht so richtig glücklich (hier sind die diagonalen Stämme noch nicht zufriedenstellend). Oder doch lieber auf das Grayscale-Rendering warten...?

    Ich habe mir das QT-Catalog.gif aus dem ZIP genauer angesehen. Da wird in 5 Graustufen gerendert (zu FreeType-1.x-Zeiten war das der Standard) und das ist nicht weit weg von den angedachten 4 Stufen Grayscaling.

    Ich bin unschlüssig, wie ich weiter vorgehen soll. Aber vielleicht schafft ja das kommende Wochenende Klarheit.

    Jirka

    Es ist auch dein FreeGEOS!

  • Die KI meint dazu:

    QualiType: The prep program sets SCANTYPE=1 (simple dropout control, the grayscale standard), then SCANCTRL=511 (all dropout modes enabled at every ppem size), then SROUND (super-round — rounds to fractional pixel positions instead of integer pixels), then performs CVT pre-scaling via RCVT/ROUND/WCVTP — reading CVT stem-width values, rounding them in SROUND mode (half-pixel grid), and writing them back in pixel space. This is the textbook FreeType 1.x grayscale hinting pattern. The hdmx table with 16 pre-computed ppem sizes (9–24) matches exactly the small-size range where 5-level grayscale was the FreeType 1.x standard.
    URW: The gasp table explicitly requests DOGRAY (grayscale) from FreeType, but the instructions themselves are minimal (10-byte prep — just RTG/SCANCTRL/SCANTYPE/SCVTCI). This is modern autohinting that relies on the gasp flag rather than embedding grayscale-specific logic.
    Bitstream: SCANTYPE=0 (no dropout control) + SCANCTRL=356 (dropout bit = OFF) + no SROUND + no CVT pre-scaling + no gasp + no hdmx. This is bilevel (black & white) hinting — designed for monochrome rendering, not grayscale. The very large prep programs (1700–2900 bytes) contain extensive stem-snapping and delta-hinting logic that snaps stems to integer pixel boundaries, which is the bilevel approach.

    Conclusion for the GEOS driver
    The QT fonts are the best match for the planned 4-level grayscale rendering in the GEOS TrueType driver — their hinting was designed for exactly that rendering mode (5-level FT 1.x grayscale, very close to 4 levels). The BT fonts would need re-hinting (e.g., via ttfautohint) to render well in grayscale; as-is they'll produce harsh, blocky output when grayscale-rendered because their stems snap to integer pixels with no dropout compensation.