Мда. интересно ты размышляешь.
В реальности, такие процессоры не содержат внутреннего frame-буфера. И не содержат даже буфер для строки.
Вкратце процессы происходящие в нем напоминают формирование мультиколора на спектруме. То есть видеоконтроллер должен выдать на RGB-пушки определенный цвет - он его берет на лету. Внутри есть регистры положений спрайтов. Эти регистры тупо хардварно, жестко вшито преобразуются в _адреса_ откуда данные брать из ROM. Вот и всё. приоритет жесткий, по номерам спрайтов. Если ты знаком с архитектурой контроллера КР580ВГ75 - то это нечто в этом духе.
В журнале "радио" ВГ75-ая была раскидана на комплектуху.