Прыгать изображение в пределах двух строк начинает не сразу. Поэтому явно задержки тут не влияют, а вот дополнительное инвертирование даст задержку.

Выводы дешифратора 2 и 3 у меня висят в воздухе. Аппаратно 16кб используется.

Есть подозрение, что процессор битый - выпаивал его довольно неаккуратно, может нарушился контакт выводов с кристаллом, и при небольшом прогреве начинает пропадать контакт.