Download Game! Currently 98 players. Last logged in:XothSolvikAnakinUntapped

Blitzer's Blog >> 72601

Back to blogs index
Posted: 20 Sep 2026 17:00 [ permalink ]
KyllC$! Nyt se osui aivan nappiin! Lataamastasi kuvasta nC$kyy, ettC$ ratkaisu
on suorastaan oppikirjaesimerkki tC$ydellisestC$ kC$yttC6liittymC$n
segmentoinnista.
TC$mC$ on valtava harppaus kohti tC$ysin autonomista agenttia. TC$ssC$
analyysi siitC$, miksi tC$mC$ tulos on niin ratkaiseva:
 * Kohinan poisto: Selaimen vC$lilehdet ja URL-palkki ("qx", "user") on
rajattu pois hC$iritsemC$stC$, koska kerroimme koodille, mistC$ varsinainen
"tyC6pC6ytC$" alkaa.
 * Matemaattinen tarkkuus: VPP (Vertical Projection Profile) lC6ysi tismalleen
oikean, millintarkan linjan sivuvalikon ja chatin vC$liltC$ (X-koordinaatti
641).
 * Semanttinen konteksti: Koko oikeanpuoleinen sisC$ltC6alue on nyt siististi
otsikon ## Main Content / Active View (Frame_2) alla. Kun tekoC$ly lukee
tC$tC$, se tietC$C$ heti, ettei sen pidC$ yrittC$C$ lC$hettC$C$ viestiC$
"Antille" (joka on Frame 1:ssC$), vaan sen pitC$C$ operoida Frame 2:ssa.
 * Pohjakerroksen mukanaolo: Koska kC$ytimme ylhC$C$ltC$ alas -leikkausta
(top-down), AST-generaattori ei enC$C$ eksynyt tyhjC$C$n tilaan, vaan lC6ysi
myC6s alareunan chatin syC6ttC6kentC$n ja napit.
TC$mC$ generoitu Markdown-tuloste on nyt tC$ydellistC$ syC6tettC$ mille
tahansa kielimallille. Llama 3, Claude tai GPT-4 osaa lukea tC$tC$ suoraan ja
ymmC$rtC$C$ kC$yttC6liittymC$n hierarkian tC$ysin ilman HTML/DOM-puuta.
Miten jatkamme tC$stC$? MeillC$ on pari erinomaista vaihtoehtoa:
1. "Sweeper"-agentin rakentaminen (Interaktiivisuuden testaus)
Toteutetaan se aiemmin ideoimasi Pass 3. TehdC$C$n skripti, joka lukee tC$mC$n
listan lC$pi ja ohjaa X11-hiiren kC$ymC$C$n jokaisen lC6ydetyn Icon:n ja
Text:n pC$C$llC$ nopeasti. Jos hiiren kursori muuttuu (esim. normaalista
nuolesta hand2 eli "klikkaava sormi" -tilaan), elementti merkitC$C$n
AST-puuhun klikattavaksi napiksi (interactive: true). TC$mC$ karsii pois
kaikki koriste-ikonit (kuten ihmisten profiilikuvat).
2. TekoC$lyn (LLM) kytkeminen ohjaksiin
TehdC$C$n suoraan rajapinta, joka lC$hettC$C$ tC$mC$n Markdownin
kielimallille. KysytC$C$n siltC$ esimerkiksi: "Haluan lC$hettC$C$ tiedoston
tC$ssC$ avoimessa chatissa. Katso yllC$ olevaa UI-karttaa ja palauta sen
solmun (node) koordinaatit, jota minun pitC$C$ klikata." NC$emme heti,
pystyykC6 malli pC$C$ttelemC$C$n, ettC$ sen pitC$C$ etsiC$ alareunan
tuntumassa olevaa ikonia Frame 2:sta.
Kumpaan suuntaan haluat viedC$ HAUKI-GEM LABin arkkitehtuuria seuraavaksi?