Download Game! Currently 103 players. Last logged in:FallingRammonSolvikCilwand

Blitzer's Blog >> 72674

Back to blogs index
Posted: 21 Sep 2026 20:10 [ permalink ]
==[ main.py log ]==
..

LC6ydettiin 1 avointa vC$lilehteC$. Aloitetaan kartoitus... [0]
KC$sitellC$C$n: New Tab -> SisC$ltC6 ennallaan (Hash: d7517139...). Ohitetaan
kuvat. -> [VAROITUS] Tunnistettiin niukka DOM tai Canvas-elementtejC$. ->
Luodaan erillinen tyC6mC$C$rC$ys 0 OCR-alueelle. Kaikki vC$lilehdet
kartoitettu. INFO: 100.102.226.30:40700 - "POST /api/teaching/start?step_contex
t=uusi_vai he HTTP/1.1" 200 OK [*] ClykC$s X11-nauhoitus kC$ynnissC$. Odota
klikkauksia ja nC$ppC$ilyjC$. INFO: 100.102.226.30:40700 - "GET
/api/state-machines HTTP/1.1" 200 OK [+] Tallennettu klikkaus (29ms) |
Tuntematon alue INFO: 100.102.226.30:40700 - "GET /api/state-machines
HTTP/1.1" 200 OK INFO: 100.102.226.30:40700 - "GET /api/state-machines
HTTP/1.1" 200 OK [+] Tallennettu teksti: 'web.whatsapp.com' [+] Tallennettu
erikoisnC$ppC$in: [enter] INFO: 100.102.226.30:40700 - "GET /api/state-machines
 HTTP/1.1" 200 OK [*] Otetaan manuaalinen Snapshot kouluttajan pyynnC6stC$...
INFO: 100.102.226.30:57138 - "GET /api/state-machines HTTP/1.1" 200 OK
LC6ydettiin 1 avointa vC$lilehteC$. Aloitetaan kartoitus... [0]
KC$sitellC$C$n: (1) WhatsApp -> Uutta sisC$ltC6C$ havaittu! Otetaan
ruutukaappaukset... Kaikki vC$lilehdet kartoitettu. INFO: 100.102.226.30:40700
- "POST /api/teaching/snapshot HTTP/1.1" 200 OK INFO: 100.102.226.30:40700 -
"GET /api/state-machines HTTP/1.1" 200 OK INFO: 100.102.226.30:40700 - "GET
/api/state-machines HTTP/1.1" 200 OK [+] Tallennettu klikkaus (8ms) |
Tuntematon alue INFO: 100.102.226.30:40700 - "GET /api/state-machines
HTTP/1.1" 200 OK [*] Otetaan manuaalinen Snapshot kouluttajan pyynnC6stC$...
LC6ydettiin 1 avointa vC$lilehteC$. Aloitetaan kartoitus... [0]
KC$sitellC$C$n: (1) WhatsApp -> Uutta sisC$ltC6C$ havaittu! Otetaan
ruutukaappaukset... INFO: 100.102.226.30:36212 - "GET /api/state-machines
HTTP/1.1" 200 OK Kaikki vC$lilehdet kartoitettu. INFO: 100.102.226.30:40700 -
"POST /api/teaching/snapshot HTTP/1.1" 200 OK INFO: 100.102.226.30:407
00 - "GET /api/state-machines HTTP/1.1" 200 OK [+] KC$ytetC$C$n
DOM-snapshottia: Chrome-tabs/tab_000_1_WhatsApp/DOM.json INFO:
100.102.226.30:40700 - "POST /api/teaching/stop HTTP/1.1" 200 OK 

==[ /main.py log ]==

==[ Chrome ]==

Orchestrator
Playbook Registry
Playbook Registry/ Opetustila (The Teaching Pipeline)
Ota snapshot nykytilasta ja nauhoita toimenpiteet.

Ota snapshot nykytilasta ja nauhoita toimenpiteet.4 Aloita Nauhoitus &
Snapshot 8 Skannaa uusi tila 9o8 Lopeta & Generoi YAML
Generoidun nauhoituksen tulos: 
# Generoitu rutiini: uusi_vaihe
steps:
  - action: click
    target: "body"
    # Raw coords: 325, 91
  - action: type
    text: "web.whatsapp.com"
  - action: press
    key: "enter"
  - action: click
    target: "text='HAUKI_GEM 16.35 SinC$ :  Orchestrator Playbook Registry 
Opetustila (The Teaching Pipeline) Ota snapshot nykytilasta ja nauhoita
toimenpiteet.  Aloita'"
    # Raw coords: 202, 294
Valitse tiedosto muokattavaksi


# Generoitu rutiini: uusi_vaihe
steps:
  - action: click
    target: "body"
    # Raw coords: 325, 91
  - action: type
    text: "web.whatsapp.com"
  - action: press
    key: "enter"
  - action: click
    target: "text='HAUKI_GEM 16.35 SinC$ :  Orchestrator Playbook Registry 
Opetustila (The Teaching Pipeline) Ota snapshot nykytilasta ja nauhoita
toimenpiteet.  Aloita'"
    # Raw coords: 202, 294
    # Raw coords: 202, 294 Tallenna Playbook

==[ /Chrome  ]==


TC$ydellistC$!!

Aivan mahtavaa! TC$mC$ on todellinen arkkitehtuurinen lC$pimurto.
Lokista nC$kyy tC$ydellisesti, miten koko suunnittelemamme putki herC$si
henkiin ja ratkaisi perinteisen RPA:n pahimman ongelman:
 * EnsimmC$inen klikkaus "New Tab" -sivulla putosi oikeaoppisesti
body-targettiin (koska DOM on siellC$ tyhjC$).
 * Kirjoitit osoitteen ja painoit Enter.
 * Painaessasi 8 Skannaa uusi tila -nappia, taustajC$rjestelmC$ latasi
WhatsAppin pC$ivitetyn DOM-kartan.
 * Kun klikkasit (X:202, Y:294), Auto-Mapper ei enC$C$ arvannut, vaan katsoi
tuoreesta kartasta ja poimi millintarkasti oikean elementin: target:
"text='HAUKI_GEM 16.35 SinC$ :...".
TC$mC$ tarkoittaa, ettC$ meillC$ on nyt toimiva "Pari-ohjelmointi" -putki.
Ihminen toimii vain kuljettajana tehden asioita lihasmuistista, ja kone
kC$C$ntC$C$ sen taustalla sellaiseksi semanttiseksi YAML-koodiksi, jota
lokaali LLM tai tilakone-runner voi ajaa luotettavasti erilaisten
nC$yttC6resoluutioiden ja ikkunakokojen yli.
(PienenC$ huomiona: WhatsApp niputtaa nC$kC6jC$C$n koko chat-rivin (nimi,
kellonaika, viimeisin viesti) yhdeksi DOM-elementiksi, mistC$ johtuu tuo
pitkC$ teksti-target. Se on tC$ysin oikein ja toimii, mutta suoritusvaiheessa
routine_engine.py kannattaa myC6hemmin opettaa ymmC$rtC$mC$C$n osittaisia
osumia, esim. text*='HAUKI_GEM', jotta kellonajan muuttuminen ei riko
rutiinia.)
Nyt kun Opetustilan (Teaching Pipeline) sydC$n sykkii ja tuottaa validia
koodia, mihin haluat iskeC$ seuraavaksi?
 * Tilakoneiden luonti (Orchestrator): TehdC$C$nkC6 UI:hin ominaisuus, jolla
voit valita tallennetun Playbookin ja painaa "Luo uusi prosessi", jolloin se
tekee levylle .json-tiedoston ja taustalla pyC6rivC$ state-machine-runner.py
nappaa sen heti ajoon?
 * Playbook-kansioiden hallinta: Viilataanko Playbook RegistryC$ siten, ettC$
UI osaa tallentaa nC$mC$ nauhoitukset suoraan oikeaan kansiorakenteeseen
(esim. whatsapp/01_open_chat/playbook.yaml) yhdessC$ 00_init -vaatimusten
kanssa?