goon-foss/goon - Forgejo: Beyond coding. We forge.

goon-foss/goon

Fork 0

Commit graph

Author	SHA1	Message	Date
goon-foss	538a72107e	perf(clips): explore po podzapytaniu okna, kandydaci bez ORM i bez tagow, max(uuid) przez tekst Strona feedu spadla z 310-470 ms do 50-130 ms (srednio 85 ms na 30 stronach, 0 powtorek). Postgres nie ma max(uuid): koniec okna liczony po rzutowaniu na tekst (ten sam porzadek dla malych hex w stalym formacie).	2026-09-14 20:34:19 +02:00
goon-foss	0df2236b37	feat(clips): feed Swipe z afinicznoscia, pamiecia widzianych i telemetria (etap 3) Tabele per urzadzenie (migracja 0037): clip_seen (wykluczenie, wiersz przy podaniu klipu), clip_feed_events (append-only: impression z dwell, skip, complete, like, unlike, not_interested, autoswipe), clip_affinity (wagi tag/nisza/tworca w JSONB), clip_favorites, clip_blacklist. GIN na clips.niches. GET /clips/feed: kursor base64 {seed, pk, page} zamiast offsetu; 80% z puli afinicznosci (skany po tagu/niszy/tworcy od losowego uuid, punktacja sum wag + 0,3 ln(1+lajki) + swiezosc, max 2 klipy tworcy na strone) + 20% explore (okno 2000 id po PK, losowanie wazone lajkami, zawijanie na koncu). Bez wag 100% explore. POST /clips/events: zapis, podniesienie outcome, ulubione, delty wag (like +5, complete +3, dwell>=10 s +1, skip<2 s -1, not_interested -4 i -8 na wskazany cel). Onboarding 3 tapow, opcje, blacklista tag/nisza/tworca, reset feedu, ulubione. Import miedzy urzadzeniami kopiuje clip_seen, clip_favorites i clip_blacklist. Job clips-maintenance co 24 h: decay wag x0,97, retencja zdarzen 90 dni, reaper (HEAD na 2000 najdawniej sprawdzanych). Logika bez bazy w app/clips_feed.py z testami (kursor, delty, cap/decay, punktacja, sklad).	2026-09-14 20:29:49 +02:00
goon-foss	4f5de92bfc	feat(clips): tabele klipow do feedu Swipe + ingest RedGifs (etap 2) Nowy wertykal krotkich pionowych klipow tworcow, osobno od scen: inne kolumny (tworca, audio, lajki, nisze), inny cykl zycia, inna taksonomia, brak filtra 60 s. Tabele `clips` (unikalne source+source_id) i `clip_tags` z indeksem (tag, clip_id) pod skan po tagu od losowego uuid w przyszlym feedzie. Zrodlo nr 1: RedGifs, oficjalne API v2 z tokenem tymczasowym (zwiazany z IP i UA, na 401 odnowienie). Globalne `order=latest` bez search_text daje ~100 na strone, kazde zapytanie widzi maks. 10 000 wynikow, wiec katalog chodzi sie po niszach (skrypt backfillu). Pliki media.redgifs.com sa publiczne i bez podpisu (206 z VPS-a i z telefonu), do bazy wchodzi gotowy adres. Scheduler: job clips-latest co godzine (5 stron), zatrzymuje sie na stronie bez nowych. Reaper (HEAD, 403/404/410 -> dead_at) jako skrypt, upsert odzywia klip, ktory zrodlo znow podaje. API: GET /clips i /clips/stats do pilota; wlasciwy feed, pamiec widzianych i telemetria to etap 3. Sprawdzone tego dnia i odlozone: nsfwswipe (lustro v.redd.it, bez audio, stoi od 19.08), Pornhub Shorties (zrodlo nr 2, HLS z tokenem 2 h, Referer na segmentach, 0/110 performerow z kanonu).	2026-09-14 16:32:57 +02:00

Author

SHA1

Message

Date

goon-foss

538a72107e

perf(clips): explore po podzapytaniu okna, kandydaci bez ORM i bez tagow, max(uuid) przez tekst

Strona feedu spadla z 310-470 ms do 50-130 ms (srednio 85 ms na 30 stronach,
0 powtorek). Postgres nie ma max(uuid): koniec okna liczony po rzutowaniu na
tekst (ten sam porzadek dla malych hex w stalym formacie).

2026-09-14 20:34:19 +02:00

goon-foss

0df2236b37

feat(clips): feed Swipe z afinicznoscia, pamiecia widzianych i telemetria (etap 3)

Tabele per urzadzenie (migracja 0037): clip_seen (wykluczenie, wiersz przy
podaniu klipu), clip_feed_events (append-only: impression z dwell, skip,
complete, like, unlike, not_interested, autoswipe), clip_affinity (wagi
tag/nisza/tworca w JSONB), clip_favorites, clip_blacklist. GIN na clips.niches.

GET /clips/feed: kursor base64 {seed, pk, page} zamiast offsetu; 80% z puli
afinicznosci (skany po tagu/niszy/tworcy od losowego uuid, punktacja
sum wag + 0,3 ln(1+lajki) + swiezosc, max 2 klipy tworcy na strone) + 20%
explore (okno 2000 id po PK, losowanie wazone lajkami, zawijanie na koncu).
Bez wag 100% explore. POST /clips/events: zapis, podniesienie outcome,
ulubione, delty wag (like +5, complete +3, dwell>=10 s +1, skip<2 s -1,
not_interested -4 i -8 na wskazany cel). Onboarding 3 tapow, opcje,
blacklista tag/nisza/tworca, reset feedu, ulubione. Import miedzy
urzadzeniami kopiuje clip_seen, clip_favorites i clip_blacklist.

Job clips-maintenance co 24 h: decay wag x0,97, retencja zdarzen 90 dni,
reaper (HEAD na 2000 najdawniej sprawdzanych). Logika bez bazy w
app/clips_feed.py z testami (kursor, delty, cap/decay, punktacja, sklad).

2026-09-14 20:29:49 +02:00

goon-foss

4f5de92bfc

feat(clips): tabele klipow do feedu Swipe + ingest RedGifs (etap 2)

Nowy wertykal krotkich pionowych klipow tworcow, osobno od scen: inne kolumny
(tworca, audio, lajki, nisze), inny cykl zycia, inna taksonomia, brak filtra
60 s. Tabele `clips` (unikalne source+source_id) i `clip_tags` z indeksem
(tag, clip_id) pod skan po tagu od losowego uuid w przyszlym feedzie.

Zrodlo nr 1: RedGifs, oficjalne API v2 z tokenem tymczasowym (zwiazany z IP
i UA, na 401 odnowienie). Globalne `order=latest` bez search_text daje ~100
na strone, kazde zapytanie widzi maks. 10 000 wynikow, wiec katalog chodzi
sie po niszach (skrypt backfillu). Pliki media.redgifs.com sa publiczne i bez
podpisu (206 z VPS-a i z telefonu), do bazy wchodzi gotowy adres.

Scheduler: job clips-latest co godzine (5 stron), zatrzymuje sie na stronie
bez nowych. Reaper (HEAD, 403/404/410 -> dead_at) jako skrypt, upsert
odzywia klip, ktory zrodlo znow podaje. API: GET /clips i /clips/stats do
pilota; wlasciwy feed, pamiec widzianych i telemetria to etap 3.

Sprawdzone tego dnia i odlozone: nsfwswipe (lustro v.redd.it, bez audio,
stoi od 19.08), Pornhub Shorties (zrodlo nr 2, HLS z tokenem 2 h, Referer
na segmentach, 0/110 performerow z kanonu).

2026-09-14 16:32:57 +02:00

3 commits