V posledních dnech jsme byli postaveni před úkol, který by bez podpory umělé inteligence zabral týdny ruční práce: analyzovat, shrnout a kategorizovat tisíce webových stránek. Původně jsme k tomuto účelu chtěli použít model GPT-4, ale náklady by se rychle vyšplhaly do neúnosných výšin. Pak jsme objevili nové modely řady 4.1 - konkrétně 4.1-nano a 4.1-mini - a náš projekt dostal zcela nový rozměr.
Obří kontext (1 000 000 tokenů): umožňuje modelu zpracovávat celé bloky textu najednou, aniž by došlo ke ztrátě kontextu.
Nízké náklady: Zpracovali jsme více než 30 milionů tokenů za pouhé 3 dolary.
Rychlost: Optimalizace pro paralelní dávkové zpracování výrazně snižuje dobu odezvy.
4.1-nano: Levné prototypování a rychlá hrubá sumarizace (např, 10 000 stránek za ~2 USD).
4.1-mini: Vyšší přesnost pro detailní zpracování a analýzu (5 M tokenů za ~1 USD).
Hrubá sumarizace více než 2 000 stránek za méně než hodinu za přibližně ~1 USD (4.1-mini: Vyšší přesnost pro detailní zpracování a analýzu, např.
Detailní zpracování a analýza ~2 USD (4.1-mini).
S ChatGPT 4.1-nano a 4.1-mini jsme přešli od potenciálně nákladného ručního zpracování k rychlé, levné a plně automatizované pipeline. Tento nástroj nám šetří čas i peníze a stává se nepostradatelným nástrojem pro analýzu velkých objemů textu.