SEO i AI pretraga: šta novi sajt mora da omogući

Kada pravim novi sajt, više ne proveravam samo kako izgleda u browseru i da li Google može da ga indeksira. Proveravam i nešto manje vidljivo: da li sistemi koji pronalaze izvore za AI odgovore uopšte mogu da pristupe stranici, razumeju čime se firma bavi i pronađu tekst koji vredi navesti kao izvor. To nije obećanje da će ChatGPT preporučiti sajt. To je osnovni uslov da sajt ne ispadne iz razmatranja zbog odluka koje smo sami doneli pri izradi.
Prvo rešavam podobnost, ne „AI optimizaciju“
Stranica ne postaje izvor za AI odgovor zato što na nju dodam oznaku „optimizovano za AI“. Prvo mora da bude dostupna odgovarajućem crawleru, a za Googleove AI funkcije mora da bude indeksirana i podobna za prikaz u pretrazi sa isečkom teksta. Tek posle toga ima smisla razgovarati o kvalitetu njenog sadržaja.
Ovo je važna razlika kada domaća firma naručuje novi sajt. Često čujem zahtev: „Hoćemo da nas ChatGPT preporučuje.“ Ja ga prevodim u pitanja koja mogu da proverim:
- Da li relevantni crawleri mogu da pristupe javnim stranicama?
- Da li su te stranice dostupne kao stvaran tekst, a ne samo kao sadržaj koji korisnik vidi posle interakcije?
- Da li pretraživač može da ih otkrije kroz navigaciju i interne linkove?
- Da li svaka važna stranica jasno odgovara na konkretno pitanje potencijalnog kupca?
Prema OpenAI uputstvu za pretragu u ChatGPT-u, za pristup nije dovoljno samo dozvoliti OAI-SearchBot u robots.txt; treba propustiti i zahteve sa objavljenih IP opsega tog crawlera. Ista dokumentacija ne obećava poziciju u rezultatima samo zato što je pristup dozvoljen.
Za Google je polazna tačka još jasnija. Googleova dokumentacija za AI funkcije pretrage kaže, u mom prevodu, da za pojavljivanje u AI Overviews ili AI Mode nisu potrebni „posebni strukturirani podaci niti nova AI tekstualna datoteka“. Potrebna je stranica koja ispunjava uslove za klasičnu pretragu i čiji sadržaj Google može da koristi kao prateći link.
Zato AEO, optimizaciju za odgovore AI sistema, ne tretiram kao zamenu za SEO. Tretiram ga kao dodatni test kvaliteta tehničke osnove i samog odgovora na stranici.
Proveravam šta crawler zaista dobija
Ispravan robots.txt ne dokazuje da crawler može da pročita stranicu. Između URL-a i sadržaja stoje CDN, firewall, zaštita od botova, redirekcije, autentifikacija i način na koji aplikacija renderuje tekst. Svaki od tih slojeva može da prekine put, iako se stranica meni normalno otvara.
Za javni deo sajta, početna provera pravila može da izgleda ovako:
User-agent: OAI-SearchBot
Allow: /
Ovo je primer namere, ne univerzalna konfiguracija koju treba nalepiti na svaki domen. Ne bih dozvolio pristup privatnim rutama samo da bih „poboljšao AEO“. Takođe, ovo pravilo ne rešava problem ako bezbednosni sloj odbija zahteve pre nego što stignu do aplikacije. Za OpenAI crawler proverio bih i pravila za njegove objavljene IP opsege prema zvaničnom uputstvu.
Na projektu bih zatim prošao sledeći redosled:
- Otvorio bih javni URL bez prijave i proverio konačni odgovor posle redirekcija.
- Pogledao bih HTML koji server vraća, ne samo tekst koji vidim u browseru posle izvršavanja JavaScript-a.
- Proverio bih
robots.txt, pravila za indeksiranje na stranici i da li postoje bezbednosne blokade za relevantne crawlere. - Prošao bih interne linkove od početne stranice do ključne usluge ili teksta.
- Uporedio bih ono što je dostupno crawleru sa onim što korisnik zaista vidi.
Kod Next.js sajta ovo poslednje ume da otkrije neprijatnu razliku. Ako je opis usluge dostupan tek kada se učita klijentska aplikacija, klikne tab ili završi dodatni zahtev, ne bih pretpostavio da ga svaki sistem za pronalaženje izvora vidi jednako. Važan odgovor stavljam u stabilan, javno dostupan tekst stranice; interakcije ostavljam za ono čemu su stvarno potrebne.
Sitemap bih dodao radi otkrivanja URL-ova, ali ga ne bih predstavljao kao prečicu do rezultata. Google izričito navodi da sitemap ne garantuje indeksiranje niti poboljšava rangiranje. Isto važi za pokušaj da se proces ubrza prijavom URL-a preko IndexNow: prijava ne garantuje indeksiranje.
Stranica mora da odgovori na pitanje, ne samo da opiše firmu
Jasan sadržaj koji odgovara na konkretno pitanje može pomoći da stranica bude koristan izvor. Generička stranica usluge sa rečenicama poput „nudimo inovativna rešenja prilagođena vašim potrebama“ ne objašnjava ni šta firma radi, ni kome to odgovara, ni gde su granice usluge.
Kada oblikujem sadržaj, ne krećem od pitanja „koju ključnu reč da ponovimo?“. Krećem od situacije u kojoj bi čitalac, bilo na Googleu ili u AI asistentu, tražio odluku. Recimo da regionalna firma razmatra automatizaciju obrade upita. Korisnija stranica bi jasno razdvojila:
- koji deo procesa može da se automatizuje, a gde ostaje ljudska provera;
- koje sisteme treba povezati i ko je vlasnik podataka;
- šta se dešava kada integracija ili LLM ne odgovori;
- kako se meri da li automatizacija štedi rad, a ne samo premešta posao.
Takav tekst ima vrednost i kada nikada ne bude citiran u AI odgovoru. Čitalac može da proceni da li se usluga odnosi na njegov problem. To mi je bolji kriterijum od pisanja pasusa koji zvuče kao da su namenjeni isključivo modelu.
Na sopstvenim projektima izgradio sam BizFlowAI ContentStudio, sistem koji istražuje teme, piše, optimizuje i objavljuje sadržaj na više sajtova. Najvažniji deo tog rada nije samo generisanje teksta. To je odluka koje pitanje stranica rešava. Objavljeni odgovor treba proveriti po dostupnosti i korisnosti. Automatizacija može da ubrza proizvodnju, ali može jednako brzo da proizvede mnogo stranica bez razloga za postojanje.
Zato ne bih dodavao FAQ blok na svaku stranicu samo zbog pretpostavke da ga AI „voli“, niti bih uvodio llms.txt kao uslov za vidljivost. Ako format pomaže stvarnom čitaocu, ima smisla. Ako postoji samo kao ritual za neproverenu prednost, radije bih vreme potrošio na jasniji odgovor i bolju arhitekturu sajta.
Objavu vezujem za povratnu informaciju iz pretrage
AEO ne bih vodio kao jednokratan zadatak pred lansiranje sajta. Stranica može biti tehnički dostupna, ali da cilja pogrešno pitanje; može dobijati prikaze, ali ne i klikove; može biti citirana bez posete. Zato mi treba petlja koja razdvaja otkrivanje, citiranje i stvaran dolazak korisnika.
U sopstvenom radu sam gradio sadržajnu petlju koja meri učinak u pretrazi, uči iz njega, bira sledeću temu, generiše i objavljuje. To ne znači da metrika automatski govori šta treba napisati. Ona je signal za proveru hipoteze.
Ako stranica ima prikaze, a čitaoci je zaobilaze, pogledao bih da li naslov i opis obećavaju isti odgovor koji se nalazi na stranici. Ako se stranica pojavljuje za upite koji nisu povezani sa uslugom, proverio bih da li je namera teksta previše široka. Ako nema vidljivosti, najpre bih proverio indeksiranje, interne linkove i da li tema uopšte odgovara pitanju koje ciljna publika postavlja. Ne bih odmah objavio još nekoliko sličnih tekstova.
Za novi sajt mi je koristan jednostavan zapis po važnoj stranici:
| Šta posmatram | Pitanje koje time rešavam |
|---|---|
| Dostupnost i indeksiranje | Može li stranica uopšte da bude pronađena? |
| Upiti i prikazi u pretrazi | Za koji problem je sistemi povezuju? |
| Klikovi i dolasci | Da li ljudi otvaraju izvor? |
| Upiti potencijalnih klijenata | Da li sadržaj dovodi do relevantnog razgovora? |
Ne bih spajao te redove u jednu maglovitu metriku „AI vidljivosti“. Različiti izvori mere različite događaje, a odluke postaju loše kada se citat tretira kao poseta ili kada se prikaz tretira kao zainteresovan klijent.
Citiranje u AI odgovorima merim oprezno
Dostupni izveštaji ne daju mi potpunu evidenciju svakog citiranja na svim AI servisima. Google Search Console i Bing Webmaster Tools daju korisne, ali različite delove slike. Bez te razlike lako je prijaviti rezultat koji podaci ne podržavaju.
Google navodi da se saobraćaj iz AI Overviews i AI Mode nalazi u ukupnim podacima Performance izveštaja, pod tipom pretrage „Web“. To nije zasebna metrika u tom uputstvu na osnovu koje bih mogao da kažem: „Ovoliko poseta došlo je baš iz Googleovog AI odgovora.“
Bing Webmaster Tools je predstavio AI Performance kao javnu probnu verziju izveštaja za citiranje sadržaja u Copilotu, Bing AI sažecima i odabranim partnerskim integracijama. Tu mogu da posmatram citirane stranice i upite za pronalaženje izvora. Ali, prema Bingovom objašnjenju metrike, broj citata nije broj klikova ili poseta, a prikazani podaci su agregirani, ne potpuna evidencija svakog citiranja.
U praksi bih zato odvojeno beležio: šta pretraživači otkrivaju, šta AI sistemi prema dostupnim izveštajima citiraju, šta stiže u analitiku sajta i kakve upite firma stvarno dobija. Ako podaci ne dozvoljavaju pouzdano pripisivanje jednog upita jednom AI odgovoru, rekao bih upravo to. Precizno ograničenje merenja korisnije je od lepog, ali neodbranjivog grafikona.
Šta bih ja uradio
Za novi sajt bih prvo izabrao najvažnije probleme koje firma rešava, pa za svaki napravio jasnu, javno dostupnu stranicu sa konkretnim odgovorom. Zatim bih proverio crawl pristup, HTML, indeksiranje i interne linkove. Tek potom bih uključio ritam objavljivanja i merenja, sa redovnom odlukom šta popraviti, proširiti ili ukloniti.
U BizFlowAI ContentStudio, koji sam izgradio, automatizovao sam istraživanje tema, pisanje, optimizaciju i objavljivanje sadržaja na više sajtova. Taj rad ne menja moje pravilo za novi sajt: tehnička osnova i sadržaj moraju da rade zajedno. Ne mogu da obećam preporuku u ChatGPT-u. Mogu da napravim i proverim uslove koje kontrolišemo, a zatim da na osnovu dostupnih podataka unapređujem ono što ne radi.
Ako planirate novi sajt za firmu u Srbiji ili regionu, nemojte odvajati SEO, AI vidljivost i samu izradu u nepovezane zadatke. Pišite mi na lamingsrb@gmail.com; najkorisniji razgovor obično počinje od pitanja šta vaš budući kupac pokušava da sazna, a vaš sadašnji sajt mu ne odgovara.
Često postavljana pitanja
Kako da novi sajt bude dostupan AI pretrazi?
Prvo proveravam da li relevantni crawleri mogu da pristupe javnim stranicama i da li do njih mogu da stignu preko internih linkova. Zatim gledam HTML koji server vraća, jer tekst vidljiv tek posle interakcije ne mora biti jednako dostupan svakom sistemu. Na kraju proveravam da li stranica jasno odgovara na pitanje koje bi potencijalni kupac postavio.
Da li je za pojavljivanje u Google AI odgovorima potrebna posebna AI optimizacija?
Ne polazim od posebne oznake ili datoteke za AI. Prema Googleovoj dokumentaciji, za AI Overviews i AI Mode nisu potrebni posebni strukturirani podaci niti nova AI tekstualna datoteka. Proveravam da li je stranica indeksirana, podobna za prikaz u pretrazi sa isečkom teksta i korisna kao izvor.
Da li je dovoljno da dozvolim OAI-SearchBot u robots.txt?
Ne smatram da je pravilo u robots.txt dovoljno. Prema OpenAI uputstvu, treba propustiti i zahteve sa objavljenih IP opsega OAI-SearchBot crawlera. Proveravam i da li CDN, firewall ili zaštita od botova blokiraju pristup, bez otvaranja privatnih ruta.
Kako da proverim da li crawler vidi sadržaj Next.js sajta?
Otvaram javni URL bez prijave i proveravam konačni odgovor posle redirekcija. Zatim pregledam HTML koji server vraća i upoređujem ga sa tekstom koji korisnik vidi u browseru. Ako se važan opis pojavljuje tek posle učitavanja klijentske aplikacije ili klika, stavljam ključni odgovor u stabilan, javno dostupan tekst stranice.
Da li sitemap garantuje indeksiranje ili bolji plasman sajta?
Dodajem sitemap da pomognem otkrivanju URL-ova, ali ga ne tretiram kao garanciju rezultata. Google navodi da sitemap ne garantuje indeksiranje niti poboljšava rangiranje. Ne očekujem ni da prijava URL-a preko IndexNow garantuje indeksiranje.
Gradiš nešto teško sa AI-jem ili automatizacijom? Otvoren sam za razgovor.
Javi se