Crálaithe AI in robots.txt

Tógann Do4U na rialacha do chrálaithe AI i do robots.txt. Roghnaíonn tú in aghaidh an ghrúpa nó in aghaidh an chrálaí: oiliúint samhlacha agus tacair sonraí, innéacs cuardaigh agus freagraí, agus íosluchtuithe ar iarratas úsáideora. Tagann gach crálaí sa liosta lena oibreoir, a chuspóir agus nasc chuig doiciméadú an oibreora. Má chuireann tú isteach do shuíomh gréasáin, léann Do4U do robots.txt reatha, taispeánann sé cé na crálaithe AI a cheadaíonn sé nó a gcuireann sé bac orthu inniu, agus cuireann sé cuid AI marcáilte go soiléir leis ag an deireadh. Fanann do ghrúpaí eile agus do línte sitemap mar atá siad. Léann an cód an comhad nua arís ansin agus seiceálann sé go bhfuil na rialacha a roghnaigh tú ag gach crálaí. Tarlaíonn gach rud sa chód, gan AI, agus déantar an comhad i do bhrabhsálaí.

Bain triail as anois Praghsanna

Saor in aisce agus gan chuntas: Seiceáil crálaithe AI do robots.txt →

Cé dó é

D’úinéirí suíomhanna gréasáin, ghníomhaireachtaí agus fhorbróirí ar mian leo cinneadh a dhéanamh cé na crálaithe AI a fhéadfaidh a n-ábhar a úsáid, gan na rialacha atá acu cheana a bhriseadh.

Úsáidí tipiciúla

Cuir bac ar chrálaithe oiliúna AI agus bí le fáil fós i gcuardach AI
Seiceáil cé na crálaithe AI a cheadaíonn do robots.txt inniu
Cuir cuid AI le robots.txt atá ann cheana gan rialacha a chailleadh
Ceadaigh crálaithe AI do chosáin roghnaithe amháin

Sampla

Ionchur

Suíomh gréasáin: https://example.com robots.txt reatha: User-agent: * Disallow: /admin/ User-agent: GPTBot Disallow: / Sitemap: https://example.com/sitemap.xml Rogha: cuir bac ar oiliúint, ceadaigh cuardach, ceadaigh íosluchtuithe úsáideoirí

Toradh

GPTBot: bac air (rialacha dá chuid féin) → bac air ClaudeBot: bac páirteach air (rialacha do chách) → bac air OAI-SearchBot: bac páirteach air (rialacha do chách) → bac páirteach air (rialacha dá chuid féin, fanann bac ar /admin/) Fanann an riail do gach crálaí agus an líne sitemap gan athrú. Fanann an seanghrúpa GPTBot sa chomhad mar nóta tráchta, agus cuirtear an chuid AI nua leis ag an deireadh.

Sampla seasta, giorraithe. Is le AI a ghintear fíorthorthaí: seiceáil iad.

Praghas agus teorainneacha

Praghas: saor in aisce, gan clárú
Ar fáil le: Saor in aisce, Le pacáiste
Teorainn ionchuir: Suas le 60 000 carachtar in aghaidh an chomhaid

Príobháideacht

Próiseáilte ar ár bhfreastalaithe féin san AE (an Pholainn). Scriostar ionchuir agus torthaí tar éis 7 lá (Saor in aisce) nó 30 lá (pacáistí), nó díreach tar éis duit an toradh a fheiceáil má roghnaíonn tú gan iad a stóráil. Scriostar íomhánna díreach tar éis na próiseála.

San API

Ainm na huirlise: ai_robots_txt. Cruthaigh jab le POST /api/v1/jobs agus faigh an toradh le GET /api/v1/jobs/{id}. Tá d’eochair API i do chuntas.

curl -X POST https://do4u.eu/api/v1/jobs \
  -H "Authorization: Bearer d4u_…" -H "Content-Type: application/json" \
  -d '{"tool": "ai_robots_txt", "site_url": "https://example.com", "groups": {"training": "block", "search": "allow", "user": "allow"}}'

Doiciméadú iomlán an API →

Ceisteanna agus freagraí

An stopann robots.txt crálaithe AI i ndáiríre?

Ní féidir le comhad ar bith crálaí a chur faoi iallach. Is deonach é cloí le robots.txt, agus cinneann gach crálaí féin an gcloíonn sé leis na rialacha. D’fhéadfadh roinnt íosluchtóirí a ghníomhaíonn ar iarratas úsáideora neamhaird a dhéanamh de robots.txt, mar a deir a n-oibreoirí. Marcálann Do4U iad seo sa liosta.

An gcoinneofar mo rialacha eile agus mo léarscáil suímh?

Coinneofar. Coinníonn Do4U gach grúpa eile agus gach líne sitemap. Ní dhéantar nótaí tráchta ach de línte a ainmníonn crálaí a bhfuil tú ag cinneadh faoi anois, ionas nach meascfar seanrialacha agus rialacha nua. Tá an chuid AI marcáilte go soiléir ag deireadh an chomhaid, agus cuireann an dara rith ceann eile ina háit.

An mbaineann bac ar Google-Extended mo shuíomh de Google?

Ní bhaineann. Ní crálaí é Google-Extended ach comhartha in robots.txt. De réir Google, rialaíonn sé úsáid do chuid ábhair do shamhlacha Gemini agus ní théann sé i bhfeidhm ar Chuardach Google. Oibríonn Applebot-Extended ar bhealach cosúil do Apple.

An stóráiltear mo théacs?

Ach chomh fada agus is gá: 7 lá ar Saor in aisce, 30 lá le pacáiste – nó ní stóráiltear ar chor ar bith é má roghnaíonn tú gan é a stóráil. Déantar an phróiseáil ar ár bhfreastalaithe féin san AE (an Pholainn).

An féidir liom an toradh a úsáid láithreach?

Is le AI a ghintear na torthaí. Léigh iad sula bhfoilsíonn nó sula seolann tú iad.

Uirlisí gaolmhara

Gineadóir llms.txt
Léigh do shuíomh gréasáin agus faigh comhad llms.txt réidh do chúntóirí AI: ainm do shuímh ghréasáin, achoimre ghearr agus na leathanaigh is tábhachtaí agat, gach ceann le habairt amháin. Tógann agus seiceálann an cód an comhad; íoslódálann nó cóipeálann tusa é.
Seiceáil infheictheachta AI
Faigh amach cé chomh maith is a fhreagraíonn leathanach na ceisteanna a chuireann daoine de ghnáth faoina ábhar. Molann an AI na ceisteanna agus measann sé gach freagra le sliocht cruinn ó do leathanach; seiceálann an cód na sleachta agus ríomhann sé an clúdach. Feiceann tú freisin freagraí atá ar iarraidh agus leideanna faoi mharcáil CC, llms.txt agus robots.txt. Gan gealltanas rangaithe.

Gach uirlis →