Sampla robots.txt Faidhlichean airson an Làraich-lìn agad

Innsidh am faidhle robots.txt a tha air a stòradh ann am freumh an làrach-lìn agad innealan-fuadain lìn mar dhamhain-allaidh nan innealan- luirg dè na seòladairean agus na faidhlichean a tha iad a 'craoladh. Tha e furasta faidhle robots.txt a chleachdadh, ach tha cuid de rudan air am bu chòir dhut cuimhneachadh:

  1. Leigidh innealan-fuadain lìn ad dubh seachad an fhaidhle robots.txt agad. Is e na seòrsaichean as cumanta bots malware agus innealan-fuadain a tha a 'coimhead airson seòlaidhean puist-d gus am buain.
  2. Sgrìobhaidh cuid de phrògraman ùra innealan-fuadain nach eil a 'leigeil seachad an fhaidhle robots.txt. Mar as trice tha seo air a dhèanamh le mearachd.
  1. Faodaidh duine sam bith am faidhle robots.txt agad fhaicinn. Is e robots.txt an t-ainm a th 'orra an-còmhnaidh agus tha iad an-còmhnaidh air an stòradh aig cridhe na làraich-lìn.
  2. Mu dheireadh, ma tha cuideigin a 'ceangal ri faidhle no eòlaire a tha air am bacadh leis an fhaidhle robots.txt agad bho dhuilleag nach eil air fhàgail às leis an fhaidhle robots.txt, is dòcha gum faigh e na h-innealan rannsachaidh co-dhiù.

Na cleachd faidhlichean robots.txt gus rud sam bith cudromach a shealg. An àite sin, bu chòir dhut fiosrachadh cudromach a chuir air cùl faclan-faire tèarainte no fàg e dheth an lìon gu tur.

Mar a chleachdas tu na h-eisimpleirean seo

Dèan lethbhreac den teacsa bhon sampall as fhaisge air na tha thu ag iarraidh a dhèanamh, agus cuir a-steach e don fhaidhle robots.txt agad. Atharraich an inneal robot, eòlaire, agus faidhlichean gus an rèiteachadh as fheàrr leotha a cho-fhreagairt.

Dà Robots.txt Bunasach Faidhlichean

Cleachdaiche-àidseant: *
Molaidhean: /

Tha am faidhle seo ag ràdh gum bu chòir dha inneal-fuadain sam bith (Cleachdaiche-agent: *) a ruigeas e an aire a thoirt air gach duilleag air an làrach (Thoir seachad a-mach: /).

Cleachdaiche-àidseant: *
Duilich:

Tha am faidhle seo ag ràdh gu bheil cead aig inneal-fuadain sam bith (User-agent: *) a bhith a 'coimhead air gach duilleag air an làrach (Cuir sìos:).

Faodaidh tu seo a dhèanamh cuideachd le bhith a 'fàgail am faidhle robots.txt agad no nach eil agad air an làrach agad idir.

Dìon Sgrìobhadairean Sònraichte Bho Robots

Cleachdaiche-àidseant: *
Leig às: / cgi-bin /
Duilich: / temp /

Tha am faidhle seo ag ràdh gum bu chòir dha inneal-fuadain sam bith (User-agent: *) a ruigeas e an aire a thoirt dha na seòladairean / cgi-bin / and / temp / (Leig às: / cgi-bin / Dispose: / temp /).

Dìon Duilleagan Sònraichte Bho Robots

Cleachdaiche-àidseant: *
Leigibh às: /jenns-stuff.htm
Leig às: /private.php

Tha am faidhle seo ag ràdh gum bu chòir dha inneal-fuadain sam bith (User-agent: *) a ruigeas e an aire a thoirt seachad air na faidhlichean /jenns-stuff.htm agus /private.php (Leig às: /jenns-stuff.htm Thoir an cèill: /private.php).

Thoir casg air ro-innleachd sònraichte bho bhith a 'faighinn a-steach don làrach agad

Cleachdaiche-agent: Lycos / xx
Molaidhean: /

Tha am faidhle seo ag ràdh nach eil cead aig Lycos bot (User-agent: Lycos / xx) ruigsinn air àite sam bith air an làrach (Cuir sìos: /).

Leigibh a-steach ach aon ruigsinneachd ro-innleachd sònraichte

Cleachdaiche-àidseant: *
Molaidhean: /
Cleachdaiche-àidseant: Googlebot
Duilich:

Nochdaidh am faidhle seo an toiseach gach inneal-fuadain mar a rinn sinn gu h-àrd, agus an uairsin leigidh Googlebot (User-agent: Googlebot) cothrom air a h-uile rud (Cuir às do:).

Cuir còmhla loidhnichean ioma-fhillte airson a bhith dìreach a 'toirt a-mach na h-eas-aontaidhean a tha thu ag iarraidh

Ged a tha e nas fheàrr loidhne fìor-in-ghabhalach User-agent a chleachdadh, leithid User-agent: *, faodaidh tu a bhith cho sònraichte 's as toil leat. Cuimhnich gun leugh innealan-fuadain am faidhle ann an òrdugh. Mar sin ma tha na ciad loidhnichean ag ràdh gu bheil na h-uile inneal-fuadain air am bacadh bho a h-uile càil, agus an uairsin air adhart anns a 'fhaidhle tha e ag ràdh gu bheil cead aig gach inneal-inntrigidh a h-uile càil, bidh cothrom aig na robotan air a h-uile dad.

Mura h-eil thu cinnteach a bheil thu air am faidhle robots.txt agad a sgrìobhadh ceart, faodaidh tu innealan maighstir lìn Google a chleachdadh gus dearbhadh a dhèanamh air an fhaidhle robots.txt agad no sgrìobh fear ùr.