Faʻamatalaina o le taulaʻi ma le faʻaigisa

Spiders & Web Crawlers: O Mea e Manaomia ia e Iloa e Puipui Faʻamatalaga o le Initaneti

Spider o polokalame (poʻo ni mea faitino faʻapitoa) e 'tafe' e ala i le Initaneti e sailia ai faʻamatalaga. E feʻaveaʻi tagata tafafao maimoa i luga o le 'upega tafaʻilagi URL ma e mafai ona toso mai faʻamatalaga mai itulau uepi e pei o imeli imeli E faʻaaogā foʻi tagata faʻatau e fafaga faʻamatalaga o loʻo maua i luga o uepisaite i masini suʻesuʻe.

O tagata faʻatauvaʻa, lea e taua foi o le 'webwash web' saili i luga o le Initaneti ma e le o mea uma e faauo i lo latou faʻamoemoe.

Spammers Spider Websites e Aoina Faamatalaga

Google, Yahoo!

ma isi masini suʻesuʻe e le naʻo latou e fiafia i luga o upega tafaʻilagi - e faapena foi tagata taufaʻalo ma spammers.

O tagata vaʻaia ma isi meafaigāluega faʻapitoa e faʻaogaina e spammers e suʻe ai tuatusi imeli (i luga o le initaneti o lenei masani e masani ona taua o le 'seleseleina') i luga o uepisaite ona faʻaaoga lea e fatuina ai lisi o le spame.

Ole mea faʻaaoga ole faʻaaogaina e masini suʻesuʻe e saili ai nisi faʻamatalaga e uiga i lau 'upega tafaʻilagi peitaʻi e leai se faʻamaonia, se' upega tafailagi e aunoa ma ni faʻasalaga (pe, 'faatagaga') pe faʻapefea ona e tolotolo lau 'upega tafaʻilagi e mafai ona tuʻuina atu faʻamatalaga matautia o le saogalemu. O tagata tafafao maimoa e ala i le mulimuli i sootaga, ma e matua lelei i latou i le sailia o sootaga i faʻamaumauga, faila o polokalama, ma isi faʻamatalaga atonu e te le manaʻo latou te maua.

Webmasters e mafai ona matamata i ogalaau e iloa ai mea na asiasi atu i ai laulelei ma isi robots. O lenei faʻamatalaga fesoasoani i 'upega tafaʻilagi iloa poʻo ai o loʻo faʻasinoina le latou' upega tafaʻilagi, ma faʻafia.

O lenei faʻamatalaga e aoga aua e mafai ai e le webmasters ona faʻaleleia lelei a latou SEO ma faʻafouina robot.txt faila e faʻasaina ai nisi robota mai le tafe o latou nofoaga i le lumanaʻi.

Fautuaga mo le Puipuia o Lau Upega Tafaʻilagi mai le Taʻitaʻifae Faʻataʻavalevale

O loʻo i ai se auala sili ona faigofie e teu ai ni mea e le o manaʻomia mai luga o lau 'upega tafaʻilagi. E tusa lava pe e te le o popole e uiga i ni mea feʻai leaga e tafe ai lau 'upega tafaʻilagi (e le puipuia oe mai le tele o taʻavale), e tatau lava ona e tuʻuina atu masini suʻesuʻe ma faatonuga taua.

O uepisaite uma e tatau ona i ai se faila o loʻo i totonu o le aʻa e taʻua o le robots.txt faila. O lenei faila e mafai ai e oe ona faʻatulagaina ni tafaoga i luga o le upega tafailagi i le mea e te manaʻo latou te vaʻai ai i le faasinoina o itulau (sei vagana ua taʻua i se isi faʻamatalaga patino o faʻamatalaga meta) ina ia leai se faʻamaumauga) pe afai oi latou o se suʻega.

E pei lava ona mafai ona e iloa o loʻo e fia taʻavale i mea e te manaʻo e latou te vaʻavaʻai i ai, e mafai foi ona e taʻu atu ia i latou le mea e le mafai ona latou o ai, ma puipuia poloka mai i lau 'upega tafaʻilagi.

E taua le manatuaina o le tuʻufaʻatasia o le robots.txt faila o le ai ai le taua tele mo masini suʻesuʻe ma e mafai foi ona avea ma se elemene taua i le faaleleia o le faatinoga o lau 'upega tafaʻilagi, ae o nisi o fauwlers robot o le a le amanaʻia pea au faatonuga. Mo lenei mafuaʻaga, e taua le tausia o au masini komepiuta, plugins, ma polokalama uma i aso uma.

Mataupu Faʻapitoa ma Faamatalaga

Talu ai ona o le faʻaaogaina o faʻamatalaga o faʻamatalaga na faʻaaogaina i le faʻaleagaina o le mafaufau (spam), na pasia ai tulafono i le 2003 e faʻamaonia ai nisi faiga faʻaletulafono. O nei tulafono mo le puipuia o tagata faatau e pau i lalo o le tulafono CAN-SPAM o le 2003.

E taua tele lou faʻaalu o le taimi e faitau ai i le CAN-SPAM Act pe afai o lau pisinisi e auai i soʻo se meli mai fafo poʻo faʻamatalaga seleseleina.

E mafai ona e maua nisi faʻamatalaga e uiga i tulafono a le spam ma le auala e taulimaina ai spammers, ma le mea e ono le faia e oe e ona pisinisi, i le faitauina o tala nei: