Søger: Værktøj til at finde alle mine NOINDEX og NOFOLLOW

Fra Sæby

Tilmeldt 24. Sep 10

Indlæg ialt: 260

Kristian Kristensen Fra Happydays A/S Skrevet 13-01-2011 kl. 10:12

Hvor mange stjerner giver du? :

Jeg har googlet dette problem, men kan ikke finde et egnet værktøj.

Jeg skal bruge et værktøj der kan kravle hele hjemmesiden og finde de sider der har et af følgende META tags:
<META NAME="ROBOTS" CONTENT="NOINDEX, FOLLOW">
<META NAME="ROBOTS" CONTENT="INDEX, NOFOLLOW">
<META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">
<META NAME="ROBOTS" CONTENT="NOFOLLOW">
<META NAME="ROBOTS" CONTENT="NOINDEX">

Kender du til et sådan værktøj så hører jeg meget gerne fra dig.

Linkbuilding i udlandet

Fra Roskilde

Tilmeldt 30. Jul 06

Indlæg ialt: 2298

Jesper Jørgensen Skrevet 13-01-2011 kl. 15:37

Hvor mange stjerner giver du? :

Hej Kristian

Hvor mange sider har du, og er det en engangsting du skal have fyret af, eller skal du have gjort det flere gange over tid?

Jeg kan crawle dit site og levere en rapport over alle url'er og deres ROBOTS tag.

Mvh Jesper Jørgensen

______________

Microplane rivejern

www.jpknive.dk

Fra Sæby

Tilmeldt 24. Sep 10

Indlæg ialt: 260

Kristian Kristensen Fra Happydays A/S Skrevet 13-01-2011 kl. 15:53

Hvor mange stjerner giver du? :

Hej Jesper

Ifølge Google har vi omkring 5000 indekserede sider.

Jeg søger et værktøj, da det ikke kun skal gøres den ene gang.

Det var nemmere hvis der fandtes et værktøj, men det ender nok med en opgave til IT-afdelingen at programmere.

Det er ikke noget vi vil smide de store penge efter.

Med venlig hilsen,

Linkbuilding i udlandet

Tilmeldt 20. Apr 07

Indlæg ialt: 16014

Slettet bruger Skrevet 13-01-2011 kl. 16:04

Hvor mange stjerner giver du? :

Kristian Mølholt :

Jeg har googlet dette problem, men kan ikke finde et egnet værktøj.

Jeg skal bruge et værktøj der kan kravle hele hjemmesiden og finde de sider der har et af følgende META tags:
<META NAME="ROBOTS" CONTENT="NOINDEX, FOLLOW">
<META NAME="ROBOTS" CONTENT="INDEX, NOFOLLOW">
<META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">
<META NAME="ROBOTS" CONTENT="NOFOLLOW">
<META NAME="ROBOTS" CONTENT="NOINDEX">

Kender du til et sådan værktøj så hører jeg meget gerne fra dig.

Hvilken platform kører I med?

Tillader det eksport til statiske html? Så kunne man jo lave en lokal kopi og køre den igennem med Wingrep.

Måske ikke synderligt elegant, men det burde virke -- og fejlprocenten vil være nul.

Fra Sæby

Tilmeldt 24. Sep 10

Indlæg ialt: 260

Kristian Kristensen Fra Happydays A/S Skrevet 17-01-2011 kl. 15:51

Hvor mange stjerner giver du? :

Vi kører en dynamisk PHP på Apache, så den løsning med en lokal kopi, kan muligvis godt lade sig gøre.

1000 tak for input.

Linkbuilding i udlandet

Fra Aarhus N

Tilmeldt 6. Sep 10

Indlæg ialt: 423

Jens Juul Nielsen Fra Jens Juul Nielsen Skrevet 17-01-2011 kl. 15:55

Hvor mange stjerner giver du? :

Hej Kristian

Jeg vil meget gerne lave et simpelt C# program til at pløje alle siderne igennem og finde de meta tags, hvis det er aktuelt.

Hvis det kun er én gang, så ville jeg også hente hele websitet og så bruge en filsøgningsapplikation til at finde de meta tags.

Fra Sæby

Tilmeldt 24. Sep 10

Indlæg ialt: 260

Kristian Kristensen Fra Happydays A/S Skrevet 17-01-2011 kl. 15:58

Hvor mange stjerner giver du? :

Jeg syntes bare det er spøjst at jeg er den første der har tænkt på den her situation.

Mærkeligt at der ikke findes et crawler værktøj der kan gøre det.

Det er ikke så vigtigt lige pt. da vi har masser af vigtigere projekter der kommer først på listen.

Linkbuilding i udlandet

Tilmeldt 10. Nov 09

Indlæg ialt: 0

slettet_bruger Skrevet 17-01-2011 kl. 16:02

Hvor mange stjerner giver du? :

Kristian Mølholt :

Jeg syntes bare det er spøjst at jeg er den første der har tænkt på den her situation.

Mærkeligt at der ikke findes et crawler værktøj der kan gøre det.

Det er ikke så vigtigt lige pt. da vi har masser af vigtigere projekter der kommer først på listen.

Jeg så godt dit første indlæg, og jeg er sådan set også igang med at lave en crawler der blandt andet ville kunne udvides med den nævnte funktion. Men jeg er ikke helt færdig med den endnu, og min tid er lidt knap! :-)

Fra København S

Tilmeldt 1. Feb 06

Indlæg ialt: 3533

Kim Tetzlaff - Kim Tetzlaff ApS Fra Kim Tetzlaff ApS Kim Tetzlaff Ejendom Skrevet 17-01-2011 kl. 16:22

Hvor mange stjerner giver du? :

Gennemsnit 5,0 stjerner givet af 1 person

Kristian Mølholt :

Jeg syntes bare det er spøjst at jeg er den første der har tænkt på den her situation.

Mærkeligt at der ikke findes et crawler værktøj der kan gøre det.

Det er ikke så vigtigt lige pt. da vi har masser af vigtigere projekter der kommer først på listen.

Hvis man har styr på sin hjemmeside, mangler man det jo heller ikke :)

FX i min CMS løsning, er det muligt at se siders robots tag, samt selvfølgelig mange andre informationer. hvilket jo samtidig betyder at det ikke er et værktøj jeg behøver, eller nogen af mine kunder behøver.

MVH Kim

Kim Tetzlaff

🚀 Hastighedsekspert ⚙️WordPress hjemmesider 🎯SEO
Siden 1995 - hjemmeside Udvikling og teknisk optimering af hjemmesider
👉 Mere om mig

Fra Lyngby

Tilmeldt 26. Mar 05

Indlæg ialt: 9738

Mikkel deMib Svendsen Fra DEMIB HOLDINGS ApS Waimea Digital Skrevet 17-01-2011 kl. 16:28

Hvor mange stjerner giver du? :

Kristian Mølholt :
Jeg syntes bare det er spøjst at jeg er den første der har tænkt på den her situation.

Det er du da heller ikke, men de fleste af os der arbejder med SEO benytter egne værktøjer og indbyggede systemer til den slags.

Derudover findes der skam masser af kommercielle crawlere - og en del open source, som du kan bruge. Men det er store tunge stykker software, og for de komercielle produkters vedkomende dyre.