Szybkie odpowiedzi

AIGROW oferuje monitorowanie widoczności w AI, asystenta biznesowego, publikowanie wpisów na blogu oraz usługi automatyzacji w ustalonym zakresie. Zacznij od bezpłatnego skanu, aby sprawdzić wynik przed dokonaniem płatności.

Uruchom bezpłatny skan

Skan jest bezpłatny, a plany monitorowania zaczynają się od 29 € miesięcznie. Audyt operacyjny kosztuje 290 €, audyt widoczności 490 €, a w przypadku niestandardowych wdrożeń otrzymasz pisemną wycenę przed rozpoczęciem prac.

Zobacz plany

Uruchom bezpłatny skan. Przeanalizuje twoją stronę, zapyta kilku asystentów AI, o co pytają twoi klienci, i wskaże ci jedną rzecz. Rejestracja nie jest wymagana. Skan poinformuje cię też, jeśli nie potrzebujesz naszej pomocy.

Zacznij teraz

Tak. Skorzystaj z formularza kontaktowego w sprawach dotyczących produktu, płatności, wsparcia lub projektu. Opisz cel i system, którego dotyczy sprawa, aby pierwsza odpowiedź mogła być konkretna.

Skontaktuj się z AIGROW

Generator robots.txt dla AI

Wybierz, które roboty AI mogą czytać twoją stronę. Zacznij od gotowych ustawień, zmień reguły dla dowolnego robota i pobierz część pliku robots.txt dotyczącą AI. Bezpłatnie i bez zakładania konta.

Bezpłatnie i bez rejestracji. Wybrane ustawienia zapisują się w adresie URL tej strony, więc możesz je udostępnić.

Gotowe ustawienia

OAI-SearchBot

OpenAI: wyszukiwanie w ChatGPT

Claude-SearchBot

Anthropic: wyszukiwanie w Claude

PerplexityBot

Perplexity: Perplexity

Applebot

Apple: Siri i Spotlight

DuckAssistBot

DuckDuckGo: odpowiedzi DuckDuckGo

MistralAI-Index

Mistral: Wyszukiwanie Vibe

Amzn-SearchBot

Amazon: wyszukiwarka Alexa

YouBot

You.com: odpowiedzi You.com

Roboty działające na żądanie użytkownika

ChatGPT-User

OpenAI: ChatGPT

Claude-User

Anthropic: Claude

Perplexity-User

Perplexity: Perplexity

MistralAI-User

Mistral: Vibe

Meta-ExternalFetcher

Meta: Meta AI

Amzn-User

Amazon: Alexa

Roboty treningowe

GPTBot

OpenAI: przyszłe modele OpenAI

ClaudeBot

Anthropic: przyszłe modele Claude

Google-Extended

Google: trenowanie i ugruntowywanie odpowiedzi Gemini

Applebot-Extended

Apple: trenowanie Apple Intelligence

MistralAI-Training

Mistral: przyszłe modele Mistral

Meta-ExternalAgent

Meta: Meta AI

Amazonbot

Amazon: Produkty i modele Amazon

CCBot

Common Crawl: otwarty zbiór danych, na którym trenuje się większość modeli

Bytespider

ByteDance: Doubao

cohere-ai

Cohere: historyczne ustawienie w robots.txt

W pliku nie ma Googlebot ani Bingbot. Indeksują one strony również na potrzeby Google Search i Bing, więc nadal obowiązują je reguły z grupy User-agent: *. Aby wykluczyć swoje strony z trenowania Gemini i używania ich jako źródeł odpowiedzi, zablokuj Google-Extended.

Opcjonalnie. Jedna ścieżka w wierszu, maksymalnie 20 wierszy. Każdą ścieżkę zacznij od / i nie używaj spacji ani znaku #. Te ścieżki znajdą się w udostępnianym adresie URL.

Twoje reguły robots.txt dla AI

# aigrow.gg/tools/ai-robots-txt

User-agent: OAI-SearchBot
User-agent: ChatGPT-User
User-agent: Claude-SearchBot
User-agent: Claude-User
User-agent: PerplexityBot
User-agent: Perplexity-User
User-agent: Applebot
User-agent: DuckAssistBot
User-agent: MistralAI-User
User-agent: MistralAI-Index
User-agent: Meta-ExternalFetcher
User-agent: Amzn-SearchBot
User-agent: Amzn-User
User-agent: YouBot
Allow: /

User-agent: GPTBot
User-agent: ClaudeBot
User-agent: Google-Extended
User-agent: Applebot-Extended
User-agent: MistralAI-Training
User-agent: Meta-ExternalAgent
User-agent: Amazonbot
User-agent: CCBot
User-agent: Bytespider
User-agent: cohere-ai
Disallow: /

Umieść te reguły w pliku robots.txt w katalogu głównym witryny i zachowaj istniejącą grupę User-agent: *, jeśli ją masz.

Sprawdź, które roboty mają teraz dostęp do twojej witryny

Ten bezpłatny generator robots.txt tworzy reguły dla robotów z katalogu AIGROW. Domyślnie zezwala robotom wyszukującym i otwierającym strony na żądanie na dostęp, a blokuje roboty zbierające dane treningowe. Wybierz inny gotowy zestaw reguł lub zmień ustawienia poszczególnych robotów, dodaj ścieżki do wykluczenia, a następnie skopiuj lub pobierz reguły dla swojej strony.

Jak to działa

Wybierz ustawienia początkowe
Domyślne ustawienia zezwalają na dostęp robotom wyszukującym oraz tym, które otwierają stronę na żądanie użytkownika, a blokują roboty zbierające dane do trenowania. Możesz zezwolić na dostęp wszystkim robotom, zablokować wszystkie lub ustawić reguły osobno dla każdego z nich.
Jedna grupa dla tych samych reguł
Roboty objęte tymi samymi regułami trafiają do jednej grupy z kilkoma wierszami User-agent. Ich nazwy pochodzą z katalogu robotów AI. Pomijamy Googlebot i Bingbot, ponieważ indeksują strony także na potrzeby Google Search i Bing.
Ścieżki obowiązują w każdej grupie
Robot wymieniony w grupie nie dziedziczy reguł z grupy User-agent: *, zgodnie z RFC 9309. Dodatkowe ścieżki Disallow są dodawane do każdej grupy robotów AI. Pozostałe ścieżki pozostają dostępne dla robotów, którym zezwolisz na dostęp.
Zachowaj pozostałą część pliku
Generator tworzy tylko grupy dotyczące AI. Zachowaj istniejącą grupę User-agent: * i pozostałe wpisy, w tym linki do map witryny. Zastąp stare grupy wymieniające te same roboty i przenieś ścieżki, które nadal chcesz wykluczać.

Pytania o roboty AI

Tworzy grupy User-agent z regułami Allow lub Disallow dla robotów z katalogu robotów AI. Wyjątkiem są Googlebot i Bingbot, które indeksują strony także na potrzeby Google Search i Bing. Roboty objęte tymi samymi regułami trafiają do jednej grupy. Możesz skopiować tekst lub pobrać go jako robots.txt, a następnie dodać do istniejącego pliku.

Pełnią różne funkcje i mają różne nazwy. Roboty wyszukujące tworzą indeks, który przeszukuje asystent. Roboty działające na żądanie użytkownika otwierają stronę, gdy ktoś o to poprosi. Roboty zbierające dane do trenowania pobierają strony na potrzeby przyszłych modeli, dlatego możesz ustawić dla nich osobne reguły.

robots.txt to prośba skierowana do robotów, opisana w dokumentacji ich operatorów. Plik określa reguły, o których przestrzeganie prosisz.

W katalogu głównym witryny, na przykład pod adresem https://example.com/robots.txt. Jeśli plik już tam jest, zachowaj jego grupę User-agent: * i pozostałe wpisy, a grupy dotyczące AI zaktualizuj za pomocą wygenerowanych reguł.

Powiązane narzędzia

Czy asystenci AI mogą czytać strony twojej firmy?

Uruchom bezpłatny skan, aby sprawdzić dostęp i zobaczyć, co asystenci mówią o twojej firmie.

Uruchom bezpłatny skan AI