Narzędzie SEO

Twórz i edytuj pliki robots.txt online

Zdefiniuj dyrektywy i reguły indeksowania dla Googlebota, Bingbota i pająków internetowych, aby zarządzać budżetami indeksowania SEO i chronić prywatne katalogi.

16px
1
0 słowa 0 znaków 0 bez spacji 1 linii 0 akapitów
60:00 darmowe W 1, K 1 Zapisano lokalnie

Zapisz to w prywatnej notatce

Bezpłatnie do 5 notatek, wersja Pro jest nieograniczona.

Autorytatywny przewodnik i referencje składni

Szczegółowy przewodnik: Twórz i edytuj pliki robots.txt online

Wszystko, co musisz wiedzieć o zasadach formatowania, specyfikacjach technicznych i sprawdzonych metodach.

1. Jak roboty wyszukiwarek interpretują plik robots.txt (standard wykluczania robotów)

Plik robots.txt to standardowy dokument w postaci zwykłego tekstu znajdujący się w katalogu głównym domeny (np. https://example.com/robots.txt), który instruuje automatyczne roboty indeksujące i roboty wyszukiwarek (takie jak Googlebot i Bingbot), których części witryny mogą żądać, a których nie. Regulowany przez Protokół wykluczania robotów (RFC 9309) służy jako główny mechanizm zarządzania budżetem indeksowania w celu optymalizacji wyszukiwarek (SEO).

2. Podział składni dyrektywy: User-agent, Zezwalaj, Nie zezwalaj i Mapa witryny

Plik Robots.txt działa poprzez zwięzły zestaw standardowych dyrektyw:

  • User-agent: określa, którego robota sieciowego dotyczą poniższe reguły. User-agent: * obiera za cel wszystkie pająki internetowe. Konkretni agenci to Googlebot, Bingbot, Slurp i GPTBot.
  • Nie zezwalaj: instruuje docelowy robot, aby nie żądał żadnego adresu URL rozpoczynającego się od określonej ścieżki (np. Disallow: /admin/).
  • Zezwalaj: zastępuje ogólną regułę zakazu dla określonego elementu podrzędnego. ścieżka (np. Disallow: /media/, po której następuje Allow: /media/public/).
  • Mapa witryny: Określa pełny, bezwzględny adres URL mapy witryny XML (np. Mapa witryny: https://example.com/sitemap.xml). Możesz zadeklarować wiele linii mapy witryny.

3. Dopasowywanie wzorców i symbole wieloznaczne w pliku robots.txt (* i $)

Nowoczesne wyszukiwarki obsługują dopasowywanie symboli wieloznacznych w dyrektywach pliku robots.txt:

  • Gwiazdka Wieloznaczna (*): Dopasowuje dowolną sekwencję znaków. Na przykład Disallow: /*.pdf$ blokuje wszystkie adresy URL kończące się na .pdf.
  • Kotwica końca adresu URL ($): Zakotwicza dopasowanie na końcu ciągu adresu URL. Na przykład Disallow: /checkout$ blokuje /checkout, ale zezwala na /checkout/confirmation.
  • Blokowanie parametrów zapytania: Blokuj zduplikowane adresy URL wyszukiwania wewnętrznego za pomocą opcji Disallow: /*?s=*.

4. Krytyczne pułapki SEO: budżet indeksowania a zapobieganie indeksacji

Tworząc plik robots.txt, unikaj tych krytycznych błędnych przekonań:

  • robots.txt NIE jest tajnym skarbcem: Nigdy nie podawaj poufnych, ukrytych adresów URL administratorów w pliku robots.txt, jeśli bezpieczeństwo zależy od niejasności — plik może być publicznie czytelny dla każdego. Zamiast tego chroń prywatne punkty końcowe za pomocą uwierzytelniania serwera.
  • Zakaz adresu URL NIE gwarantuje deindeksacji: Jeśli witryny zewnętrzne zawierają linki do niedozwolonego adresu URL, Google może nadal indeksować ten adres URL bez przeszukiwania jego zawartości. Aby całkowicie zapobiec indeksowaniu, pozostaw stronę umożliwiającą indeksowanie i umieść w nagłówku HTML lub zwróć nagłówek HTTP X-Robots-Tag: noindex.
  • Przypadkowe blokowanie całej witryny: Odczyt wiersza Disallow: / w obszarze User-agent: * całkowicie blokuje wyszukiwarki indeksowanie całej witryny.

5. Przewodnik krok po kroku: generowanie i wdrażanie pliku robots.txt

  1. Dostosuj reguły robota i adres URL mapy witryny w powyższym edytorze.
  2. Naciśnij Ctrl + S lub kliknij Plik → Zapisz plik, aby pobrać czysty plik robots.txt.
  3. Prześlij plik dokładnie do publicznego katalogu głównego domeny swojej witryny, aby był dostępny pod adresem https://twojadomena.com/robots.txt.
  4. Sprawdź swoje reguły za pomocą testera pliku Robots.txt w Google Search Console.
Wysokowydajna platforma

Zaprojektowane dla Narzędzie SEO

Zaprojektowany z myślą o szybkości, prywatności i produktywności. Brak narzutu wirtualnego DOM, natywny IndexedDB, Web Workers, szyfrowanie bezwzględne i zaawansowane narzędzia Pro.

Błyskawiczne uruchamianie

Zbudowany w czystym, wysoce wydajnym JS bez ociężałych frameworków. Ładuje się natychmiast i jest gotowy do pisania w czasie poniżej 1 sekundy przy 60 FPS.

Polecenia ukośnika (/) w stylu Notion

Wpisz / w nowej linii, aby wywołać menu szybkiego wstawiania. Wstawiaj nagłówki, listy zadań, punkty, bloki kodu i tabele.

Pisanie głosowe i mowa na tekst

Dyktuj długie notatki i pomysły bez użycia rąk dzięki rozpoznawaniu mowy w czasie rzeczywistym z wizualizacją fal dźwiękowych.

Importer PDF, Word i dokumentów

Wyodrębniaj tekst bezpośrednio w przeglądarce z plików PDF, Word (.docx), Markdown, TXT, JSON, CSV i kodu bez wysyłania na serwer.

Interaktywne listy zadań

Twórz listy zadań za pomocą składni Markdown - [ ]. Klikaj pola wyboru w edytorze i podglądzie, śledząc postęp w pasku stanu.

Tryb Zen i przewijanie maszynowe

Pisz bez żadnych rozpraszaczy (F10). Przewijanie maszynowe utrzymuje aktywny wiersz zawsze na środku ekranu.

Szybki przełącznik Spotlight (Ctrl+K)

Przełączaj się między notatkami, przeszukuj teksty, wykonuj polecenia i filtruj tagi bezpośrednio z klawiatury.

Historia wersji i migawki

Nigdy nie trać ważnej pracy. Punkty kontrolne w IndexedDB pozwalają przeglądać wersje, sprawdzać różnice i przywracać je jednym kliknięciem (Ctrl+H).

Organizacja i filtry hashtagów

Oznaczaj notatki za pomocą #tagów w tekście. Klikaj tagi lub korzystaj z filtrów, aby grupować powiązane projekty i pomysły.

PRO

Sejf chroniony hasłem

Zabezpieczaj poufne myśli, hasła i dzienniki za pomocą 256-bitowego szyfrowania AES-GCM klasy wojskowej, odblokowywanego Twoim kluczem głównym.

PRO

Linki Wiki i odnośniki zwrotne

Łącz myśli dwukierunkowymi linkami wiki ([[Tytuł]]), autouzupełnianiem i automatycznymi odnośnikami zwrotnymi dla zarządzania wiedzą.

PRO

Inteligentne przypomnienia notatek

Planuj terminy zadań i alerty dla dowolnej notatki. Otrzymuj powiadomienia push w przeglądarce, sygnały dźwiękowe i cykliczne przypomnienia.

Synchronizacja w chmurze na wielu urządzeniach

Płynna synchronizacja w tle sprawia, że aktywne notatki i karty są w czasie rzeczywistym identyczne na telefonach, tabletach i komputerach.

Natywny magazyn IndexedDB

Twoje notatki są zapisywane asynchronicznie w bazie IndexedDB. Obsługuje potężne dokumenty i wiele kart bez zawieszania przeglądarki.

Szyfrowanie Zero-Knowledge

Udostępniaj notatki z 256-bitowym szyfrowaniem AES-GCM. Klucz deszyfrujący znajduje się w hashu URL (#key=...) i nigdy nie trafia na serwer.

Uniwersalny eksport w wielu formatach

Błyskawiczny eksport bez udziału serwera do .txt, .md, .json, .csv, .pdf z numeracją stron, Word .docx, .html oraz kodu QR.

Wielowątkowy Web Worker

Licznik słów na żywo, wyrażenia regularne, konwersje tekstu i sortowanie działają w tle w dedykowanym Web Workerze przy płynnych 60 FPS.

W 100% offline aplikacja PWA

Zainstaluj Outsmart Notes jako aplikację PWA na komputerze lub telefonie. Twórz i porządkuj notatki w dowolnym miejscu bez internetu.

Narzędzie SEO

Często zadawane pytania: Twórz i edytuj pliki robots.txt online

Często zadawane pytania i odpowiedzi dotyczące Twórz i edytuj pliki robots.txt online, składni i prywatności.

Plik robots.txt musi znajdować się dokładnie w katalogu głównym domeny Twojej witryny (np. https://example.com/robots.txt). Roboty wyszukiwarek nie będą szukać go w podkatalogach.

Nie. Opcja Disallow uniemożliwia Googlebotowi indeksowanie strony, ale jeśli inne witryny zawierają linki do tej strony, Google może nadal wyświetlać adres URL w wynikach wyszukiwania bez fragmentu. Aby całkowicie uniemożliwić indeksację, użyj ``.

Tak. Możesz dodać `User-agent: GPTBot`, po którym następuje `Disallow: /`, aby zażądać, aby skrobak sieciowy OpenAI pominął Twoją witrynę.

Dyrektywa dotycząca mapy witryny musi zawsze używać pełnego, bezwzględnego adresu URL, w tym https:// (np. `Mapa witryny: https://example.com/sitemap.xml`).

Tak. Outsmart Notes działa w 100% po stronie klienta w przeglądarce. Na nasze serwery nie są wysyłane żadne adresy URL witryn internetowych ani zasady konfiguracji.

Sejf Pro szyfruje Twoje notatki lokalnie w przeglądarce przy użyciu 256-bitowego AES-GCM i PBKDF2 z 100 000 iteracji. Hasło główne nigdy nie opuszcza urządzenia.

Łącz notatki w stylu wiki, wpisując [[. W podglądzie Markdown linki stają się klikalne, a panel Backlinków automatycznie wyświetla powiązania.

Możesz planować przypomnienia jednorazowe lub cykliczne. Wykorzystywane jest Web Notifications API do alertów na pulpicie i dźwięków.

Naciśnij / w pustej linii, aby otworzyć menu. Szybko wstawiaj nagłówki (H1–H6), listy zadań, kolorowane bloki kodu, cytaty i linie podziału.

Tak! Kliknij Plik → Prześlij dokument lub przeciągnij i upuść plik. Tekst jest wyodrębniany lokalnie bez wysyłania na serwer.

Kliknij ikonę mikrofonu na pasku narzędzi. Funkcja używa Web Speech API do transkrypcji głosu na żywo z wizualizacją fali.

Tryb Zen (F10) ukrywa paski narzędzi, zapewniając czyste pisanie na pełnym ekranie. Przewijanie maszynowe utrzymuje aktywny wiersz na środku ekranu.

Naciśnij Ctrl+K (Cmd+K), aby otworzyć Spotlight. Wyszukuj notatki po tytule, treści, filtruj po #tagach i przełączaj karty bez odrywania rąk od klawiatury.

Outsmart Notes automatycznie zapisuje migawki w bazie IndexedDB. Naciśnij Ctrl+H lub wybierz Edycja → Historia wersji, aby przywrócić wersję jednym kliknięciem.

Przeglądarka szyfruje notatkę lokalnie za pomocą Web Crypto API (AES-GCM 256 bitów). Klucz deszyfrujący znajduje się po znaku # (#key=...) i nigdy nie trafia na serwer.

Outsmart Notes używa IndexedDB jako głównego magazynu. W przeciwieństwie do localStorage jest asynchroniczny i obsługuje duże dokumenty bez zawieszania interfejsu.

Wpisz - [ ] Nazwa zadania, aby utworzyć zadanie, lub - [x], aby oznaczyć jako ukończone. Pasek stanu śledzi postęp na żywo.

Uniwersalny kompilator po stronie klienta automatycznie interpretuje symbole Markdown na sformatowany tekst i hiperłącza przy eksporcie do PDF i Word.

Tak! Outsmart Notes to Progressive Web App (PWA). W Chrome, Edge, Safari kliknij Zainstaluj lub Dodaj do ekranu głównego, aby używać jej offline.