Як потрапити в індекс Brave Search (і чому його цитує Claude)

Від чого залежить «ранжування в Brave Search»

У Brave Search власний індекс, і Brave повідомляє, що його краулер частково працює на даних про сторінки, які відвідують користувачі браузера Brave, що ввімкнули Web Discovery Project (WDP) (Brave Search Crawler). WDP за замовчуванням вимкнений, а отримані дані, за заявою Brave, не можна повʼязати з користувачем (анонс Brave). Отже, сторінка потрапляє в індекс через власний краулер і сигнали користувачів, а не через консоль, де реєструють сайт.

Навіщо це потрібно: вебпошук Claude, за багатьма повідомленнями, використовує результати Brave, а незалежне дослідження близько 35 000 цитат Claude виявило, що 79,2% цитованих URL входять до топ-10 Brave за відповідним запитом проти 34% для топ-10 Google (аналіз MERJ). Це вимірювання третьої сторони, а не заява Anthropic, тож читайте його як кореляцію, а не як гарантію, що позиція в Brave дає цитування.

Що насправді робить форма «Submit URL»

Довідка Brave пропонує посилання для надсилання сторінки на повторне завантаження — для випадку, коли ви змінили директиву noindex, — і окреме посилання для URL, які було виключено. Способу надіслати новий сайт на виявлення вона не описує. Користуйтеся формою після виправлення, а не як прийомом зростання.

Два способи, як сторінку знаходять

Незалежний аналіз вихідного коду відкритого клієнта WDP описує два канали. Сервери Brave закриті, тому серверна частина — це висновок, а числа нижче — знахідки дослідження, а не опубліковані обіцянки Brave.

Практичний висновок: сторінка, що вже посідає позиції в іншій пошуковій системі, потрапляє легше, ніж нова сторінка без відвідувачів. Якщо позицій немає, спершу зробіть звичайну роботу: доступні для сканування сторінки, внутрішні посилання та реальне просування.

Що бачить перевірне завантаження

Перш ніж повідомити про сторінку, клієнт WDP анонімно завантажує її повторно, щоб переконатися, що вона однакова для всіх. Аналіз знайшов у коді клієнта такі правила.

1. Без JavaScript. Завантаження читає сирий HTML, тому вміст, що зʼявляється лише після клієнтського рендерингу, там відсутній.
2. Без редіректів. Будь-який редірект робить сторінку приватною, і про неї не повідомляється.
3. 10 секунд і 2 МБ. Завантаження переривається через 10 секунд, а розмір перевіряється за заголовком content-length із лімітом 2 МБ.
4. Лише сигнали в HTML. noindex враховується в HTML-блоці <head>; підтримки X-Robots-Tag у коді не знайдено. Canonical береться з елемента <link rel="canonical">, а не із заголовка Link:.
5. Параметри запиту. Без canonical другий параметр або рядок запиту довший за 22 символи робить сторінку приватною.
6. Слова в шляху. Шляхи зі словами на кшталт login, token, checkout, account, admin чи wp-admin відхиляються.

Ці правила описують один компонент — перевірне завантаження WDP. Вони не описують усе, що робить власний краулер Brave, і можуть змінитися.

Не блокуйте краулер випадково

Brave пише, що його краулер не використовує окремий user agent, щоб не дискримінувати сайти, які дозволяють лише Google, і що сторінка, недоступна для Googlebot, не скануватиметься й Brave. Тому загальна заборона невідомих ботів у robots.txt або правило файрвола чи CDN може виключити його непомітно. Також robots.txt не використовується, щоб прибрати сторінку з індексу; для цього Brave, як і Google, вказує на noindex (блокування індексування через noindex, вступ до robots.txt).

Аудит за 20 хвилин

1. Прочитайте robots.txt. Знайдіть загальний Disallow або правила, що дозволяють лише названих ботів; потім перевірте правила ботів у файрволі та CDN.
2. Дивіться вихідний код, а не відрендерену сторінку. Переконайтеся, що основний текст є в сирому HTML.
3. Перевірте один URL. Він має віддавати 200 без редіректу, помітно швидше за 10 секунд і менше 2 МБ.
4. Перевірте head. noindex або canonical, надіслані лише HTTP-заголовком, перевірне завантаження не бачить; дублюйте їх у HTML.
5. Очистіть canonical. Використовуйте canonical без зайвих параметрів і без ризикованих слів у шляху (обʼєднання дублікатів URL).
6. Знайдіть наявні позиції. У сторінок, що вже зʼявляються в Google, Bing чи DuckDuckGo, легший канал.

Чи варто самому користуватися браузером Brave

Якщо ви ввімкнете WDP, ваші візити на власні публічні сторінки можуть стати одним із повідомлень у каналі сторінок, а пошук запиту, за яким сторінка вже є в іншій системі, може запустити канал запитів. Це дешево, але це один сигнал із приблизно 20, а не план. Щоб увімкнути: відкрийте «Налаштування», виберіть «Пошукова система» і ввімкніть Web Discovery Project (довідка Brave).

Чого цей посібник не обіцяє

• Виявлення не гарантоване. Brave не публікує спосіб надсилання, що гарантує індексування.
• Цитування не гарантоване. Дослідження виміряло збіг цитат Claude з результатами Brave; воно не показало, що позиція в Brave спричиняє цитування.
• Серверну поведінку виведено. Аналіз перевірив клієнтський код, серверна частина — висновок.
• Правила змінюються. Ліміти й пороги можуть змінитися; перевіряйте знову, перш ніж на них спиратися.

Індексація в Brave Search: часті питання

Чи можна надіслати сайт у Brave Search?

Довідка Brave пропонує лише форму, щоб запросити повторне завантаження сторінки, наприклад після зміни noindex. Способу надіслати новий сайт вона не описує.

Чи використовує Claude Brave Search?

Про це багато повідомляють, а дослідження третьої сторони виявило великий збіг цитованих Claude URL і верхніх результатів Brave. Заяви Anthropic ми перевірити не змогли, тому пишемо «за повідомленнями».

Чи є в Brave аналог Search Console?

Інструмента, що працює як Search Console, ми не знайшли. Натомість дивіться власні серверні логи та позиції.

Чи закриває robots.txt сторінку від Brave?

Ні. Brave пише, що robots.txt не використовується для запобігання індексуванню; він вказує на noindex.

Що читати далі

Проблеми зі скануванням, що ховають сторінку від Brave, зазвичай стосуються й інших систем. Поверніться до технічного аудиту індексації або відкрийте увесь навчальний маршрут.