Як експортувати всі майданчики з біржі, перевірити їх якість та скласти білий список

Сьогодні я хочу поділитися з вами досвідом роботи з біржею посилань Sape.ru у зв'язку з сервісом CheckTrust.ru. Коротко про це я вже писав на своєму блозі, але нижче я постарався викласти всі кроки і максимально докладно. А на вас чекає один цікавий лайфхак для масової оцінки донорів у Sape. Тож почнемо.

Сподіваюся, ви вже встигли прочитати статтю Олександра про закупівлю трастових посилань у GoGetLinks. У ній докладно розказано про те, як вивантажувати список потенційних донорів із GGL, як аналізувати отриману інформацію та як потім додавати сайти до білого списку. Вивантаження донорів у GGL зроблено буквально в пару кліків, чим не може похвалитися Sape.

А що робити, якщо хочеться скласти базу вибраних сайтів у біржі Sape? Вручну все заносити та збирати свій список місяцями? Звичайно, ні! Вихід є, хай і не зовсім очевидний.

Підготовка списку майданчиків для експорту з Sape

База біржі досить широка, тим не менш, її можна вивантажити в пару десятків кліків без будь-яких проблем. На допомогу приходить кмітливість та знання про букмарклети.

Для тих, хто не знає, букмарклет – це така закладка у браузері, яка замість звичайного url сайту містить javascript-код. Якщо викликати цю закладку, перебуваючи на певній сторінці, ви викличете обробку цієї сторінки за сценарієм, який міститься у скрипті. У вас вже виникло закономірне питання, - як нам допоможе букмарклет для вивантаження списку всіх сайтів із Sape?

Пропонується наступний сценарій:

У пошуку майданчиків на біржі ви отримуєте список та виводите, скажімо, по 1000 майданчиків на сторінку;
Використовуєте букмарклет, і всепосилання з першої сторінки пошуку збираються у спеціальному текстовому полі внизу сторінки.
Далі натискаєте на другу сторінку, вона завантажується через AJAX без перезавантаження у браузері. Знову натискаєте на букмарклет, який до списку з першої сторінки пошуку додає список посилань з другої.
І далі, за описаним вище алгоритмом, продовжуєте доти, доки всі посилання з усіх сторінок не опиняться у текстовому полі.
Тепер усі посилання ви зможете взяти скопом та скопіювати куди потрібно. Кінець.

Таким чином, нам просто необхідно створити букмарклет. Це досить просто, тому наведу інструкцію лише на прикладі Google Chrome (для інших браузерів це робиться дуже схожим чином).

Експорт списку майданчиків із Sape

Нарешті приступаємо до експорту майданчиків. Проведемо це з прикладу будь-якого запиту. Клацаємо на зображення лупи, розташоване поруч із таким ключовим словом.

Ми потрапляємо на сторінку пошуку.

На скріншоті вище червоним відзначені найважливіші поля. Це:

Область пошуку - "Всі сайти";
ТИЦ, PR та інші «пузомірки» нас не цікавлять, оскільки вони, як правило, не зовсім актуальні на даний момент, та й дивитися всі параметри зручніше на ЧекТрасті. Ціна теж не має значення - зараз потрібно вивантажити всі наявні майданчики на біржі.
Домен старше 366 днів. Зовсім свіжі донори, я вважаю, не айс, тому цю планку можна навіть підняти до 730, але все залежить від способів і методів вашого просування.
Наявність у каталогах – на даному етапі взагалі не має значення. Наявність в Яндексі ставимо "Так", а в Google - "Не важливо". Просто як рекомендація.
Ставимо галочку «Відображати сайти тільки з відкритими URL», оскільки ми безурловіпроаналізувати, на жаль, не можемо. Також ставимо галочку, щоб відображалися майданчики, де вже купувалися посилання.
Сторінок для кожного сайту – "Одна". Це потрібно, щоб завантажуваний список був меншим, інакше чекайте, що системний блок вибухне, а з клавіатури випадуть кнопки :)
Режим виведення – «Дерево».

Виставивши параметри, проводимо пошук та бачимо наступне.

Sape не показує більше 5000 сайтів за один пошук, а це означає, що доведеться розбивати пошук за тематиками/регіонами/доменними зонами - на вибір, щоб було трохи менше 5 тисяч результатів і щоб нічого не проґавити. Як тільки ви зробите вибірку, у полі "Показувати" вибираєте 1000 і більше записів на сторінку залежно від потужності вашого комп'ютера. Звичайно, якщо у вас сучасний комп'ютер, ставте 5000 і тоді зможете вивантажувати всі посилання вибірки лише одним кліком букмарклету.

Далі все досить очевидно і йде чітко за представленим на початку сценарієм.

Завантажилася перша сторінка результатів - клікаєте букмарклетом 1 раз;
Перейшли на сторінку 2, дочекалися завантаження, знову клікнули букмарклетом;
.
Дійшли до останньої сторінки, дочекалися її завантаження, клацнули букмарклетом.
Прокрутили сторінку в кінці, побачили створене текстове поле, виділили весь вміст поля і вставили в блокнот. На цьому етапі ви повинні переконатися, що загальна кількість посилань приблизно така сама, скільки було показано в результатах сапи.
Повторили кроки 1-5 для розвантаження інших ХХХ сторінок сапи.

Формування вибраного списку сайтів у Sape

У біржі Sape може бути одночасно кілька вайтлістів, але ще приємніше те, що по кожному можна робити пошук і створювати фільтри для автозакупівлі. Тому принеобхідності кожен собі може розділити обране кілька груп. У мене зараз у тестовому режимі 4 групи обраного, але впевненості у необхідності такого дробового поділу поки що немає. Проте можу дати такі рекомендації:

У вибране варто додавати посилання з Трастом вище 30 та Спамом менше 7, а також із Трастом вище 50 та Спамом менше 12.
Варіант Трасту вище 30 (і менше 50) та Спаму менше 12 (і більше 7) – теж можна додавати.
Зверніть увагу на відвідуваність, наприклад, LiveInternet. З її допомогою ви можете вибрати для себе найбільш привабливі ресурси за відвідуваністю. Звичайно, не у всіх є лічильник LI, але, як показує практика, у більшості є.

Додати сайти до вибраного досить просто, все відбувається в однойменній вкладці:

У текстовому полі необхідно скопіювати домени та вказати, до якого розділу додавати сайти. Трохи нижче можна додавати розділи вибраного.

Також у навігації ви можете побачити вкладку ГБЛ (глобальний блеклист), куди потрібно додати весь шлак. Отже.

Формування блекліста для Sape

Що стосується блеклистом все ще простіше, оскільки список один - глобальний. Хто ж насамперед удостоєний потрапити до блекліста?

Сайти з Трастом 10 та нижче;
Сайти зі Спамом 12 та вище;
Сайти під фільтром, а саме АГС (відповідне значення, що вказується ЧекТрастом у полі ТІЦ).

Звичайно, сайти можуть виростати якісно та реабілітуватися, але це малоймовірно. Поки що лише в планах постановка досвіду перевірки блекліста на зміни через півроку-рік.

Як післямова

Насамкінець скажу, що в пошуку біржі є фільтр "Час додавання в систему", який може дозволити вам щомісяцязбирати нові майданчики для аналізу та додавати їх у вибране або ГБЛ.

З вами був Олександр Шуйський. До нових зустрічей.