Нехай оминає твій магазин
Назви нам свій домен і поштову скриньку на ньому. Ми надішлемо на цю скриньку лист; його кнопка відкриває тут сторінку з ще однією кнопкою. Натисни її — і відтоді збирач карток не чіпатиме жодної сторінки й жодного фото на домені та його піддоменах.
Твоя скринька деінде — на безплатній пошті чи в агенції? Все одно надішли форму. Такі запити ми читаємо самі й вирішуємо; тим часом збирач карток і далі заходить.
Що приводить його на твої сторінки
- Хтось додає один із твоїх товарів на свою стіну, вставивши його адресу, або кладе її в пакет посилань, який дає нам, коли створює стіну. Сторінка відкривається одразу.
- Якщо вставлене посилання не спрацювало й це тривало 3 секунди чи довше, його одразу пробують ще раз у фоні.
- Власник картки натискає на ній «оновити».
- Картки на публічних стінах перевіряють ціну й наявність наново, тож їхні сторінки відкриваються приблизно раз на день. Картки на приватних стінах ніколи не перевіряються повторно.
- buildawall і сам пропонує речі — стартову стіну для нового акаунта або збіги для речей із фото полиці, яке хтось завантажив. Для цього він шукає товар у нашому довіднику магазинів і відкриває адресу, яку дає довідник. Цю адресу ніхто не вставляв; її обрали ми.
- Стіни з позначкою «buildawall edit» складає наша команда з посилань на товари, які ми обрали; їхні сторінки й фото відкриваються так само.
- Якщо те саме посилання для тієї самої країни вдало прочитали протягом останніх 24 годин, картку заповнюють із того прочитання, і твою сторінку не відкривають знову. «Оновити» й перевірка ціни завжди її відкривають.
Один візит докладно
- Запит
- Один GET на адресу сторінки. Нічого не надсилається й не натискається, а інші посилання на сторінці не відкриваються.
- Переспрямування
- До 3. Кожну нову адресу перевіряють, перш ніж туди йти, а переспрямування в магазин, який ми оминаємо, завершує візит.
- Ліміт часу
- 6 секунд, потім він здається.
- Розмір сторінки
- Лише HTML. Ми працюємо щонайбільше з 1 МБ, хоч би якою довгою була сторінка.
- Фото
- Зображення, яке сторінка називає фото товару, завантажується, щоб у картки була власна копія, — навіть якщо воно лежить на іншому хості. Файли понад 5 МБ відкидаються.
- Помилки
- Код помилки або відхилене з’єднання одразу завершують візит. Нова картка тоді чекає, поки власник її заповнить; наявна зберігає те, що мала.
- robots.txt
- Не завантажується й не читається. Форма вгорі цієї сторінки — спосіб тримати збирача карток подалі.
Що потрапляє на картку
Дані товару, взяті зі сторінки, — назва, бренд, опис, ціна й попередня ціна, валюта, наявність, категорія та перелічені характеристики — і адреса сторінки. Кожна зміна ціни додається до історії цін. Фото зберігається як наша власна копія й показується на стіні. HTML сторінки не зберігається.
Рядок у твоєму журналі доступу
Запити збирача карток по сторінки й фото мають такий заголовок User-Agent:
Buildawall/2 CardMaker https://buildawall.ai/cardmaker