🕷️ Crawler Inspector

URL Lookup

Direct Parameter Lookup

Raw Queries and Responses

1. Shard Calculation

Query:

Response:

Calculated Shard: 32 (from laksa075)

2. Crawled Status Check

Query:

curl -X POST \
  'http://laksa032.int.ahrefs:8124/' \
  -H 'Content-Type: text/plain' \
  -H 'X-ClickHouse-Database: crawler3' \
  -H 'Authorization: Basic YXBpOg==' \
  -d 'SELECT getAhrefsURLFromUnparsed(src_unparsed) AS found_url, ifNull(toUnixTimestamp(download_stamp), 0) AS crawl_time, ifNull(toUnixTimestamp(props_url_first_seen), 0) AS first_indexed_time, download_http_code AS http_code, src_unparsed AS src_unparsed, src_root_hash AS src_root_hash, history_drop_reason AS history_drop_reason, meta_title AS meta_title, meta_descriptions AS meta_descriptions, attrs_boilerpipe_text AS attrs_boilerpipe_text, attrs_markdown AS attrs_markdown, attrs_readable_markdown AS attrs_readable_markdown, meta_canonical AS meta_canonical FROM crawler3.page_info_local FINAL PREWHERE (src_root_hash, src_unparsed) IN ((getAhrefsRootHashFromUnparsed(getAhrefsUnparsedNoserviceFromURL(\'https://dtf.ru/jeangrey/4016109-saoundtrek-ostrova-sokrovisch\')), getAhrefsUnparsedNoserviceFromURL(\'https://dtf.ru/jeangrey/4016109-saoundtrek-ostrova-sokrovisch\'))) FORMAT JSONEachRow'

Response:

{"found_url":"https:\/\/dtf.ru\/jeangrey\/4016109-saoundtrek-ostrova-sokrovisch","crawl_time":1757538079,"first_indexed_time":0,"http_code":200,"src_unparsed":"ru,dtf!\/jeangrey\/4016109-saoundtrek-ostrova-sokrovisch s443","src_root_hash":"13179522910149441032","history_drop_reason":null,"meta_title":"Это не учебная тревога – всё это время на Яндекс-музыке был доступен полный саундтрек великого мультфильма «Остров сокровищ». Звучит всё ещё совершенно легендарно — Денис Большаков на DTF","meta_descriptions":["Саундтрек «Остров сокровищ», доступен на Яндекс-музыке, легендарная музыка, лучшие композиции мультфильмов, воспоминания о детстве"],"attrs_boilerpipe_text":"Но мультик уже настолько у меня в генетическом коде, что нет-нет, да временами вспоминается","attrs_markdown":"[Популярное](https:\/\/dtf.ru\/popular)\n\n[Свежее](https:\/\/dtf.ru\/new)\n\n[Моя лента](https:\/\/dtf.ru\/my)\n\n[Сообщения](https:\/\/dtf.ru\/m)\n\n[Рейтинг](https:\/\/dtf.ru\/discovery)\n\n[Пополнить Steam Низкая комиссия](https:\/\/dtf.ru\/pay\/steam)\n\nТемы\n\n[![](https:\/\/leonardo.osnova.io\/097c16c9-4459-5f8d-9da6-ce8e76831f3e\/-\/scale_crop\/72x72\/)Офтоп](https:\/\/dtf.ru\/flood)\n\n[![](https:\/\/leonardo.osnova.io\/e5348320-b11a-9419-fb85-f7b63e2de194\/-\/scale_crop\/72x72\/)Игры](https:\/\/dtf.ru\/games)\n\n[![](https:\/\/leonardo.osnova.io\/47a6c16b-ed6a-1847-a573-f27ab8c3dc07\/-\/scale_crop\/72x72\/)Гайды](https:\/\/dtf.ru\/howto)\n\n[![](https:\/\/leonardo.osnova.io\/685702b8-752b-57b8-b2c4-99664e6be259\/-\/scale_crop\/72x72\/)Hollow Knight](https:\/\/dtf.ru\/hollow-knight)\n\n[![](https:\/\/leonardo.osnova.io\/b5463920-7d83-df60-e73e-52d547bf5ae0\/-\/scale_crop\/72x72\/)Вопросы](https:\/\/dtf.ru\/ask)\n\n[![](https:\/\/leonardo.osnova.io\/fc1c9f9c-ab62-5bb1-b0bb-5674eb3502b2\/-\/scale_crop\/72x72\/)Ночной музпостинг](https:\/\/dtf.ru\/muzposting)\n\n[![](https:\/\/leonardo.osnova.io\/5d198df0-3ba4-6837-b9c3-ac8c04fb9181\/-\/scale_crop\/72x72\/)Кино и сериалы](https:\/\/dtf.ru\/cinema)\n\n[![](https:\/\/leonardo.osnova.io\/34be5067-2cdf-2eb3-d9af-415abb861967\/-\/scale_crop\/72x72\/)Творчество](https:\/\/dtf.ru\/craft)\n\n[![](https:\/\/leonardo.osnova.io\/1c00b5aa-00e4-5c78-a8ee-107725c1dcaf\/-\/scale_crop\/72x72\/)Музыка](https:\/\/dtf.ru\/music)\n\n[![](https:\/\/leonardo.osnova.io\/6fc2eb2e-d050-7bc1-f884-34721bdf353c\/-\/scale_crop\/72x72\/)Арт](https:\/\/dtf.ru\/art)\n\nПоказать все\n\nDTF\n\n[О проекте](https:\/\/dtf.ru\/about)\n\n[Правила](https:\/\/dtf.ru\/rules)\n\n[Реклама](https:\/\/dtf.ru\/ads)\n\n[Приложения](https:\/\/dtf.ru\/apps)\n\n[![](https:\/\/leonardo.osnova.io\/751d90a1-7427-570e-941c-5b1b5a64c118\/-\/scale_crop\/72x72\/)](https:\/\/dtf.ru\/jeangrey)\n\n[Денис Большаков](https:\/\/dtf.ru\/jeangrey)\n\n[9 сент](https:\/\/dtf.ru\/jeangrey\/4016109-saoundtrek-ostrova-sokrovisch)\n\n# Это не учебная тревога – всё это время на Яндекс-музыке был доступен полный саундтрек великого мультфильма «Остров сокровищ». Звучит всё ещё совершенно легендарно\n## Не то что бы я супер часто имею желание его слушать\nНо мультик уже настолько у меня в генетическом коде, что нет-нет, да временами вспоминается\n\nШАНС\n\nОН НЕ ПОЛУЧКА, НЕ АВАНС\n\nОН ВЫПАДАЕТ ТОЛЬКО РАЗ\n\nЛегендарно делали, всё ещё неиронично считаю этот саунд одним из лучших в истории мультипликации.\n\n[Слушать в Яндекс.Музыке](https:\/\/music.yandex.ru\/album\/5805857?utm_medium=copy_link&amp;ref_id=be0c8ae0-83de-4580-9ec2-bd97608bf3a3)\n\n[\\#большаковскийщитпост](https:\/\/dtf.ru\/tag\/%D0%B1%D0%BE%D0%BB%D1%8C%D1%88%D0%B0%D0%BA%D0%BE%D0%B2%D1%81%D0%BA%D0%B8%D0%B9%D1%89%D0%B8%D1%82%D0%BF%D0%BE%D1%81%D1%82)\n\n101\n\n13\n\n12\n\n4\n\n1\n\n1\n\n1\n\n1\n\n[57](https:\/\/dtf.ru\/jeangrey\/4016109-saoundtrek-ostrova-sokrovisch#comments)\n\n19\n\n1\\.4K\n\n57 комментариев\n\nЛучшие","attrs_readable_markdown":null,"meta_canonical":null}

3. Robots.txt Check

Query:

Response:

4. Spam/Ban Check

Query:

Response:

5. Seen Status Check

ℹ️ Skipped - page is already crawled

🚫

NOT INDEXABLE

✅

CRAWLED

7 months ago

🤖

ROBOTS ALLOWED

Page Info Filters

Filter	Status	Condition	Details
HTTP status	PASS	`download_http_code = 200`	HTTP 200
Age cutoff	FAIL	`download_stamp > now() - 6 MONTH`	7.2 months ago
History drop	PASS	`isNull(history_drop_reason)`	No drop reason
Spam/ban	PASS	`fh_dont_index != 1 AND ml_spam_score = 0`	ml_spam_score=0
Canonical	PASS	`meta_canonical IS NULL OR = '' OR = src_unparsed`	Not set

Page Details

Property	Value
URL	https://dtf.ru/jeangrey/4016109-saoundtrek-ostrova-sokrovisch
Last Crawled	2025-09-10 21:01:19 (7 months ago)
First Indexed	not set
HTTP Status Code	200
Meta Title	Это не учебная тревога – всё это время на Яндекс-музыке был доступен полный саундтрек великого мультфильма «Остров сокровищ». Звучит всё ещё совершенно легендарно — Денис Большаков на DTF
Meta Description	Саундтрек «Остров сокровищ», доступен на Яндекс-музыке, легендарная музыка, лучшие композиции мультфильмов, воспоминания о детстве
Meta Canonical	null
Boilerpipe Text	Но мультик уже настолько у меня в генетическом коде, что нет-нет, да временами вспоминается
Markdown	[Популярное](https://dtf.ru/popular) [Свежее](https://dtf.ru/new) [Моя лента](https://dtf.ru/my) [Сообщения](https://dtf.ru/m) [Рейтинг](https://dtf.ru/discovery) [Пополнить Steam Низкая комиссия](https://dtf.ru/pay/steam) Темы [![](https://leonardo.osnova.io/097c16c9-4459-5f8d-9da6-ce8e76831f3e/-/scale_crop/72x72/)Офтоп](https://dtf.ru/flood) [![](https://leonardo.osnova.io/e5348320-b11a-9419-fb85-f7b63e2de194/-/scale_crop/72x72/)Игры](https://dtf.ru/games) [![](https://leonardo.osnova.io/47a6c16b-ed6a-1847-a573-f27ab8c3dc07/-/scale_crop/72x72/)Гайды](https://dtf.ru/howto) [![](https://leonardo.osnova.io/685702b8-752b-57b8-b2c4-99664e6be259/-/scale_crop/72x72/)Hollow Knight](https://dtf.ru/hollow-knight) [![](https://leonardo.osnova.io/b5463920-7d83-df60-e73e-52d547bf5ae0/-/scale_crop/72x72/)Вопросы](https://dtf.ru/ask) [![](https://leonardo.osnova.io/fc1c9f9c-ab62-5bb1-b0bb-5674eb3502b2/-/scale_crop/72x72/)Ночной музпостинг](https://dtf.ru/muzposting) [![](https://leonardo.osnova.io/5d198df0-3ba4-6837-b9c3-ac8c04fb9181/-/scale_crop/72x72/)Кино и сериалы](https://dtf.ru/cinema) [![](https://leonardo.osnova.io/34be5067-2cdf-2eb3-d9af-415abb861967/-/scale_crop/72x72/)Творчество](https://dtf.ru/craft) [![](https://leonardo.osnova.io/1c00b5aa-00e4-5c78-a8ee-107725c1dcaf/-/scale_crop/72x72/)Музыка](https://dtf.ru/music) [![](https://leonardo.osnova.io/6fc2eb2e-d050-7bc1-f884-34721bdf353c/-/scale_crop/72x72/)Арт](https://dtf.ru/art) Показать все DTF [О проекте](https://dtf.ru/about) [Правила](https://dtf.ru/rules) [Реклама](https://dtf.ru/ads) [Приложения](https://dtf.ru/apps) [![](https://leonardo.osnova.io/751d90a1-7427-570e-941c-5b1b5a64c118/-/scale_crop/72x72/)](https://dtf.ru/jeangrey) [Денис Большаков](https://dtf.ru/jeangrey) [9 сент](https://dtf.ru/jeangrey/4016109-saoundtrek-ostrova-sokrovisch) # Это не учебная тревога – всё это время на Яндекс-музыке был доступен полный саундтрек великого мультфильма «Остров сокровищ». Звучит всё ещё совершенно легендарно ## Не то что бы я супер часто имею желание его слушать Но мультик уже настолько у меня в генетическом коде, что нет-нет, да временами вспоминается ШАНС ОН НЕ ПОЛУЧКА, НЕ АВАНС ОН ВЫПАДАЕТ ТОЛЬКО РАЗ Легендарно делали, всё ещё неиронично считаю этот саунд одним из лучших в истории мультипликации. [Слушать в Яндекс.Музыке](https://music.yandex.ru/album/5805857?utm_medium=copy_link&ref_id=be0c8ae0-83de-4580-9ec2-bd97608bf3a3) [\#большаковскийщитпост](https://dtf.ru/tag/%D0%B1%D0%BE%D0%BB%D1%8C%D1%88%D0%B0%D0%BA%D0%BE%D0%B2%D1%81%D0%BA%D0%B8%D0%B9%D1%89%D0%B8%D1%82%D0%BF%D0%BE%D1%81%D1%82) 101 13 12 4 1 1 1 1 [57](https://dtf.ru/jeangrey/4016109-saoundtrek-ostrova-sokrovisch#comments) 19 1\.4K 57 комментариев Лучшие
Readable Markdown	null
Shard	32 (laksa)
Root Hash	13179522910149441032
Unparsed URL	ru,dtf!/jeangrey/4016109-saoundtrek-ostrova-sokrovisch s443