🕷️ Crawler Inspector

URL Lookup

Direct Parameter Lookup

Raw Queries and Responses

1. Shard Calculation

Query:

Response:

Calculated Shard: 44 (from laksa034)

2. Crawled Status Check

Query:

curl -X POST \
  'http://laksa044.int.ahrefs:8124/' \
  -H 'Content-Type: text/plain' \
  -H 'X-ClickHouse-Database: crawler3' \
  -H 'Authorization: Basic YXBpOg==' \
  -d 'SELECT getAhrefsURLFromUnparsed(src_unparsed) AS found_url, ifNull(toUnixTimestamp(download_stamp), 0) AS crawl_time, ifNull(toUnixTimestamp(props_url_first_seen), 0) AS first_indexed_time, download_http_code AS http_code, src_unparsed AS src_unparsed, src_root_hash AS src_root_hash, history_drop_reason AS history_drop_reason, meta_title AS meta_title, meta_descriptions AS meta_descriptions, attrs_boilerpipe_text AS attrs_boilerpipe_text, attrs_markdown AS attrs_markdown, attrs_readable_markdown AS attrs_readable_markdown, meta_canonical AS meta_canonical FROM crawler3.page_info_local FINAL PREWHERE (src_root_hash, src_unparsed) IN ((getAhrefsRootHashFromUnparsed(getAhrefsUnparsedNoserviceFromURL(\'https://www.sisben.gov.co/Paginas/programas-sociales.html\')), getAhrefsUnparsedNoserviceFromURL(\'https://www.sisben.gov.co/Paginas/programas-sociales.html\'))) FORMAT JSONEachRow'

Response:

{"found_url":"https:\/\/www.sisben.gov.co\/Paginas\/programas-sociales.html","crawl_time":1776344506,"first_indexed_time":1703663615,"http_code":200,"src_unparsed":"co,gov,sisben!www,\/Paginas\/programas-sociales.html s443","src_root_hash":"1277973318225680044","history_drop_reason":null,"meta_title":"Programas Sociales","meta_descriptions":[],"attrs_boilerpipe_text":"\nLas entidades que administran los programas sociales\nson las encargadas de establecer las condiciones\nque deben cumplir las personas para\nacceder a estos programas\n, y definen los criterios de entrada, permanencia y salida de sus programas, incluyendo la clasificación en el Sisbén IV, tal como establece el Decreto 441 de 2017.\nRecuerda que estar registrado en el Sisbén no garantiza la entrada a un programa social.\nPrincipales programas sociales\nEn el siguiente listado podras encontrar enlaces a los sitios oficiales de los programas sociales que sean de tu interés.\nRecuerda que el Sisbén no asigna beneficios ni es responsable de la entrada, permanencia o salida de los programas sociales.\nEntidad\nProgramas sociales que ofrece\nMás información acerca del programa\nAgencia Nacional de Tierras\nAdjudicación de baldíos\nEnlace a sitio web\nEjército Nacional\nExención en el pago de la cuota de compensación militar\nEnlace a sitio web\nICBF\nAtención Integral a la Primera Infancia\nEnlace a sitio web\nInfancia\nEnlace a sitio web\nAdolescencia y Juventud\nEnlace a sitio web\nNutrición\nEnlace a sitio web\nProtección (Hogar gestor y otros similares)\nEnlace a sitio web\nFamilias y Comunidades\nEnlace a sitio web\nICETEX\nTú Eliges\nEnlace a sitio web\nMinisterio de Educación\nGeneración E Equidad\nEnlace a sitio web\nGeneración E Excelencia\nEnlace a sitio web\nMinisterio de Minas y Energía\nSubsidio Gas Licuado de Petróleo - GLP\nEnlace a sitio web\nMinisterio de Salud y Protección Social\nRégimen Subsidiado de Salud\nEnlace a sitio web\nMinisterio de Vivienda\nCasa Digna Vida Digna\nEnlace a sitio web\nVivienda Rural\nEnlace a sitio web\nProsperidad Social\nColombia Mayor\nEnlace a sitio web\nFamilias en Acción\nEnlace a sitio web\nJóvenes en Acción\nEnlace a sitio web\nRed Unidos\nEnlace a sitio web\nIngreso Solidario\nEnlace a sitio web\nCompensación de IVA\nEnlace a sitio web\nRESA\nEnlace a sitio web\nMi Negocio\nEnlace a sitio web\nEmprendimientos Colectivos\nEnlace a sitio web\nRegistraduría Nacional\nExención en el pago de la cédula de ciudadanía\nEnlace a sitio web\nUnidad de Alimentación Escolar\nPrograma de Alimentación Escolar PAE\nEnlace a sitio web\nUnidad para las Víctimas\nAtención Humanitaria\nEnlace a sitio web\n¿Qué es la focalización del gasto social y qué tiene que ver con los programas sociales?\nEl Estado destina recursos a los sectores menos favorecidos a través de programas sociales,\npermitiendo de esta manera mejorar sus condiciones y favoreciendo la igualdad en el país.\nCon la nueva metodología del Sisbén se desarrolló una clasificación cuyo resultado\nno es un índice cuantitativo,\nlo cual significa que\nya no existirá un puntaje de 0 a 100.\nEl Sisbén IV ordena la población\npor grupos.\nEl artículo 24 de la ley 1176 de 2007, define la focalización como \"el proceso mediante el cual se\ngarantiza que el gasto social\nse asigne a los grupos de población más pobre y vulnerable\"\n1. Identificación\nDefinición del instrumento que se utiliza para la escogencia de beneficiarios\n2. Selección\nDefinición del criterio que determina la condición de\nentrada o salida a un programa social\n3. Asignación\nDiseño del subsidio y el proceso de su entrega\n","attrs_markdown":null,"attrs_readable_markdown":null,"meta_canonical":"co,gov,sisben!wwwdev,\/Paginas\/que-es-sisben.html s443"}

3. Robots.txt Check

Query:

Response:

4. Spam/Ban Check

Query:

Response:

5. Seen Status Check

ℹ️ Skipped - page is already crawled

🚫

NOT INDEXABLE

✅

CRAWLED

2 days ago

🤖

ROBOTS ALLOWED

Page Info Filters

Filter	Status	Condition	Details
HTTP status	PASS	`download_http_code = 200`	HTTP 200
Age cutoff	PASS	`download_stamp > now() - 6 MONTH`	0.1 months ago
History drop	PASS	`isNull(history_drop_reason)`	No drop reason
Spam/ban	PASS	`fh_dont_index != 1 AND ml_spam_score = 0`	ml_spam_score=0
Canonical	FAIL	`meta_canonical IS NULL OR = '' OR = src_unparsed`	co,gov,sisben!wwwdev,/Paginas/que-es-sisben.html s443

Page Details

Property	Value
URL	https://www.sisben.gov.co/Paginas/programas-sociales.html
Last Crawled	2026-04-16 13:01:46 (2 days ago)
First Indexed	2023-12-27 07:53:35 (2 years ago)
HTTP Status Code	200
Meta Title	Programas Sociales
Meta Description	null
Meta Canonical	co,gov,sisben!wwwdev,/Paginas/que-es-sisben.html s443
Boilerpipe Text	Las entidades que administran los programas sociales son las encargadas de establecer las condiciones que deben cumplir las personas para acceder a estos programas , y definen los criterios de entrada, permanencia y salida de sus programas, incluyendo la clasificación en el Sisbén IV, tal como establece el Decreto 441 de 2017. Recuerda que estar registrado en el Sisbén no garantiza la entrada a un programa social. Principales programas sociales En el siguiente listado podras encontrar enlaces a los sitios oficiales de los programas sociales que sean de tu interés. Recuerda que el Sisbén no asigna beneficios ni es responsable de la entrada, permanencia o salida de los programas sociales. Entidad Programas sociales que ofrece Más información acerca del programa Agencia Nacional de Tierras Adjudicación de baldíos Enlace a sitio web Ejército Nacional Exención en el pago de la cuota de compensación militar Enlace a sitio web ICBF Atención Integral a la Primera Infancia Enlace a sitio web Infancia Enlace a sitio web Adolescencia y Juventud Enlace a sitio web Nutrición Enlace a sitio web Protección (Hogar gestor y otros similares) Enlace a sitio web Familias y Comunidades Enlace a sitio web ICETEX Tú Eliges Enlace a sitio web Ministerio de Educación Generación E Equidad Enlace a sitio web Generación E Excelencia Enlace a sitio web Ministerio de Minas y Energía Subsidio Gas Licuado de Petróleo - GLP Enlace a sitio web Ministerio de Salud y Protección Social Régimen Subsidiado de Salud Enlace a sitio web Ministerio de Vivienda Casa Digna Vida Digna Enlace a sitio web Vivienda Rural Enlace a sitio web Prosperidad Social Colombia Mayor Enlace a sitio web Familias en Acción Enlace a sitio web Jóvenes en Acción Enlace a sitio web Red Unidos Enlace a sitio web Ingreso Solidario Enlace a sitio web Compensación de IVA Enlace a sitio web RESA Enlace a sitio web Mi Negocio Enlace a sitio web Emprendimientos Colectivos Enlace a sitio web Registraduría Nacional Exención en el pago de la cédula de ciudadanía Enlace a sitio web Unidad de Alimentación Escolar Programa de Alimentación Escolar PAE Enlace a sitio web Unidad para las Víctimas Atención Humanitaria Enlace a sitio web ¿Qué es la focalización del gasto social y qué tiene que ver con los programas sociales? El Estado destina recursos a los sectores menos favorecidos a través de programas sociales, permitiendo de esta manera mejorar sus condiciones y favoreciendo la igualdad en el país. Con la nueva metodología del Sisbén se desarrolló una clasificación cuyo resultado no es un índice cuantitativo, lo cual significa que ya no existirá un puntaje de 0 a 100. El Sisbén IV ordena la población por grupos. El artículo 24 de la ley 1176 de 2007, define la focalización como "el proceso mediante el cual se garantiza que el gasto social se asigne a los grupos de población más pobre y vulnerable" 1. Identificación Definición del instrumento que se utiliza para la escogencia de beneficiarios 2. Selección Definición del criterio que determina la condición de entrada o salida a un programa social 3. Asignación Diseño del subsidio y el proceso de su entrega
Markdown	null
Readable Markdown	null
Shard	44 (laksa)
Root Hash	1277973318225680044
Unparsed URL	co,gov,sisben!www,/Paginas/programas-sociales.html s443