Chronometrica vs Trudax Reddit Scraper Lite para investigar palabras clave

Elige primero los registros que necesitas

La investigación de palabras clave necesita una especificación clara de los resultados. Es decir, una declaración escrita de qué registros necesitas y qué debe explicar cada registro.

Para un estudio específico, esa declaración podría ser: recopilar publicaciones para 1 consulta en 2 comunidades concretas, conservar sus datos de origen y revisar su significado. Debes saber qué comunidad solicitaste, dónde apareció realmente cada publicación y qué búsquedas devolvieron resultados incompletos.

Un trabajo de recopilación más amplio necesita distintos tipos de registros. Trudax documenta publicaciones, comentarios, comunidades y usuarios, además de búsquedas en subreddits, opciones de ordenación y filtros de fecha. Ese mayor alcance es la razón principal para elegirlo en un trabajo que combine varias necesidades de recopilación. Documentación de Trudax.

Fuentes: Chronometrica, Trudax.

Anota los tipos de registros necesarios antes de configurar cualquiera de las herramientas. Una lista de publicaciones no puede responder a una pregunta que requiere los comentarios de cada publicación. Tampoco necesitas una recopilación grande si la decisión solo requiere un conjunto pequeño de ejemplos revisados.

Este artículo te ayuda a elegir el recopilador y definir sus resultados. Si buscas un método para mejorar la relevancia de las consultas, consulta Cómo seguir palabras clave en Reddit con menos resultados irrelevantes.

Qué deja explícito Chronometrica

Chronometrica documenta 5 parámetros de búsqueda: `query`, `subreddits` opcional, `maxResults`, `sort` y `time`. Si indicas subreddits concretos, la entrada acepta entre 1 y 20. Este conjunto pequeño de parámetros se adapta a una búsqueda específica de publicaciones. Documentación de Chronometrica.

Las filas que devuelve conservan `inputQuery`, `requestedSubreddit`, `matchedSubreddit`, `canonicalPostUrl`, `postId` y campos de disponibilidad. Su `OUTPUT` también separa los resultados de las búsquedas, incluidos los estados sin resultados, parcial y fallido. Estos datos permiten comprobar el origen de cada publicación guardada y el estado de cada búsqueda. Documentación de Chronometrica.

La comunidad solicitada y la comunidad encontrada responden a preguntas distintas. `requestedSubreddit` registra la comunidad usada en la búsqueda. `matchedSubreddit` registra la comunidad asociada con la coincidencia devuelta. Compara ambos campos durante la revisión. Si un registro necesita más comprobaciones, deja esa cuestión visible hasta resolverla.

El contexto de la consulta importa cuando después comparas resultados de distintas búsquedas. Una publicación que aparece en más de una recopilación de investigación sigue necesitando un vínculo claro con la búsqueda que la encontró. Conserva el `inputQuery` proporcionado en lugar de depender de un nombre de archivo o de tu memoria.

Usa `postId` para identificar una publicación en tus registros de investigación. Conserva `canonicalPostUrl` para que una persona que revise el trabajo pueda volver a la fuente. La información de disponibilidad te ayuda a registrar si la fuente se puede comprobar. Si falta un valor o no está disponible, conserva ese estado. No lo sustituyas por 0.

Estos campos permiten comprobar el conjunto de fuentes: las comunidades y los parámetros de búsqueda que elegiste para el estudio. No demuestran que una publicación sea relevante. Para decidirlo, todavía debes leer la publicación y evaluar si responde a tu pregunta de investigación.

Comprende el límite total antes de ejecutar

Un límite es el número máximo de registros que una ejecución puede guardar. El parámetro `maxResults` de Chronometrica establece un límite total de publicaciones únicas guardadas en toda la ejecución. No es un límite independiente para cada subreddit. El esquema comprobado permite valores de 1 a 10.000. Documentación y esquema de Chronometrica.

Con 2 subreddits concretos y `maxResults` establecido en `12`, prevé un máximo de 12 publicaciones únicas guardadas en total. No preveas 24. No des por hecho que cada comunidad aportará 6 publicaciones.

Esta diferencia afecta al diseño de la investigación. Un límite total puede servir para una primera revisión de ejemplos relevantes. No puede garantizar muestras del mismo tamaño en todas las comunidades. Si necesitas cantidades iguales, define ese requisito antes de recopilar y comprueba si tu plan de recopilación puede cumplirlo.

Si necesitas todas las publicaciones que coincidan con la búsqueda y esperas más de 10.000 publicaciones únicas en una ejecución, Chronometrica no cumple ese requisito de ejecución única. Tampoco promete una cobertura completa de Reddit. Alcanzar el límite es motivo para tratar las publicaciones guardadas como una muestra limitada, no como toda la evidencia disponible. Documentación de Chronometrica.

Obtener menos resultados no demuestra que no existan otras publicaciones relevantes. Los resultados de las búsquedas, la disponibilidad de las fuentes, la consulta elegida y tu lista de comunidades afectan a las conclusiones que puedes sacar.

Empieza con una entrada pequeña y comprobada

La tarea pública Search Posts in Subreddits ofrece una configuración inicial. Una tarea es una configuración de entrada guardada. Revisa su entrada antes de ejecutarla; la existencia de la página pública no confirma su configuración guardada actual.

Este ejemplo usa los nombres de campos y los valores comprobados:

{
  "query": "open source AI",
  "subreddits": [
    "LocalLLaMA",
    "MachineLearning"
  ],
  "maxResults": 12,
  "sort": "new",
  "time": "month"
}

La entrada proporcionada superó una comprobación con la copia capturada del esquema JSON público. Un esquema JSON define los campos y valores de entrada permitidos. Esa comprobación confirma la estructura de la entrada. No demuestra que una búsqueda en vivo vaya a devolver publicaciones. No se realizó ninguna ejecución de recopilación para esta comparación. Esquema de entrada de Chronometrica.

Sustituye la consulta y los nombres de las comunidades por las fuentes públicas que quieras usar. Elige parámetros de período y ordenación compatibles que se ajusten al estudio. Regístralos antes de recopilar para que otra persona pueda entender qué búsqueda pretendías realizar.

Por ejemplo, una revisión de conversaciones recientes necesita un período definido. Una revisión de ejemplos útiles necesita una regla de relevancia escrita. Esas decisiones deben figurar en el plan de investigación, aunque la entrada de recopilación sea pequeña.

Un ejemplo ficticio: 12 publicaciones guardadas y 9 aceptadas

El siguiente ejemplo es ficticio. No es una prueba del Actor, un conjunto de datos en vivo ni un resultado medido de un cliente.

Una persona que realiza el análisis estudia las conversaciones sobre IA de código abierto en 2 subreddits concretos. Establece un límite total de 12 publicaciones únicas. Para este estudio, una publicación relevante debe tratar una decisión práctica sobre el uso de un modelo de IA de código abierto. Una mención de pasada de la expresión no cumple el requisito.

La búsqueda ficticia guarda 7 publicaciones únicas de una comunidad y 5 de la otra:

`7 + 5 = 12 unique saved posts`

La persona compara `requestedSubreddit` con `matchedSubreddit` y conserva cada `postId`. Después lee las 12 publicaciones. Hay 3 que contienen la expresión buscada, pero no responden a la pregunta del estudio. Las otras 9 cumplen el requisito:

`12 saved posts − 3 irrelevant posts = 9 accepted posts`

Las 12 pueden ser resultados de búsqueda válidos, aunque solo 9 se conviertan en evidencia útil. El éxito de la recopilación y la relevancia para la investigación son comprobaciones distintas.

El ejemplo también muestra por qué debes interpretar con cuidado un límite total. El límite era de 12 entre ambas comunidades. No era `12 × 2 = 24`. El reparto de 7 y 5 no demuestra que una comunidad hable del tema con más frecuencia. Solo describe la muestra guardada.

La persona puede usar las 9 publicaciones aceptadas para estudiar las preguntas y preocupaciones que contienen. No puede usar solo esta pequeña muestra de palabras clave para estimar la frecuencia de esas preocupaciones en todo Reddit.

Usa un método de aceptación de 5 pasos

1. Define la pregunta y el conjunto de fuentes

Indica la palabra clave, los subreddits, el período previsto y el criterio de ordenación. Después escribe una frase que defina qué es una publicación relevante.

Una regla de relevancia útil identifica el tema y la evidencia necesaria. «Contiene nuestra palabra clave» es una regla de recopilación. «Describe un problema práctico con la categoría de producto» se acerca más a una regla de investigación. Elige la regla que sirva para tu decisión.

Mantén una tabla de control de búsquedas en tus notas de investigación. Registra la consulta, las comunidades solicitadas, los parámetros previstos, el límite total y la fecha de recopilación. Esta tabla explica qué le pediste al recopilador. También evita que quienes lean el trabajo después traten una búsqueda sin definir como un estudio completo.

2. Selecciona el modo de recopilación

Usa los tipos de registros necesarios para elegir el producto. Para un conjunto de datos centrado en la búsqueda de publicaciones, los campos documentados y los resultados de búsqueda de Chronometrica se ajustan al método de aceptación. Documentación de Chronometrica.

Para usar el modo de búsqueda de Trudax, vacía `startUrls` o usa una URL de búsqueda elegida para ese fin. Su README indica que `startUrls` tiene prioridad sobre los parámetros de búsqueda. Documentación de Trudax.

Comprueba la entrada real antes de empezar. Incluso un producto adecuado puede devolver una recopilación inadecuada si la entrada no expresa el trabajo que quieres realizar.

3. Establece el límite y conserva observaciones únicas

Elige un límite total de publicaciones guardadas que puedas revisar. La primera recopilación debe ser lo bastante pequeña como para detectar reglas de relevancia poco claras antes de obtener una muestra mayor.

Mantén 1 observación de investigación por cada publicación única. Conserva el identificador de la publicación, la URL de origen, el contexto de la consulta y los campos de comunidad. Separa tus notas de revisión del texto recopilado para que los lectores puedan distinguir el contenido de la fuente de tu valoración.

No des por hecho que todas las comunidades tendrán el mismo número de filas. Si una comparación necesita grupos equilibrados, establece el equilibrio como una condición explícita de aceptación. Compruébalo después de recopilar y antes de comparar los grupos.

4. Comprueba los resultados y los datos de origen

Lee los resultados de cada búsqueda, además de las filas de publicaciones. Una búsqueda sin resultados, una parcial y una fallida requieren un tratamiento distinto. Chronometrica documenta esos estados por separado. Documentación de Chronometrica.

Un resultado vacío indica qué devolvió esa búsqueda. No demuestra que no existan conversaciones sobre el tema. Un resultado parcial exige indicar de forma visible el límite de la conclusión. Una búsqueda fallida sigue sin resolverse hasta que puedas evaluarla o repetirla.

Compara las comunidades solicitadas con las encontradas, revisa los identificadores de las publicaciones y conserva la información de disponibilidad. Mantén las búsquedas sin resolver en la tabla de control de búsquedas. Si las eliminas, la recopilación completada parecerá más amplia de lo que permite afirmar la evidencia.

5. Lee cada publicación y registra una decisión

Usa un código breve de aceptación en tus notas. Por ejemplo, usa `accept`, `reject` y `unknown`. Son etiquetas sugeridas para el análisis, no afirmaciones sobre los campos de salida del Actor.

Acepta una publicación si su contenido cumple tu regla de relevancia. Recházala si está claro que no la cumple. Usa `unknown` si la falta de contenido o un significado poco claro impiden tomar una decisión. Añade una razón breve para que otra persona pueda comprobar tu valoración.

Informa por separado de las publicaciones guardadas, aceptadas, rechazadas y sin resolver. Registra 0 solo cuando hayas comprobado que el recuento es 0. Mantén visibles los valores ausentes o desconocidos.

Este método produce una muestra que se puede revisar. No convierte los fragmentos de búsqueda ni las publicaciones devueltas en una medida de la frecuencia del tema en todo Reddit. Para obtener más ayuda al definir los límites del estudio, consulta Alcance de la investigación de clientes en Reddit.

Añade seguimiento solo cuando la muestra sea útil

Una recopilación de palabras clave se convierte en seguimiento cuando la repites a lo largo del tiempo y actúas ante los cambios. Esta comparación no demuestra que exista un envío automático de alertas. Si necesitas notificaciones, añade pasos independientes para programar las búsquedas y enviar los resultados.

Primero confirma que la consulta produce publicaciones útiles. Después elige con qué frecuencia recopilar, cómo identificar las publicaciones ya revisadas y quién recibirá los resultados aceptados. Conservar `postId` proporciona a tu proceso un identificador de publicación que puede comparar con observaciones anteriores. Tu proceso de seguimiento debe realizar esa comprobación.

Conserva los resultados de recopilación junto con cada búsqueda programada. De lo contrario, una búsqueda fallida podría parecer un período sin actividad. Mantén visibles los resultados desconocidos por la misma razón.

Establece también una regla de revisión para las alertas. Una mención de una palabra clave puede merecer una revisión sin justificar una notificación inmediata. El umbral adecuado depende de la acción que pueda realizar quien la recibe. Prueba esa decisión con una muestra pequeña y revisada antes de aumentar el volumen de recopilación.