- Artículo que extrae recomendaciones de libros de hilos de Hacker News (HN) usando la API de ChatGPT
- El autor analizó casi 200 historias de HN que incluían la palabra "book" en el título y no enlazaban a otras páginas
- El autor usó la API de GPT para clasificar los datos y generar la información en formato JSON
- Los datos se obtuvieron de la API de Hacker News, y el autor llamó a la API de Chat Completions para extraer del texto el título del libro, autor y URL
- Se listaron las 50 principales recomendaciones de libros, y "Structure and Interpretation of Computer Programs" de Abelson y Sussman fue el más recomendado
- Se detectó que la API a veces no devolvía JSON válido, especialmente cuando ChatGPT respondía a un comentario como "thanks" o hacía una pregunta
- El autor diseñó el prompt para descartar respuestas sin título, porque ChatGPT a veces incluía menciones del autor sin el título de un libro específico
- Procesar 57k comentarios con la API de GPT 3.5 Turbo costó alrededor de $40
- El autor encontró que incluso con temperatura 0, los resultados de GPT variaban entre llamadas, mostrando más volatilidad que modelos GPT-3 anteriores
- El autor descubrió que GPT podía identificar enlaces en el texto, pero era necesario quitar las etiquetas HTML para evitar que eligiera texto de enlace truncado en lugar de la URL
- El autor compartió ejemplos de la salida JSON de ChatGPT y del prompt usado para la tarea
- Los datos brutos generados por GPT se compartieron ordenados por título para análisis adicional
- Como ejercicio de aprendizaje, el autor añadió enlaces de afiliado de Amazon a las URL de Amazon en la tabla
1 comentarios
Opiniones en Hacker News