Rich Skrenta es el director ejecutivo de la organización sin fines de lucro Common Crawl y crea las bases de datos de texto más grandes del mundo. Lo alimenta a grandes modelos de lenguaje como Chat-GPT y se defiende de la sospecha de que está haciendo algo prohibido.
Pequeños robots buscan constantemente en la World Wide Web para hacer una copia.
¿Por qué el mundo necesita Common Crawl?