Tema: Instalar IA en windows 10 para textos

Escribe un mensaje

Mensajes

mes_nit

28 Jun 2020 17:57

Mensajes: 9598

Visores

Oculus Quest

Oculus Quest 2

Air Link

Meta Quest 3

mes_nit » 28 SEP 2024 19:25

Hola, quiero trastear con la IA para que me analice textos. Hace tiempo se comentó el tema en el foro pero estara perdido no se donde.

El objetivo es aprender el uso de la IA en local.

Mi PC con el windows 10:
i7 6700k 32ram
disco M2
gpu nvidia 2080ti

La idea es darle una carpeta con archivos de texto/word y que me analice y clasifique/etiquete esos archivos de texto.

Ejemplo, una persona que lleva décadas escribiendo semanalmente una columna en el periódico. Por poco lo tiene todo en una misma carpeta, entonces igual la IA puede ahorrar muchas horas de clasificar todos esos documentos.

Al final quiero quitar todo el formato a los textos y meterlos dentro de una web, pero me preguntaba si podia poner a trabajar la IA para ayudarme.

No se por donde empezar, que IA gratuita me recomendais?

0
cercata

5 Dic 2016 09:41

Mensajes: 26326

Ubicación: Bilbao

Visores

PlayStation VR

Oculus Go

Oculus Quest

Oculus Link

Oculus Quest 2

PlayStation VR2

Meta Quest 3

cercata » 28 SEP 2024 20:00
» Respuesta a mes_nit

De que tamaño estariamos hablando cada documento ? En funcion del tamaño te hace falta mas o menos tamaño de contexto.

Para hacer pruebas lo mejor es GPT4ALL y LM STUDIO, puedes probar un monton de modelos, pedirles que a todos que te sumarizen el documento, y ver luego que modelo te gusta mas. Si el documento tiene imagenes, la cosa se complica.

Y luego si quieres automatizar eso para que te lo haga en muchos documentos, pues tendrias que tirar de API y conectarte al modelo desde un lenguaje de programación. Igual tal vez lo puedes hacer con los famosos agentes sin tener que programar ...

0
mes_nit

28 Jun 2020 17:57

Mensajes: 9598

Visores

Oculus Quest

Oculus Quest 2

Air Link

Meta Quest 3

mes_nit » 28 SEP 2024 20:11
» Respuesta a cercata

cercataDe que tamaño estariamos hablando cada documento ? En funcion del tamaño te hace falta mas o menos tamaño de contexto.

Para hacer pruebas lo mejor es GPT4ALL y LM STUDIO, puedes probar un monton de modelos, pedirles que a todos que te sumarizen el documento, y ver luego que modelo te gusta mas. Si el documento tiene imagenes, la cosa se complica.

Y luego si quieres automatizar eso para que te lo haga en muchos documentos, pues tendrias que tirar de API y conectarte al modelo desde un lenguaje de programación. Igual tal vez lo puedes hacer con los famosos agentes sin tener que programar ...

bueno soy programador web (php-js) pero ese lenguaje ni idea, supongo que se lo puedo pedir a chatgpt y aprender, aprender eso sera mas rapido que clasificar miles de documentos. Me esta sorprendiendo lo fácil que es aprender con la IA

son documentos de una o dos páginas como mucho, lo típico de una columna del periódico. Y habran documentos que no son de eso tambien.

chatgpt me recomienda
Hugging Face Transformers + PyTorch o TensorFlow: Hugging Face ofrece modelos preentrenados para labores de procesamiento del lenguaje natural (NLP) como la clasificación de textos. Puedes utilizarlo con PyTorch o TensorFlow, que aprovechan tu GPU para acelerar los cálculos.

Me fuí tambien a instalar la nueva Llama de Meta pero como pedía pyton entonces me eché para atrás.

No hace mucho en el foro comentasteis de un programa de windows que era muy fácil de configurar. Pero vaya que si hay que programar a programar. La cuestión que pueda ir dividiendo las tareas y iré pasando esos documentos a un formato para trabajarlos mejor y al final meterlos en una base de datos. Y de ahí lo meteré en un Wordpress o un Joomla.

Miraré GPT4ALL y LM STUDIO.

0
cercata

5 Dic 2016 09:41

Mensajes: 26326

Ubicación: Bilbao

Visores

PlayStation VR

Oculus Go

Oculus Quest

Oculus Link

Oculus Quest 2

PlayStation VR2

Meta Quest 3

cercata » 28 SEP 2024 23:04

Los transformers de hugging face yo los he visto usar desde python, supongo que se podrá con mas lenguajes, pero si quieres darle caña al tema IA, lo mejor es aprender Python. Es mas intuitivo que php y perl ... por algo triunfa como la espuma Python !!!!

0
mes_nit

28 Jun 2020 17:57

Mensajes: 9598

Visores

Oculus Quest

Oculus Quest 2

Air Link

Meta Quest 3

mes_nit » 2 OCT 2024 4:34
» Respuesta a cercata

cercataLos transformers de hugging face yo los he visto usar desde python, supongo que se podrá con mas lenguajes, pero si quieres darle caña al tema IA, lo mejor es aprender Python. Es mas intuitivo que php y perl ... por algo triunfa como la espuma Python !!!!
De momento no me entero de la película de como va GPT4All, mañana le vuelvo a dar a ver.

El python si, estoy consiguiendo la primera parte del proyecto con python, lo que es pasar de docx y doc a txt y jugar con las fechas por si se habia jugado alguna. Replicando la misma estructura de carpetas...

Mola el python, aunque chatgpt me lo da todo masticado... nos haremos buenos amigos yo chatgpt y python, hacia cosas así con la línea de comandos y con linux. Aunque chatgpt me esta guiando y estoy usando unas cuantas librerias que sin esa ayuda me tiraria horas buscando.

Bueno y he instalado el cuda y otra libreria de cuda pero mañana veo a ver si pesco algo de Gpt4All. Una vez con los textos a txt quiero ver la magia. Que me los clasifique que los relacione y que me los resuma, y así quedará para meter en un wordpress o un joomla (todavía no lo tengo decidido)

De Llama no hay una para hacer cosas así con los textos? seria instalarla y que aproveche la gpu.

0

Escribe un mensaje

Usuarios navegando por este foro:

francisco_21 B.O.B. 3 Anónimo