vcasas commited on
Commit
bfbdff8
verified
1 Parent(s): 7e18e54

Update app.py

Browse files
Files changed (1) hide show
  1. app.py +34 -20
app.py CHANGED
@@ -1,32 +1,46 @@
1
  import os
2
- from llama_index import VectorStoreIndex
3
- from llama_index.readers import PDFReader
 
 
4
  from sentence_transformers import SentenceTransformer
5
 
6
- # Configurar el modelo de Hugging Face (local)
7
- model = SentenceTransformer('all-MiniLM-L6-v2') # Puedes usar otro modelo que te guste
 
 
 
 
8
 
9
- # Funci贸n para cargar el archivo PDF y extraer los documentos
10
- def load_documents_from_pdf(pdf_path):
11
- # Usamos PDFReader para leer el PDF
12
- pdf_reader = PDFReader()
13
- documents = pdf_reader.load_data(pdf_path)
14
- return documents
15
-
16
- # Crear el 铆ndice a partir del archivo PDF
17
  def create_index_from_pdf(pdf_path):
18
- documents = load_documents_from_pdf(pdf_path)
 
 
 
 
19
 
20
- # Obtener los embeddings del modelo Hugging Face
21
- embeddings = model.encode([doc.text for doc in documents])
22
 
23
- # Crear el 铆ndice con los embeddings generados
24
  index = VectorStoreIndex.from_documents(documents, embed_model=embeddings)
25
  return index
26
 
27
- # Ruta del archivo PDF
28
- pdf_path = 'ruta/a/tu/pdf.pdf'
 
 
 
 
29
 
30
- # Crear el 铆ndice
31
  index = create_index_from_pdf(pdf_path)
32
- print("脥ndice creado exitosamente.")
 
 
 
 
 
 
 
 
1
  import os
2
+ import requests
3
+ from llama_index.core import VectorStoreIndex
4
+ from llama_index.readers.file import PDFReader
5
+ import gradio as gr
6
  from sentence_transformers import SentenceTransformer
7
 
8
+ # Funci贸n para descargar el archivo PDF desde una URL
9
+ def download_pdf(url, destination):
10
+ os.makedirs(os.path.dirname(destination), exist_ok=True)
11
+ response = requests.get(url)
12
+ with open(destination, 'wb') as f:
13
+ f.write(response.content)
14
 
15
+ # Funci贸n para crear el 铆ndice a partir del PDF
 
 
 
 
 
 
 
16
  def create_index_from_pdf(pdf_path):
17
+ pdf_reader = PDFReader() # Inicializar el PDFReader sin la ruta del archivo
18
+ documents = pdf_reader.load_data(file=pdf_path) # Pasar la ruta del archivo, no el archivo abierto
19
+
20
+ # Inicializar el modelo de Hugging Face para generar embeddings
21
+ model = SentenceTransformer('all-MiniLM-L6-v2') # Puedes elegir otro modelo de Hugging Face
22
 
23
+ # Generar embeddings para los documentos
24
+ embeddings = [model.encode(doc.text) for doc in documents]
25
 
26
+ # Crear el 铆ndice usando los embeddings generados
27
  index = VectorStoreIndex.from_documents(documents, embed_model=embeddings)
28
  return index
29
 
30
+ # Ruta del archivo PDF a descargar
31
+ pdf_url = 'https://www.boe.es/buscar/pdf/1995/BOE-A-1995-25444-consolidado.pdf'
32
+ pdf_path = './BOE-A-1995-25444-consolidado.pdf'
33
+
34
+ # Descargar el PDF
35
+ download_pdf(pdf_url, pdf_path)
36
 
37
+ # Crear el 铆ndice a partir del PDF
38
  index = create_index_from_pdf(pdf_path)
39
+
40
+ # Funci贸n de b煤squeda en el 铆ndice
41
+ def search_pdf(query):
42
+ response = index.query(query)
43
+ return response
44
+
45
+ # Interfaz Gradio
46
+ gr.Interface(fn=search_pdf, inputs="text", outputs="text").launch()