Spaces:
Running
on
T4
Running
on
T4
File size: 8,152 Bytes
b9dea2c 493daef ee94965 94a609f f51fa47 493daef f51fa47 493daef 94a609f 493daef e19a6a7 7d42bca 493daef f51fa47 7d42bca 94a609f 7d42bca f51fa47 7d42bca f51fa47 e19a6a7 94a609f 7d42bca e19a6a7 7d42bca e19a6a7 5d72698 94a609f 7d42bca e19a6a7 7d42bca e19a6a7 f51fa47 94a609f 7d42bca e19a6a7 7d42bca e19a6a7 7d42bca e19a6a7 94a609f 7d42bca e19a6a7 7d42bca e19a6a7 7d42bca e19a6a7 7d42bca e19a6a7 94a609f 7d42bca 493daef 94a609f 7d42bca 94a609f 7d42bca 94a609f 7d42bca 94a609f f51fa47 7d42bca 94a609f f51fa47 493daef 7d42bca 94a609f |
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152 153 154 155 156 157 158 159 160 161 162 163 164 165 166 167 168 169 170 171 172 173 174 175 176 |
import gradio as gr
import logging
import os
import json
from PIL import Image
import torch
from surya.ocr import run_ocr
from surya.detection import batch_text_detection
from surya.layout import batch_layout_detection
from surya.ordering import batch_ordering
from surya.model.detection.model import load_model as load_det_model, load_processor as load_det_processor
from surya.model.recognition.model import load_model as load_rec_model
from surya.model.recognition.processor import load_processor as load_rec_processor
from surya.settings import settings
from surya.model.ordering.processor import load_processor as load_order_processor
from surya.model.ordering.model import load_model as load_order_model
# Configuração do TorchDynamo
torch._dynamo.config.capture_scalar_outputs = True
# Configuração de logging
logging.basicConfig(level=logging.DEBUG, format='%(asctime)s - %(levelname)s - %(message)s')
logger = logging.getLogger(__name__)
# Configuração de variáveis de ambiente
logger.info("Configurando variáveis de ambiente para otimização de performance")
os.environ["RECOGNITION_BATCH_SIZE"] = "512"
os.environ["DETECTOR_BATCH_SIZE"] = "36"
os.environ["ORDER_BATCH_SIZE"] = "32"
os.environ["RECOGNITION_STATIC_CACHE"] = "true"
# Carregamento de modelos
logger.info("Iniciando carregamento dos modelos...")
try:
logger.debug("Carregando modelo e processador de detecção...")
det_processor, det_model = load_det_processor(), load_det_model()
logger.debug("Modelo e processador de detecção carregados com sucesso")
except Exception as e:
logger.error(f"Erro ao carregar modelo de detecção: {e}")
raise
try:
logger.debug("Carregando modelo e processador de reconhecimento...")
rec_model, rec_processor = load_rec_model(), load_rec_processor()
logger.debug("Modelo e processador de reconhecimento carregados com sucesso")
except Exception as e:
logger.error(f"Erro ao carregar modelo de reconhecimento: {e}")
raise
try:
logger.debug("Carregando modelo e processador de layout...")
layout_model = load_det_model(checkpoint=settings.LAYOUT_MODEL_CHECKPOINT)
layout_processor = load_det_processor(checkpoint=settings.LAYOUT_MODEL_CHECKPOINT)
logger.debug("Modelo e processador de layout carregados com sucesso")
except Exception as e:
logger.error(f"Erro ao carregar modelo de layout: {e}")
raise
try:
logger.debug("Carregando modelo e processador de ordenação...")
order_model = load_order_model()
order_processor = load_order_processor()
logger.debug("Modelo e processador de ordenação carregados com sucesso")
except Exception as e:
logger.error(f"Erro ao carregar modelo de ordenação: {e}")
raise
logger.info("Todos os modelos foram carregados com sucesso")
# Compilação do modelo de reconhecimento
logger.info("Iniciando compilação do modelo de reconhecimento...")
try:
rec_model.decoder.model = torch.compile(rec_model.decoder.model)
logger.info("Compilação do modelo de reconhecimento concluída com sucesso")
except Exception as e:
logger.error(f"Erro durante a compilação do modelo de reconhecimento: {e}")
logger.warning("Continuando sem compilação do modelo")
class CustomJSONEncoder(json.JSONEncoder):
def default(self, obj):
if hasattr(obj, '__dict__'):
return obj.__dict__
return super().default(obj)
def serialize_result(result):
return json.dumps(result, cls=CustomJSONEncoder, indent=2)
def ocr_workflow(image, langs):
logger.info(f"Iniciando workflow OCR com idiomas: {langs}")
try:
image = Image.open(image.name)
logger.debug(f"Imagem carregada: {image.size}")
predictions = run_ocr([image], [langs.split(',')], det_model, det_processor, rec_model, rec_processor)
logger.info("Workflow OCR concluído com sucesso")
return serialize_result(predictions)
except Exception as e:
logger.error(f"Erro durante o workflow OCR: {e}")
return serialize_result({"error": str(e)})
def text_detection_workflow(image):
logger.info("Iniciando workflow de detecção de texto")
try:
image = Image.open(image.name)
logger.debug(f"Imagem carregada: {image.size}")
predictions = batch_text_detection([image], det_model, det_processor)
logger.info("Workflow de detecção de texto concluído com sucesso")
return serialize_result(predictions)
except Exception as e:
logger.error(f"Erro durante o workflow de detecção de texto: {e}")
return serialize_result({"error": str(e)})
def layout_analysis_workflow(image):
logger.info("Iniciando workflow de análise de layout")
try:
image = Image.open(image.name)
logger.debug(f"Imagem carregada: {image.size}")
line_predictions = batch_text_detection([image], det_model, det_processor)
logger.debug(f"Detecção de linhas concluída. Número de linhas detectadas: {len(line_predictions[0].bboxes)}")
layout_predictions = batch_layout_detection([image], layout_model, layout_processor, line_predictions)
logger.info("Workflow de análise de layout concluído com sucesso")
return serialize_result(layout_predictions)
except Exception as e:
logger.error(f"Erro durante o workflow de análise de layout: {e}")
return serialize_result({"error": str(e)})
def reading_order_workflow(image):
logger.info("Iniciando workflow de ordem de leitura")
try:
image = Image.open(image.name)
logger.debug(f"Imagem carregada: {image.size}")
line_predictions = batch_text_detection([image], det_model, det_processor)
logger.debug(f"Detecção de linhas concluída. Número de linhas detectadas: {len(line_predictions[0].bboxes)}")
layout_predictions = batch_layout_detection([image], layout_model, layout_processor, line_predictions)
logger.debug(f"Análise de layout concluída. Número de elementos de layout: {len(layout_predictions[0].bboxes)}")
bboxes = [pred.bbox for pred in layout_predictions[0].bboxes]
order_predictions = batch_ordering([image], [bboxes], order_model, order_processor)
logger.info("Workflow de ordem de leitura concluído com sucesso")
return serialize_result(order_predictions)
except Exception as e:
logger.error(f"Erro durante o workflow de ordem de leitura: {e}")
return serialize_result({"error": str(e)})
with gr.Blocks(theme=gr.themes.Soft()) as demo:
gr.Markdown("# Análise de Documentos com Surya")
with gr.Tab("OCR"):
gr.Markdown("## Reconhecimento Óptico de Caracteres")
with gr.Row():
ocr_input = gr.File(label="Carregar Imagem ou PDF")
ocr_langs = gr.Textbox(label="Idiomas (separados por vírgula)", value="en")
ocr_button = gr.Button("Executar OCR")
ocr_output = gr.JSON(label="Resultados OCR")
ocr_button.click(ocr_workflow, inputs=[ocr_input, ocr_langs], outputs=ocr_output)
with gr.Tab("Detecção de Texto"):
gr.Markdown("## Detecção de Linhas de Texto")
det_input = gr.File(label="Carregar Imagem ou PDF")
det_button = gr.Button("Executar Detecção de Texto")
det_output = gr.JSON(label="Resultados da Detecção de Texto")
det_button.click(text_detection_workflow, inputs=det_input, outputs=det_output)
with gr.Tab("Análise de Layout"):
gr.Markdown("## Análise de Layout e Ordem de Leitura")
layout_input = gr.File(label="Carregar Imagem ou PDF")
layout_button = gr.Button("Executar Análise de Layout")
order_button = gr.Button("Determinar Ordem de Leitura")
layout_output = gr.JSON(label="Resultados da Análise de Layout")
order_output = gr.JSON(label="Resultados da Ordem de Leitura")
layout_button.click(layout_analysis_workflow, inputs=layout_input, outputs=layout_output)
order_button.click(reading_order_workflow, inputs=layout_input, outputs=order_output)
if __name__ == "__main__":
logger.info("Iniciando aplicativo Gradio...")
demo.launch()
|