diff --git a/backend/.env.example b/backend/.env.example index 3f43f27..f97f94a 100644 --- a/backend/.env.example +++ b/backend/.env.example @@ -1,48 +1,19 @@ -# ============================================================ -# DASHBOARD LEADS - Plantilla de variables de entorno (backend) -# Copiar como .env y rellenar los valores reales. -# ============================================================ +# === SQL SERVER === +SQL_SERVER=191.98.134.80 +SQL_DATABASE=BDUS_CK000040_0001 +SQL_USERNAME=ASEBASTIAN +SQL_PASSWORD=tu_password_aqui -# ── Base de Datos PostgreSQL (Chatwoot) ── +# === POSTGRESQL (Chatwoot) === PG_HOST=191.98.134.81 PG_DATABASE=chatwoot_production PG_USER=postgres -PG_PASSWORD=tu_password_postgres_aqui +PG_PASSWORD=tu_password_aqui PG_PORT=5432 -# ── Base de Datos SQL Server (Académico) ── -SQL_SERVER=191.98.134.80 -SQL_DATABASE=BDUS_CK000040_0001 -SQL_USERNAME=tu_usuario_sql_aqui -SQL_PASSWORD=tu_password_sql_aqui -# Driver ODBC. Dejar vacío/comentado para autodetección: -# Windows -> SQL Server | Linux/Docker -> ODBC Driver 18 for SQL Server -#SQL_DRIVER=ODBC Driver 18 for SQL Server +# === SUPABASE === +SUPABASE_URL=tu_url_supabase +SUPABASE_KEY=tu_key_supabase -# ── Repositorio GitHub (mapa de campañas, opcional) ── -GITHUB_BASE=https://raw.githubusercontent.com/aron1798/prueba1/main/DASHBOARD_LEADS - -# ── Supabase (Leads) ── -SUPABASE_URL=https://ogzjtkxnfswpbmnbhnjd.supabase.co -SUPABASE_KEY=tu_supabase_service_role_key_aqui -SUPABASE_TABLA_LEADS=datos_unificados - -# ── Supabase (Pauta) ── -SUPABASE_PAUTA_URL=https://uztqscimtsihrzgybsyb.supabase.co -SUPABASE_PAUTA_KEY=tu_supabase_pauta_key_aqui -SUPABASE_TABLA_PAUTA=basebi_programacion -SUPABASE_TABLA_PROGRAMA_PAUTAS=programa_pautas - -# ── Supabase (Cartera / catálogos) ── -CARTERA_URL=https://uztqscimtsihrzgybsyb.supabase.co -CARTERA_KEY=tu_cartera_key_aqui -SUPABASE_TABLA_CARTERA=cartera_junta -SUPABASE_TABLA_ALIAS=alias_normalizacion -SUPABASE_TABLA_CONJUNTO=conjunto_pauta -SUPABASE_TABLA_CAMPANIAS=campanias - -# ── URL Google Sheets Meta CSV ── -META_CSV_URL=https://docs.google.com/spreadsheets/d/e/.../pub?gid=1241390845&single=true&output=csv - -# ── Orígenes CORS permitidos (separados por coma) ── -CORS_ORIGINS=https://dashboardv1.escueladerefrigeracion.edu.pe,http://dashboardv1.escueladerefrigeracion.edu.pe,https://dashboardapi.escueladerefrigeracion.edu.pe,http://dashboardapi.escueladerefrigeracion.edu.pe,http://localhost:3002,http://localhost:5174,http://192.168.1.107:3002,http://161.132.96.129:3002,* +# === GITHUB === +GITHUB_BASE=https://raw.githubusercontent.com/aron1798/prueba1/main/DASHBOARD diff --git a/backend/.gitignore b/backend/.gitignore new file mode 100644 index 0000000..bc7d7e6 --- /dev/null +++ b/backend/.gitignore @@ -0,0 +1,6 @@ +.env +__pycache__/ +*.pyc +*.xlsx +venv/ +.venv/ diff --git a/backend/Dockerfile b/backend/Dockerfile index a900e98..47616a9 100644 --- a/backend/Dockerfile +++ b/backend/Dockerfile @@ -1,21 +1,34 @@ -FROM python:3.10-slim +# Usamos una versión estable y probada de Debian 12 (Bookworm) +FROM python:3.10-slim-bookworm -# Instalar dependencias del sistema y el Driver Oficial de Microsoft ODBC 18 para SQL Server en Linux -RUN apt-get update && apt-get install -y --no-install-recommends \ - curl gnupg2 ca-certificates unixodbc unixodbc-dev gcc g++ \ +# Evitamos que Python guarde caché o bloquee los logs +ENV PYTHONUNBUFFERED=1 + +# 1. Instalar las herramientas base +RUN apt-get update && apt-get install -y \ + curl apt-transport-https gnupg2 unixodbc-dev \ + # 2. Descargar la llave de Microsoft usando el método moderno (sin apt-key) && curl -fsSL https://packages.microsoft.com/keys/microsoft.asc | gpg --dearmor -o /usr/share/keyrings/microsoft-prod.gpg \ - && curl -fsSL https://packages.microsoft.com/config/debian/12/prod.list > /etc/apt/sources.list.d/mssql-release.list \ + # 3. Agregar el repositorio oficial de Microsoft para Debian 12 + && curl -fsSL https://packages.microsoft.com/config/debian/12/prod.list | tee /etc/apt/sources.list.d/mssql-release.list \ && apt-get update \ - && ACCEPT_EULA=Y apt-get install -y msodbcsql18 \ + # 4. Instalar el ODBC Driver 17 aceptando los términos automáticamente + && ACCEPT_EULA=Y apt-get install -y msodbcsql17 \ + && apt-get clean \ && rm -rf /var/lib/apt/lists/* +# Crear la carpeta de trabajo WORKDIR /app +# Copiar las librerías e instalarlas COPY requirements.txt . RUN pip install --no-cache-dir -r requirements.txt +# Copiar todo el código de tu backend COPY . . -EXPOSE 8001 +# Exponer el puerto +EXPOSE 8000 -CMD ["uvicorn", "main:app", "--host", "0.0.0.0", "--port", "8001"] +# Arrancar FastAPI +CMD ["uvicorn", "main:app", "--host", "0.0.0.0", "--port", "8000"] \ No newline at end of file diff --git a/backend/README.md b/backend/README.md new file mode 100644 index 0000000..b0e975d --- /dev/null +++ b/backend/README.md @@ -0,0 +1,74 @@ +# Backend — Dashboard API (FastAPI) + +API REST que reutiliza toda la lógica de negocio del dashboard original. +El frontend (React) consume estos endpoints. + +## Requisitos + +- Python 3.10+ +- Driver ODBC para SQL Server (ODBC Driver 17 o 18) + +## Instalación + +```bash +cd backend +pip install -r requirements.txt +``` + +En Windows, si falta el driver ODBC de SQL Server, descárgalo de: +https://learn.microsoft.com/sql/connect/odbc/download-odbc-driver-for-sql-server + +## Configuración + +El archivo `.env` ya contiene las credenciales (copiado del proyecto original). +Si necesitas cambiarlas, edita `.env` (usa `.env.example` como referencia). + +## Ejecutar + +```bash +python main.py +``` + +El servidor arranca en: **http://localhost:8000** + +- Documentación interactiva: http://localhost:8000/docs +- Health check: http://localhost:8000/api/health + +## Cómo funciona el rendimiento + +1. **Al arrancar** → precarga todos los módulos (datos en memoria) +2. **Refresco en segundo plano** → cada 4 min recarga el caché silenciosamente +3. **Respuestas** → instantáneas porque vienen de memoria +4. El frontend solo pide datos (JSON), nunca recarga toda la página + +## Endpoints principales + +| Método | Ruta | Descripción | +|--------|------|-------------| +| GET | `/api/periodo-actual` | Año y mes actuales | +| GET | `/api/ocupabilidad?ano=&mes=&sede=&programa=` | Datos ocupabilidad | +| GET | `/api/ventas?ano=&mes=` | Datos ventas | +| GET | `/api/ventas/detalle?vendedor=&ano=&mes=&tipo=` | Detalle vendedor | +| GET | `/api/cobranza?ano=&mes=§orista=&agrupacion=` | Datos cobranza | +| GET | `/api/cobranza/detalle?grupo=&ano=&mes=§orista=&agrupacion=` | Estado de cuenta | +| GET | `/api/rentabilidad?ano=&mes=&sede=&programa=` | Datos rentabilidad | +| GET | `/api/rentabilidad/detalle?programa=&ano=&mes=` | Detalle programa | +| GET | `/api/rentabilidad/costos?programa=&ano=&mes=` | Costos programa | +| GET | `/api/saldo-pendiente?tipo_cuota=` | Saldos pendientes | +| GET | `/api/asesores` | Lista de asesores (Chatwoot) | +| POST | `/api/asesores/estado?agent_id=&online=` | Cambiar estado asesor | +| POST | `/api/cache/refresh` | Forzar refresco de caché | + +## Estructura + +``` +backend/ +├── main.py # FastAPI + endpoints +├── services.py # Capa que envuelve la lógica con caché +├── cache_manager.py # Caché en memoria + refresco background +├── requirements.txt +├── .env # Credenciales (no subir a git) +├── core/ # DataManager (reutilizado del original) +├── modules/ # Lógica de negocio (reutilizada del original) +└── SQL_QUERY_2/ # Queries SQL optimizadas +``` diff --git a/backend/SQL_QUERY_2/BASE_CRONOGRAMA_2.query b/backend/SQL_QUERY_2/BASE_CRONOGRAMA_2.query new file mode 100644 index 0000000..b4ccbec --- /dev/null +++ b/backend/SQL_QUERY_2/BASE_CRONOGRAMA_2.query @@ -0,0 +1,59 @@ +SELECT + -- Cronograma de Matrícula (T1) + T1.num_matricula, + T1.num_cuota, + T1.fch_vencimiento, + T1.fch_cancelacion, + T1.cod_estado, + T1.imp_total, + T1.imp_total_pagado, + T1.imp_saldo, + T1.imp_dscto, + + -- Matrícula y Programa + M.fch_matricula, + M.fch_retiro, + M.cod_estado AS estado_matricula, + P.dsc_programa, + RP.dsc_det_programa, + M.num_indice, + RP.fch_inicio, + M.cod_moneda, + M.imp_tc, + + -- Sectorista + (ISNULL(EMP.dsc_apellido_paterno, '') + ' ' + + ISNULL(EMP.dsc_apellido_materno, '') + ', ' + + ISNULL(EMP.dsc_nombres, '')) AS dsc_sectorista, + + RP.cod_frecuencia + +FROM + [BDUS_CK000040_0001].[dbo].[sgede_cronograma_matricula] T1 +INNER JOIN + sgeca_matricula M + ON T1.cod_localidad = M.cod_localidad + AND T1.num_matricula = M.num_matricula +LEFT JOIN + sgeca_programa P + ON M.cod_programa = P.cod_programa +LEFT JOIN + sgede_RP_programa RP + ON M.cod_programa = RP.cod_programa + AND M.cod_periodo = RP.cod_detalle + AND M.num_indice = RP.num_indice +LEFT JOIN + vtama_cuota C + ON M.cod_cuota = C.cod_cuota +LEFT JOIN + [BDUS_CK000040_0001].[dbo].[sgede_RP_programa_sectorista] SEC_ASIG + ON M.cod_programa = SEC_ASIG.cod_programa + AND M.cod_periodo = SEC_ASIG.cod_detalle + AND M.num_indice = SEC_ASIG.num_indice +LEFT JOIN + [BDUS_CK000040_0001].[dbo].[rhuma_trabajador] EMP + ON SEC_ASIG.cod_trabajador = EMP.cod_trabajador +WHERE + YEAR(RP.fch_inicio) IN (2025, 2026) +ORDER BY + T1.fch_vencimiento ASC; diff --git a/backend/SQL_QUERY_2/BASE_CUOTAS_2.query b/backend/SQL_QUERY_2/BASE_CUOTAS_2.query new file mode 100644 index 0000000..a28f7da --- /dev/null +++ b/backend/SQL_QUERY_2/BASE_CUOTAS_2.query @@ -0,0 +1,46 @@ +SELECT + -- Cronograma de Matrícula (T1) + T1.cod_localidad, + T1.num_matricula, + T1.num_refinanciamiento, + T1.num_cuota, + T1.fch_vencimiento, + T1.fch_cancelacion, + T1.cod_estado, + T1.imp_total, + T1.imp_total_pagado, + T1.imp_saldo, + T1.imp_dscto, + + -- Matrícula y Programa + M.fch_matricula, + M.cod_estado AS estado_matricula, + P.dsc_programa, + RP.dsc_det_programa, + RP.fch_inicio, + M.cod_moneda, + C.dsc_cuota, + M.imp_tc +FROM + [BDUS_CK000040_0001].[dbo].[sgede_cronograma_matricula] T1 +INNER JOIN + sgeca_matricula M + ON T1.cod_localidad = M.cod_localidad + AND T1.num_matricula = M.num_matricula +LEFT JOIN + sgeca_programa P + ON M.cod_programa = P.cod_programa +LEFT JOIN + sgede_RP_programa RP + ON M.cod_programa = RP.cod_programa + AND M.cod_periodo = RP.cod_detalle + AND M.num_indice = RP.num_indice +LEFT JOIN + vtama_cuota C + ON M.cod_cuota = C.cod_cuota +WHERE + YEAR(RP.fch_inicio) = ? + AND MONTH(RP.fch_inicio) = ? + AND T1.fch_vencimiento > '2020-01-01 00:00:00:000' +ORDER BY + T1.fch_vencimiento ASC; diff --git a/backend/SQL_QUERY_2/BASE_CURSO_2.query b/backend/SQL_QUERY_2/BASE_CURSO_2.query new file mode 100644 index 0000000..6df2253 --- /dev/null +++ b/backend/SQL_QUERY_2/BASE_CURSO_2.query @@ -0,0 +1,38 @@ +SELECT + rp.[num_indice], + rp.[dsc_det_programa], + rp.[flg_activo], + rp.[fch_inicio], + rp.[cod_frecuencia], + rp.[cod_estado], + p.[dsc_programa], + ( + SELECT COUNT(*) + FROM sgeca_matricula m + WHERE m.cod_periodo = rp.cod_detalle + AND m.num_indice = rp.num_indice + AND m.cod_estado NOT IN ('ANU', 'SUS') + ) AS 'Inscritos_Totales', + ( + SELECT COUNT(*) + FROM sgeca_matricula m + WHERE m.cod_periodo = rp.cod_detalle + AND m.num_indice = rp.num_indice + AND m.cod_estado = 'RET' + ) AS 'Inscritos_Retirados', + ( + SELECT COUNT(*) + FROM sgeca_matricula m + WHERE m.cod_periodo = rp.cod_detalle + AND m.num_indice = rp.num_indice + AND m.cod_estado NOT IN ('ANU', 'RET', 'SUS') + ) AS 'Inscritos_Activos' +FROM + [BDUS_CK000040_0001].[dbo].[sgede_RP_programa] rp +INNER JOIN [BDUS_CK000040_0001].[dbo].[sgeca_programa] p + ON rp.cod_programa = p.cod_programa +WHERE + YEAR(rp.fch_inicio) = ? + AND MONTH(rp.fch_inicio) = ? +ORDER BY + rp.fch_inicio ASC diff --git a/backend/SQL_QUERY_2/BASE_FACTURAS_2.query b/backend/SQL_QUERY_2/BASE_FACTURAS_2.query new file mode 100644 index 0000000..a1ded1c --- /dev/null +++ b/backend/SQL_QUERY_2/BASE_FACTURAS_2.query @@ -0,0 +1,51 @@ +SELECT +comp.[num_correlativo], +comp.[fch_emision], +comp.[fch_cancelacion], +comp.[cod_estado], +comp.[cod_moneda], +comp.[imp_total], +comp.[imp_saldo], +comp.[imp_tc], +comp.[flg_nc], + +-- Centro de Responsabilidad +cr_prog.dsc_centroresp AS dsc_cr, + +-- Programa académico +rp.dsc_det_programa, +rp.fch_inicio, +prog.dsc_programa, +mat.num_indice, +mat.cod_estado AS estado_matricula, +mat.fch_retiro, + +-- Cuotas y matrícula +cxc.num_matricula, +cxc.num_cuota, +COALESCE(cxc.imp_emitido, comp.imp_total) as imp_emitido, + +-- Cuota +cron.fch_vencimiento as fch_vencimiento_cuota +FROM [BDUS_CK000040_0001].[dbo].[vtaca_comprobante] comp + +LEFT JOIN sgevi_cuotas_x_comprobante cxc ON comp.cod_localidad = cxc.cod_localidad +AND comp.num_correlativo = cxc.num_correlativo + +LEFT JOIN sgeca_matricula mat ON cxc.cod_localidad_c = mat.cod_localidad +AND cxc.num_matricula = mat.num_matricula + +LEFT JOIN sgede_RP_programa rp ON mat.cod_programa = rp.cod_programa +AND mat.cod_periodo = rp.cod_detalle +AND mat.num_indice = rp.num_indice + +LEFT JOIN sgeca_programa prog ON mat.cod_programa = prog.cod_programa +LEFT JOIN rhuma_centroresponsabilidad cr_prog ON prog.cod_centroresp = cr_prog.cod_centroresp + +LEFT JOIN sgede_cronograma_matricula cron ON cxc.cod_localidad_c = cron.cod_localidad +AND cxc.num_matricula = cron.num_matricula +AND cxc.num_refinanciamiento = cron.num_refinanciamiento +AND cxc.num_cuota = cron.num_cuota + +WHERE comp.fch_emision BETWEEN '01-01-2024 00:00:00.000' AND '31-12-2028 00:00:00.000' +ORDER BY comp.fch_emision ASC; diff --git a/backend/SQL_QUERY_2/BASE_MATRICULADOS_2.query b/backend/SQL_QUERY_2/BASE_MATRICULADOS_2.query new file mode 100644 index 0000000..82aada5 --- /dev/null +++ b/backend/SQL_QUERY_2/BASE_MATRICULADOS_2.query @@ -0,0 +1,211 @@ +SELECT + sgede_RP_programa.num_indice, + vtama_localidad.dsc_localidad, + sgeca_matricula.num_matricula, + sgeca_matricula.fch_matricula, + sgeca_matricula.cod_estado AS estado_matricula, + sgema_alumno.dsc_telefono_1, + + ( + SELECT + rhuma_trabajador.dsc_apellido_paterno + ' ' + + SUBSTRING(rhuma_trabajador.dsc_apellido_materno, 1, 1) + '. ' + + rhuma_trabajador.dsc_nombres + FROM rhuma_trabajador + WHERE rhuma_trabajador.cod_trabajador = sgeca_matricula.cod_vendedor + ) AS dsc_vendedor, + + sgeca_matricula.cod_moneda, + + ISNULL(( + SELECT + SUM(sgede_cronograma_matricula.imp_total - ISNULL(sgede_cronograma_matricula.imp_dscto, 0)) + FROM sgede_cronograma_matricula + WHERE sgede_cronograma_matricula.cod_localidad = sgeca_matricula.cod_localidad + AND sgede_cronograma_matricula.num_matricula = sgeca_matricula.num_matricula + AND sgede_cronograma_matricula.num_refinanciamiento = 1 + ), 0) AS INV_NETA, + + ( + SELECT vtama_cuota.dsc_cuota + FROM vtama_cuota + WHERE vtama_cuota.cod_cuota = sgeca_matricula.cod_cuota + ) AS dsc_cuota, + + ( + SELECT sgema_beca.dsc_beca + FROM sgema_beca + WHERE sgema_beca.cod_beca = sgeca_matricula.cod_beca + ) AS dsc_beca, + + sgema_alumno.dsc_apellido_paterno + ' ' + sgema_alumno.dsc_apellido_materno + ', ' + sgema_alumno.dsc_nombres AS dsc_alumno, + vtama_tipo_documento.dsc_tipo_documento, + sgema_alumno.dsc_documento, + sgeca_programa.dsc_programa, + sgede_RP_programa.dsc_det_programa AS dsc_promocion, + sgede_RP_programa.fch_inicio, + + -- ========================================== + -- SALDOS Y VENCIMIENTOS: MATRICULA Y CUOTAS 1-5 + -- ========================================== + ISNULL(( + SELECT sgede_cronograma_matricula.imp_saldo + FROM sgede_cronograma_matricula + WHERE sgede_cronograma_matricula.cod_localidad = sgeca_matricula.cod_localidad + AND sgede_cronograma_matricula.num_matricula = sgeca_matricula.num_matricula + AND sgede_cronograma_matricula.num_refinanciamiento = 1 + AND sgede_cronograma_matricula.num_cuota = 0 + ), 0) AS imp_saldo_matricula, + + ( + SELECT TOP 1 sgede_cronograma_matricula.fch_vencimiento + FROM sgede_cronograma_matricula + WHERE sgede_cronograma_matricula.cod_localidad = sgeca_matricula.cod_localidad + AND sgede_cronograma_matricula.num_matricula = sgeca_matricula.num_matricula + AND sgede_cronograma_matricula.num_refinanciamiento = 1 + AND sgede_cronograma_matricula.num_cuota = 0 + ) AS fch_venc_matricula, + + ISNULL(( + SELECT sgede_cronograma_matricula.imp_saldo + FROM sgede_cronograma_matricula + WHERE sgede_cronograma_matricula.cod_localidad = sgeca_matricula.cod_localidad + AND sgede_cronograma_matricula.num_matricula = sgeca_matricula.num_matricula + AND sgede_cronograma_matricula.num_refinanciamiento = 1 + AND sgede_cronograma_matricula.num_cuota = 1 + ), 0) AS imp_saldo_cuota1, + + ( + SELECT TOP 1 sgede_cronograma_matricula.fch_vencimiento + FROM sgede_cronograma_matricula + WHERE sgede_cronograma_matricula.cod_localidad = sgeca_matricula.cod_localidad + AND sgede_cronograma_matricula.num_matricula = sgeca_matricula.num_matricula + AND sgede_cronograma_matricula.num_refinanciamiento = 1 + AND sgede_cronograma_matricula.num_cuota = 1 + ) AS fch_venc_cuota1, + + ( + SELECT TOP 1 sgede_cronograma_matricula.fch_cancelacion + FROM sgede_cronograma_matricula + WHERE sgede_cronograma_matricula.cod_localidad = sgeca_matricula.cod_localidad + AND sgede_cronograma_matricula.num_matricula = sgeca_matricula.num_matricula + AND sgede_cronograma_matricula.num_refinanciamiento = 1 + AND sgede_cronograma_matricula.num_cuota = 1 + ) AS fch_cancelacion_cuota1, + + ISNULL(( + SELECT sgede_cronograma_matricula.imp_saldo + FROM sgede_cronograma_matricula + WHERE sgede_cronograma_matricula.cod_localidad = sgeca_matricula.cod_localidad + AND sgede_cronograma_matricula.num_matricula = sgeca_matricula.num_matricula + AND sgede_cronograma_matricula.num_refinanciamiento = 1 + AND sgede_cronograma_matricula.num_cuota = 2 + ), 0) AS imp_saldo_cuota2, + + ( + SELECT TOP 1 sgede_cronograma_matricula.fch_vencimiento + FROM sgede_cronograma_matricula + WHERE sgede_cronograma_matricula.cod_localidad = sgeca_matricula.cod_localidad + AND sgede_cronograma_matricula.num_matricula = sgeca_matricula.num_matricula + AND sgede_cronograma_matricula.num_refinanciamiento = 1 + AND sgede_cronograma_matricula.num_cuota = 2 + ) AS fch_venc_cuota2, + + ISNULL(( + SELECT sgede_cronograma_matricula.imp_saldo + FROM sgede_cronograma_matricula + WHERE sgede_cronograma_matricula.cod_localidad = sgeca_matricula.cod_localidad + AND sgede_cronograma_matricula.num_matricula = sgeca_matricula.num_matricula + AND sgede_cronograma_matricula.num_refinanciamiento = 1 + AND sgede_cronograma_matricula.num_cuota = 3 + ), 0) AS imp_saldo_cuota3, + + ( + SELECT TOP 1 sgede_cronograma_matricula.fch_vencimiento + FROM sgede_cronograma_matricula + WHERE sgede_cronograma_matricula.cod_localidad = sgeca_matricula.cod_localidad + AND sgede_cronograma_matricula.num_matricula = sgeca_matricula.num_matricula + AND sgede_cronograma_matricula.num_refinanciamiento = 1 + AND sgede_cronograma_matricula.num_cuota = 3 + ) AS fch_venc_cuota3, + + ISNULL(( + SELECT sgede_cronograma_matricula.imp_saldo + FROM sgede_cronograma_matricula + WHERE sgede_cronograma_matricula.cod_localidad = sgeca_matricula.cod_localidad + AND sgede_cronograma_matricula.num_matricula = sgeca_matricula.num_matricula + AND sgede_cronograma_matricula.num_refinanciamiento = 1 + AND sgede_cronograma_matricula.num_cuota = 4 + ), 0) AS imp_saldo_cuota4, + + ( + SELECT TOP 1 sgede_cronograma_matricula.fch_vencimiento + FROM sgede_cronograma_matricula + WHERE sgede_cronograma_matricula.cod_localidad = sgeca_matricula.cod_localidad + AND sgede_cronograma_matricula.num_matricula = sgeca_matricula.num_matricula + AND sgede_cronograma_matricula.num_refinanciamiento = 1 + AND sgede_cronograma_matricula.num_cuota = 4 + ) AS fch_venc_cuota4, + + ISNULL(( + SELECT sgede_cronograma_matricula.imp_saldo + FROM sgede_cronograma_matricula + WHERE sgede_cronograma_matricula.cod_localidad = sgeca_matricula.cod_localidad + AND sgede_cronograma_matricula.num_matricula = sgeca_matricula.num_matricula + AND sgede_cronograma_matricula.num_refinanciamiento = 1 + AND sgede_cronograma_matricula.num_cuota = 5 + ), 0) AS imp_saldo_cuota5, + + ( + SELECT TOP 1 sgede_cronograma_matricula.fch_vencimiento + FROM sgede_cronograma_matricula + WHERE sgede_cronograma_matricula.cod_localidad = sgeca_matricula.cod_localidad + AND sgede_cronograma_matricula.num_matricula = sgeca_matricula.num_matricula + AND sgede_cronograma_matricula.num_refinanciamiento = 1 + AND sgede_cronograma_matricula.num_cuota = 5 + ) AS fch_venc_cuota5, + + -- ========================================== + -- TIPO DE CAMBIO + -- ========================================== + ISNULL(( + SELECT TOP 1 comp.imp_tc + FROM vtaca_comprobante comp + INNER JOIN sgevi_cuotas_x_comprobante cxc ON comp.cod_localidad = cxc.cod_localidad + AND comp.num_correlativo = cxc.num_correlativo + WHERE cxc.num_matricula = sgeca_matricula.num_matricula + AND cxc.cod_localidad_c = sgeca_matricula.cod_localidad + AND comp.cod_estado NOT IN ('ANU', 'ELI') + ORDER BY comp.fch_emision DESC + ), 0) AS imp_tc, + + -- ========================================== + -- IMPORTE TOTAL PAGADO + -- ========================================== + (SELECT SUM(sgede_cronograma_matricula.imp_total_pagado) + FROM sgede_cronograma_matricula + WHERE sgede_cronograma_matricula.cod_localidad = sgeca_matricula.cod_localidad + AND sgede_cronograma_matricula.num_matricula = sgeca_matricula.num_matricula + AND sgede_cronograma_matricula.num_refinanciamiento = sgeca_matricula.num_refinanciamiento) AS imp_total_pagado + +FROM sgeca_matricula +INNER JOIN sgeca_programa + ON sgeca_matricula.cod_programa = sgeca_programa.cod_programa +LEFT JOIN sgede_RP_programa + ON sgeca_matricula.cod_periodo = sgede_RP_programa.cod_detalle + AND sgeca_matricula.cod_programa = sgede_RP_programa.cod_programa + AND sgeca_matricula.num_indice = sgede_RP_programa.num_indice +INNER JOIN sgema_alumno + ON sgeca_matricula.cod_alumno = sgema_alumno.cod_alumno +INNER JOIN vtama_localidad + ON sgeca_matricula.cod_localidad = vtama_localidad.cod_localidad +INNER JOIN vtama_tipo_documento + ON sgema_alumno.cod_tipo_documento = vtama_tipo_documento.cod_tipo_documento + +WHERE + sgeca_matricula.cod_localidad LIKE 'SCENT' + AND YEAR(sgeca_matricula.fch_matricula) = ? + AND MONTH(sgeca_matricula.fch_matricula) = ? + AND sgeca_matricula.cod_estado NOT IN ('ANU', 'SUS') +ORDER BY + num_indice ASC diff --git a/backend/cache_manager.py b/backend/cache_manager.py index 9f63369..e267bea 100644 --- a/backend/cache_manager.py +++ b/backend/cache_manager.py @@ -1,5 +1,8 @@ # backend/cache_manager.py -"""Caché global en memoria con refresco en segundo plano (igual que el dashboard de ventas).""" +""" +Caché global en memoria con refresco en segundo plano. +Independiente de Streamlit. Mantiene los datos calientes para respuestas instantáneas. +""" import time import threading from typing import Any, Callable, Dict, Tuple @@ -13,25 +16,37 @@ def _make_key(prefix: str, args: tuple) -> str: return prefix + ":" + "|".join(str(a) for a in args) -def cache_get_or_set(prefix: str, args: tuple, loader: Callable[[], Any], ttl: int = _DEFAULT_TTL) -> Any: +def cache_get_or_set(prefix: str, args: tuple, loader: Callable[[], Any], + ttl: int = _DEFAULT_TTL) -> Any: + """Devuelve el valor cacheado si está fresco; si no, lo calcula y guarda.""" key = _make_key(prefix, args) now = time.time() with _LOCK: hit = _CACHE.get(key) if hit and (now - hit[0] < ttl): return hit[1] + # Calcular fuera del lock (puede tardar) value = loader() with _LOCK: _CACHE[key] = (now, value) return value +def cache_set(prefix: str, args: tuple, value: Any) -> None: + key = _make_key(prefix, args) + with _LOCK: + _CACHE[key] = (time.time(), value) + + def cache_keys(): + """Lista las claves actualmente cacheadas (para refrescarlas sin vaciar).""" with _LOCK: return list(_CACHE.keys()) def cache_refresh_existing(loader_for_key): + """Recalcula SOLO las entradas que ya existen, sin vaciar el caché. + Así los meses ya visitados se mantienen calientes y nunca quedan 'fríos'.""" for key in cache_keys(): try: nuevo = loader_for_key(key) @@ -43,6 +58,7 @@ def cache_refresh_existing(loader_for_key): def cache_invalidate(prefix: str = None) -> None: + """Invalida todo el caché, o solo las claves de un prefijo.""" with _LOCK: if prefix is None: _CACHE.clear() @@ -57,10 +73,13 @@ def cache_stats() -> dict: return {"entradas": len(_CACHE), "claves": list(_CACHE.keys())} +# ── Refresco en segundo plano ────────────────────────────────────────────── _background_started = False -def start_background_refresh(refresh_fn: Callable[[], None], interval: int = 900): +def start_background_refresh(refresh_fn: Callable[[], None], interval: int = 240): + """Lanza un hilo que ejecuta refresh_fn cada `interval` segundos (4 min por defecto, + antes de que expire el TTL de 5 min, para mantener el caché siempre caliente).""" global _background_started if _background_started: return diff --git a/backend/core/__init__.py b/backend/core/__init__.py new file mode 100644 index 0000000..e69de29 diff --git a/backend/core/data_manager.py b/backend/core/data_manager.py new file mode 100644 index 0000000..836a75a --- /dev/null +++ b/backend/core/data_manager.py @@ -0,0 +1,830 @@ +# core/data_manager.py +import os +import requests +import json +from datetime import datetime +from dotenv import load_dotenv + +load_dotenv() + +class DataManager: + def __init__(self): + # --- SQL SERVER --- + self.server = os.getenv("SQL_SERVER", "191.98.134.80") + self.database = os.getenv("SQL_DATABASE", "BDUS_CK000040_0001") + self.username = os.getenv("SQL_USERNAME", "ASEBASTIAN") + self.password = os.getenv("SQL_PASSWORD", "") + + # --- POSTGRESQL --- + self.pg_host = os.getenv("PG_HOST", "191.98.134.81") + self.pg_database = os.getenv("PG_DATABASE", "chatwoot_production") + self.pg_user = os.getenv("PG_USER", "postgres") + self.pg_password = os.getenv("PG_PASSWORD", "") + self.pg_port = os.getenv("PG_PORT", "5432") + + # --- SUPABASE --- + self.supabase_url = os.getenv("SUPABASE_URL", "") + self.supabase_key = os.getenv("SUPABASE_KEY", "") + self.supabase_client = None + self._init_supabase() + + # --- GITHUB --- + base = os.getenv("GITHUB_BASE", "https://raw.githubusercontent.com/aron1798/prueba1/main/DASHBOARD") + self.github_json_url = f"{base}/actualizador.json" + self.github_replace_url = f"{base}/REPLACE_CURSO.json" + self.github_meta_url = f"{base}/REPLACE_META.json" + self.github_costos_url = f"{base}/REPLACE_COSTOS.json" + self.github_pronostico_url = f"{base}/BASE_PRONOSTICO.json" + self.github_pendientes_url = f"{base}/BASE_PENDIENTES.json" + self.github_sede_url = f"{base}/sede.json" + self.github_horario_url = f"{base}/HORARIO_ASESOR.json" + self.github_query_url = f"{base}/SQL_QUERY_2/BASE_CURSO_2.query" + self.github_cuota_url = f"{base}/SQL_QUERY_2/BASE_CUOTAS_2.query" + self.github_cronograma_url = f"{base}/SQL_QUERY_2/BASE_CRONOGRAMA_2.query" + self.github_facturas_url = f"{base}/SQL_QUERY_2/BASE_FACTURAS_2.query" + self.github_matriculas_url = f"{base}/SQL_QUERY_2/BASE_MATRICULADOS_2.query" + + # --- Variables de estado --- + self.config_data = {} + self.replace_data = {} + self.meta_data = {} + self.sede_data = {} + self.pronostico_data = {} + self.costos_data = {} + self.historico_pendientes = {} + self.pendientes_data = set() + self.query_sql = "" + self.query_matriculas_sql = "" + self.query_cronograma_sql = "" + self.query_facturas_sql = "" + + # Caché en memoria de las consultas ANUALES de cobranza (evita re-ejecutar + # la consulta del año completo en cada combinación de filtros). + self._cache_cronograma = {} # str(ano) -> filas + self._cache_facturas = {} # str(ano) -> filas + + self.cargar_toda_configuracion() + + # ========================================================================= + # CARGA DE CONFIGURACIÓN + # ========================================================================= + def cargar_toda_configuracion(self): + # OPTIMIZACIÓN: descargar todas las URLs en paralelo + from concurrent.futures import ThreadPoolExecutor + json_tasks = { + "config_data": (self.github_json_url, {"config_general": {"auto_update_minutos": 5}}), + "replace_data": (self.github_replace_url, {}), + "meta_data": (self.github_meta_url, {}), + "sede_data": (self.github_sede_url, {}), + "pronostico_data": (self.github_pronostico_url, {"pronosticos": []}), + "costos_data": (self.github_costos_url, {}), + "_pendientes_raw": (self.github_pendientes_url, {}), + } + text_tasks = { + "query_sql": self.github_query_url, + "query_matriculas_sql": self.github_matriculas_url, + "query_cronograma_sql": self.github_cronograma_url, + "query_facturas_sql": self.github_facturas_url, + } + with ThreadPoolExecutor(max_workers=15) as ex: + json_futs = {k: ex.submit(self._get_json, url, default) for k,(url,default) in json_tasks.items()} + text_futs = {k: ex.submit(self._get_text, url) for k,url in text_tasks.items()} + for k, f in json_futs.items(): setattr(self, k, f.result()) + for k, f in text_futs.items(): setattr(self, k, f.result()) + # pendientes: parsear el dict ya descargado + try: + self.historico_pendientes = self._pendientes_raw.get("historico_pendientes", {}) + except: + self.historico_pendientes = {} + self.pendientes_data = set() + + def _get_json(self, url, default=None): + # 3 intentos, timeout 15s. Si falla, avisa en consola y devuelve el default. + for intento in range(1, 4): + try: + r = requests.get(url, timeout=15) + r.raise_for_status() + return r.json() + except Exception as e: + print(f"⚠️ [GitHub] intento {intento}/3 fallo JSON {url}: {e}") + print(f"❌ [GitHub] NO se pudo descargar (JSON): {url}") + return default or {} + + def _get_text(self, url): + # 3 intentos, timeout 15s. Si falla, avisa en consola y devuelve texto vacio. + for intento in range(1, 4): + try: + r = requests.get(url, timeout=15) + r.raise_for_status() + return r.text + except Exception as e: + print(f"⚠️ [GitHub] intento {intento}/3 fallo TEXT {url}: {e}") + print(f"❌ [GitHub] NO se pudo descargar (TEXT): {url}") + return "" + + def _cargar_pendientes(self): + # Ya cargado en paralelo dentro de cargar_toda_configuracion + if not hasattr(self, 'historico_pendientes'): + self.historico_pendientes = {} + if not hasattr(self, 'pendientes_data'): + self.pendientes_data = set() + + # ========================================================================= + # CONEXIONES A BASE DE DATOS + # ========================================================================= + def get_connection(self): + import pyodbc + conn_str = ( + f"DRIVER={{ODBC Driver 17 for SQL Server}};" # <--- ¡ESTE ES EL CAMBIO MÁGICO! + f"SERVER={self.server};" + f"DATABASE={self.database};" + f"UID={self.username};" + f"PWD={self.password}" + ) + return pyodbc.connect(conn_str) + + def get_pg_connection(self): + try: + import psycopg2 + except ImportError: + raise ImportError( + "psycopg2 no está instalado. Para usar PostgreSQL ejecuta:\n" + "pip install psycopg2-binary" + ) + try: + return psycopg2.connect( + host=self.pg_host, + database=self.pg_database, + user=self.pg_user, + password=self.pg_password, + port=self.pg_port + ) + except Exception as e: + print(f"❌ Error PostgreSQL: {e}") + return None + + def _init_supabase(self): + self.supabase_error = None + try: + from supabase import create_client + if self.supabase_url and self.supabase_key: + self.supabase_client = create_client(self.supabase_url, self.supabase_key) + print(f"✅ Supabase conectado: {self.supabase_url[:30]}...") + else: + self.supabase_error = "SUPABASE_URL o SUPABASE_KEY vacíos" + print(f"⚠️ {self.supabase_error}") + except Exception as e: + self.supabase_client = None + self.supabase_error = f"{type(e).__name__}: {e}" + print(f"❌ Error al conectar Supabase: {self.supabase_error}") + + # ========================================================================= + # CONSULTAS SQL + # ========================================================================= + def ejecutar_consulta_cursos(self, ano, mes): + try: + if not self.query_sql: + raise Exception("No se pudo cargar la query BASE_CURSO") + + ids_invitados = [] + cursos_personalizados = self.config_data.get('cursos_personalizados', {}) + for id_curso, datos in cursos_personalizados.items(): + if 'fch_inicio' in datos: + try: + f_obj = datetime.strptime(datos['fch_inicio'], '%d-%m-%Y') + if str(f_obj.year) == str(ano) and str(f_obj.month) == str(mes): + ids_invitados.append(str(int(id_curso))) + except: + pass + + sql_final = self.query_sql + if ids_invitados: + ids_str = ",".join(ids_invitados) + if "ORDER BY" in sql_final: + parts = sql_final.split("ORDER BY") + sql_final = parts[0] + f" OR rp.num_indice IN ({ids_str}) \nORDER BY" + parts[1] + else: + sql_final += f" OR rp.num_indice IN ({ids_str})" + + conn = self.get_connection() + cursor = conn.cursor() + cursor.execute(sql_final, ano, mes) + rows = cursor.fetchall() + cols = ['num_indice', 'dsc_det_programa', 'flg_activo', 'fch_inicio', + 'cod_frecuencia', 'cod_estado', 'dsc_programa', + 'Inscritos_Totales', 'Inscritos_Retirados', 'Inscritos_Activos'] + datos = [{cols[i]: row[i] for i in range(len(cols))} for row in rows] + conn.close() + return datos + except Exception as e: + print(f"❌ Error ejecutar_consulta_cursos: {e}") + raise + + def cargar_datos_matriculas(self, ano, mes): + try: + if not self.query_matriculas_sql: + return {} + conn = self.get_connection() + cursor = conn.cursor() + cursor.execute(self.query_matriculas_sql, ano, mes) + rows = cursor.fetchall() + d = {} + for row in rows: + d[row[0]] = d.get(row[0], 0) + 1 + conn.close() + return d + except: + return {} + + def ejecutar_consulta_matriculados_detalle(self, ano, mes): + try: + conn = self.get_connection() + cursor = conn.cursor() + + ids_invitados = [] + cursos_personalizados = self.config_data.get('cursos_personalizados', {}) + for id_curso, datos in cursos_personalizados.items(): + if 'fch_inicio' in datos: + try: + f_obj = datetime.strptime(datos['fch_inicio'], '%d-%m-%Y') + if str(f_obj.year) == str(ano) and str(f_obj.month) == str(mes): + ids_invitados.append(str(int(id_curso))) + except: + pass + + sql_or = "" + if ids_invitados: + sql_or = f" OR sgede_RP_programa.num_indice IN ({','.join(ids_invitados)}) " + + query = f""" + SELECT + sgede_RP_programa.num_indice, sgeca_matricula.num_matricula, + sgeca_matricula.cod_estado AS estado_matricula, + sgeca_programa.dsc_programa, sgeca_matricula.cod_moneda, + sgema_alumno.dsc_documento, + ISNULL((SELECT SUM(sgede_cronograma_matricula.imp_total - ISNULL(sgede_cronograma_matricula.imp_dscto, 0)) + FROM sgede_cronograma_matricula + WHERE sgede_cronograma_matricula.cod_localidad = sgeca_matricula.cod_localidad + AND sgede_cronograma_matricula.num_matricula = sgeca_matricula.num_matricula + AND sgede_cronograma_matricula.num_refinanciamiento = 1), 0) AS INV_NETA, + ISNULL((SELECT sgede_cronograma_matricula.imp_saldo FROM sgede_cronograma_matricula + WHERE sgede_cronograma_matricula.cod_localidad = sgeca_matricula.cod_localidad + AND sgede_cronograma_matricula.num_matricula = sgeca_matricula.num_matricula + AND sgede_cronograma_matricula.num_refinanciamiento = 1 + AND sgede_cronograma_matricula.num_cuota = 0), 0) AS imp_saldo_matricula, + ISNULL((SELECT sgede_cronograma_matricula.imp_saldo FROM sgede_cronograma_matricula + WHERE sgede_cronograma_matricula.cod_localidad = sgeca_matricula.cod_localidad + AND sgede_cronograma_matricula.num_matricula = sgeca_matricula.num_matricula + AND sgede_cronograma_matricula.num_refinanciamiento = 1 + AND sgede_cronograma_matricula.num_cuota = 1), 0) AS imp_saldo_cuota1, + ISNULL((SELECT TOP 1 comp.imp_tc FROM vtaca_comprobante comp + INNER JOIN sgevi_cuotas_x_comprobante cxc + ON comp.cod_localidad = cxc.cod_localidad + AND comp.num_correlativo = cxc.num_correlativo + WHERE cxc.num_matricula = sgeca_matricula.num_matricula + AND cxc.cod_localidad_c = sgeca_matricula.cod_localidad + AND comp.cod_estado NOT IN ('ANU', 'ELI') + ORDER BY comp.fch_emision DESC), 0) AS imp_tc + FROM sgeca_matricula + INNER JOIN sgeca_programa ON sgeca_matricula.cod_programa = sgeca_programa.cod_programa + LEFT JOIN sgede_RP_programa + ON sgeca_matricula.cod_periodo = sgede_RP_programa.cod_detalle + AND sgeca_matricula.cod_programa = sgede_RP_programa.cod_programa + AND sgeca_matricula.num_indice = sgede_RP_programa.num_indice + INNER JOIN sgema_alumno ON sgeca_matricula.cod_alumno = sgema_alumno.cod_alumno + WHERE sgeca_matricula.cod_localidad LIKE 'SCENT' + AND ((YEAR(sgede_RP_programa.fch_inicio) = ? AND MONTH(sgede_RP_programa.fch_inicio) = ?) {sql_or}) + AND sgeca_matricula.cod_estado NOT IN ('ANU', 'SUS') + """ + cursor.execute(query, ano, mes) + columns = [col[0] for col in cursor.description] + results = [dict(zip(columns, row)) for row in cursor.fetchall()] + conn.close() + return results + except Exception as e: + print(f"❌ Error ejecutar_consulta_matriculados_detalle: {e}") + return [] + + def consultar_historial_continuidad(self, lista_documentos): + if not lista_documentos: + return {} + try: + dnis = list(set([str(d).strip() for d in lista_documentos if d])) + if not dnis: + return {} + placeholders = ','.join(['?'] * len(dnis)) + query = f""" + SELECT a.dsc_documento, p.dsc_programa, rp.fch_inicio + FROM sgeca_matricula m + INNER JOIN sgema_alumno a ON m.cod_alumno = a.cod_alumno + INNER JOIN sgeca_programa p ON m.cod_programa = p.cod_programa + INNER JOIN sgede_RP_programa rp + ON m.cod_periodo = rp.cod_detalle + AND m.cod_programa = rp.cod_programa + AND m.num_indice = rp.num_indice + WHERE a.dsc_documento IN ({placeholders}) + AND m.cod_estado IN ('ALU', 'PRE', 'RET') + AND m.cod_localidad LIKE 'SCENT' + AND (p.dsc_programa LIKE '%TEAC%' OR p.dsc_programa LIKE '%TERC%' + OR p.dsc_programa LIKE '%AREQUIPA%' OR p.dsc_programa LIKE '%TRUJILLO%' + OR p.dsc_programa LIKE '%PIURA%' OR p.dsc_programa LIKE '%TECNICO ESPECIALISTA%') + """ + conn = self.get_connection() + cursor = conn.cursor() + cursor.execute(query, dnis) + historial = {} + for row in cursor.fetchall(): + dni = str(row[0]).strip() + if dni not in historial: + historial[dni] = [] + historial[dni].append({'programa': row[1], 'fecha': row[2]}) + conn.close() + return historial + except Exception as e: + print(f"❌ Error historial continuidad: {e}") + return {} + + def _get_query_ventas_hibrido(self, lista_ids_vip): + if not lista_ids_vip: + sql_in_clause = "(-1)" + else: + ids_str = [str(x) for x in lista_ids_vip] + sql_in_clause = "(" + ",".join(ids_str) + ")" + + return f""" + SELECT + ( + SELECT + rhuma_trabajador.dsc_apellido_paterno + ' ' + + SUBSTRING(rhuma_trabajador.dsc_apellido_materno, 1, 1) + '. ' + + rhuma_trabajador.dsc_nombres + FROM rhuma_trabajador + WHERE rhuma_trabajador.cod_trabajador = sgeca_matricula.cod_vendedor + ) AS dsc_vendedor, -- [0] + ISNULL(( + SELECT + SUM(sgede_cronograma_matricula.imp_total - ISNULL(sgede_cronograma_matricula.imp_dscto, 0)) + FROM sgede_cronograma_matricula + WHERE sgede_cronograma_matricula.cod_localidad = sgeca_matricula.cod_localidad + AND sgede_cronograma_matricula.num_matricula = sgeca_matricula.num_matricula + AND sgede_cronograma_matricula.num_refinanciamiento = 1 + ), 0) AS INV_NETA, -- [1] + ISNULL(( + SELECT sgede_cronograma_matricula.imp_saldo + FROM sgede_cronograma_matricula + WHERE sgede_cronograma_matricula.cod_localidad = sgeca_matricula.cod_localidad + AND sgede_cronograma_matricula.num_matricula = sgeca_matricula.num_matricula + AND sgede_cronograma_matricula.num_refinanciamiento = 1 + AND sgede_cronograma_matricula.num_cuota = 0 + ), 0) AS imp_saldo_matricula, -- [2] + ISNULL(( + SELECT sgede_cronograma_matricula.imp_saldo + FROM sgede_cronograma_matricula + WHERE sgede_cronograma_matricula.cod_localidad = sgeca_matricula.cod_localidad + AND sgede_cronograma_matricula.num_matricula = sgeca_matricula.num_matricula + AND sgede_cronograma_matricula.num_refinanciamiento = 1 + AND sgede_cronograma_matricula.num_cuota = 1 + ), 0) AS imp_saldo_cuota1, -- [3] + + sgeca_matricula.num_matricula, -- [4] + YEAR(sgeca_matricula.fch_matricula) as anio_mat, -- [5] + MONTH(sgeca_matricula.fch_matricula) as mes_mat, -- [6] + + ( + SELECT TOP 1 sgede_cronograma_matricula.fch_cancelacion + FROM sgede_cronograma_matricula + WHERE sgede_cronograma_matricula.cod_localidad = sgeca_matricula.cod_localidad + AND sgede_cronograma_matricula.num_matricula = sgeca_matricula.num_matricula + AND sgede_cronograma_matricula.num_refinanciamiento = 1 + AND sgede_cronograma_matricula.num_cuota = 1 + ) AS fch_cancelacion_cuota1, -- [7] + + sgeca_matricula.cod_moneda, -- [8] + + ISNULL(( + SELECT TOP 1 comp.imp_tc + FROM vtaca_comprobante comp + INNER JOIN sgevi_cuotas_x_comprobante cxc ON comp.cod_localidad = cxc.cod_localidad + AND comp.num_correlativo = cxc.num_correlativo + WHERE cxc.num_matricula = sgeca_matricula.num_matricula + AND cxc.cod_localidad_c = sgeca_matricula.cod_localidad + AND comp.cod_estado NOT IN ('ANU', 'ELI') + ORDER BY comp.fch_emision DESC + ), 1) AS imp_tc, -- [9] + + sgede_RP_programa.dsc_det_programa, -- [10] PROGRAMA (mismo num_indice) + sgede_RP_programa.fch_inicio, -- [11] FECHA INICIO (mismo num_indice) + sgeca_programa.dsc_programa, -- [12] PROGRAMA GENERAL (respaldo) + sgeca_matricula.cod_estado -- [13] ESTADO (ALU/PRE/RET) + + FROM sgeca_matricula + INNER JOIN sgeca_programa ON sgeca_matricula.cod_programa = sgeca_programa.cod_programa + LEFT JOIN sgede_RP_programa ON sgeca_matricula.cod_periodo = sgede_RP_programa.cod_detalle + AND sgeca_matricula.cod_programa = sgede_RP_programa.cod_programa + AND sgeca_matricula.num_indice = sgede_RP_programa.num_indice + INNER JOIN sgema_alumno ON sgeca_matricula.cod_alumno = sgema_alumno.cod_alumno + INNER JOIN vtama_localidad ON sgeca_matricula.cod_localidad = vtama_localidad.cod_localidad + INNER JOIN vtama_tipo_documento ON sgema_alumno.cod_tipo_documento = vtama_tipo_documento.cod_tipo_documento + WHERE + sgeca_matricula.cod_localidad LIKE 'SCENT' + AND ( + sgeca_matricula.cod_estado IN ('ALU', 'PRE', 'RET') + OR sgeca_matricula.num_matricula IN {sql_in_clause} + ) + AND ( + (YEAR(sgeca_matricula.fch_matricula) = ? AND MONTH(sgeca_matricula.fch_matricula) = ?) + OR + sgeca_matricula.num_matricula IN {sql_in_clause} + OR + EXISTS ( + SELECT 1 FROM sgede_cronograma_matricula crono + WHERE crono.cod_localidad = sgeca_matricula.cod_localidad + AND crono.num_matricula = sgeca_matricula.num_matricula + AND crono.num_cuota = 1 + AND crono.fch_cancelacion IS NOT NULL + AND YEAR(crono.fch_cancelacion) = ? + AND MONTH(crono.fch_cancelacion) = ? + ) + ) + ORDER BY + dsc_vendedor ASC + """ + + def ejecutar_consulta_ventas(self, ano, mes, sede="TODOS", programa="TODOS"): + try: + key_mes = f"{int(mes):02d}-{ano}" + lista_raw = self.historico_pendientes.get(key_mes, []) + + lista_vip_list = [] + for item in lista_raw: + try: lista_vip_list.append(int(item)) + except: pass + + # Lista PURA de BASE_PENDIENTES (sin overrides). Venta Pendientes usa SOLO esto. + set_lista_pendientes = set(lista_vip_list) + + # Incluir matrículas con override de fecha (para que la query las traiga, incluso ANU) + _fov = getattr(self, '_fecha_canc_overrides', None) or {} + for mk in _fov.keys(): + try: lista_vip_list.append(int(float(str(mk)))) + except: pass + + correcciones = self.config_data.get("correcciones_matriculas", {}) + query_hibrido = self._get_query_ventas_hibrido(lista_vip_list) + conn = self.get_connection() + cursor = conn.cursor() + + # Clasificadores para filtros (mismos que Cobranza/Ocupabilidad) + _sede_sel = str(sede or "TODOS").upper() + _prog_sel = str(programa or "TODOS").upper() + def _clasif_sede(dscp): + if not dscp: return "LIMA" + up = str(dscp).upper() + sedes_data = self.sede_data.get("clasificacion_sedes", {}) + for s, data in sedes_data.items(): + if s == "DEFAULT": continue + for pat in data.get("patrones", []): + if pat.upper() in up: return s + _def = self.sede_data.get("clasificacion_default", {}) + return _def.get("sede", "LIMA") if isinstance(_def, dict) else "LIMA" + def _clasif_prog(dscp): + # Clasifica el programa en UNA sola categoría, con prioridad de orden. + # Específicas primero (SEMINARIOS, TEAC, TERC); OTROS y el sobrante al final. + up = str(dscp or "").upper() + fdata = self.meta_data.get("clasificacion_filtro_programa", {}) + orden = ["OTROS", "SEMINARIOS", "TEAC", "TERC"] + for cat in orden: + data = fdata.get(cat, {}) + for pat in data.get("patrones", []): + if pat.upper() in up: + return cat + # Sobrante (no coincide con nada) → DEFAULT + return fdata.get("DEFAULT", "OTROS") if isinstance(fdata.get("DEFAULT"), str) else "OTROS" + + cursor.execute(query_hibrido, ano, mes, ano, mes) + rows = cursor.fetchall() + + ventas_por_vendedor = {} + set_vip_actual = set(lista_vip_list) + + vendedores_excluidos = { + "CASTILLO B. KARINA LISSET", + "CASTILLO B. KARINA LISSET", + "CALDERON S. LISSA GENA", + "CRUZ G. FIORELLA MELISSA", + "URIBE G. MARIA MERCEDES" + } + + for row in rows: + vendedor = row[0] if row[0] else "SIN VENDEDOR" + if vendedor in vendedores_excluidos: continue + + # Filtro SEDE/PROGRAMA (mismas reglas que Ocupabilidad/Cobranza) + _dscp = row[10] if (len(row) > 10 and row[10]) else (row[12] if len(row) > 12 else "") + if _sede_sel != "TODOS" and _clasif_sede(_dscp) != _sede_sel: + continue + if _prog_sel != "TODOS" and _clasif_prog(_dscp) != _prog_sel: + continue + + inv_neta_raw = float(row[1]) if row[1] else 0.0 + cod_moneda = row[8] + imp_tc = float(row[9]) if row[9] else 1.0 + + saldo_mat = float(row[2]) if row[2] else 0.0 + saldo_c1 = float(row[3]) if row[3] else 0.0 + + raw_mat = row[4] + row_year = row[5] + row_month = row[6] + fch_cancelacion_raw = row[7] + + matricula_int = -1 + matricula_str = "" + try: + if raw_mat is not None: + val_str = str(raw_mat).strip() + if val_str.endswith('.0'): val_str = val_str[:-2] + matricula_str = val_str + matricula_int = int(float(val_str)) + except: pass + + if matricula_str in correcciones: + datos_corregidos = correcciones[matricula_str] + if "imp_tc" in datos_corregidos: imp_tc = float(datos_corregidos["imp_tc"]) + if "imp_saldo_cuota1" in datos_corregidos: saldo_c1 = float(datos_corregidos["imp_saldo_cuota1"]) + if "imp_saldo_matricula" in datos_corregidos: saldo_mat = float(datos_corregidos["imp_saldo_matricula"]) + if "fch_cancelacion_cuota1" in datos_corregidos: fch_cancelacion_raw = datos_corregidos["fch_cancelacion_cuota1"] + + # Override de FECHA CANCELACIÓN 1 desde Supabase (prioridad para clasificación) + _fov = getattr(self, '_fecha_canc_overrides', None) + _vacio_forzado = False + if _fov and matricula_str in _fov: + fov_val = _fov[matricula_str] + s = str(fov_val).strip() + if s == "__VACIO__": + # Fecha borrada a propósito → anula la del SQL (no cuenta como pagado) + fch_cancelacion_raw = None + _vacio_forzado = True + else: + # Normalizar dd/mm/yyyy o d/m/yyyy → yyyy-mm-dd + if '/' in s: + p = s.split('/') + if len(p) == 3: + s = f"{p[2]}-{int(p[1]):02d}-{int(p[0]):02d}" + fch_cancelacion_raw = s + + # Prioridad TC: Supabase (mes) > corrección manual > SQL + _tc_ov = getattr(self, '_tc_override_mes', None) + if _tc_ov: imp_tc = float(_tc_ov) + + if cod_moneda == 'DOL': inv_neta = inv_neta_raw * imp_tc + else: inv_neta = inv_neta_raw + + # Override de INVERSIÓN NETA (Supabase): monto final en soles, reemplaza al SQL. + _inv_ov = getattr(self, '_inv_neta_overrides', None) + if _inv_ov and matricula_str in _inv_ov: + inv_neta = float(_inv_ov[matricula_str]) + + if vendedor not in ventas_por_vendedor: + ventas_por_vendedor[vendedor] = { + 'monto': 0.0, 'cantidad': 0, 'monto_pc': 0.0, 'cantidad_pc': 0, + 'monto_pendientes': 0.0, 'cantidad_pendientes': 0 + } + + es_venta_del_mes = (str(row_year) == str(ano)) and (str(row_month) == str(mes)) + saldos_ok = (saldo_mat == 0 and saldo_c1 == 0) + + # Si hay override de fecha de cancelación 1 (con fecha), se considera PAGADO. + # Si el override la vació a propósito, NO se fuerza pagado. + tiene_override_fecha = bool(_fov and matricula_str in _fov) and not _vacio_forzado + if tiene_override_fecha: + saldos_ok = True + + # Si es RET y NO pagó (sin override ni saldos), NO entra en la tabla principal. + estado_row = str(row[13]).strip().upper() if len(row) > 13 and row[13] else "" + if estado_row == "RET" and not saldos_ok: + continue + + # ¿Pagó la 1° cuota en el MES del filtro? + pago_en_fecha_correcta = False + if fch_cancelacion_raw: + try: + if isinstance(fch_cancelacion_raw, str): + f_obj = datetime.strptime(fch_cancelacion_raw[:10], '%Y-%m-%d') + f_ano, f_mes = f_obj.year, f_obj.month + else: + f_ano, f_mes = fch_cancelacion_raw.year, fch_cancelacion_raw.month + if str(f_ano) == str(ano) and str(f_mes) == str(mes): + pago_en_fecha_correcta = True + except: pass + + # ¿La matrícula es de un mes ANTERIOR al filtro? (mismo año mes menor, o año anterior) + matricula_mes_pasado = False + try: + ym_mat = int(row_year) * 100 + int(row_month) + ym_filtro = int(ano) * 100 + int(mes) + matricula_mes_pasado = ym_mat < ym_filtro + except: pass + + # COLUMNA 2 y 3 — MES EN CURSO: matrícula del mes + pagó en el mes + if es_venta_del_mes: + ventas_por_vendedor[vendedor]['monto'] += inv_neta + ventas_por_vendedor[vendedor]['cantidad'] += 1 + if saldos_ok and pago_en_fecha_correcta: + ventas_por_vendedor[vendedor]['monto_pc'] += inv_neta + ventas_por_vendedor[vendedor]['cantidad_pc'] += 1 + + # COLUMNA 4 y 5 — MES PASADO: matrícula anterior + pagó 1° cuota en el mes del filtro + if matricula_int in set_lista_pendientes and pago_en_fecha_correcta: + ventas_por_vendedor[vendedor]['monto_pendientes'] += inv_neta + ventas_por_vendedor[vendedor]['cantidad_pendientes'] += 1 + + datos_ventas = [] + for vendedor, datos in ventas_por_vendedor.items(): + datos_ventas.append({ + 'VENDEDOR': vendedor, + 'MONTO': round(datos['monto'], 2), + 'CANTIDAD': datos['cantidad'], + 'VENTAS_PC': round(datos['monto_pc'], 2), + 'INSCRITOS_PC': datos['cantidad_pc'], + 'PENDIENTES': round(datos['monto_pendientes'], 2), + 'INSCRITOS_PENDIENTES': datos['cantidad_pendientes'] + }) + + datos_ventas.sort(key=lambda x: x['MONTO'], reverse=True) + conn.close() + return datos_ventas + except Exception as e: + return [] + + def ejecutar_consulta_cronograma_cobranza(self, ano): + clave = str(ano) + en_cache = self._cache_cronograma.get(clave) + if en_cache is not None: + return en_cache + try: + if not self.query_cronograma_sql: + return [] + conn = self.get_connection() + cursor = conn.cursor() + cursor.execute(self.query_cronograma_sql) + columns = [col[0] for col in cursor.description] + results = [dict(zip(columns, row)) for row in cursor.fetchall()] + conn.close() + self._cache_cronograma[clave] = results # cachear SOLO si tuvo éxito + return results + except Exception as e: + print(f"❌ Error cronograma cobranza: {e}") + return [] + + def ejecutar_consulta_facturas_cobranza(self, ano): + clave = str(ano) + en_cache = self._cache_facturas.get(clave) + if en_cache is not None: + return en_cache + try: + if not self.query_facturas_sql: + return [] + conn = self.get_connection() + cursor = conn.cursor() + cursor.execute(self.query_facturas_sql) + columns = [col[0] for col in cursor.description] + results = [dict(zip(columns, row)) for row in cursor.fetchall()] + conn.close() + self._cache_facturas[clave] = results # cachear SOLO si tuvo éxito + return results + except Exception as e: + print(f"❌ Error facturas cobranza: {e}") + return [] + + def limpiar_cache_cobranza(self, ano=None): + """Vacía el caché anual de cobranza para forzar re-lectura desde SQL. + Se llama en cada refresco (manual o ciclo de 15 min).""" + if ano is None: + self._cache_cronograma.clear() + self._cache_facturas.clear() + else: + self._cache_cronograma.pop(str(ano), None) + self._cache_facturas.pop(str(ano), None) + + def ejecutar_consulta_saldos_anual(self, ano): + try: + if not self.query_matriculas_sql: + return [] + sql_anual = self.query_matriculas_sql.replace( + "AND MONTH(sgeca_matricula.fch_matricula) = ?", "" + ) + conn = self.get_connection() + cursor = conn.cursor() + cursor.execute(sql_anual, ano) + columns = [col[0] for col in cursor.description] + results = [dict(zip(columns, row)) for row in cursor.fetchall()] + conn.close() + return results + except Exception as e: + print(f"❌ Error saldos anual: {e}") + return [] + + # ========================================================================= + # SUPABASE - OVERRIDES DE COSTOS + # ========================================================================= + def cargar_overrides_costos(self): + if not self.supabase_client: + return {} + try: + response = self.supabase_client.table('costos_overrides').select('*').execute() + overrides = {} + for row in response.data: + idx = str(row.get('num_indice', '')).strip() + tipo = str(row.get('tipo_costo', '')).strip().lower() + if not idx or tipo not in ('inicial', 'actual'): + continue + if idx not in overrides: + overrides[idx] = {} + overrides[idx][tipo] = { + 'epp': row.get('costo_epp'), + 'certificado': row.get('costo_certificado'), + 'docente': row.get('costo_docente'), + 'consumibles': row.get('costo_consumibles'), + 'marketing': row.get('costo_marketing'), + } + return overrides + except Exception as e: + print(f"⚠️ Error overrides Supabase: {e}") + return {} + + + def obtener_fechas_originales(self): + """Descarga todas las fechas originales guardadas en Supabase (inicios reprogramados).""" + if not self.supabase_client: + return {} + try: + respuesta = self.supabase_client.table('fechas_originales_cursos').select('*').execute() + datos = respuesta.data + diccionario_fechas = {} + for fila in datos: + indice = str(fila.get('num_indice')) + fecha = fila.get('fecha_inicio_original') + programa = fila.get('programa', 'CURSO REPROGRAMADO') + diccionario_fechas[indice] = {'fecha': fecha, 'programa': programa} + return diccionario_fechas + except Exception as e: + print(f"Error al cargar fechas originales: {e}") + return {} + + def guardar_fecha_original(self, num_indice, programa, fecha_inicio): + """Guarda silenciosamente un nuevo curso y su fecha inicial en Supabase.""" + if not self.supabase_client: + return False + try: + payload = { + 'num_indice': str(num_indice), + 'programa': str(programa), + 'fecha_inicio_original': str(fecha_inicio) + } + self.supabase_client.table('fechas_originales_cursos').upsert(payload).execute() + return True + except Exception as e: + print(f"Error al guardar fecha original: {e}") + return False + + def guardar_override_costo(self, num_indice, tipo_costo, costos_dict): + if not self.supabase_client: + return False + try: + payload = { + 'num_indice': str(num_indice), + 'tipo_costo': tipo_costo, + 'costo_epp': costos_dict.get('epp'), + 'costo_certificado': costos_dict.get('certificado'), + 'costo_docente': costos_dict.get('docente'), + 'costo_consumibles': costos_dict.get('consumibles'), + 'costo_marketing': costos_dict.get('marketing'), + 'fecha_actualizacion': datetime.now().isoformat(), + } + self.supabase_client.table('costos_overrides').upsert(payload).execute() + return True + except Exception as e: + print(f"❌ Error guardar override: {e}") + return False + + def eliminar_overrides_costo(self, num_indice): + if not self.supabase_client: + return False + try: + self.supabase_client.table('costos_overrides').delete().eq( + 'num_indice', str(num_indice) + ).execute() + return True + except Exception as e: + print(f"❌ Error eliminar overrides: {e}") + return False + + # ========================================================================= + # HELPERS + # ========================================================================= + def get_current_year(self): + return datetime.now().year + + def get_current_month(self): + return datetime.now().month diff --git a/backend/main.py b/backend/main.py index 6615707..02185c4 100644 --- a/backend/main.py +++ b/backend/main.py @@ -1,290 +1,483 @@ # backend/main.py -"""API REST del Dashboard de LEADS (FastAPI).""" -from fastapi import FastAPI, Query, HTTPException, Body +""" +API REST del Dashboard — FastAPI. +Reutiliza la lógica de negocio existente en modules/ y core/. +Cada endpoint devuelve JSON; el frontend (React) lo consume. +""" +from fastapi import FastAPI, Query, HTTPException from fastapi.middleware.cors import CORSMiddleware from datetime import datetime import uvicorn -import os -from dotenv import load_dotenv - -# Cargar variables de entorno desde .env -load_dotenv() - import services -from cache_manager import start_background_refresh, cache_stats +from cache_manager import start_background_refresh, cache_invalidate, cache_stats -app = FastAPI(title="Dashboard Leads API", version="1.0") - - -# Orígenes CORS configurables -cors_env = os.getenv("CORS_ORIGINS", "*") -origins = [o.strip() for o in cors_env.split(",") if o.strip() and o.strip() != "*"] +app = FastAPI(title="Dashboard API", version="1.0") +# CORS — permite que el frontend React (otro puerto) consuma la API app.add_middleware( CORSMiddleware, - allow_origins=origins if origins else ["*"], - allow_origin_regex=".*", + allow_origins=["*"], # en red local está bien; en producción restringir allow_credentials=True, allow_methods=["*"], allow_headers=["*"], ) +# ── Arranque: precarga + refresco en segundo plano ───────────────────────── @app.on_event("startup") def _startup(): - # Precarga en SEGUNDO PLANO (hilo aparte) para no bloquear el arranque del server. - import threading - def _precarga_bg(): - print("[startup] Precargando datos de Leads (2do plano)...") - try: - services.precargar_todo() - print("[startup] Precarga completa.") - except Exception as e: - print(f"[startup] Precarga falló: {e}") - threading.Thread(target=_precarga_bg, daemon=True).start() - # Otros General en un hilo aparte (sus consultas son mas pesadas) - def _precarga_otros_bg(): - try: - services.precargar_otros_general() - except Exception as e: - print(f"[startup] Precarga Otros falló: {e}") - threading.Thread(target=_precarga_otros_bg, daemon=True).start() + print("[startup] Precargando datos iniciales...") + try: + services.precargar_todo() + print("[startup] Precarga completa.") + except Exception as e: + print(f"[startup] Precarga falló: {e}") + # Refresco cada 4 min en segundo plano (TTL del caché es 5 min) start_background_refresh(services.refrescar_todo, interval=900) +# ── Salud / utilidades ───────────────────────────────────────────────────── @app.get("/api/health") def health(): return {"status": "ok", "hora": datetime.now().isoformat()} @app.get("/api/cache/stats") -def stats(): +def cache_estadisticas(): return cache_stats() @app.post("/api/cache/refresh") -def refresh(): +def cache_refresh(): services.refrescar_todo() return {"status": "refrescado"} -@app.get("/api/leads/filtros") -def get_filtros(): - try: - return services.opciones_filtros() - except Exception as e: - raise HTTPException(status_code=500, detail=str(e)) +@app.post("/api/cache/refresh-manual") +def cache_refresh_manual(clave: str = None): + """Botón 'Actualizar': re-lee las bases para la vista actual (clave) al instante, + y recachea el resto en segundo plano.""" + return services.refrescar_manual(clave) -@app.get("/api/leads") -def get_leads( - ano: str = Query("TODOS"), - mes: str = Query("TODOS"), - dia: str = Query("TODOS"), - programa: str = Query("TODOS"), +@app.get("/api/ultima-actualizacion") +def api_ultima_actualizacion(): + return services.ultima_actualizacion() + + +@app.post("/api/precarga/modulo") +def api_precarga_modulo(modulo: str, ano: int): + """Calienta en 2º plano la tabla principal del módulo para el año indicado.""" + return services.precargar_modulo(modulo, ano) + + +@app.get("/api/precarga/estado") +def api_precarga_estado(modulo: str): + """Progreso de la precarga (para el aviso 'ya cargó todo').""" + return services.precarga_estado(modulo) + + +@app.get("/api/periodo-actual") +def periodo_actual(): + dm = services.get_dm() + return {"ano": dm.get_current_year(), "mes": dm.get_current_month()} + + +# ── OCUPABILIDAD ─────────────────────────────────────────────────────────── +@app.get("/api/ocupabilidad") +def get_ocupabilidad( + ano: int = Query(...), + mes: int = Query(...), sede: str = Query("TODOS"), + programa: str = Query("TODOS"), ): try: - return services.leads_dashboard(ano, mes, dia, programa, sede) + return services.ocupabilidad(ano, mes, sede, programa) except Exception as e: raise HTTPException(status_code=500, detail=str(e)) -@app.get("/api/vendedores") -def get_vendedores( - ano: str = Query("TODOS"), - mes: str = Query("TODOS"), - dia: str = Query("TODOS"), +@app.get("/api/ocupabilidad/alumnos") +def get_ocupabilidad_alumnos(num_indice: str = Query(...)): + try: + return services.ocupabilidad_alumnos(num_indice) + except Exception as e: + raise HTTPException(status_code=500, detail=str(e)) + + +# ── VENTAS ───────────────────────────────────────────────────────────────── +@app.get("/api/ventas") +def get_ventas(ano: int = Query(...), mes: int = Query(...), + sede: str = Query("TODOS"), programa: str = Query("TODOS"), + con_overrides: bool = Query(False)): + try: + return services.ventas(ano, mes, sede, programa, con_overrides) + except Exception as e: + raise HTTPException(status_code=500, detail=str(e)) + + +@app.get("/api/ventas/detalle") +def get_ventas_detalle( + vendedor: str = Query(...), + ano: int = Query(...), + mes: int = Query(...), + tipo: str = Query("Venta Inscritos"), + sede: str = Query("TODOS"), + programa: str = Query("TODOS"), ): try: - return services.vendedores_dashboard(ano, mes, dia) + return services.ventas_detalle(vendedor, ano, mes, tipo, sede, programa) except Exception as e: raise HTTPException(status_code=500, detail=str(e)) -@app.get("/api/roas") -def get_roas( - ano: str = Query("TODOS"), - mes: str = Query("TODOS"), - dia: str = Query("TODOS"), +# ── COBRANZA ─────────────────────────────────────────────────────────────── +@app.get("/api/cobranza") +def get_cobranza( + ano: int = Query(...), + mes: int = Query(...), + sectorista: str = Query("TODOS"), + agrupacion: str = Query("SEDE"), + sede_filtro: str = Query("TODOS"), + prog_filtro: str = Query("TODOS"), + venc_hasta: str = Query("TODOS"), ): try: - return services.roas_dashboard(ano, mes, dia) + return services.cobranza(ano, mes, sectorista, agrupacion, sede_filtro, prog_filtro, venc_hasta) except Exception as e: raise HTTPException(status_code=500, detail=str(e)) -@app.get("/api/conjuntos-sin-sede") -def get_conjuntos_sin_sede(): - try: - return services.conjuntos_sin_sede() - except Exception as e: - raise HTTPException(status_code=500, detail=str(e)) - - -@app.post("/api/conjuntos-sin-sede/guardar") -def post_conjunto_sede(body: dict = Body(...)): - try: - cambios = body.get("cambios") or [] - return services.guardar_conjunto_sede(cambios) - except Exception as e: - raise HTTPException(status_code=500, detail=str(e)) - - -@app.post("/api/conjuntos-sin-sede/borrar") -def post_borrar_conjunto_sede(body: dict = Body(...)): - try: - return services.borrar_conjunto_sede(body.get("conjunto") or "") - except Exception as e: - raise HTTPException(status_code=500, detail=str(e)) - - -@app.get("/api/otros-general") -def get_otros_general( - ano: str = Query("TODOS"), - mes: str = Query("TODOS"), - dia: str = Query("TODOS"), +@app.get("/api/cobranza/detalle") +def get_cobranza_detalle( + grupo: str = Query(...), + ano: int = Query(...), + mes: int = Query(...), + sectorista: str = Query("TODOS"), + agrupacion: str = Query("PROGRAMA"), + prog_filtro: str = Query("TODOS"), + sede_filtro: str = Query("TODOS"), + venc_hasta: str = Query("TODOS"), ): try: - return services.otros_general(ano, mes, dia) + return services.cobranza_detalle(grupo, ano, mes, sectorista, agrupacion, prog_filtro, sede_filtro, venc_hasta) except Exception as e: raise HTTPException(status_code=500, detail=str(e)) -@app.get("/api/conjuntos-sin-pauta") -def get_conjuntos_sin_pauta(): +# ── RENTABILIDAD ─────────────────────────────────────────────────────────── +@app.get("/api/rentabilidad") +def get_rentabilidad( + ano: int = Query(...), + mes: int = Query(...), + sede: str = Query("TODOS"), + programa: str = Query("TODOS"), +): try: - return {"conjuntos": services.conjuntos_sin_pauta()} + return services.rentabilidad(ano, mes, sede, programa) except Exception as e: raise HTTPException(status_code=500, detail=str(e)) -@app.get("/api/programas-ocultos") -def get_programas_ocultos(): +@app.get("/api/rentabilidad/detalle") +def get_rentabilidad_detalle( + programa: str = Query(...), + ano: int = Query(...), + mes: int = Query(...), +): try: - return services.programas_ocultos() + return services.rentabilidad_detalle(programa, ano, mes) except Exception as e: raise HTTPException(status_code=500, detail=str(e)) -@app.post("/api/programas-ocultos/encender") -def post_encender_programas(body: dict = Body(...)): +@app.get("/api/rentabilidad/costos") +def get_rentabilidad_costos( + programa: str = Query(...), + ano: int = Query(...), + mes: int = Query(...), +): try: - nis = body.get("num_indices") or [] - return services.encender_programas(nis) + return services.rentabilidad_costos(programa, ano, mes) except Exception as e: raise HTTPException(status_code=500, detail=str(e)) -@app.get("/api/programas-disponibles") -def get_programas_disponibles(): +# ── SALDO PENDIENTE ──────────────────────────────────────────────────────── +@app.get("/api/saldo-pendiente") +def get_saldo_pendiente(tipo_cuota: str = Query("1° Cuota")): try: - return services.programas_disponibles() + return services.saldo_pendiente(tipo_cuota) except Exception as e: raise HTTPException(status_code=500, detail=str(e)) -@app.get("/api/leyenda-anuncios") -def get_leyenda(): +# ── GUARDAR COSTOS ───────────────────────────────────────────────────────── +from fastapi import Body + +@app.post("/api/rentabilidad/costos/guardar") +def post_guardar_costos(payload: dict = Body(...)): try: - return services.leyenda_anuncios() - except Exception as e: - raise HTTPException(status_code=500, detail=str(e)) - - -@app.post("/api/leyenda-anuncios/guardar") -def post_leyenda(body: dict = Body(...)): - try: - cambios = body.get("cambios") or [] - return services.guardar_leyenda(cambios) - except Exception as e: - raise HTTPException(status_code=500, detail=str(e)) - - -# ── LEYENDA (campanias de Supabase): listar / agregar / borrar ── -@app.get("/api/campanias") -def get_campanias(): - try: - return {"filas": services.campanias_listar()} - except Exception as e: - raise HTTPException(status_code=500, detail=str(e)) - - -@app.post("/api/campanias/agregar") -def post_campania(body: dict = Body(...)): - try: - return services.campania_agregar(body or {}) - except Exception as e: - raise HTTPException(status_code=500, detail=str(e)) - - -@app.post("/api/campanias/editar") -def post_editar_campania(body: dict = Body(...)): - try: - cid = body.get("id") - return services.campania_editar(cid, body or {}) - except Exception as e: - raise HTTPException(status_code=500, detail=str(e)) - - -@app.post("/api/campanias/borrar") -def post_borrar_campania(body: dict = Body(...)): - try: - return services.campania_borrar(body.get("id")) - except Exception as e: - raise HTTPException(status_code=500, detail=str(e)) - - -@app.get("/api/pauta/uso") -def get_uso_pauta(pauta: str = Query(...), excluir: str = Query("")): - try: - return services.uso_de_pauta(pauta, excluir) - except Exception as e: - raise HTTPException(status_code=500, detail=str(e)) - - -@app.post("/api/curso/guardar-pauta") -def post_guardar_pauta(body: dict = Body(...)): - try: - ni = str(body.get("num_indice", "")).strip() - pa = str(body.get("pauta", "")).strip() - cj = body.get("conjunto") or None - contar = body.get("contar") # "SI" / "NO" / None - if not ni: - raise HTTPException(status_code=400, detail="num_indice es obligatorio") - return services.guardar_edicion_curso(ni, pa, cj, contar) + num_indice = payload.get("num_indice", "") + costos_inicial = payload.get("inicial", {}) + costos_actual = payload.get("actual", {}) + ok = services.guardar_costos(num_indice, costos_inicial, costos_actual) + if ok: + return {"status": "ok"} + raise HTTPException(status_code=500, detail="No se pudo guardar (verifica Supabase)") except HTTPException: raise except Exception as e: raise HTTPException(status_code=500, detail=str(e)) -@app.get("/api/ultima-actualizacion") -def get_ultima_actualizacion(): +@app.post("/api/cobranza/clasificar-sede") +def post_clasificar_sede(payload: dict = Body(...)): try: - return services.ultima_actualizacion() + nombres = payload.get("programas", []) + return {"mapa": services.clasificar_programas(nombres)} + except Exception as e: + raise HTTPException(status_code=500, detail=str(e)) + +@app.post("/api/cobranza/clasificar-full") +def post_clasificar_full(payload: dict = Body(...)): + """Devuelve {programa: {sede, filtro}} usando el JSON REPLACE_META.""" + try: + nombres = payload.get("programas", []) + return {"mapa": services.clasificar_programas_full(nombres)} except Exception as e: raise HTTPException(status_code=500, detail=str(e)) -@app.get("/api/leads/alertas") -def get_alertas(): - """Valores de programa/sede en cartera_junta que NO están en el diccionario.""" +@app.get("/api/debug/supabase-inicios") +def debug_supabase_inicios(ano: int, mes: int): + """Diagnóstico: muestra qué hay en Supabase y por qué (no) se inyecta el rojo.""" try: - return services.alertas() + dm = services.get_dm() + # 1) ¿Supabase conectado? + conectado = dm.supabase_client is not None + error_conexion = getattr(dm, "supabase_error", None) + # 2) Fechas guardadas en Supabase + fechas = dm.obtener_fechas_originales() + # 3) Índices que SQL trae este mes + crudos = dm.ejecutar_consulta_cursos(str(ano), str(mes)) + indices_sql = sorted({str(f.get("num_indice","")).strip() for f in (crudos or [])}) + # 4) Para cada fecha en Supabase, calcular su mes y si coincide con el filtrado + analisis = [] + for idx, info in fechas.items(): + fecha_orig = info.get("fecha","") if isinstance(info, dict) else str(info) + mes_orig = "" + if "/" in fecha_orig: + p = fecha_orig.split("/") + if len(p) >= 2: mes_orig = str(int(p[1])) + elif "-" in fecha_orig: + p = fecha_orig.split("-") + if len(p) >= 2: mes_orig = str(int(p[1])) + analisis.append({ + "num_indice": idx, + "fecha_supabase": fecha_orig, + "mes_detectado": mes_orig, + "mes_filtrado": str(int(mes)), + "coincide_mes": mes_orig == str(int(mes)), + "esta_en_sql_este_mes": idx in indices_sql, + "deberia_salir_rojo": (mes_orig == str(int(mes))) and (idx not in indices_sql), + }) + return { + "supabase_conectado": conectado, + "error_conexion": error_conexion, + "total_fechas_en_supabase": len(fechas), + "indices_en_sql_este_mes": indices_sql, + "analisis": analisis, + } except Exception as e: raise HTTPException(status_code=500, detail=str(e)) -@app.get("/api/debug/cursos") -def debug_cursos(ano: str = "2026", mes: str = "1"): - """Diagnóstico: lista cursos del periodo con inscritos, tipo y meta.""" +@app.get("/api/cobranza/detalle-todos") +def get_cobranza_detalle_todos(ano: int, mes: int, sectorista: str = "TODOS"): try: - return services.debug_cursos(ano, mes) + return services.cobranza_detalle_todos(ano, mes, sectorista) + except Exception as e: + raise HTTPException(status_code=500, detail=str(e)) + + +# ── USUARIOS ─────────────────────────────────────────────────────────────── +@app.get("/api/alumno/estado") +def get_alumno_estado(matricula: str): + try: + return services.alumno_estado_obtener(matricula) + except Exception as e: + raise HTTPException(status_code=500, detail=str(e)) + +@app.get("/api/alumnos/por-retirar") +def get_alumnos_por_retirar(): + try: + return services.alumnos_por_retirar() + except Exception as e: + raise HTTPException(status_code=500, detail=str(e)) + +@app.post("/api/alumno/estado/guardar") +def post_alumno_estado(payload: dict = Body(...)): + try: + return services.alumno_estado_guardar( + payload.get("matricula",""), + payload.get("estado","EN CURSO"), + payload.get("observaciones",[]), + payload.get("usuario")) + except Exception as e: + raise HTTPException(status_code=500, detail=str(e)) + +@app.get("/api/usuarios") +def get_usuarios(): + try: + return services.usuarios_listar() + except Exception as e: + raise HTTPException(status_code=500, detail=str(e)) + +@app.post("/api/usuarios/crear") +def post_usuario_crear(payload: dict = Body(...)): + try: + return services.usuarios_crear( + payload.get("email",""), payload.get("password",""), + payload.get("nombre",""), payload.get("rol","COBRANZA")) + except Exception as e: + raise HTTPException(status_code=500, detail=str(e)) + +@app.post("/api/usuarios/rol") +def post_usuario_rol(payload: dict = Body(...)): + try: + return services.usuarios_actualizar_rol(payload.get("id",""), payload.get("rol","")) + except Exception as e: + raise HTTPException(status_code=500, detail=str(e)) + +@app.post("/api/usuarios/eliminar") +def post_usuario_eliminar(payload: dict = Body(...)): + try: + return services.usuarios_eliminar(payload.get("id","")) + except Exception as e: + raise HTTPException(status_code=500, detail=str(e)) + + +# ── VENDEDORES MANUALES (Comisiones) ─────────────────────────────────────── +@app.get("/api/comisiones/vendedores") +def get_vend_manuales(ano: int, mes: int): + try: + return services.vendedores_manuales_listar(ano, mes) + except Exception as e: + raise HTTPException(status_code=500, detail=str(e)) + +@app.post("/api/comisiones/vendedores/crear") +def post_vend_manual_crear(payload: dict = Body(...)): + try: + return services.vendedores_manuales_crear( + payload.get("nombre",""), payload.get("descripcion",""), + payload.get("fch_emision",""), payload.get("monto",0), + payload.get("ano"), payload.get("mes")) + except Exception as e: + raise HTTPException(status_code=500, detail=str(e)) + +@app.post("/api/comisiones/vendedores/eliminar") +def post_vend_manual_eliminar(payload: dict = Body(...)): + try: + return services.vendedores_manuales_eliminar(payload.get("id","")) + except Exception as e: + raise HTTPException(status_code=500, detail=str(e)) + + +@app.post("/api/comisiones/override/guardar") +def post_com_override_guardar(payload: dict = Body(...)): + try: + return services.comisiones_override_guardar(payload.get("registros", [])) + except Exception as e: + raise HTTPException(status_code=500, detail=str(e)) + +@app.post("/api/comisiones/override/restaurar") +def post_com_override_restaurar(payload: dict = Body(...)): + try: + return services.comisiones_override_restaurar(payload.get("num_matricula","")) + except Exception as e: + raise HTTPException(status_code=500, detail=str(e)) + + +@app.post("/api/comisiones/vendedores/actualizar") +def post_vend_manual_actualizar(payload: dict = Body(...)): + try: + return services.vendedores_manuales_actualizar( + payload.get("id",""), payload.get("descripcion",""), + payload.get("fch_emision",""), payload.get("monto",0)) + except Exception as e: + raise HTTPException(status_code=500, detail=str(e)) + + +@app.post("/api/comisiones/vendedores/lote") +def post_vend_manual_lote(payload: dict = Body(...)): + try: + return services.vendedores_manuales_guardar_lote( + payload.get("nombre",""), payload.get("ano"), payload.get("mes"), + payload.get("filas", [])) + except Exception as e: + raise HTTPException(status_code=500, detail=str(e)) + + +@app.get("/api/comisiones/detalle-todos") +def get_comisiones_detalle_todos(ano: int, mes: int): + try: + return services.comisiones_detalle_todos(ano, mes) + except Exception as e: + raise HTTPException(status_code=500, detail=str(e)) + + +@app.get("/api/comisiones/config") +def get_comisiones_config(ano: int = Query(...), mes: int = Query(...)): + try: + return services.comisiones_config_listar(ano, mes) + except Exception as e: + raise HTTPException(status_code=500, detail=str(e)) + + +@app.post("/api/comisiones/config/guardar") +def post_comisiones_config(payload: dict = Body(...)): + try: + return services.comisiones_config_guardar(payload.get("ano"), payload.get("mes"), payload.get("filas", [])) + except Exception as e: + raise HTTPException(status_code=500, detail=str(e)) + + +# ── ASESORES (Chatwoot) ──────────────────────────────────────────────────── +CHATWOOT_URL = "https://gestor.escueladerefrigeracion.edu.pe" +ACCESS_TOKEN = "4anazHvZnvKLtup8biu5Zuoh" +ACCOUNT_ID = "1" +CHATWOOT_HEADERS = {"api_access_token": ACCESS_TOKEN, "Content-Type": "application/json"} + + +@app.get("/api/asesores") +def get_asesores(): + import requests + try: + url = f"{CHATWOOT_URL}/api/v1/accounts/{ACCOUNT_ID}/agents" + r = requests.get(url, headers=CHATWOOT_HEADERS, timeout=10) + r.raise_for_status() + return {"agentes": r.json()} + except Exception as e: + raise HTTPException(status_code=500, detail=str(e)) + + +@app.post("/api/asesores/estado") +def set_asesor_estado(agent_id: int = Query(...), online: bool = Query(...)): + import requests, time + url = f"{CHATWOOT_URL}/api/v1/accounts/{ACCOUNT_ID}/agents/{agent_id}" + estado = "online" if online else "offline" + try: + requests.patch(url, headers=CHATWOOT_HEADERS, json={"auto_offline": False}, timeout=10) + time.sleep(0.5) + r = requests.patch(url, headers=CHATWOOT_HEADERS, + json={"availability_status": estado, "availability": estado}, timeout=10) + r.raise_for_status() + return {"status": "ok", "estado": estado} except Exception as e: raise HTTPException(status_code=500, detail=str(e)) if __name__ == "__main__": - uvicorn.run("main:app", host="0.0.0.0", port=8001, reload=False) + uvicorn.run("main:app", host="0.0.0.0", port=8000, reload=False) diff --git a/backend/modules/__init__.py b/backend/modules/__init__.py new file mode 100644 index 0000000..e69de29 diff --git a/backend/modules/asesores/__init__.py b/backend/modules/asesores/__init__.py new file mode 100644 index 0000000..e69de29 diff --git a/backend/modules/asesores/processor.py b/backend/modules/asesores/processor.py new file mode 100644 index 0000000..c793669 --- /dev/null +++ b/backend/modules/asesores/processor.py @@ -0,0 +1,86 @@ +# modules/asesores/processor.py +import requests +import time + +class AsesoresProcessor: + def __init__(self): + # Tus credenciales maestras de Chatwoot + self.chatwoot_url = "https://gestor.escueladerefrigeracion.edu.pe" + self.access_token = "4anazHvZnvKLtup8biu5Zuoh" + self.account_id = "1" + + def obtener_agentes_chatwoot(self): + url = f"{self.chatwoot_url}/api/v1/accounts/{self.account_id}/agents" + headers = { + "api_access_token": self.access_token, + "Content-Type": "application/json" + } + try: + response = requests.get(url, headers=headers, timeout=10) + response.raise_for_status() + agentes = response.json() + + # ================================================================= + # 🕵️♂️ ESCÁNER DEBUG (Se imprimirá en tu consola negra) + # ================================================================= + print("\n" + "="*60) + print("🕵️♂️ ESCÁNER: REVISANDO 'DESCONEXIÓN AUTOMÁTICA'") + print("="*60) + for ag in agentes: + nombre = ag.get('available_name') or ag.get('name', 'Desconocido') + estado = ag.get('availability_status', 'offline') + auto_offline = ag.get('auto_offline', 'Desconocido') + print(f"👤 {nombre} | Estado: {estado} | Radar: {auto_offline}") + print("="*60 + "\n") + + return agentes + except Exception: + return [] + + # ========================================================================= + # MOTOR DE ACTUALIZACIÓN (EL COMBO DE 2 GOLPES) + # ========================================================================= + def cambiar_estado_agente(self, agent_id, is_online): + url = f"{self.chatwoot_url}/api/v1/accounts/{self.account_id}/agents/{agent_id}" + headers = { + "api_access_token": self.access_token, + "Content-Type": "application/json" + } + + estado_str = "online" if is_online else "offline" + + try: + # ----------------------------------------------------------------- + # GOLPE 1: Desactivar el botón automático primero + # ----------------------------------------------------------------- + payload_radar = { + "auto_offline": False + } + requests.patch(url, headers=headers, json=payload_radar, timeout=10) + + # Le damos 0.5 segundos a la base de datos de Chatwoot para que + # asimile que el radar de este usuario acaba de ser destruido. + time.sleep(0.5) + + # ----------------------------------------------------------------- + # GOLPE 2: El código viejo y confiable para cambiar el estado + # ----------------------------------------------------------------- + payload_estado = { + "availability_status": estado_str, + "availability": estado_str + } + response = requests.patch(url, headers=headers, json=payload_estado, timeout=10) + + if response.status_code == 500: + return False, "Error interno del servidor Chatwoot." + + response.raise_for_status() + + # ⏳ Le damos 1.5 segundos para que le avise a la computadora + # del asesor que su estado acaba de cambiar en pantalla. + time.sleep(1.5) + + return True, "Orden ejecutada con el combo de 2 pasos" + + except Exception as e: + return False, f"Fallo de red: {str(e)}" \ No newline at end of file diff --git a/backend/modules/cobranza/__init__.py b/backend/modules/cobranza/__init__.py new file mode 100644 index 0000000..e69de29 diff --git a/backend/modules/cobranza/logic.py b/backend/modules/cobranza/logic.py new file mode 100644 index 0000000..1e6487a --- /dev/null +++ b/backend/modules/cobranza/logic.py @@ -0,0 +1,231 @@ +# modules/cobranza/logic.py +import pandas as pd +from .processor import CobranzaProcessor + +class CobranzaLogic: + def __init__(self, data_manager): + self.data_manager = data_manager + self.processor = CobranzaProcessor(data_manager) + + def obtener_lista_sectoristas(self, ano, mes): + return self.processor.obtener_lista_sectoristas(ano, mes) + + def obtener_datos_tabla(self, ano, mes, sectorista="TODOS", agrupacion="SEDE", + sede_filtro="TODOS", prog_filtro="TODOS", venc_hasta=None): + datos_brutos = self.processor.obtener_datos_procesados(ano, mes, sectorista, agrupacion, + sede_filtro, prog_filtro, venc_hasta) + + sheet_data = [] + t_cta_ant = t_cta_cur = t_cta_tot = t_cob_ant = t_cob_cur = t_cob_tot = t_saldo = 0.0 + + for d in datos_brutos: + grupo = d.get('GRUPO', '') + frecuencia = d.get('FRECUENCIA', '-') + num_cuota = d.get('NUM_CUOTA', '-') + fecha_venc = d.get('FCH_VENC_MODA', '-') + + cta_ant = float(d.get('CTA_COB_ANT', 0.0)) + cta_cur = float(d.get('CTA_COB_MES_CURSO', 0.0)) + cta_tot = float(d.get('TOTAL_CTA_COB', 0.0)) + cob_ant = float(d.get('COB_ANT', 0.0)) + r1 = float(d.get('RATIO_1', 0.0)) + cob_cur = float(d.get('COB_MES_CURSO', 0.0)) + r2 = float(d.get('RATIO_2', 0.0)) + cob_tot = float(d.get('TOTAL_COBRADO', 0.0)) + r3 = float(d.get('RATIO_3', 0.0)) + saldo = float(d.get('SALDO', 0.0)) + opciones = d.get('OPCIONES', ' ≡ ▼ ') + + t_cta_ant += cta_ant + t_cta_cur += cta_cur + t_cta_tot += cta_tot + t_cob_ant += cob_ant + t_cob_cur += cob_cur + t_cob_tot += cob_tot + t_saldo += saldo + + avance_ant = f"{r1:.0f}%" if cta_ant > 0 else "" + avance_cur = f"{r2:.0f}%" if cta_cur > 0 else "" + avance_tot = f"{r3:.0f}%" if cta_tot > 0 else "" + + if agrupacion == "PROGRAMA": + fila = [ + grupo, frecuencia, num_cuota, fecha_venc, + f"S/ {cta_ant:,.0f}", f"S/ {cob_ant:,.0f}", avance_ant, + f"S/ {cta_cur:,.0f}", f"S/ {cob_cur:,.0f}", avance_cur, + f"S/ {cta_tot:,.0f}", f"S/ {cob_tot:,.0f}", avance_tot, + f"S/ {saldo:,.0f}", opciones + ] + else: + fila = [ + grupo, + f"S/ {cta_ant:,.0f}", f"S/ {cob_ant:,.0f}", avance_ant, + f"S/ {cta_cur:,.0f}", f"S/ {cob_cur:,.0f}", avance_cur, + f"S/ {cta_tot:,.0f}", f"S/ {cob_tot:,.0f}", avance_tot, + f"S/ {saldo:,.0f}", opciones + ] + sheet_data.append(fila) + + r_tot_1 = (t_cob_ant / t_cta_ant) * 100 if t_cta_ant > 0 else 0.0 + r_tot_2 = (t_cob_cur / t_cta_cur) * 100 if t_cta_cur > 0 else 0.0 + r_tot_3 = (t_cob_tot / t_cta_tot) * 100 if t_cta_tot > 0 else 0.0 + + if agrupacion == "PROGRAMA": + fila_total = [ + "TOTAL GENERAL", "-", "-", "-", + f"S/ {t_cta_ant:,.0f}", f"S/ {t_cob_ant:,.0f}", f"{r_tot_1:.0f}%", + f"S/ {t_cta_cur:,.0f}", f"S/ {t_cob_cur:,.0f}", f"{r_tot_2:.0f}%", + f"S/ {t_cta_tot:,.0f}", f"S/ {t_cob_tot:,.0f}", f"{r_tot_3:.0f}%", + f"S/ {t_saldo:,.0f}", "" + ] + else: + fila_total = [ + "TOTAL GENERAL", + f"S/ {t_cta_ant:,.0f}", f"S/ {t_cob_ant:,.0f}", f"{r_tot_1:.0f}%", + f"S/ {t_cta_cur:,.0f}", f"S/ {t_cob_cur:,.0f}", f"{r_tot_2:.0f}%", + f"S/ {t_cta_tot:,.0f}", f"S/ {t_cob_tot:,.0f}", f"{r_tot_3:.0f}%", + f"S/ {t_saldo:,.0f}", "" + ] + sheet_data.append(fila_total) + return sheet_data + + def obtener_detalle_programa_formateado(self, ano, mes, sectorista, programa, venc_hasta=None): + datos_brutos = self.processor.obtener_detalle_programa(ano, mes, sectorista, programa, venc_hasta) + + sheet_data = [] + t_cta_ant = t_cta_cur = t_cta_tot = t_cob_ant = t_cob_cur = t_cob_tot = t_saldo = 0.0 + + for d in datos_brutos: + mat = d.get('MATRICULA', '') + alumno = d.get('ALUMNO', '') + num_cuota = d.get('NUM_CUOTA', '-') + fch_venc = d.get('FCH_VENC', '-') + programa = d.get('PROGRAMA', '-') # programa detallado del alumno + + cta_ant = float(d.get('CTA_COB_ANT', 0.0)) + cta_cur = float(d.get('CTA_COB_MES_CURSO', 0.0)) + cta_tot = float(d.get('TOTAL_CTA_COB', 0.0)) + cob_ant = float(d.get('COB_ANT', 0.0)) + cob_cur = float(d.get('COB_MES_CURSO', 0.0)) + cob_tot = float(d.get('TOTAL_COBRADO', 0.0)) + saldo = float(d.get('SALDO', 0.0)) + + t_cta_ant += cta_ant; t_cta_cur += cta_cur; t_cta_tot += cta_tot + t_cob_ant += cob_ant; t_cob_cur += cob_cur; t_cob_tot += cob_tot; t_saldo += saldo + + r1 = (cob_ant / cta_ant) * 100 if cta_ant > 0 else 0.0 + r2 = (cob_cur / cta_cur) * 100 if cta_cur > 0 else 0.0 + r3 = (cob_tot / cta_tot) * 100 if cta_tot > 0 else 0.0 + + avance_ant = f"{r1:.0f}%" if cta_ant > 0 else "" + avance_cur = f"{r2:.0f}%" if cta_cur > 0 else "" + avance_tot = f"{r3:.0f}%" if cta_tot > 0 else "" + + fila = [ + mat, alumno, num_cuota, fch_venc, + f"S/ {cta_ant:,.0f}", f"S/ {cob_ant:,.0f}", avance_ant, + f"S/ {cta_cur:,.0f}", f"S/ {cob_cur:,.0f}", avance_cur, + f"S/ {cta_tot:,.0f}", f"S/ {cob_tot:,.0f}", avance_tot, + f"S/ {saldo:,.0f}", + programa # índice [14]: PROGRAMA (extra, al final; no altera columnas previas) + ] + sheet_data.append(fila) + + r_tot_1 = (t_cob_ant / t_cta_ant) * 100 if t_cta_ant > 0 else 0.0 + r_tot_2 = (t_cob_cur / t_cta_cur) * 100 if t_cta_cur > 0 else 0.0 + r_tot_3 = (t_cob_tot / t_cta_tot) * 100 if t_cta_tot > 0 else 0.0 + + fila_total = [ + "TOTAL", "GENERAL", "-", "-", + f"S/ {t_cta_ant:,.0f}", f"S/ {t_cob_ant:,.0f}", f"{r_tot_1:.0f}%", + f"S/ {t_cta_cur:,.0f}", f"S/ {t_cob_cur:,.0f}", f"{r_tot_2:.0f}%", + f"S/ {t_cta_tot:,.0f}", f"S/ {t_cob_tot:,.0f}", f"{r_tot_3:.0f}%", + f"S/ {t_saldo:,.0f}", + "" # índice [14]: PROGRAMA vacío en la fila total + ] + sheet_data.append(fila_total) + return sheet_data + + def exportar_detalle_excel(self, programa, headers, datos): + if not datos: raise ValueError("No hay datos para exportar") + + prog_limpio = "".join([c if c.isalnum() else "_" for c in str(programa)])[:30] + archivo = f"Detalle_Cobranza_{prog_limpio}.xlsx" + + df = pd.DataFrame(datos, columns=[h.replace('\n', ' ') for h in headers]) + try: + with pd.ExcelWriter(archivo, engine='openpyxl') as writer: + df.to_excel(writer, index=False, sheet_name='Detalle') + except: + df.to_excel(archivo, index=False) + return archivo + + def exportar_reporte_global(self, ano, mes, sectorista): + datos_brutos = self.processor.obtener_detalle_programa(ano, mes, sectorista, "TODOS") + if not datos_brutos: raise ValueError("No hay datos para exportar en este mes.") + + filas_excel = [] + for d in datos_brutos: + cta_ant = float(d.get('CTA_COB_ANT', 0.0)) + cob_ant = float(d.get('COB_ANT', 0.0)) + cta_cur = float(d.get('CTA_COB_MES_CURSO', 0.0)) + cob_cur = float(d.get('COB_MES_CURSO', 0.0)) + cta_tot = float(d.get('TOTAL_CTA_COB', 0.0)) + cob_tot = float(d.get('TOTAL_COBRADO', 0.0)) + + filas_excel.append({ + "ALUMNO": d.get('ALUMNO', ''), + "PROGRAMA": d.get('PROGRAMA', '-'), + "FRECUENCIA": d.get('FRECUENCIA', '-'), + "NUM CUOTA": d.get('NUM_CUOTA', '-'), + "FCH VENCIMIENTO": d.get('FCH_VENC', '-'), + "CUENTA PENDIENTE": cta_ant, + "COBRADO PENDIENTE": cob_ant, + "AVANCE % ": (cob_ant / cta_ant) if cta_ant > 0 else 0.0, + "CUENTA EN CURSO": cta_cur, + "COBRADO EN CURSO": cob_cur, + "AVANCE % ": (cob_cur / cta_cur) if cta_cur > 0 else 0.0, + "TOTAL CUENTA": cta_tot, + "TOTAL COBRADO": cob_tot, + "AVANCE %": (cob_tot / cta_tot) if cta_tot > 0 else 0.0, + "SALDO": float(d.get('SALDO', 0.0)) + }) + + df = pd.DataFrame(filas_excel) + archivo = f"Reporte_Cobranza_Global_{ano}_{mes}.xlsx" + + try: + with pd.ExcelWriter(archivo, engine='openpyxl') as writer: + df.to_excel(writer, index=False, sheet_name='Reporte Global') + worksheet = writer.sheets['Reporte Global'] + from openpyxl.styles import PatternFill, Font, Alignment + + fill_header = PatternFill(start_color="12345F", end_color="12345F", fill_type="solid") + font_header = Font(color="FFFFFF", bold=True) + for cell in worksheet[1]: + cell.fill = fill_header + cell.font = font_header + cell.alignment = Alignment(horizontal="center", vertical="center") + + for row in range(2, len(filas_excel) + 2): + for col in [6, 7, 9, 10, 12, 13, 15]: + worksheet.cell(row=row, column=col).number_format = '"S/" #,##0.00' + for col in [8, 11, 14]: + worksheet.cell(row=row, column=col).number_format = '0%' + # FCH VENCIMIENTO (col 5): forzar TEXTO para que Excel no reinterprete + # la fecha ni le reste un día por zona horaria. + celda_fecha = worksheet.cell(row=row, column=5) + celda_fecha.value = str(celda_fecha.value) + celda_fecha.number_format = '@' + + for col in worksheet.columns: + max_len = 0 + col_letter = col[0].column_letter + for cell in col: + if cell.value: + max_len = max(max_len, len(str(cell.value))) + worksheet.column_dimensions[col_letter].width = min(max_len + 2, 40) + except Exception: + df.to_excel(archivo, index=False) + + return archivo \ No newline at end of file diff --git a/backend/modules/cobranza/processor.py b/backend/modules/cobranza/processor.py new file mode 100644 index 0000000..ee7f814 --- /dev/null +++ b/backend/modules/cobranza/processor.py @@ -0,0 +1,824 @@ +# modules/cobranza/processor.py +from datetime import datetime +import requests +import unicodedata + +class CobranzaProcessor: + def __init__(self, data_manager): + self.data_manager = data_manager + self.config_sedes = self._cargar_json_sedes() + # ── Caché de consultas SQL ──────────────────────────────────────── + self._cache_cronograma = None + self._cache_facturas = None + self._cache_ano = None + + def _obtener_datos_cached(self, ano): + """Devuelve cronograma y facturas usando caché si el año coincide.""" + if self._cache_ano == ano and self._cache_cronograma is not None: + print(f"[CACHE] Reutilizando datos en caché para año {ano}") + return self._cache_cronograma, self._cache_facturas + print(f"[CACHE] Consultando BD para año {ano}...") + cronograma = self.data_manager.ejecutar_consulta_cronograma_cobranza(ano) + facturas = self.data_manager.ejecutar_consulta_facturas_cobranza(ano) + self._cache_cronograma = cronograma + self._cache_facturas = facturas + self._cache_ano = ano + return cronograma, facturas + + def invalidar_cache(self): + """Fuerza recarga desde BD en la siguiente consulta.""" + self._cache_cronograma = None + self._cache_facturas = None + self._cache_ano = None + print("🧹 [CACHE] Memoria limpiada por actualización automática. La próxima consulta irá directo a la BD.") + + # ========================================================================= + # CARGA DE CONFIGURACIÓN (sede.json) + # ========================================================================= + def _cargar_json_sedes(self): + datos = None + try: + url = getattr(self.data_manager, 'github_sede_url', None) + if url: + response = requests.get(url) + response.raise_for_status() + datos = response.json() + except Exception as e: + pass + + if datos is None: + datos = { + "clasificacion_sedes": { + "AREQUIPA": {"patrones": ["AREQUIPA"]}, + "PIURA": {"patrones": ["PIURA"]}, + "TRUJILLO": {"patrones": ["TRUJILLO"]} + }, + "clasificacion_default": {"sede": "LIMA"} + } + + self._reemplazos_nombre = datos.get("reemplazos_nombre", []) + return datos + + # ========================================================================= + # REEMPLAZOS DE NOMBRE DE PROGRAMA + # ========================================================================= + @staticmethod + def _normalizar(texto): + texto = unicodedata.normalize('NFD', str(texto)) + return texto.encode('ascii', 'ignore').decode('utf-8') + + def _aplicar_reemplazos_nombre(self, texto): + if not texto or not self._reemplazos_nombre: + return texto + + resultado = texto + for entrada in self._reemplazos_nombre: + buscar = str(entrada.get("buscar", "")).strip() + reemplazar = str(entrada.get("reemplazar", "")).strip() + if not buscar: + continue + + buscar_norm = self._normalizar(buscar).upper() + idx = self._normalizar(resultado).upper().find(buscar_norm) + while idx != -1: + resultado = resultado[:idx] + reemplazar + resultado[idx + len(buscar):] + idx = self._normalizar(resultado).upper().find(buscar_norm, idx + len(reemplazar)) + + return resultado + + # ========================================================================= + # CLASIFICACIÓN DE SEDE + # ========================================================================= + def clasificar_sede(self, dsc_programa): + if not dsc_programa: + return self.config_sedes.get("clasificacion_default", {}).get("sede", "LIMA") + + dsc_prog_upper = str(dsc_programa).upper() + sedes = self.config_sedes.get("clasificacion_sedes", {}) + + for nombre_sede, datos in sedes.items(): + for patron in datos.get("patrones", []): + if patron.upper() in dsc_prog_upper: + return nombre_sede + + return self.config_sedes.get("clasificacion_default", {}).get("sede", "LIMA") + + # ========================================================================= + # UTILIDADES + # ========================================================================= + def parse_fecha(self, fecha_raw): + try: + if isinstance(fecha_raw, datetime): return fecha_raw + if not fecha_raw: return None + s_fecha = str(fecha_raw).strip() + if len(s_fecha) == 10 and s_fecha[2] == '-': + return datetime.strptime(s_fecha, '%d-%m-%Y') + if ' ' in s_fecha: + return datetime.strptime(s_fecha.split('.')[0], '%Y-%m-%d %H:%M:%S') + return datetime.strptime(s_fecha, '%Y-%m-%d') + except: + return None + + def parse_corte_venc(self, venc_hasta): + """Convierte el corte del filtro (dd/mm/yyyy del calendario, o ISO) a datetime. + Devuelve None si no aplica (TODOS/vacío).""" + if venc_hasta in (None, "", "TODOS", "NONE"): return None + s = str(venc_hasta).strip() + try: + if '/' in s: return datetime.strptime(s, '%d/%m/%Y') + except: pass + return self.parse_fecha(s) + + def obtener_fechas_filtro(self, ano, mes_numero): + ano_int = int(ano) + mes_int = int(mes_numero) + fecha_filtro = datetime(ano_int, mes_int, 1) + if mes_int == 12: + fecha_filtro_siguiente = datetime(ano_int + 1, 1, 1) + else: + fecha_filtro_siguiente = datetime(ano_int, mes_int + 1, 1) + return fecha_filtro, fecha_filtro_siguiente + + def calcular_importe_final(self, fila): + try: imp_total = float(fila.get('imp_total', 0) or 0) + except: imp_total = 0.0 + try: imp_dscto = float(fila.get('imp_dscto', 0) or 0) + except: imp_dscto = 0.0 + return imp_total - imp_dscto + + def evaluar_ctaxcob_suma(self, fila, importe_final, fecha_filtro, fecha_filtro_siguiente, hoy, debug_stats): + sectorista = str(fila.get('dsc_sectorista', '')) + if sectorista == " , " or sectorista.strip() == ",": + return 0.0, 0.0 + + try: num_cuota = int(fila.get('num_cuota', 0)) + except: num_cuota = 0 + if not (num_cuota > 1): + debug_stats['falla_cuota'] += 1 + return 0.0, 0.0 + + fch_vencimiento = self.parse_fecha(fila.get('fch_vencimiento')) + if not fch_vencimiento: + debug_stats['falla_vencimiento'] += 1 + return 0.0, 0.0 + + es_anterior = fch_vencimiento < fecha_filtro + es_curso = (fch_vencimiento >= fecha_filtro) and (fch_vencimiento < fecha_filtro_siguiente) + + if not (es_anterior or es_curso): + debug_stats['falla_vencimiento'] += 1 + return 0.0, 0.0 + + fch_inicio = self.parse_fecha(fila.get('fch_inicio')) + if not fch_inicio or not (fch_inicio <= hoy): + debug_stats['falla_inicio'] += 1 + return 0.0, 0.0 + + estado = str(fila.get('estado_matricula', '')).strip().upper() + if estado in ["ALU", "PRE"]: + pass + elif estado == "RET": + fch_retiro = self.parse_fecha(fila.get('fch_retiro')) + if not fch_retiro or not (fch_retiro >= fecha_filtro_siguiente): + debug_stats['falla_estado'] += 1 + return 0.0, 0.0 + else: + debug_stats['falla_estado'] += 1 + return 0.0, 0.0 + + importe_convertido = importe_final + moneda = str(fila.get('cod_moneda', '')).strip().upper() + if moneda == 'DOL': + try: tc = float(fila.get('imp_tc', 1.0) or 1.0) + except: tc = 1.0 + importe_convertido *= tc + + debug_stats['pasa_todo'] += 1 + + if es_anterior: return importe_convertido, 0.0 + if es_curso: return 0.0, importe_convertido + return 0.0, 0.0 + + def evaluar_ctaxcob_resta(self, fila_factura, fecha_filtro, fecha_filtro_siguiente, hoy, debug_stats, tc_correcto): + sectorista = str(fila_factura.get('dsc_sectorista', '')) + if sectorista == " , " or sectorista.strip() == ",": + return 0.0, 0.0, 0.0, 0.0 + + try: num_cuota = int(fila_factura.get('num_cuota', 0)) + except: num_cuota = 0 + if not (num_cuota > 1): + debug_stats['falla_cuota'] += 1 + return 0.0, 0.0, 0.0, 0.0 + + cod_estado = str(fila_factura.get('cod_estado', '')).strip().upper() + if cod_estado != "CAN": + debug_stats['falla_estado_can'] += 1 + return 0.0, 0.0, 0.0, 0.0 + + flg_nc = str(fila_factura.get('flg_nc', '')).strip().upper() + if flg_nc == "SI": + debug_stats['falla_nc'] += 1 + return 0.0, 0.0, 0.0, 0.0 + + fch_venc_cuota = self.parse_fecha(fila_factura.get('fch_vencimiento_cuota')) + if not fch_venc_cuota: + debug_stats['falla_venc_cuota'] += 1 + return 0.0, 0.0, 0.0, 0.0 + + es_anterior = fch_venc_cuota < fecha_filtro + es_curso = (fch_venc_cuota >= fecha_filtro) and (fch_venc_cuota < fecha_filtro_siguiente) + + if not (es_anterior or es_curso): + debug_stats['falla_venc_cuota'] += 1 + return 0.0, 0.0, 0.0, 0.0 + + fch_cancelacion = self.parse_fecha(fila_factura.get('fch_cancelacion')) + if not fch_cancelacion: + debug_stats['falla_cancelacion'] += 1 + return 0.0, 0.0, 0.0, 0.0 + + pasa_anterior = es_anterior and (fch_cancelacion < fecha_filtro) + pasa_curso = es_curso and (fch_cancelacion < fecha_filtro) + pasa_cobrado_ant = es_anterior and (fch_cancelacion >= fecha_filtro) and (fch_cancelacion < fecha_filtro_siguiente) + pasa_cobrado_curso = es_curso and (fch_cancelacion >= fecha_filtro) and (fch_cancelacion < fecha_filtro_siguiente) + + if not (pasa_anterior or pasa_curso or pasa_cobrado_ant or pasa_cobrado_curso): + debug_stats['falla_cancelacion'] += 1 + return 0.0, 0.0, 0.0, 0.0 + + fch_inicio = self.parse_fecha(fila_factura.get('fch_inicio')) + if not fch_inicio or not (fch_inicio <= hoy): + debug_stats['falla_inicio'] += 1 + return 0.0, 0.0, 0.0, 0.0 + + estado_mat = str(fila_factura.get('estado_matricula', '')).strip().upper() + if estado_mat in ["ALU", "PRE"]: pass + elif estado_mat == "RET": + fch_retiro = self.parse_fecha(fila_factura.get('fch_retiro')) + if not fch_retiro or not (fch_retiro >= fecha_filtro_siguiente): + debug_stats['falla_estado_mat'] += 1 + return 0.0, 0.0, 0.0, 0.0 + else: + debug_stats['falla_estado_mat'] += 1 + return 0.0, 0.0, 0.0, 0.0 + + try: imp_emitido = float(fila_factura.get('imp_emitido', 0) or 0) + except: imp_emitido = 0.0 + + imp_emitido_convertido = imp_emitido + moneda = str(fila_factura.get('cod_moneda', '')).strip().upper() + if moneda == 'DOL': + imp_emitido_convertido *= tc_correcto + + debug_stats['pasa_todo'] += 1 + + val_resta_ant = imp_emitido_convertido if pasa_anterior else 0.0 + val_resta_cur = imp_emitido_convertido if pasa_curso else 0.0 + val_cobrado_ant = imp_emitido_convertido if pasa_cobrado_ant else 0.0 + val_cobrado_curso = imp_emitido_convertido if pasa_cobrado_curso else 0.0 + + return val_resta_ant, val_resta_cur, val_cobrado_ant, val_cobrado_curso + + # ========================================================================= + # LISTA DE SECTORISTAS + # ========================================================================= + def obtener_lista_sectoristas(self, ano, mes): + fecha_filtro, fecha_filtro_siguiente = self.obtener_fechas_filtro(ano, mes) + hoy = datetime.now() + + try: + cronograma_raw = self.data_manager.ejecutar_consulta_cronograma_cobranza(ano) + facturas_raw = self.data_manager.ejecutar_consulta_facturas_cobranza(ano) + except Exception: return ["TODOS"] + + sectoristas_neto = {} + stats_suma = {'falla_cuota': 0, 'falla_vencimiento': 0, 'falla_inicio': 0, 'falla_estado': 0, 'pasa_todo': 0} + stats_resta = {'falla_cuota': 0, 'falla_estado_can': 0, 'falla_nc': 0, 'falla_cancelacion': 0, 'falla_venc_cuota': 0, 'falla_inicio': 0, 'falla_estado_mat': 0, 'falla_treatas': 0, 'pasa_todo': 0} + + indices_cronograma = set() + mapa_tc = {} + mapa_sectorista = {} + + for fila in cronograma_raw: + sec_str = str(fila.get('dsc_sectorista', '')) + sec_clean = sec_str.strip() + if sec_clean in ["", ",", "None"] or sec_str == " , ": continue + + idx = str(fila.get('num_indice', '')).strip() + if idx: + indices_cronograma.add(idx) + mapa_sectorista[idx] = sec_clean + + mat = str(fila.get('num_matricula', '')).strip() + if mat and mat not in mapa_tc: + try: tc = float(fila.get('imp_tc', 1.0) or 1.0) + except: tc = 1.0 + mapa_tc[mat] = tc + + for fila in cronograma_raw: + idx = str(fila.get('num_indice', '')).strip() + if idx not in indices_cronograma: continue + + sec_clean = mapa_sectorista[idx] + importe_final = self.calcular_importe_final(fila) + suma_ant, suma_cur = self.evaluar_ctaxcob_suma(fila, importe_final, fecha_filtro, fecha_filtro_siguiente, hoy, stats_suma) + + if sec_clean not in sectoristas_neto: sectoristas_neto[sec_clean] = 0.0 + sectoristas_neto[sec_clean] += (suma_ant + suma_cur) + + for fila in facturas_raw: + idx_factura = str(fila.get('num_indice', '')).strip() + if idx_factura not in indices_cronograma: continue + + sec_clean = mapa_sectorista.get(idx_factura, "") + if not sec_clean: continue + + mat_factura = str(fila.get('num_matricula', '')).strip() + tc_correcto = mapa_tc.get(mat_factura, 1.0) + + resta_ant, resta_cur, _, _ = self.evaluar_ctaxcob_resta( + fila, fecha_filtro, fecha_filtro_siguiente, hoy, stats_resta, tc_correcto + ) + + if sec_clean in sectoristas_neto: sectoristas_neto[sec_clean] -= (resta_ant + resta_cur) + + lista_final = [] + for sec, total_cta_x_cob in sectoristas_neto.items(): + if round(total_cta_x_cob, 2) > 0: lista_final.append(sec) + + lista_final = sorted(lista_final) + lista_final.insert(0, "TODOS") + return lista_final + + # ========================================================================= + # DATOS PROCESADOS (TABLA PRINCIPAL CON VISTA DE ASESORES) + # ========================================================================= + + def _meta_full(self): + """JSON completo REPLACE_META (con clasificacion_filtro_programa).""" + md = getattr(self.data_manager, "meta_data", None) + if isinstance(md, dict) and md: + return md + return self.config_sedes or {} + + def clasificar_filtro_programa(self, dsc_programa): + """TEAC/TERC/SEMINARIOS/OTROS desde clasificacion_filtro_programa (REPLACE_META). + Respeta el orden del JSON (primer patrón que coincide gana).""" + up = str(dsc_programa or "").upper() + data = self._meta_full().get("clasificacion_filtro_programa", {}) + for cat, cfg in data.items(): + if cat == "DEFAULT": + continue + for pat in cfg.get("patrones", []): + if str(pat).upper() in up: + return cat + return data.get("DEFAULT", "OTROS") + + def clasificar_sede_meta(self, dsc_programa): + """Sede desde clasificacion_sedes del REPLACE_META (LIMA por defecto).""" + up = str(dsc_programa or "").upper() + data = self._meta_full().get("clasificacion_sedes", {}) + for sede, cfg in data.items(): + if sede == "DEFAULT": + continue + for pat in cfg.get("patrones", []): + if str(pat).upper() in up: + return sede + return data.get("DEFAULT", "LIMA") + + def obtener_datos_procesados(self, ano, mes, sectorista_filtro="TODOS", agrupacion="SEDE", + sede_filtro="TODOS", prog_filtro="TODOS", venc_hasta=None): + fecha_filtro, fecha_filtro_siguiente = self.obtener_fechas_filtro(ano, mes) + hoy = datetime.now() + # Filtro adicional por F. Vencimiento: solo cuotas con vencimiento <= venc_hasta. + # Las cuotas sin fecha de vencimiento se incluyen SIEMPRE. + venc_corte = self.parse_corte_venc(venc_hasta) + datos_agrupados = {} + + frecuencias_cuota = {} + frecuencias_fecha_venc = {} + mapa_frecuencia = {} + + alumnos_tracking = {} + + try: + cronograma_raw, facturas_raw = self._obtener_datos_cached(ano) + except Exception as e: + print(f"Error crítico: {e}") + return [] + + stats_suma = {'falla_cuota': 0, 'falla_vencimiento': 0, 'falla_inicio': 0, 'falla_estado': 0, 'pasa_todo': 0} + stats_resta = {'falla_cuota': 0, 'falla_estado_can': 0, 'falla_nc': 0, 'falla_cancelacion': 0, 'falla_venc_cuota': 0, 'falla_inicio': 0, 'falla_estado_mat': 0, 'falla_treatas': 0, 'pasa_todo': 0} + + indices_cronograma = set() + mapa_tc = {} + mapa_programa = {} + mapa_sectorista = {} # <-- NUEVO MAPA PARA CORREGIR ASESORES + + for fila in cronograma_raw: + sectorista_str = str(fila.get('dsc_sectorista', '')) + sectorista_clean = sectorista_str.strip() + + idx = str(fila.get('num_indice', '')).strip() + if idx: + # Guardamos el asesor real del cronograma para usarlo en las facturas + mapa_sectorista[idx] = sectorista_clean if sectorista_clean and sectorista_clean not in [",", "None"] else "SIN ASESOR" + + if sectorista_clean in [",", "", "None"] or sectorista_str == " , ": continue + if sectorista_filtro != "TODOS" and sectorista_clean != sectorista_filtro: continue + + if idx: indices_cronograma.add(idx) + + mat = str(fila.get('num_matricula', '')).strip() + if mat: + if mat not in mapa_tc: + try: tc = float(fila.get('imp_tc', 1.0) or 1.0) + except: tc = 1.0 + mapa_tc[mat] = tc + + if mat not in mapa_programa: + prog = str(fila.get('dsc_det_programa', '')).strip() + mapa_programa[mat] = prog if (prog and prog != "None") else "SIN PROGRAMA" + + for fila in cronograma_raw: + idx = str(fila.get('num_indice', '')).strip() + if idx not in indices_cronograma: continue + + mat = str(fila.get('num_matricula', '')).strip() + + # Filtro por SEDE y PROGRAMA (REPLACE_META) — se aplica en cualquier + # agrupación cuando se pide (usado sobre todo en ASESOR). + _prog = fila.get('dsc_programa', '') + if str(sede_filtro).upper() not in ("TODOS", "", "NONE"): + if str(self.clasificar_sede_meta(_prog)).upper() != str(sede_filtro).upper(): + continue + if str(prog_filtro).upper() not in ("TODOS", "", "NONE"): + if str(self.clasificar_filtro_programa(_prog)).upper() != str(prog_filtro).upper(): + continue + + # Filtro por F. Vencimiento (<=). Sin fecha => se incluye siempre. + if venc_corte is not None: + _fv = self.parse_fecha(fila.get('fch_vencimiento')) + if _fv is not None and _fv > venc_corte: + continue + + if agrupacion == "SEDE": + llave = self.clasificar_sede(fila.get('dsc_programa', '')) + elif agrupacion == "ASESOR": + llave = mapa_sectorista.get(idx, "SIN ASESOR") + else: + llave = str(fila.get('dsc_det_programa', '')).strip() + if not llave or llave == "None": llave = "SIN PROGRAMA" + + if llave not in datos_agrupados: + datos_agrupados[llave] = {"Suma_Ant": 0.0, "Suma_Cur": 0.0, "Resta_Ant": 0.0, "Resta_Cur": 0.0, "Cob_Ant": 0.0, "Cob_Cur": 0.0} + + importe_final = self.calcular_importe_final(fila) + suma_ant, suma_cur = self.evaluar_ctaxcob_suma(fila, importe_final, fecha_filtro, fecha_filtro_siguiente, hoy, stats_suma) + + datos_agrupados[llave]["Suma_Ant"] += suma_ant + datos_agrupados[llave]["Suma_Cur"] += suma_cur + + clave_mat = (mat, llave) + if clave_mat not in alumnos_tracking: + alumnos_tracking[clave_mat] = {"suma": 0.0, "resta": 0.0, "cobrado": 0.0, "cuota_final": None, "fecha_final": None} + + alumnos_tracking[clave_mat]["suma"] += (suma_ant + suma_cur) + + if agrupacion == "PROGRAMA": + if llave not in mapa_frecuencia: + frec_val = str(fila.get('cod_frecuencia', '-')).strip() + mapa_frecuencia[llave] = frec_val if frec_val and frec_val != 'None' and frec_val != '' else '-' + + fch_venc_raw = fila.get('fch_vencimiento') + fch_venc_dt = self.parse_fecha(fch_venc_raw) + if fch_venc_dt and (fecha_filtro <= fch_venc_dt < fecha_filtro_siguiente): + try: + n_cuota = int(fila.get('num_cuota', -1)) + if n_cuota >= 0: alumnos_tracking[clave_mat]["cuota_final"] = n_cuota + except: pass + try: + alumnos_tracking[clave_mat]["fecha_final"] = fch_venc_dt.strftime('%d/%m/%Y') + except: pass + + for fila in facturas_raw: + idx_factura = str(fila.get('num_indice', '')).strip() + if idx_factura not in indices_cronograma: continue + + mat_factura = str(fila.get('num_matricula', '')).strip() + tc_correcto = mapa_tc.get(mat_factura, 1.0) + + # Mismo filtro SEDE/PROGRAMA (REPLACE_META) que en el cronograma. + _progF = fila.get('dsc_programa', '') + if str(sede_filtro).upper() not in ("TODOS", "", "NONE"): + if str(self.clasificar_sede_meta(_progF)).upper() != str(sede_filtro).upper(): + continue + if str(prog_filtro).upper() not in ("TODOS", "", "NONE"): + if str(self.clasificar_filtro_programa(_progF)).upper() != str(prog_filtro).upper(): + continue + + # Filtro por F. Vencimiento (<=). En facturas la fecha es fch_vencimiento_cuota. + # Sin fecha => se incluye siempre. + if venc_corte is not None: + _fvF = self.parse_fecha(fila.get('fch_vencimiento_cuota')) + if _fvF is not None and _fvF > venc_corte: + continue + + if agrupacion == "SEDE": + llave = self.clasificar_sede(fila.get('dsc_programa', '')) + elif agrupacion == "ASESOR": + # AQUÍ ESTÁ LA MAGIA: usa el asesor guardado desde el cronograma + llave = mapa_sectorista.get(idx_factura, "SIN ASESOR") + else: + llave = mapa_programa.get(mat_factura, "") + if not llave: + llave = str(fila.get('dsc_det_programa', '')).strip() + if not llave or llave == "None": llave = "SIN PROGRAMA" + + if llave not in datos_agrupados: + datos_agrupados[llave] = {"Suma_Ant": 0.0, "Suma_Cur": 0.0, "Resta_Ant": 0.0, "Resta_Cur": 0.0, "Cob_Ant": 0.0, "Cob_Cur": 0.0} + + resta_ant, resta_cur, cobrado_ant, cobrado_curso = self.evaluar_ctaxcob_resta( + fila, fecha_filtro, fecha_filtro_siguiente, hoy, stats_resta, tc_correcto + ) + + datos_agrupados[llave]["Resta_Ant"] += resta_ant + datos_agrupados[llave]["Resta_Cur"] += resta_cur + datos_agrupados[llave]["Cob_Ant"] += cobrado_ant + datos_agrupados[llave]["Cob_Cur"] += cobrado_curso + + clave_mat = (mat_factura, llave) + if clave_mat in alumnos_tracking: + alumnos_tracking[clave_mat]["resta"] += (resta_ant + resta_cur) + alumnos_tracking[clave_mat]["cobrado"] += (cobrado_ant + cobrado_curso) + + for (mat, llave), track in alumnos_tracking.items(): + saldo_alumno = (track["suma"] - track["resta"]) - track["cobrado"] + if round(saldo_alumno, 2) > 0: + c = track["cuota_final"] + f = track["fecha_final"] + + if c is not None: + if llave not in frecuencias_cuota: frecuencias_cuota[llave] = {} + frecuencias_cuota[llave][c] = frecuencias_cuota[llave].get(c, 0) + 1 + if f is not None: + if llave not in frecuencias_fecha_venc: frecuencias_fecha_venc[llave] = {} + frecuencias_fecha_venc[llave][f] = frecuencias_fecha_venc[llave].get(f, 0) + 1 + + datos_limpios = [] + llaves_ordenadas = sorted(datos_agrupados.keys()) + + asesores_validos = [] + if agrupacion == "ASESOR": + asesores_validos = [s for s in self.obtener_lista_sectoristas(ano, mes) if s != "TODOS"] + + if agrupacion == "SEDE": + orden_sedes = ["LIMA", "AREQUIPA", "TRUJILLO", "PIURA"] + llaves_ordenadas = [s for s in orden_sedes if s in datos_agrupados] + [s for s in llaves_ordenadas if s not in orden_sedes] + + for llave in llaves_ordenadas: + if agrupacion == "ASESOR" and llave not in asesores_validos: + continue + + totales = datos_agrupados[llave] + cta_cob_ant = totales["Suma_Ant"] - totales["Resta_Ant"] + cta_cob_curso = totales["Suma_Cur"] - totales["Resta_Cur"] + total_cta = cta_cob_ant + cta_cob_curso + + cobrado_meses_ant = totales["Cob_Ant"] + cobrado_mes_curso = totales["Cob_Cur"] + total_cobrado_sede = cobrado_meses_ant + cobrado_mes_curso + + if round(total_cta, 2) <= 0 and round(total_cobrado_sede, 2) <= 0: continue + + ratio_1 = (cobrado_meses_ant / cta_cob_ant) * 100 if cta_cob_ant > 0 else 0.0 + ratio_2 = (cobrado_mes_curso / cta_cob_curso) * 100 if cta_cob_curso > 0 else 0.0 + ratio_3 = (total_cobrado_sede / total_cta) * 100 if total_cta > 0 else 0.0 + saldo_sede = total_cta - total_cobrado_sede + + frec_str = "-" + moda_cuota = "-" + moda_fecha = "-" + + if agrupacion == "PROGRAMA": + frec_str = mapa_frecuencia.get(llave, "-") + if llave in frecuencias_cuota and frecuencias_cuota[llave]: + moda_cuota = str(max(frecuencias_cuota[llave], key=frecuencias_cuota[llave].get)) + if llave in frecuencias_fecha_venc and frecuencias_fecha_venc[llave]: + moda_fecha = str(max(frecuencias_fecha_venc[llave], key=frecuencias_fecha_venc[llave].get)) + + if agrupacion == "PROGRAMA": + grupo_display = self._aplicar_reemplazos_nombre(llave) + else: + grupo_display = llave + + datos_limpios.append({ + 'GRUPO': grupo_display, + 'GRUPO_ORIGINAL': llave, + 'FRECUENCIA': frec_str, + 'NUM_CUOTA': moda_cuota, + 'FCH_VENC_MODA': moda_fecha, + 'CTA_COB_ANT': cta_cob_ant, 'CTA_COB_MES_CURSO': cta_cob_curso, 'TOTAL_CTA_COB': total_cta, + 'COB_ANT': cobrado_meses_ant, 'RATIO_1': ratio_1, 'COB_MES_CURSO': cobrado_mes_curso, 'RATIO_2': ratio_2, + 'TOTAL_COBRADO': total_cobrado_sede, 'RATIO_3': ratio_3, 'SALDO': saldo_sede, 'OPCIONES': " ≡ ▼ " + }) + + if agrupacion == "PROGRAMA": + def orden_personalizado_programa(x): + fecha_str = x['FCH_VENC_MODA'] + if fecha_str == "-": + return (0, datetime.min, x['GRUPO']) + else: + try: + dt = datetime.strptime(fecha_str, '%d/%m/%Y') + return (1, dt, x['GRUPO']) + except: + return (1, datetime.max, x['GRUPO']) + + return sorted(datos_limpios, key=orden_personalizado_programa) + + return datos_limpios + + # ========================================================================= + # DESGLOSE POR ALUMNO/MATRÍCULA + # ========================================================================= + def obtener_detalle_programa(self, ano, mes, sectorista_filtro, programa_nombre, venc_hasta=None): + fecha_filtro, fecha_filtro_siguiente = self.obtener_fechas_filtro(ano, mes) + hoy = datetime.now() + # Filtro por F. Vencimiento (<=). Sin fecha => se incluye siempre. + venc_corte = self.parse_corte_venc(venc_hasta) + + try: + cronograma_raw, facturas_raw = self._obtener_datos_cached(ano) + except Exception: return [] + + stats_suma = {'falla_cuota': 0, 'falla_vencimiento': 0, 'falla_inicio': 0, 'falla_estado': 0, 'pasa_todo': 0} + stats_resta = {'falla_cuota': 0, 'falla_estado_can': 0, 'falla_nc': 0, 'falla_cancelacion': 0, 'falla_venc_cuota': 0, 'falla_inicio': 0, 'falla_estado_mat': 0, 'falla_treatas': 0, 'pasa_todo': 0} + + indices_cronograma = set() + mat_validas = set() + mapa_tc = {} + mapa_programa_frec = {} + + for fila in cronograma_raw: + sectorista_str = str(fila.get('dsc_sectorista', '')).strip() + if sectorista_str in [",", ""] or fila.get('dsc_sectorista') == " , ": continue + if sectorista_filtro != "TODOS" and sectorista_str != sectorista_filtro: continue + + prog = str(fila.get('dsc_det_programa', '')).strip() + if not prog or prog == "None": prog = "SIN PROGRAMA" + + if programa_nombre != "TODOS": + if self._aplicar_reemplazos_nombre(prog) != programa_nombre: continue + + idx = str(fila.get('num_indice', '')).strip() + if idx: indices_cronograma.add(idx) + + mat = str(fila.get('num_matricula', '')).strip() + if mat: + mat_validas.add(mat) + if mat not in mapa_tc: + try: tc = float(fila.get('imp_tc', 1.0) or 1.0) + except: tc = 1.0 + mapa_tc[mat] = tc + if mat not in mapa_programa_frec: + prog_bd = str(fila.get('dsc_det_programa', '')).strip() + frec_bd = str(fila.get('cod_frecuencia', '')).strip() + mapa_programa_frec[mat] = { + "prog": prog_bd if prog_bd and prog_bd != "None" else "-", + "frec": frec_bd if frec_bd and frec_bd != "None" else "-" + } + + mapa_alumnos = {} + if mat_validas: + try: + conn = self.data_manager.get_connection() + cursor = conn.cursor() + lista_mats = list(mat_validas) + + for i in range(0, len(lista_mats), 1000): + chunk = lista_mats[i:i+1000] + chunk_str = ",".join([f"'{m}'" for m in chunk]) + + sql = f""" + SELECT sgeca_matricula.num_matricula, + sgema_alumno.dsc_apellido_paterno + ' ' + sgema_alumno.dsc_apellido_materno + ', ' + sgema_alumno.dsc_nombres AS dsc_alumno + FROM sgeca_matricula + INNER JOIN sgema_alumno ON sgeca_matricula.cod_alumno = sgema_alumno.cod_alumno + WHERE sgeca_matricula.num_matricula IN ({chunk_str}) + """ + cursor.execute(sql) + for row in cursor.fetchall(): + num_mat_bd = str(row[0]).strip() + nombre_bd = str(row[1]).strip() + mapa_alumnos[num_mat_bd] = nombre_bd + conn.close() + except Exception as e: + print(f"Error consultando nombres de alumnos en BD: {e}") + + datos_agrupados = {} + + for fila in cronograma_raw: + idx = str(fila.get('num_indice', '')).strip() + if idx not in indices_cronograma: continue + + mat = str(fila.get('num_matricula', '')).strip() + if mat not in datos_agrupados: + prog_info = mapa_programa_frec.get(mat, {"prog": "-", "frec": "-"}) + datos_agrupados[mat] = { + "Alumno": mapa_alumnos.get(mat, "SIN NOMBRE"), + "Programa": prog_info["prog"], + "Frecuencia": prog_info["frec"], + "Suma_Ant": 0.0, "Suma_Cur": 0.0, "Resta_Ant": 0.0, "Resta_Cur": 0.0, "Cob_Ant": 0.0, "Cob_Cur": 0.0, + "Cuota_Mes": "-", "Fch_Venc_Mes": "-" + } + + fch_venc_raw = fila.get('fch_vencimiento') + fch_venc_dt = self.parse_fecha(fch_venc_raw) + # Filtro por F. Vencimiento (<=). Sin fecha => se incluye siempre. + if venc_corte is not None and fch_venc_dt is not None and fch_venc_dt > venc_corte: + continue + if fch_venc_dt and (fecha_filtro <= fch_venc_dt < fecha_filtro_siguiente): + try: datos_agrupados[mat]["Cuota_Mes"] = str(int(fila.get('num_cuota', -1))) + except: pass + datos_agrupados[mat]["Fch_Venc_Mes"] = fch_venc_dt.strftime('%d/%m/%Y') + + importe_final = self.calcular_importe_final(fila) + suma_ant, suma_cur = self.evaluar_ctaxcob_suma(fila, importe_final, fecha_filtro, fecha_filtro_siguiente, hoy, stats_suma) + + datos_agrupados[mat]["Suma_Ant"] += suma_ant + datos_agrupados[mat]["Suma_Cur"] += suma_cur + + for fila in facturas_raw: + idx_factura = str(fila.get('num_indice', '')).strip() + if idx_factura not in indices_cronograma: continue + + mat_factura = str(fila.get('num_matricula', '')).strip() + tc_correcto = mapa_tc.get(mat_factura, 1.0) + + # Filtro por F. Vencimiento (<=). En facturas la fecha es fch_vencimiento_cuota. + # Sin fecha => se incluye siempre. + if venc_corte is not None: + _fvD = self.parse_fecha(fila.get('fch_vencimiento_cuota')) + if _fvD is not None and _fvD > venc_corte: + continue + + if mat_factura not in datos_agrupados: + prog_info = mapa_programa_frec.get(mat_factura, {"prog": "-", "frec": "-"}) + datos_agrupados[mat_factura] = { + "Alumno": mapa_alumnos.get(mat_factura, "SIN NOMBRE"), + "Programa": prog_info["prog"], + "Frecuencia": prog_info["frec"], + "Suma_Ant": 0.0, "Suma_Cur": 0.0, "Resta_Ant": 0.0, "Resta_Cur": 0.0, "Cob_Ant": 0.0, "Cob_Cur": 0.0, + "Cuota_Mes": "-", "Fch_Venc_Mes": "-" + } + + resta_ant, resta_cur, cobrado_ant, cobrado_curso = self.evaluar_ctaxcob_resta( + fila, fecha_filtro, fecha_filtro_siguiente, hoy, stats_resta, tc_correcto + ) + + datos_agrupados[mat_factura]["Resta_Ant"] += resta_ant + datos_agrupados[mat_factura]["Resta_Cur"] += resta_cur + datos_agrupados[mat_factura]["Cob_Ant"] += cobrado_ant + datos_agrupados[mat_factura]["Cob_Cur"] += cobrado_curso + + datos_limpios = [] + for mat, totales in datos_agrupados.items(): + cta_cob_ant = totales["Suma_Ant"] - totales["Resta_Ant"] + cta_cob_curso = totales["Suma_Cur"] - totales["Resta_Cur"] + total_cta = cta_cob_ant + cta_cob_curso + + cob_ant = totales["Cob_Ant"] + cob_cur = totales["Cob_Cur"] + total_cob = cob_ant + cob_cur + saldo = total_cta - total_cob + + if round(total_cta, 2) <= 0 and round(total_cob, 2) <= 0: continue + + cuota_final = totales["Cuota_Mes"] + fecha_final = totales["Fch_Venc_Mes"] + if round(saldo, 2) <= 0: + cuota_final = "-" + fecha_final = "-" + + datos_limpios.append({ + 'MATRICULA': mat, 'ALUMNO': totales["Alumno"], + 'PROGRAMA': totales["Programa"], 'FRECUENCIA': totales["Frecuencia"], + 'NUM_CUOTA': cuota_final, + 'FCH_VENC': fecha_final, + 'CTA_COB_ANT': cta_cob_ant, 'CTA_COB_MES_CURSO': cta_cob_curso, 'TOTAL_CTA_COB': total_cta, + 'COB_ANT': cob_ant, 'COB_MES_CURSO': cob_cur, 'TOTAL_COBRADO': total_cob, 'SALDO': saldo + }) + + def orden_personalizado(x): + fecha_str = x['FCH_VENC'] + if fecha_str == "-": + return (0, datetime.min, x['ALUMNO']) + else: + try: + dt = datetime.strptime(fecha_str, '%d/%m/%Y') + return (1, dt, x['ALUMNO']) + except: + return (1, datetime.max, x['ALUMNO']) + + return sorted(datos_limpios, key=orden_personalizado) \ No newline at end of file diff --git a/backend/modules/ocupabilidad/__init__.py b/backend/modules/ocupabilidad/__init__.py new file mode 100644 index 0000000..e69de29 diff --git a/backend/modules/ocupabilidad/logic.py b/backend/modules/ocupabilidad/logic.py new file mode 100644 index 0000000..241a86b --- /dev/null +++ b/backend/modules/ocupabilidad/logic.py @@ -0,0 +1,234 @@ +# modules/ocupabilidad/logic.py +import pandas as pd +from .processor import CursoProcessor + +class AnalizadorCursos: + """Analizador de cursos - Lógica de cálculo y estadísticas""" + + def __init__(self, data_manager): + self.data_manager = data_manager + self.curso_processor = CursoProcessor(self.data_manager) + self.columnas = self.curso_processor.columnas + + def obtener_sedes(self): + """Devuelve la lista de sedes para el nuevo filtro""" + return ["LIMA", "AREQUIPA", "PIURA", "TRUJILLO"] + + def identificar_sede(self, dsc_programa): + """Identifica la sede basada en el nombre del programa y el JSON de GitHub""" + if not dsc_programa: return "LIMA" + dsc_prog_upper = str(dsc_programa).upper() + sedes_data = self.data_manager.meta_data.get("clasificacion_sedes", {}) + for sede, data in sedes_data.items(): + if sede == "DEFAULT": continue + for patron in data.get("patrones", []): + if patron.upper() in dsc_prog_upper: return sede + return sedes_data.get("DEFAULT", "LIMA") + + def obtener_filtros_programa(self): + """Devuelve la lista de programas para el nuevo filtro combinado""" + return ["SEMINARIOS", "OTROS", "TEAC", "TERC"] + + def identificar_filtro_programa(self, dsc_programa): + """Identifica la categoría del programa para el filtro de la UI""" + if not dsc_programa: return "OTROS" + dsc_prog_upper = str(dsc_programa).upper() + filtro_data = self.data_manager.meta_data.get("clasificacion_filtro_programa", {}) + for categoria, data in filtro_data.items(): + if categoria == "DEFAULT": continue + for patron in data.get("patrones", []): + if patron.upper() in dsc_prog_upper: return categoria + return filtro_data.get("DEFAULT", "OTROS") + + def get_current_month(self): + return self.data_manager.get_current_month() + + def get_current_year(self): + return self.data_manager.get_current_year() + + def actualizar_configuracion(self): + print("🔄 Actualización automática de configuración...") + self.data_manager.cargar_toda_configuracion() + + # --- AGREGADO EL PARÁMETRO "TIPO" --- + def obtener_datos_procesados(self, ano, mes, sede="TODOS", filtro_prog="TODOS"): + # Sincronizamos el estado del toggle UI con el procesador + self.curso_processor.mostrar_reprogramados = getattr(self, 'mostrar_reprogramados', True) + + datos = self.curso_processor.obtener_datos_procesados(ano, mes) + programas_disponibles = set() + + if datos: + for d in datos: + prog = str(d.get('programa_frecuencia', d.get('dsc_programa', ''))) + # Inyectamos variables para el filtro UI + d['Sede'] = self.identificar_sede(prog) + d['Filtro_Programa'] = self.identificar_filtro_programa(prog) + + if sede == "TODOS" or d['Sede'] == sede: + programas_disponibles.add(d['Filtro_Programa']) + + # Ordenar lista dinámica + orden_deseado = ["SEMINARIOS", "OTROS", "TEAC", "TERC"] + self.programas_disponibles_filtro = [p for p in orden_deseado if p in programas_disponibles] + + # NO auto-corregir: si el programa no existe en la sede/mes, se respeta el + # filtro y la tabla queda vacia (antes cambiaba a TODOS y mostraba todo). + self.filtro_corregido = None + + if datos and (sede != "TODOS" or filtro_prog != "TODOS"): + datos_filtrados = [] + for d in datos: + cumple_sede = (sede == "TODOS" or d.get('Sede') == sede) + cumple_prog = (filtro_prog == "TODOS" or d.get('Filtro_Programa') == filtro_prog) + if cumple_sede and cumple_prog: + datos_filtrados.append(d) + return datos_filtrados + + return datos + + def formatear_datos_para_tabla(self, datos): + if not datos: + return [], {} + + sheet_data = [] + totales = { + 'mes': 0, 'retirados': 0, 'totales': 0, + 'activos': 0, 'pc': 0, 'continuidad': 0, 'meta': 0, + 'descuento': 0 + } + + for registro in datos: + fila = [] + for col in self.columnas: + if col != 'Avance_Inscritos': + valor = registro.get(col, '') + fila.append(str(valor)) + self._acumular_totales(totales, col, registro) + else: + total_insc = registro.get('Inscritos_Totales', 0) + meta = registro.get('Meta_Curso', 0) + + if total_insc == "-" or meta == "-": + fila.append("-") + else: + porcentaje = self.calcular_porcentaje_avance(total_insc, meta) + fila.append(self.crear_barra_texto_color(porcentaje)) + + sheet_data.append(fila) + + fila_totales = self.crear_fila_totales(totales) + sheet_data.append(fila_totales) + + return sheet_data, totales + + def _acumular_totales(self, totales, col, registro): + val = registro.get(col, 0) + if val == "-": return # Ignoramos los guiones para que no rompa la suma + + if col == 'Descuento': + totales['descuento'] += val + elif col == 'Inscritos_Mes': + totales['mes'] += val + elif col == 'Retirados': + totales['retirados'] += val + elif col == 'Inscritos_Totales': + totales['totales'] += val + elif col == 'Inscritos_Activos': + totales['activos'] += val + elif col == 'Inscritos_PC': + totales['pc'] += val + elif col == 'Inscritos_Continuidad': + totales['continuidad'] += val + elif col == 'Meta_Curso': + totales['meta'] += val + + def crear_fila_totales(self, totales): + porcentaje = self.calcular_porcentaje_avance(totales['totales'], totales['meta']) + # REORGANIZADO SEGÚN NUEVO ORDEN DE COLUMNAS SOLICITADO: + # [0]Prog, [1]Fch, [2]Dias, [3]Mes, [4]Total, [5]Retirados, [6]Activos, [7]PC, [8]Refriperu, [9]Cont, [10]Meta, [11]Avance + return [ + "TOTAL GENERAL", # PROGRAMA + "", # FECHA INICIO + "", # DIAS PARA INICIO + str(totales['mes']), # INSCRITOS MES + str(totales['totales']), # TOTAL INSCRITOS + str(totales['retirados']), # RETIRADOS + str(totales['activos']), # INSCRITOS EN CURSO + str(totales['pc']), # INSCRITOS P.C + str(totales['descuento']), # INSCRITOS REFRIPERU (Descuento) + str(totales['continuidad']), # INSCRITOS CONTINUIDAD + str(totales['meta']), # META + self.crear_barra_texto_color(porcentaje) # AVANCE INSCRITOS + ] + + def calcular_porcentaje_avance(self, activos, meta): + return (activos / meta * 100) if meta > 0 else 0 + + def crear_barra_texto_color(self, porcentaje): + longitud = 10 + llenas = int((min(porcentaje, 100) / 100) * longitud) + vacias = longitud - llenas + barra = '█' * llenas + '░' * vacias + porc_text = f"{porcentaje:.1f}%" + espacios = " " * (6 - len(porc_text)) + return f"{porc_text}{espacios}{barra}" + + def get_intervalo_actualizacion(self): + return self.data_manager.config_data.get( + 'config_general', {} + ).get('auto_update_minutos', 5) * 60000 + + def exportar_a_excel(self, datos, ano, mes): + df = pd.DataFrame(datos) + df_exportar = df[self.columnas] + archivo = f"cursos_{ano}_{mes}.xlsx" + df_exportar.to_excel(archivo, index=False) + return archivo + + def calcular_metricas_generales(self, datos): + if not datos: return {} + # Filtramos las filas fantasmas para no romper la matemática de Pandas + datos_validos = [d for d in datos if d.get('dias_para_inicio') != 'REPROGRAMADO'] + if not datos_validos: return {} + + df = pd.DataFrame(datos_validos) + metricas = { + 'total_cursos': len(datos), # Mostramos el total real de filas (incluyendo fantasmas) + 'total_inscritos': df['Inscritos_Activos'].sum(), + 'total_meta': df['Meta_Curso'].sum(), + 'porcentaje_avance_general': (df['Inscritos_Activos'].sum() / df['Meta_Curso'].sum() * 100) if df['Meta_Curso'].sum() > 0 else 0, + 'cursos_sobre_meta': len(df[df['Inscritos_Activos'] >= df['Meta_Curso']]), + 'cursos_bajo_meta': len(df[df['Inscritos_Activos'] < df['Meta_Curso']]), + 'total_inscritos_pc': df['Inscritos_PC'].sum() + } + return metricas + + def obtener_top_programas(self, datos, top_n=5): + if not datos: return [] + # Filtramos las filas fantasmas + datos_validos = [d for d in datos if d.get('dias_para_inicio') != 'REPROGRAMADO'] + if not datos_validos: return [] + + df = pd.DataFrame(datos_validos) + df['Porcentaje_Avance'] = df.apply( + lambda x: self.calcular_porcentaje_avance(x['Inscritos_Activos'], x['Meta_Curso']), + axis=1 + ) + top_programas = df.nlargest(top_n, 'Porcentaje_Avance')[ + ['programa_frecuencia', 'Inscritos_Activos', 'Meta_Curso', 'Porcentaje_Avance'] + ].to_dict('records') + return top_programas + + def calcular_tendencias_mensuales(self, ano): + tendencias = {} + for mes in range(1, 13): + try: + datos_mes = self.obtener_datos_procesados(str(ano), str(mes)) + if datos_mes: + metricas = self.calcular_metricas_generales(datos_mes) + tendencias[mes] = metricas + except Exception as e: + print(f"Error procesando mes {mes}: {e}") + continue + return tendencias \ No newline at end of file diff --git a/backend/modules/ocupabilidad/processor.py b/backend/modules/ocupabilidad/processor.py new file mode 100644 index 0000000..3cd34c3 --- /dev/null +++ b/backend/modules/ocupabilidad/processor.py @@ -0,0 +1,677 @@ +# modules/ocupabilidad/processor.py +from datetime import datetime +import unicodedata + +class CursoProcessor: + """Procesador de datos de cursos - Aplica transformaciones y cálculos""" + + def __init__(self, data_manager): + self.data_manager = data_manager + + # --- COLUMNAS REORDENADAS Y REORGANIZADAS --- + self.columnas = [ + 'programa_frecuencia', + 'fch_inicio', + 'dias_para_inicio', + 'Inscritos_Mes', + 'Inscritos_Totales', + 'Retirados', + 'Inscritos_Activos', + 'Inscritos_PC', + 'Descuento', # Esto es 'INSCRITOS REFRIPERU' + 'Inscritos_Continuidad', + 'Meta_Curso', + 'Avance_Inscritos' + ] + + def obtener_datos_procesados(self, ano, mes): + try: + # 1. Cargar datos básicos + datos_matriculas = self.data_manager.cargar_datos_matriculas(ano, mes) + datos_raw_matriculas = self.data_manager.ejecutar_consulta_matriculados_detalle(ano, mes) + datos_originales = self.data_manager.ejecutar_consulta_cursos(ano, mes) + + # --- NUEVO: EL GUARDIÁN DE FECHAS (SUPABASE) --- + fechas_historicas = self.data_manager.obtener_fechas_originales() + indices_en_sql = set() + + for fila in datos_originales: + indice = str(fila.get('num_indice', '')).strip() + fecha_actual = fila.get('fch_inicio') + programa = fila.get('dsc_programa', '') + + if indice and fecha_actual: + indices_en_sql.add(indice) # Registramos que sí vino en SQL este mes + if indice not in fechas_historicas: + fecha_str = fecha_actual.strftime('%d/%m/%Y') if isinstance(fecha_actual, datetime) else str(fecha_actual) + exito = self.data_manager.guardar_fecha_original(indice, programa, fecha_str) + if exito: + fechas_historicas[indice] = {'fecha': fecha_str, 'programa': programa} + # ----------------------------------------------- + + # 2. CONTINUIDAD + lista_dnis = [] + if datos_raw_matriculas: + for alumno in datos_raw_matriculas: + dni = alumno.get('dsc_documento') + if dni: lista_dnis.append(dni) + + datos_historial = self.data_manager.consultar_historial_continuidad(lista_dnis) + + # 3. Procesar todo + datos_procesados = self.aplicar_personalizaciones( + datos_originales, + datos_matriculas, + datos_raw_matriculas, + datos_historial, + ano, mes + ) + + # --- INYECTAR CURSOS REPROGRAMADOS (FILAS FANTASMAS) --- + if getattr(self, 'mostrar_reprogramados', True): + for idx, info in fechas_historicas.items(): + if idx not in indices_en_sql: # Si el curso NO vino este mes desde SQL... + # Aseguramos compatibilidad si guardaste data vieja como texto o la nueva como diccionario + if isinstance(info, dict): + fecha_orig = info.get('fecha', '') + prog_orig = info.get('programa', 'CURSO REPROGRAMADO') + else: + fecha_orig = str(info) + prog_orig = 'CURSO REPROGRAMADO' + + # Verificamos si la fecha original correspondía a ESTE mes Y AÑO filtrado + mes_orig = "" + ano_orig = "" + if "/" in fecha_orig: + partes = fecha_orig.split("/") + if len(partes) >= 2: mes_orig = str(int(partes[1])) + if len(partes) >= 3: ano_orig = str(int(partes[2])) + elif "-" in fecha_orig: + partes = fecha_orig.split("-") + if len(partes) >= 2: mes_orig = str(int(partes[1])) + if len(partes) >= 3: ano_orig = str(int(partes[2])) + + # Mes debe coincidir; y si la fecha tiene año, el año también debe coincidir. + # Si la fecha NO tiene año (formato viejo dd/mm), no se inyecta para evitar + # mostrarla en años equivocados. + coincide_mes = (mes_orig == str(int(mes))) + coincide_ano = (ano_orig == str(int(ano))) if ano_orig else False + if coincide_mes and coincide_ano: + # Inyectamos la fila falsa para alertar en pantalla + datos_procesados.append({ + 'num_indice': idx, + 'programa_frecuencia': prog_orig, + 'dsc_programa': prog_orig, + 'fch_inicio': fecha_orig, + 'dias_para_inicio': 'REPROGRAMADO', + 'Inscritos_Mes': "-", + 'Inscritos_Totales': "-", + 'Retirados': "-", + 'Inscritos_Activos': "-", + 'Inscritos_PC': "-", + 'Descuento': "-", + 'Inscritos_Continuidad': "-", + 'Meta_Curso': "-", + 'Avance_Inscritos': "-" + }) + # ----------------------------------------------- + + ## --- ORDENAR: NORMALES POR FECHA, REPROGRAMADOS POR SEDE --- + def parse_fecha_orden(fecha_str): + if not fecha_str or fecha_str == "-": + return datetime.max + s = str(fecha_str).replace("/", "-").strip() + try: + if len(s) == 5: + return datetime.strptime(f"{s}-{ano}", "%d-%m-%Y") + if len(s) >= 10: + return datetime.strptime(s[:10], "%d-%m-%Y") + except: + pass + return datetime.max + + def obtener_orden_sede(programa): + prog_upper = str(programa).upper() + if 'LIMA' in prog_upper: return 1 + if 'PIURA' in prog_upper: return 2 + if 'TRUJILLO' in prog_upper: return 3 + if 'AREQUIPA' in prog_upper: return 4 + return 5 + + def logica_ordenamiento(x): + if x.get('dias_para_inicio') == 'REPROGRAMADO': + # Reprogramados: Van al final (1), ordenados por sede, luego alfabéticamente + return (1, obtener_orden_sede(x.get('dsc_programa', '')), x.get('dsc_programa', '')) + else: + # Normales: Van al inicio (0), ordenados por fecha + return (0, 0, parse_fecha_orden(x.get('fch_inicio', ''))) + + # Aplicamos el ordenamiento inteligente + datos_procesados.sort(key=logica_ordenamiento) + + return datos_procesados + except Exception as e: + print(f"❌ Error obteniendo datos procesados: {e}") + return [] + + # ========================================================================= + # DETALLE DE ALUMNOS DE UN CURSO (para el popup "Ver") + # ========================================================================= + def obtener_alumnos_curso(self, num_indice): + """Alumnos matriculados de un curso (num_indice), TODOS menos ANU. + Devuelve nombre + cod_estado (ALU/PRE/RET) + curso anterior TEAC/TERC (si existe).""" + try: + idx = str(num_indice).strip() + conn = self.data_manager.get_connection() + cursor = conn.cursor() + + # 1) Alumnos del curso actual (nombre, estado, dni, fecha de inicio del curso) + sql = """ + SELECT + sgeca_matricula.num_matricula, + sgeca_matricula.cod_estado AS cod_estado, + sgema_alumno.dsc_documento AS dni, + sgema_alumno.dsc_apellido_paterno + ' ' + sgema_alumno.dsc_apellido_materno + + ', ' + sgema_alumno.dsc_nombres AS dsc_alumno, + rp.fch_inicio AS fch_inicio_actual + FROM sgeca_matricula + INNER JOIN sgema_alumno ON sgeca_matricula.cod_alumno = sgema_alumno.cod_alumno + LEFT JOIN sgede_RP_programa rp + ON sgeca_matricula.cod_periodo = rp.cod_detalle + AND sgeca_matricula.cod_programa = rp.cod_programa + AND sgeca_matricula.num_indice = rp.num_indice + WHERE sgeca_matricula.num_indice = ? + AND sgeca_matricula.cod_localidad LIKE 'SCENT' + AND sgeca_matricula.cod_estado NOT IN ('ANU') + ORDER BY dsc_alumno + """ + cursor.execute(sql, idx) + filas = [] + dnis = [] + for row in cursor.fetchall(): + mat = str(row[0]).strip() + if mat.endswith('.0'): mat = mat[:-2] + dni = str(row[2]).strip() if row[2] else "" + filas.append({ + "matricula": mat, + "estado": str(row[1]).strip().upper(), + "dni": dni, + "alumno": str(row[3]).strip(), + "fch_inicio_actual": self.parse_fecha(row[4]), + "curso_anterior": "-", + "estado_anterior": "-", + }) + if dni: + dnis.append(dni) + + # 2) Historial de esos alumnos (cursos TEAC/TERC, no ANU, no SUS) + historial = {} # dni -> lista de {programa, fecha, estado} + if dnis: + dnis_unicos = list(set(dnis)) + for i in range(0, len(dnis_unicos), 1000): + chunk = dnis_unicos[i:i+1000] + ph = ",".join(["?"] * len(chunk)) + sql_hist = f""" + SELECT a.dsc_documento, + rp.dsc_det_programa AS programa_detallado, + p.dsc_programa AS programa_general, + rp.fch_inicio, m.cod_estado + FROM sgeca_matricula m + INNER JOIN sgema_alumno a ON m.cod_alumno = a.cod_alumno + INNER JOIN sgeca_programa p ON m.cod_programa = p.cod_programa + INNER JOIN sgede_RP_programa rp + ON m.cod_periodo = rp.cod_detalle + AND m.cod_programa = rp.cod_programa + AND m.num_indice = rp.num_indice + WHERE a.dsc_documento IN ({ph}) + AND m.cod_localidad LIKE 'SCENT' + AND m.cod_estado IN ('ALU','PRE','RET') + AND rp.cod_estado <> 'SUS' + """ + cursor.execute(sql_hist, *chunk) + for r in cursor.fetchall(): + d = str(r[0]).strip() + det = str(r[1]).strip() if r[1] else "" + gen = str(r[2]).strip() if r[2] else "" + historial.setdefault(d, []).append({ + "programa": det if det and det != "None" else gen, # detallado (como Cobranza) + "programa_clasif": gen, # general, para clasificar TEAC/TERC + "fecha": self.parse_fecha(r[3]), + "estado": str(r[4]).strip().upper(), + }) + conn.close() + + # 3) Para cada alumno, buscar el ÚLTIMO curso anterior TEAC/TERC + for f in filas: + dni = f["dni"] + fch_act = f["fch_inicio_actual"] + if not dni or not fch_act or dni not in historial: + continue + candidatos = [] + for h in historial[dni]: + if not h["fecha"]: + continue + if not (h["fecha"] < fch_act): # debe ser anterior + continue + cat = self.obtener_categoria_programa(h.get("programa_clasif") or h["programa"]) + if cat not in ("TEAC", "TERC"): # solo TEAC/TERC + continue + candidatos.append(h) + if candidatos: + ultimo = max(candidatos, key=lambda x: x["fecha"]) + f["curso_anterior"] = ultimo["programa"] + f["estado_anterior"] = ultimo["estado"] + + # limpiar campos internos + for f in filas: + f.pop("dni", None) + f.pop("fch_inicio_actual", None) + return filas + except Exception as e: + print(f"❌ Error obtener_alumnos_curso: {e}") + return [] + + def normalizar_texto(self, texto): + if not texto: return "" + texto = str(texto).upper().strip() + texto = unicodedata.normalize('NFD', texto) + texto = texto.encode('ascii', 'ignore').decode("utf-8") + return texto + + def obtener_categoria_programa(self, nombre_programa): + try: + nombre_limpio = self.normalizar_texto(nombre_programa) + clasificaciones = self.data_manager.meta_data.get('clasificacion_programas', {}) + + for categoria, config in clasificaciones.items(): + patrones = config.get('patrones', []) + for patron in patrones: + patron_limpio = self.normalizar_texto(patron) + if patron_limpio in nombre_limpio: + return categoria + + return "OTROS" + except: + return "OTROS" + + def aplicar_personalizaciones(self, datos_originales, datos_matriculas, datos_raw_matriculas, datos_historial, ano_filtro, mes_filtro): + print("🎯 Aplicando personalizaciones...") + cursos_personalizados = self.data_manager.config_data.get('cursos_personalizados', {}) + datos_filtrados = [] + + try: + ano_target = int(ano_filtro) + mes_target = int(mes_filtro) + except ValueError: + ano_target = 0 + mes_target = 0 + + # 1. FILTRADO + for curso in datos_originales: + num_indice = str(curso.get('num_indice', '')) + + if num_indice in cursos_personalizados: + personalizacion = cursos_personalizados[num_indice] + if 'fch_inicio' in personalizacion: + curso['fch_inicio'] = personalizacion['fch_inicio'] + if 'flg_activo' in personalizacion: + curso['flg_activo'] = personalizacion['flg_activo'] + if 'dsc_programa' in personalizacion: + curso['dsc_programa'] = personalizacion['dsc_programa'] + if 'dsc_det_programa' in personalizacion: + curso['dsc_det_programa'] = personalizacion['dsc_det_programa'] + + if curso.get('flg_activo', '') == 'NO': + continue + + fch_valida = True + try: + raw_fecha = curso.get('fch_inicio') + if raw_fecha: + f_obj = None + s_fecha = str(raw_fecha).strip() + if len(s_fecha) == 10 and s_fecha[2] == '-' and s_fecha[5] == '-': + f_obj = datetime.strptime(s_fecha, '%d-%m-%Y') + elif '-' in s_fecha: + if ' ' in s_fecha: + f_obj = datetime.strptime(s_fecha.split('.')[0], '%Y-%m-%d %H:%M:%S') + else: + f_obj = datetime.strptime(s_fecha, '%Y-%m-%d') + + if f_obj: + if f_obj.year != ano_target or f_obj.month != mes_target: + fch_valida = False + except Exception: + pass + + if fch_valida: + datos_filtrados.append(curso) + + # 2. TRANSFORMACIONES + datos_filtrados = self.aplicar_reemplazos_programas(datos_filtrados) + datos_filtrados = self.concatenar_programa_frecuencia(datos_filtrados) + + for curso in datos_filtrados: + if 'fch_inicio' in curso: + curso['fch_inicio'] = self.formatear_fecha(curso['fch_inicio']) + + # 3. DATOS CALCULADOS CON PRIORIDAD (REFRIPERU > CONTINUIDAD) + datos_filtrados, alumnos_refriperu = self.agregar_descuento(datos_filtrados, datos_raw_matriculas) + datos_filtrados = self.agregar_continuidad(datos_filtrados, datos_raw_matriculas, datos_historial, alumnos_refriperu) + + datos_filtrados = self.calcular_dias_para_inicio_cursos(datos_filtrados) + datos_filtrados = self.agregar_inscritos_mes(datos_filtrados, datos_matriculas) + datos_filtrados = self.agregar_inscritos_pc(datos_filtrados, datos_raw_matriculas) + datos_filtrados = self.agregar_meta_curso(datos_filtrados) + datos_filtrados = self.agregar_avance_inscritos(datos_filtrados) + + return datos_filtrados + + def aplicar_reemplazos_programas(self, datos): + if 'reemplazos_programas' in self.data_manager.replace_data: + reemplazos = self.data_manager.replace_data['reemplazos_programas'] + for curso in datos: + programa_original = curso.get('dsc_programa', '') + if programa_original in reemplazos: + curso['dsc_programa'] = reemplazos[programa_original] + return datos + + def concatenar_programa_frecuencia(self, datos): + for curso in datos: + programa = curso.get('dsc_programa', '') + frecuencia = curso.get('cod_frecuencia', '') + if programa and frecuencia: + curso['programa_frecuencia'] = f"{programa} - {frecuencia}" + elif programa: + curso['programa_frecuencia'] = programa + elif frecuencia: + curso['programa_frecuencia'] = frecuencia + else: + curso['programa_frecuencia'] = "" + return datos + + def formatear_fecha(self, fecha_str): + try: + if not fecha_str: return "" + if isinstance(fecha_str, str) and len(fecha_str) == 10 and fecha_str[2] == '-': return fecha_str + if '.' in str(fecha_str): + return datetime.strptime(str(fecha_str), '%Y-%m-%d %H:%M:%S.%f').strftime('%d-%m-%Y') + return datetime.strptime(str(fecha_str), '%Y-%m-%d %H:%M:%S').strftime('%d-%m-%Y') + except: return str(fecha_str) + + def identificar_linea_carrera(self, nombre_programa): + categoria = self.obtener_categoria_programa(nombre_programa) + + # --- AQUÍ ESTÁ EL CAMBIO --- + # Si es cualquiera de estas 5, las unimos bajo una misma "Línea Universal" de compatibilidad + if categoria in ["AREQUIPA", "TRUJILLO", "PIURA", "TEAC", "TERC"]: + return "CARRERA_COMPATIBLE" + + # Si es GESTION, MASTERCLASS, SEMINARIOS, etc., retorna None (las sigue ignorando) + return None + + def parse_fecha(self, fecha_raw): + try: + if isinstance(fecha_raw, datetime): return fecha_raw + if not fecha_raw: return None + s_fecha = str(fecha_raw).strip() + if len(s_fecha) == 10 and s_fecha[2] == '-': + return datetime.strptime(s_fecha, '%d-%m-%Y') + if ' ' in s_fecha: + return datetime.strptime(s_fecha.split('.')[0], '%Y-%m-%d %H:%M:%S') + return datetime.strptime(s_fecha, '%Y-%m-%d') + except: + return None + + # ========================================================================= + # ❄️ REFRIPERU / DESCUENTO (ALTA PRIORIDAD) + # ========================================================================= + def agregar_descuento(self, datos, datos_raw_matriculas): + print("\n💰 Calculando REFRIPERU (Descuentos)...") + print("="*80) + print(f"{'DNI':<12} | {'NOMBRE ALUMNO':<35} | {'PROGRAMA':<20} | {'PAGO':<10} | {'ZONA/MOTIVO'}") + print("-" * 80) + + conteo_por_curso = {} + alumnos_refriperu = set() + + correcciones_descuento = self.data_manager.config_data.get('correcciones_descuento', {}) + + if datos_raw_matriculas: + for alumno in datos_raw_matriculas: + try: + estado = str(alumno.get('estado_matricula', '')).strip().upper() + if estado not in ['ALU', 'PRE']: continue + + num_indice = str(alumno.get('num_indice', '')) + + dni = str(alumno.get('dsc_documento', 'SD')).strip() + nombre_alumno = str(alumno.get('nombre_alumno', 'SIN NOMBRE')).strip() + + mat_id = str(alumno.get('num_matricula', '')).strip() + if mat_id.endswith('.0'): mat_id = mat_id[:-2] + + if mat_id in correcciones_descuento: + accion = str(correcciones_descuento[mat_id]).upper().strip() + if accion == "SI": + conteo_por_curso[num_indice] = conteo_por_curso.get(num_indice, 0) + 1 + alumnos_refriperu.add(mat_id) + print(f"{dni:<12} | {nombre_alumno[:35]:<35} | {'---':<20} | {'---':<10} | MANUAL (JSON)") + continue + elif accion == "NO": + continue + + nombre_programa = str(alumno.get('dsc_programa', '')) + + cod_moneda = str(alumno.get('cod_moneda', 'SOL')).strip().upper() + try: + inv_neta = float(alumno.get('INV_NETA', 0) or 0) + imp_tc = float(alumno.get('imp_tc', 1) or 1) + if imp_tc <= 0: imp_tc = 1.0 + except: + inv_neta = 0.0; imp_tc = 1.0 + + if cod_moneda == 'DOL': + inv_neta_final = inv_neta * imp_tc + else: + inv_neta_final = inv_neta + + inv_neta_final = round(inv_neta_final, 2) + + categoria_json = self.obtener_categoria_programa(nombre_programa) + es_descuento = False + motivo_debug = "" + + if categoria_json in ["AREQUIPA", "TRUJILLO", "PIURA"]: + if 1200 <= inv_neta_final <= 1700: + es_descuento = True + motivo_debug = f"{categoria_json} (Rango Prov)" + + elif categoria_json in ["TEAC", "TERC"]: + if 1400 <= inv_neta_final <= 1900: + es_descuento = True + motivo_debug = f"{categoria_json} (Rango Lima)" + + if es_descuento: + conteo_por_curso[num_indice] = conteo_por_curso.get(num_indice, 0) + 1 + alumnos_refriperu.add(mat_id) + print(f"{dni:<12} | {nombre_alumno[:35]:<35} | {nombre_programa[:20]:<20} | S/{inv_neta_final:<8} | {motivo_debug}") + + except Exception: + continue + + for curso in datos: + idx = str(curso.get('num_indice', '')) + curso['Descuento'] = conteo_por_curso.get(idx, 0) + + return datos, alumnos_refriperu + + # ========================================================================= + # 🔄 CONTINUIDAD (BAJA PRIORIDAD) + # ========================================================================= + def agregar_continuidad(self, datos, datos_raw_matriculas, datos_historial, alumnos_refriperu=None): + if alumnos_refriperu is None: + alumnos_refriperu = set() + + print("🔄 Calculando CONTINUIDAD...") + print("="*80) + print(f"{'DNI':<12} | {'NOMBRE ALUMNO':<35} | {'PROGRAMA ACTUAL':<30} | {'MOTIVO/ORIGEN'}") + print("-" * 80) + + conteo_por_curso = {} + + correcciones_continuidad = self.data_manager.config_data.get('correcciones_continuidad', {}) + MIN_DIAS_DIFERENCIA = 60 + + if datos_raw_matriculas and datos_historial: + alumnos_por_curso = {} + for alu in datos_raw_matriculas: + idx = str(alu.get('num_indice', '')) + if idx not in alumnos_por_curso: alumnos_por_curso[idx] = [] + alumnos_por_curso[idx].append(alu) + + for curso in datos: + num_indice = str(curso.get('num_indice', '')) + nombre_curso_actual = str(curso.get('dsc_programa', '')) + fecha_inicio_actual = self.parse_fecha(curso.get('fch_inicio')) + + # Identifica si el curso actual pertenece a la "Línea Universal" de 5 categorías + linea_actual = self.identificar_linea_carrera(nombre_curso_actual) + + if not linea_actual or not fecha_inicio_actual: continue + + lista_alumnos = alumnos_por_curso.get(num_indice, []) + contador_fieles = 0 + + for alumno in lista_alumnos: + estado = str(alumno.get('estado_matricula', '')).strip().upper() + if estado not in ['ALU', 'PRE']: continue + + mat_id = str(alumno.get('num_matricula', '')).strip() + if mat_id.endswith('.0'): mat_id = mat_id[:-2] + + if mat_id in alumnos_refriperu: + continue + + dni = str(alumno.get('dsc_documento', 'SD')).strip() + nombre_alumno = str(alumno.get('nombre_alumno', 'SIN NOMBRE')).strip() + + es_manual_si = False + if mat_id in correcciones_continuidad: + accion = str(correcciones_continuidad[mat_id]).upper().strip() + if accion == "SI": es_manual_si = True + elif accion == "NO": continue + + es_fiel = False + motivo = "" + + if es_manual_si: + es_fiel = True + motivo = "MANUAL (JSON)" + elif dni and dni in datos_historial: + historial_alumno = datos_historial[dni] + for antecedente in historial_alumno: + nombre_pasado = str(antecedente.get('programa', '')) + fecha_pasada = antecedente.get('fecha') + if not fecha_pasada: continue + if not (fecha_pasada < fecha_inicio_actual): continue + dias_diff = (fecha_inicio_actual - fecha_pasada).days + if dias_diff < MIN_DIAS_DIFERENCIA: continue + + # Revisa si el curso pasado también es de esa misma línea universal + linea_pasada = self.identificar_linea_carrera(nombre_pasado) + + # Si ambos devuelven "CARRERA_COMPATIBLE", entonces hacen match + if linea_pasada == linea_actual: + es_fiel = True + motivo = f"Viene de: {nombre_pasado}" + break + + if es_fiel: + contador_fieles += 1 + print(f"{dni:<12} | {nombre_alumno[:35]:<35} | {nombre_curso_actual[:30]:<30} | {motivo}") + + conteo_por_curso[num_indice] = contador_fieles + + for curso in datos: + idx = str(curso.get('num_indice', '')) + curso['Inscritos_Continuidad'] = conteo_por_curso.get(idx, 0) + + return datos + + def calcular_dias_para_inicio(self, fecha_str, cod_estado): + try: + if cod_estado == 'SUS': return "SUSPENDIDO" + if not fecha_str: return "" + if isinstance(fecha_str, str) and len(fecha_str) == 10 and fecha_str[2] == '-': + fecha_curso = datetime.strptime(fecha_str, '%d-%m-%Y') + else: + fecha_curso = datetime.strptime(str(fecha_str), '%Y-%m-%d %H:%M:%S') + hoy = datetime.now().replace(hour=0, minute=0, second=0, microsecond=0) + fecha_curso = fecha_curso.replace(hour=0, minute=0, second=0, microsecond=0) + diferencia = (fecha_curso - hoy).days + if diferencia < 0: return "INICIADO" + return str(diferencia) if diferencia != 0 else "0" + except: return "" + + def calcular_dias_para_inicio_cursos(self, datos): + for curso in datos: + curso['dias_para_inicio'] = self.calcular_dias_para_inicio(curso.get('fch_inicio'), curso.get('cod_estado')) + return datos + + def agregar_inscritos_mes(self, datos, datos_matriculas): + dict_norm = {str(k): v for k, v in datos_matriculas.items()} + for curso in datos: + num_indice = str(curso.get('num_indice', '')) + curso['Inscritos_Mes'] = dict_norm.get(num_indice, 0) + return datos + + def agregar_inscritos_pc(self, datos, datos_raw_matriculas): + conteo_pc = {} + if datos_raw_matriculas: + for m in datos_raw_matriculas: + try: + est = str(m.get('estado_matricula', '')).strip() + nid = str(m.get('num_indice', '')) + sm = float(m.get('imp_saldo_matricula', 0) or 0) + sc1 = float(m.get('imp_saldo_cuota1', 0) or 0) + if est in ['ALU', 'PRE'] and sm < 1 and sc1 < 1: + conteo_pc[nid] = conteo_pc.get(nid, 0) + 1 + except: continue + for curso in datos: + curso['Inscritos_PC'] = conteo_pc.get(str(curso.get('num_indice', '')), 0) + curso['Retirados'] = int(curso.get('Inscritos_Retirados', 0)) # <--- NUEVA EXTRACCIÓN + return datos + + def calcular_meta_curso(self, nombre_programa, cod_estado): + try: + if cod_estado == 'SUS': return 0 + + categoria = self.obtener_categoria_programa(nombre_programa) + + clasificaciones = self.data_manager.meta_data.get('clasificacion_programas', {}) + if categoria in clasificaciones: + return clasificaciones[categoria].get('valor', 0) + + return self.data_manager.meta_data.get('clasificacion_default', {}).get('valor', 15) + except: return 0 + + def agregar_meta_curso(self, datos): + print("🎯 Calculando META_CURSO...") + for curso in datos: + curso['Meta_Curso'] = self.calcular_meta_curso(curso.get('dsc_programa', ''), curso.get('cod_estado', '')) + return datos + + def calcular_avance_inscritos(self, inscritos_activos, meta_curso): + try: + if meta_curso > 0: + porcentaje = (inscritos_activos / meta_curso) * 100 + return f"{porcentaje:.1f}%" + else: return "0%" + except: return "0%" + + def agregar_avance_inscritos(self, datos): + print("📊 Calculando AVANCE_INSCRITOS...") + for curso in datos: + curso['Avance_Inscritos'] = self.calcular_avance_inscritos(curso.get('Inscritos_Totales', 0), curso.get('Meta_Curso', 0)) + return datos \ No newline at end of file diff --git a/backend/modules/rentabilidad/__init__.py b/backend/modules/rentabilidad/__init__.py new file mode 100644 index 0000000..e69de29 diff --git a/backend/modules/rentabilidad/logic.py b/backend/modules/rentabilidad/logic.py new file mode 100644 index 0000000..0202717 --- /dev/null +++ b/backend/modules/rentabilidad/logic.py @@ -0,0 +1,946 @@ +# modules/rentabilidad/logic.py +import pandas as pd +import requests +import re +from datetime import datetime +from .processor import RentabilidadProcessor + +class RentabilidadLogic: + """Controlador lógico de Rentabilidad - Estructura la tabla y gestiona variables de clasificación""" + + def __init__(self, data_manager): + self.data_manager = data_manager + self.processor = RentabilidadProcessor(self.data_manager) + + def obtener_categorias(self): + """Devuelve la lista simplificada y agrupada para el filtro del Dashboard""" + return ["AREQUIPA", "TRUJILLO", "PIURA", "PROGRAMAS", "SEMINARIOS", "OTROS"] + + def obtener_sedes(self): + """Devuelve la lista de sedes para el nuevo filtro""" + return ["LIMA", "AREQUIPA", "PIURA", "TRUJILLO"] + + def identificar_sede(self, dsc_programa): + """Identifica la sede basada en el nombre del programa y el JSON de GitHub""" + if not dsc_programa: return "LIMA" + dsc_prog_upper = str(dsc_programa).upper() + sedes_data = self.data_manager.meta_data.get("clasificacion_sedes", {}) + + for sede, data in sedes_data.items(): + if sede == "DEFAULT": continue + for patron in data.get("patrones", []): + if patron.upper() in dsc_prog_upper: + return sede + return sedes_data.get("DEFAULT", "LIMA") + + def obtener_filtros_programa(self): + """Devuelve la lista de programas para el nuevo filtro combinado""" + return ["SEMINARIOS", "OTROS", "TEAC", "TERC"] + + def identificar_filtro_programa(self, dsc_programa): + """Identifica la categoría del programa para el filtro de la UI""" + if not dsc_programa: return "OTROS" + dsc_prog_upper = str(dsc_programa).upper() + filtro_data = self.data_manager.meta_data.get("clasificacion_filtro_programa", {}) + + for categoria, data in filtro_data.items(): + if categoria == "DEFAULT": continue + for patron in data.get("patrones", []): + if patron.upper() in dsc_prog_upper: + return categoria + return filtro_data.get("DEFAULT", "OTROS") + + def clasificar_programa(self, dsc_programa): + if not dsc_programa: return "OTROS" + dsc_prog_upper = str(dsc_programa).upper() + meta_data = self.data_manager.meta_data + clasificaciones = meta_data.get("clasificacion_programas", {}) + + for clase, data in clasificaciones.items(): + for patron in data.get("patrones", []): + if patron.upper() in dsc_prog_upper: + return clase + return meta_data.get("clasificacion_default", {}).get("categoria", "SEMINARIOS") + + def identificar_linea_carrera(self, nombre_programa): + """Identifica si el programa es de la familia de Carreras Técnicas""" + categoria = self.clasificar_programa(nombre_programa) + if categoria in ["AREQUIPA", "TRUJILLO", "PIURA", "TEAC", "TERC"]: + return "CARRERA_COMPATIBLE" + return None + + def parse_fecha(self, fecha_raw): + """Convierte diferentes formatos de fecha a objeto datetime""" + try: + if isinstance(fecha_raw, datetime): return fecha_raw + if not fecha_raw: return None + s_fecha = str(fecha_raw).strip() + if len(s_fecha) == 10 and s_fecha[2] == '-': + return datetime.strptime(s_fecha, '%d-%m-%Y') + if ' ' in s_fecha: + return datetime.strptime(s_fecha.split('.')[0], '%Y-%m-%d %H:%M:%S') + return datetime.strptime(s_fecha, '%Y-%m-%d') + except: + return None + + def calcular_descuento(self, clasificacion, inv_neta): + try: inv_neta = float(inv_neta) + except: inv_neta = 0.0 + + if clasificacion in ["TEAC", "TERC"]: return 3499.0 - inv_neta + elif clasificacion in ["AREQUIPA", "PIURA", "TRUJILLO"]: return 2839.0 - inv_neta + elif clasificacion == "CARRERA": return 4299.0 - inv_neta + else: return None + + def calcular_estado_descuento(self, clasificacion, descuento): + if descuento is None: return "" + es_provincia = clasificacion in ["TRUJILLO", "AREQUIPA", "PIURA"] + tope = 1000.0 if es_provincia else 800.0 + + if descuento > tope or descuento < 0: return "NO" + return "SI" + + # ======================================================================== + # MOTOR DINÁMICO DE COSTOS - BÚSQUEDA INTELIGENTE + # ======================================================================== + # ======================================================================== + # MOTOR DINÁMICO DE COSTOS - BÚSQUEDA INTELIGENTE + # ======================================================================== + def _obtener_costo_segun_categoria(self, diccionario_costo, categoria, dsc_programa): + """Busca el costo inteligente. Si es 'otros', busca similitud de palabras.""" + cat_lower = str(categoria).lower() + + # 1. Agrupamos los técnicos dentro de 'programas' + if cat_lower in ["teac", "terc"]: + cat_lower = "programas" + + # 2. EL EMBUDO: Si la categoría no existe en el diccionario (ej. seminarios, masterclass, etc.), + # la forzamos a que caiga siempre en la bolsa de "otros" + if cat_lower not in diccionario_costo: + cat_lower = "otros" + + # 3. Buscamos el valor + if cat_lower in diccionario_costo: + valor = diccionario_costo[cat_lower] + + # Si el valor es un bloque de similitudes (Como sucede ahora con "otros") + if isinstance(valor, dict): + dsc_upper = str(dsc_programa).upper() + + # Buscamos coincidencias con el nombre completo del curso + for patron, monto in valor.items(): + if patron != "DEFAULT" and patron.upper() in dsc_upper: + return float(monto) + + # Si lee todo el diccionario y no encuentra coincidencia, usamos el DEFAULT + return float(valor.get("DEFAULT", 0)) + else: + # Si es un número directo (ej. piura, trujillo, carrera) + return float(valor) + + return 0.0 + + # ======================================================================== + + def obtener_datos_procesados(self, ano, mes, sede="TODOS", filtro_prog="TODOS"): + """Obtiene datos, inyecta Categoria_Programa, Sede, Filtro_Programa y calcula promedios.""" + datos = self.processor.obtener_datos_procesados(ano, mes) + programas_disponibles = set() + + if datos: + for d in datos: + prog = str(d.get('programa_frecuencia', d.get('dsc_programa', ''))) + d['Categoria_Programa'] = self.clasificar_programa(prog) + d['Sede'] = self.identificar_sede(prog) + d['Filtro_Programa'] = self.identificar_filtro_programa(prog) + + # Recolectar qué programas existen REALMENTE en la Sede seleccionada + if sede == "TODOS" or d['Sede'] == sede: + programas_disponibles.add(d['Filtro_Programa']) + + # Ordenar para el Dropdown en la UI + orden_deseado = ["SEMINARIOS", "OTROS", "TEAC", "TERC"] + self.programas_disponibles_filtro = [p for p in orden_deseado if p in programas_disponibles] + + # NO auto-corregir: se respeta el filtro y la tabla queda vacia si no hay. + self.filtro_corregido = None + + if datos and (sede != "TODOS" or filtro_prog != "TODOS"): + datos_filtrados = [] + for d in datos: + cumple_sede = (sede == "TODOS" or d.get('Sede') == sede) + cumple_prog = (filtro_prog == "TODOS" or d.get('Filtro_Programa') == filtro_prog) + + if cumple_sede and cumple_prog: + datos_filtrados.append(d) + datos = datos_filtrados + + if not datos: return [] + + sql_matriculas = self._get_sql_matriculas_modificado() + sql_cuotas = self._get_sql_cuotas() + + matriculados_raw = [] + cuotas_raw = [] + + if sql_matriculas and sql_cuotas: + try: + conn = self.data_manager.get_connection() + cursor = conn.cursor() + try: + cursor.execute(sql_matriculas, ano, mes) + cols_mat = [c[0] for c in cursor.description] + matriculados_raw = [dict(zip(cols_mat, row)) for row in cursor.fetchall()] + + cursor.execute(sql_cuotas, ano, mes) + cols_cuo = [c[0] for c in cursor.description] + cuotas_raw = [dict(zip(cols_cuo, row)) for row in cursor.fetchall()] + finally: + conn.close() + except Exception as e: + print(f"❌ Error en consultas DAX: {e}") + + promedios_dax = self._calcular_promedios_dax(matriculados_raw, cuotas_raw) + + for d in datos: + idx = str(d.get('num_indice', '')).strip() + if idx.endswith('.0'): idx = idx[:-2] + + if idx in promedios_dax: + d['Promedio_Cuota'] = promedios_dax[idx]['promedio'] + d['Suma_Dax_Real'] = promedios_dax[idx]['suma_real'] + d['Conteo_Dax_Real'] = promedios_dax[idx]['conteo_real'] + d['Promedio_Desc_E'] = promedios_dax[idx]['promedio_desc_e'] + d['Suma_Desc_E_Real'] = promedios_dax[idx]['suma_desc_e_real'] + d['Conteo_Desc_E_Real'] = promedios_dax[idx]['conteo_desc_e_real'] + d['Valor_Venta'] = promedios_dax[idx]['suma_valor_venta'] + d['Valor_Venta_Actual'] = promedios_dax[idx]['suma_valor_venta_actual'] + else: + d['Promedio_Cuota'] = 0.0 + d['Suma_Dax_Real'] = 0.0 + d['Conteo_Dax_Real'] = 0 + d['Promedio_Desc_E'] = 0.0 + d['Suma_Desc_E_Real'] = 0.0 + d['Conteo_Desc_E_Real'] = 0 + d['Valor_Venta'] = 0.0 + d['Valor_Venta_Actual'] = 0.0 + + return datos + + def _calcular_promedios_dax(self, matriculados, cuotas): + alumnos_dict = {} + agrupado_indices = {} + + lista_mirar_cuotas = ["AREQUIPA", "TRUJILLO", "PIURA", "TEAC", "TERC"] + correcciones_mat = self.data_manager.config_data.get('correcciones_matriculas', {}) + correcciones_inv_neta = self.data_manager.config_data.get('Actualizar_INV_NETA', {}) + + for m in matriculados: + estado_mat = str(m.get('estado_matricula', '')).strip().upper() + if estado_mat not in ['ALU', 'PRE', 'RET']: continue + + num_matricula = str(m.get('num_matricula', '')).strip() + if num_matricula.endswith('.0'): num_matricula = num_matricula[:-2] + + num_indice = str(m.get('num_indice', '')).strip() + if num_indice.endswith('.0'): num_indice = num_indice[:-2] + + prog = str(m.get('dsc_programa', '')) + try: inv_neta = float(m.get('INV_NETA', 0.0)) + except: inv_neta = 0.0 + + tc_override = None + if num_matricula in correcciones_mat: + if "imp_tc" in correcciones_mat[num_matricula]: + tc_override = float(correcciones_mat[num_matricula]["imp_tc"]) + + # TC del COMPROBANTE — único TC para todo (INV_NETA + cuotas) + if tc_override is not None: + imp_tc_comp = tc_override + else: + try: imp_tc_comp = float(m.get('imp_tc', 0) or 0) + except: imp_tc_comp = 0 + if imp_tc_comp < 2: imp_tc_comp = 3.45 # TC por defecto + + # CORRECCIÓN MANUAL DE INV_NETA (siempre en SOL, sin multiplicar) + if num_matricula in correcciones_inv_neta: + try: inv_neta = float(correcciones_inv_neta[num_matricula]) + except: pass + else: + cod_moneda_mat = str(m.get('cod_moneda', '')).strip().upper() + if cod_moneda_mat == "DOL": + inv_neta = inv_neta * imp_tc_comp + + clase = self.clasificar_programa(prog) + descuento = self.calcular_descuento(clase, inv_neta) + estado_desc = self.calcular_estado_descuento(clase, descuento) + + alumnos_dict[num_matricula] = { + 'num_indice': num_indice, + 'clasificacion': clase, + 'programa': prog, + 'estado_descuento': estado_desc, + 'inv_neta': inv_neta, + 'estado_mat': estado_mat, + 'monto_real_cuotas': 0.0, + 'imp_tc_comprobante': imp_tc_comp + } + + if num_indice not in agrupado_indices: + agrupado_indices[num_indice] = { + 'suma': 0.0, 'conteo': 0, + 'suma_desc_e': 0.0, 'conteo_desc_e': 0, + 'suma_valor_venta': 0.0, + 'suma_valor_venta_actual': 0.0 + } + + agrupado_indices[num_indice]['suma_valor_venta'] += inv_neta + + # ALU y PRE: suma INV_NETA completa + if estado_mat in ['ALU', 'PRE']: + agrupado_indices[num_indice]['suma_valor_venta_actual'] += inv_neta + # RET: suma solo lo que ya pagó + elif estado_mat == 'RET': + try: imp_pagado = float(m.get('imp_total_pagado', 0) or 0) + except: imp_pagado = 0.0 + agrupado_indices[num_indice]['suma_valor_venta_actual'] += imp_pagado + + if clase not in lista_mirar_cuotas: + agrupado_indices[num_indice]['suma'] += inv_neta + agrupado_indices[num_indice]['conteo'] += 1 + + for c in cuotas: + num_matricula = str(c.get('num_matricula', '')).strip() + if num_matricula.endswith('.0'): num_matricula = num_matricula[:-2] + + if num_matricula not in alumnos_dict: continue + + alumno = alumnos_dict[num_matricula] + num_idx = alumno['num_indice'] + + if alumno['clasificacion'] in lista_mirar_cuotas: + try: num_cuota = int(c.get('num_cuota', 0)) + except: num_cuota = 0 + + t_val = c.get('imp_total') + d_val = c.get('imp_dscto') + + try: t_monto = float(t_val) if t_val is not None else 0.0 + except: t_monto = 0.0 + try: d_monto = float(d_val) if d_val is not None else 0.0 + except: d_monto = 0.0 + + imp_cuota = t_monto - d_monto + + cod_moneda_cuo = str(c.get('cod_moneda', '')).strip().upper() + if cod_moneda_cuo == "DOL": + # USAR el TC del COMPROBANTE (ya validado con fallback 3.45) + tc_cuo = alumno['imp_tc_comprobante'] + imp_cuota = imp_cuota * tc_cuo + + cumple_cuota_normal = (alumno['estado_descuento'] == "SI" and num_cuota > 0 and imp_cuota < 1000) + cumple_desc_especial = (alumno['estado_descuento'] == "SI" and num_cuota > 0) + + if cumple_cuota_normal: + agrupado_indices[num_idx]['suma'] += imp_cuota + agrupado_indices[num_idx]['conteo'] += 1 + + if cumple_desc_especial: + alumno['monto_real_cuotas'] += imp_cuota + + for mat_id, alumno in alumnos_dict.items(): + idx = alumno['num_indice'] + clase = alumno['clasificacion'] + estado_desc = alumno['estado_descuento'] + + if clase in lista_mirar_cuotas: + monto_real = alumno['monto_real_cuotas'] + else: + monto_real = alumno['inv_neta'] + + valor_final = 0.0 + + if monto_real >= 1900 and estado_desc == "SI": + if clase in ["TEAC", "TERC"]: + desc_calc = 3400 - monto_real + elif clase in ["AREQUIPA", "PIURA", "TRUJILLO"]: + desc_calc = 2740 - monto_real + else: + desc_calc = 0 + + resta = desc_calc - 200 + valor_final = min(max(resta, 0.0), 200.0) + + agrupado_indices[idx]['suma_desc_e'] += valor_final + agrupado_indices[idx]['conteo_desc_e'] += 1 + + promedios = {} + for idx, totales in agrupado_indices.items(): + suma_total = totales['suma'] + conteo_total = totales['conteo'] + suma_desc_e = totales['suma_desc_e'] + conteo_desc_e = totales['conteo_desc_e'] + + promedios[idx] = { + 'promedio': suma_total / conteo_total if conteo_total > 0 else 0.0, + 'suma_real': suma_total, + 'conteo_real': conteo_total, + 'promedio_desc_e': suma_desc_e / conteo_desc_e if conteo_desc_e > 0 else 0.0, + 'suma_desc_e_real': suma_desc_e, + 'conteo_desc_e_real': conteo_desc_e, + 'suma_valor_venta': totales['suma_valor_venta'], + 'suma_valor_venta_actual': totales['suma_valor_venta_actual'] # <-- NUEVO + } + + return promedios + + def formatear_datos_para_tabla(self, datos): + """Estructura las filas finales para tksheet (14 columnas)""" + if not datos: return [] + + cfg_costos = self.data_manager.costos_data + if not cfg_costos: + cfg_costos = { + "epp": {"piura": 28, "trujillo": 28, "arequipa": 28, "programas": 28, "carrera": 28, "otros": 0}, + "certificado": {"piura": 7, "trujillo": 7, "arequipa": 7, "programas": 7, "carrera": 7, "otros": 0}, + "consumibles": {"piura": 676, "trujillo": 676, "arequipa": 676, "programas": 614, "carrera": 614, "otros": 0}, + "marketing": {"piura": 2839, "trujillo": 2839, "arequipa": 2839, "programas": 3499, "carrera": 3499, "otros": {"VRV/VRF": 4500, "INDUSTRIAL POR AMONIACO (NH3)": 1000, "VIRTUAL SEMINARIO DISEÑO DE CHILLERS": 900, "DIPLOMADO INTERNACIONAL": 1300, "SEMINARIO VIRTUAL METRADO , COSTEO": 800, "VIRTUAL SEMINARIO DISEÑO DE CAMARAS": 1000, "DEFAULT": 0}}, + "docente": {"piura": 5115, "trujillo": 5115, "arequipa": 6500, "programas": 4560, "carrera": 4560, "otros": {"VRV/VRF": 4500, "INDUSTRIAL POR AMONIACO (NH3)": 4000, "VIRTUAL SEMINARIO DISEÑO DE CHILLERS": 3000, "DIPLOMADO INTERNACIONAL": 7000, "SEMINARIO VIRTUAL METRADO , COSTEO": 2000, "VIRTUAL SEMINARIO DISEÑO DE CAMARAS": 4000, "DEFAULT": 0}} + } + + # CARGA OVERRIDES DESDE SUPABASE (una sola vez por render) + overrides_supabase = self.data_manager.cargar_overrides_costos() + + sheet_data = [] + tot_total = tot_retirados = tot_curso = 0 + tot_venta = 0.0 + tot_venta_actual = 0.0 + tot_costo = 0.0 + tot_costo_actual = 0.0 + + bolsa_plata_global = 0.0 + bolsa_recibos_global = 0 + bolsa_desc_e_plata_global = 0.0 + bolsa_desc_e_recibos_global = 0 + + for d in datos: + try: total_inscritos = int(d.get('Inscritos_Totales', 0)) + except: total_inscritos = 0 + try: retirados = int(d.get('Retirados', 0)) + except: retirados = 0 + try: en_curso = int(d.get('Inscritos_En_Curso', d.get('Inscritos_Activos', 0))) + except: en_curso = 0 + + p_cuota = float(d.get('Promedio_Cuota', 0.0)) + p_desc = float(d.get('Promedio_Desc_E', 0.0)) + venta = float(d.get('Valor_Venta', 0.0)) + venta_actual = float(d.get('Valor_Venta_Actual', 0.0)) + + conteo_cuota_real = int(d.get('Conteo_Dax_Real', 0)) + str_cuota_tabla = f"S/ {p_cuota:,.0f}" if conteo_cuota_real > 0 else "" + + conteo_desc_e = int(d.get('Conteo_Desc_E_Real', 0)) + str_desc_e_tabla = f"S/ {p_desc:,.0f}" if conteo_desc_e > 0 else "" + + cat = d.get('Categoria_Programa', 'OTROS') + nombre_prog_crudo = d.get('dsc_programa', '') + + # Identificador de curso para buscar override + num_idx_curso = str(d.get('num_indice', '')).strip() + if num_idx_curso.endswith('.0'): num_idx_curso = num_idx_curso[:-2] + ov_curso = overrides_supabase.get(num_idx_curso, {}) + ov_inicial = ov_curso.get('inicial', {}) + ov_actual = ov_curso.get('actual', {}) + + # ============= COSTO INICIAL (con override si existe) ============= + def _costo_inicial(key_supa, key_cfg, multiplicar): + val = ov_inicial.get(key_supa) + if val is not None: + return float(val) # Supabase manda directo, sin multiplicar + base = self._obtener_costo_segun_categoria(cfg_costos.get(key_cfg, {}), cat, nombre_prog_crudo) + return total_inscritos * base if multiplicar else base + + costo_epp = _costo_inicial('epp', 'epp', True) + costo_cert = _costo_inicial('certificado', 'certificado', True) + costo_cons = _costo_inicial('consumibles', 'consumibles', True) + costo_mkt = _costo_inicial('marketing', 'marketing', False) + costo_doc = _costo_inicial('docente', 'docente', False) + valor_costo_inicial = costo_epp + costo_cert + costo_cons + costo_mkt + costo_doc + + # ============= COSTO ACTUAL (con override si existe) ============= + def _costo_actual(key_supa, key_cfg, multiplicador): + val = ov_actual.get(key_supa) + if val is not None: + return float(val) # Supabase manda directo, sin multiplicar + base = self._obtener_costo_segun_categoria(cfg_costos.get(key_cfg, {}), cat, nombre_prog_crudo) + return multiplicador * base if multiplicador is not None else base + + costo_epp_actual = _costo_actual('epp', 'epp', total_inscritos) + costo_cert_actual = _costo_actual('certificado', 'certificado', en_curso) + costo_cons_actual = _costo_actual('consumibles', 'consumibles', total_inscritos) + costo_mkt_actual = _costo_actual('marketing', 'marketing', None) + costo_doc_actual = _costo_actual('docente', 'docente', None) + costo_actual = costo_epp_actual + costo_cert_actual + costo_cons_actual + costo_mkt_actual + costo_doc_actual + + # MARGEN BRUTO % + if venta > 0: + margen_bruto = 1 - (valor_costo_inicial / venta) + str_margen = f"{margen_bruto * 100:,.1f}%" + else: + str_margen = "" + + # MARGEN BRUTO ACTUAL % + if venta_actual > 0: + margen_bruto_actual = 1 - (costo_actual / venta_actual) + str_margen_actual = f"{margen_bruto_actual * 100:,.1f}%" + else: + str_margen_actual = "" + + tot_total += total_inscritos + tot_retirados += retirados + tot_curso += en_curso + tot_venta += venta + tot_venta_actual += venta_actual + tot_costo += valor_costo_inicial + tot_costo_actual += costo_actual + + bolsa_plata_global += float(d.get('Suma_Dax_Real', 0.0)) + bolsa_recibos_global += int(d.get('Conteo_Dax_Real', 0)) + bolsa_desc_e_plata_global += float(d.get('Suma_Desc_E_Real', 0.0)) + bolsa_desc_e_recibos_global += int(d.get('Conteo_Desc_E_Real', 0)) + + nombre_prog = d.get('programa_frecuencia', d.get('dsc_programa', '')) + + fila = [ + nombre_prog, + d.get('fch_inicio', ''), + total_inscritos, + retirados, + en_curso, + str_cuota_tabla, + str_desc_e_tabla, + f"S/ {venta:,.0f}", + f"S/ {valor_costo_inicial:,.0f}", + str_margen, + f"S/ {venta_actual:,.0f}", + f"S/ {costo_actual:,.0f}", + str_margen_actual, + " ≡ ▼ " + ] + sheet_data.append(fila) + + promedio_total_final = (bolsa_plata_global / bolsa_recibos_global) if bolsa_recibos_global > 0 else 0.0 + promedio_desc_e_final = (bolsa_desc_e_plata_global / bolsa_desc_e_recibos_global) if bolsa_desc_e_recibos_global > 0 else 0.0 + + str_total_cuota = f"S/ {promedio_total_final:,.0f}" if bolsa_recibos_global > 0 else "" + str_total_desc_e = f"S/ {promedio_desc_e_final:,.0f}" if bolsa_desc_e_recibos_global > 0 else "" + + margen_total = 1 - (tot_costo / tot_venta) if tot_venta > 0 else 0 + margen_total_actual = 1 - (tot_costo_actual / tot_venta_actual) if tot_venta_actual > 0 else 0 + fila_total = [ + "TOTAL GENERAL", "", + tot_total, + tot_retirados, + tot_curso, + str_total_cuota, + str_total_desc_e, + f"S/ {tot_venta:,.0f}", + f"S/ {tot_costo:,.0f}", + f"{margen_total * 100:,.1f}%", + f"S/ {tot_venta_actual:,.0f}", + f"S/ {tot_costo_actual:,.0f}", + f"{margen_total_actual * 100:,.1f}%", + "" + ] + sheet_data.append(fila_total) + + return sheet_data + + def exportar_detalle_alumnos_excel(self, programa, headers, datos): + if not datos: + raise ValueError("No hay datos para exportar") + + prog_limpio = "".join([c if c.isalnum() else "_" for c in str(programa)])[:40] + archivo = f"Detalle_Alumnos_{prog_limpio}.xlsx" + + df = pd.DataFrame(datos, columns=headers) + + try: + with pd.ExcelWriter(archivo, engine='openpyxl') as writer: + df.to_excel(writer, index=False, sheet_name='Detalle_Alumnos') + worksheet = writer.sheets['Detalle_Alumnos'] + + try: + from openpyxl.styles import PatternFill, Font, Border, Side, Alignment + fill_header = PatternFill(start_color="12345F", end_color="12345F", fill_type="solid") + font_header = Font(color="FFFFFF", bold=True) + thin_border = Border( + left=Side(style='thin', color="DDDDDD"), right=Side(style='thin', color="DDDDDD"), + top=Side(style='thin', color="DDDDDD"), bottom=Side(style='thin', color="DDDDDD") + ) + + for cell in worksheet[1]: + cell.fill = fill_header + cell.font = font_header + cell.border = thin_border + cell.alignment = Alignment(horizontal="center", vertical="center", wrap_text=True) + + for row in worksheet.iter_rows(min_row=2): + for cell in row: + cell.border = thin_border + cell.alignment = Alignment(vertical="center") + + for col in worksheet.columns: + max_len = 0 + col_letter = col[0].column_letter + for cell in col: + if cell.value: + max_len = max(max_len, len(str(cell.value))) + worksheet.column_dimensions[col_letter].width = min(max_len + 3, 50) + except Exception: pass + except Exception as e: + df.to_excel(archivo, index=False) + + return archivo + + def obtener_detalle_programa(self, programa_target, ano, mes_numero): + prog_t = str(programa_target).strip().upper() + + sql_matriculas = self._get_sql_matriculas_modificado() + sql_cuotas = self._get_sql_cuotas() + + matriculados_raw = [] + cuotas_raw = [] + + if sql_matriculas and sql_cuotas: + try: + conn = self.data_manager.get_connection() + cursor = conn.cursor() + try: + cursor.execute(sql_matriculas, ano, mes_numero) + cols_mat = [c[0] for c in cursor.description] + matriculados_raw = [dict(zip(cols_mat, row)) for row in cursor.fetchall()] + + cursor.execute(sql_cuotas, ano, mes_numero) + cols_cuo = [c[0] for c in cursor.description] + cuotas_raw = [dict(zip(cols_cuo, row)) for row in cursor.fetchall()] + finally: + conn.close() + except Exception as e: + print(f"❌ Error en consultas detalle: {e}") + + cuotas_por_mat = {} + for c in cuotas_raw: + m_id = str(c.get('num_matricula', '')).strip() + if m_id.endswith('.0'): m_id = m_id[:-2] + if m_id not in cuotas_por_mat: cuotas_por_mat[m_id] = [] + cuotas_por_mat[m_id].append(c) + + cursos = self.processor.obtener_datos_procesados(ano, mes_numero) + indices_target = [] + fecha_inicio_actual = None + linea_actual = self.identificar_linea_carrera(prog_t) + + for c in cursos: + nombre = str(c.get('programa_frecuencia', c.get('dsc_programa', ''))).strip().upper() + if nombre == prog_t: + idx = str(c.get('num_indice', '')).strip() + if idx.endswith('.0'): idx = idx[:-2] + indices_target.append(idx) + if not fecha_inicio_actual: + fecha_inicio_actual = self.parse_fecha(c.get('fch_inicio')) + + lista_dnis = [] + for m in matriculados_raw: + dni = m.get('dsc_documento') + if dni: lista_dnis.append(str(dni).strip()) + + try: datos_historial = self.data_manager.consultar_historial_continuidad(lista_dnis) + except: datos_historial = {} + + correcciones_desc = self.data_manager.config_data.get('correcciones_descuento', {}) + correcciones_cont = self.data_manager.config_data.get('correcciones_continuidad', {}) + correcciones_mat = self.data_manager.config_data.get('correcciones_matriculas', {}) + correcciones_inv_neta = self.data_manager.config_data.get('Actualizar_INV_NETA', {}) + + lista_mirar_cuotas = ["AREQUIPA", "TRUJILLO", "PIURA", "TEAC", "TERC"] + + acum_inv_neta_global = 0.0 + acum_suma_cuotas_global = 0.0 + acum_cont_cuotas_global = 0 + acum_suma_desc_e_global = 0.0 + acum_cont_desc_e_global = 0 + + alumnos_lista = [] + + for m in matriculados_raw: + estado_mat = str(m.get('estado_matricula', '')).strip().upper() + if estado_mat not in ['ALU', 'PRE', 'RET']: continue + + idx_mat = str(m.get('num_indice', '')).strip() + if idx_mat.endswith('.0'): idx_mat = idx_mat[:-2] + + nombre_prog_crudo = str(m.get('dsc_programa', '')).strip().upper() + + if (idx_mat in indices_target) or (prog_t in nombre_prog_crudo) or (nombre_prog_crudo in prog_t): + + vendedor = str(m.get('dsc_vendedor', 'SIN VENDEDOR')).strip() + if vendedor == "None" or not vendedor: vendedor = "SIN VENDEDOR" + + alumno_nombre = str(m.get('nombre_alumno', m.get('dsc_alumno', 'SIN NOMBRE'))).strip() + if alumno_nombre == "None" or not alumno_nombre: alumno_nombre = "SIN NOMBRE" + + mat_id = str(m.get('num_matricula', '')).strip() + if mat_id.endswith('.0'): mat_id = mat_id[:-2] + dni = str(m.get('dsc_documento', '')).strip() + + try: inv_neta_raw = float(m.get('INV_NETA', 0.0)) + except: inv_neta_raw = 0.0 + cod_moneda = str(m.get('cod_moneda', 'SOL')).strip().upper() + try: tc = float(m.get('imp_tc', 0) or 0) + except: tc = 0 + if tc < 2: tc = 3.45 # TC por defecto si comprobante inválido + + fch_canc_raw = m.get('fch_cancelacion_cuota1', '') + + if mat_id in correcciones_mat: + datos_corregidos = correcciones_mat[mat_id] + if "imp_tc" in datos_corregidos: tc = float(datos_corregidos["imp_tc"]) + if "fch_cancelacion_cuota1" in datos_corregidos: fch_canc_raw = datos_corregidos["fch_cancelacion_cuota1"] + + # CORRECCIÓN MANUAL DE INV_NETA (siempre en SOL, sin multiplicar) + if mat_id in correcciones_inv_neta: + try: inv_neta_soles = float(correcciones_inv_neta[mat_id]) + except: inv_neta_soles = inv_neta_raw + elif cod_moneda == "DOL": + inv_neta_soles = inv_neta_raw * tc + else: + inv_neta_soles = inv_neta_raw + inv_neta_soles = round(inv_neta_soles, 2) + + acum_inv_neta_global += inv_neta_soles + + fch_mat = m.get('fch_matricula', '') + fecha_mat_limpia = "" + if fch_mat: + try: + if hasattr(fch_mat, 'strftime'): fecha_mat_limpia = fch_mat.strftime('%d/%m/%Y') + else: + tmp = str(fch_mat)[:10] + if len(tmp) == 10 and tmp[4] == '-': p = tmp.split('-'); fecha_mat_limpia = f"{p[2]}/{p[1]}/{p[0]}" + else: fecha_mat_limpia = tmp + except: fecha_mat_limpia = str(fch_mat)[:10] + + fch_canc_limpia = "" + if fch_canc_raw and str(fch_canc_raw).strip() != "None": + try: + if hasattr(fch_canc_raw, 'strftime'): fch_canc_limpia = fch_canc_raw.strftime('%d/%m/%Y') + else: + tmp = str(fch_canc_raw)[:10] + if len(tmp) == 10 and tmp[4] == '-': p = tmp.split('-'); fch_canc_limpia = f"{p[2]}/{p[1]}/{p[0]}" + else: fch_canc_limpia = tmp + except: fch_canc_limpia = str(fch_canc_raw)[:10] + + clase_alumno = self.clasificar_programa(nombre_prog_crudo) + + es_refriperu = False + if mat_id in correcciones_desc: + if str(correcciones_desc[mat_id]).upper() == "SI": es_refriperu = True + elif str(correcciones_desc[mat_id]).upper() == "NO": es_refriperu = False + else: + if clase_alumno in ["AREQUIPA", "TRUJILLO", "PIURA"] and 1200 <= inv_neta_soles <= 1700: es_refriperu = True + elif clase_alumno in ["TEAC", "TERC"] and 1400 <= inv_neta_soles <= 1900: es_refriperu = True + + tipo_final = "NUEVO" + if es_refriperu: tipo_final = "REFRIPERU" + else: + es_cont = False + if mat_id in correcciones_cont: + if str(correcciones_cont[mat_id]).upper() == "SI": es_cont = True + elif str(correcciones_cont[mat_id]).upper() == "NO": es_cont = False + else: + if fecha_inicio_actual and linea_actual and (dni in datos_historial): + for antecedente in datos_historial[dni]: + nombre_pasado = str(antecedente.get('programa', '')) + fecha_pasada = antecedente.get('fecha') + if not fecha_pasada: continue + if not (fecha_pasada < fecha_inicio_actual): continue + if (fecha_inicio_actual - fecha_pasada).days < 60: continue + if self.identificar_linea_carrera(nombre_pasado) == linea_actual: + es_cont = True; break + if es_cont: tipo_final = "CONTINUIDAD" + + descuento = self.calcular_descuento(clase_alumno, inv_neta_soles) + estado_desc = self.calcular_estado_descuento(clase_alumno, descuento) + + str_cuota_val = "" + monto_eval = 0.0 + + if clase_alumno in lista_mirar_cuotas: + suma_c = 0.0; cont_c = 0; monto_real_c = 0.0 + for c_dict in cuotas_por_mat.get(mat_id, []): + try: num_c = int(c_dict.get('num_cuota', 0)) + except: num_c = 0 + t_val = c_dict.get('imp_total'); d_val = c_dict.get('imp_dscto') + try: t_monto = float(t_val) if t_val is not None else 0.0 + except: t_monto = 0.0 + try: d_monto = float(d_val) if d_val is not None else 0.0 + except: d_monto = 0.0 + imp_c = t_monto - d_monto + tc_over = None + if mat_id in correcciones_mat and "imp_tc" in correcciones_mat[mat_id]: + tc_over = float(correcciones_mat[mat_id]["imp_tc"]) + cod_m_c = str(c_dict.get('cod_moneda', '')).strip().upper() + if cod_m_c == "DOL": + # USAR TC del COMPROBANTE (no del cronograma) + tc_c = tc # tc ya está validado arriba (línea 654) + imp_c *= tc_c + if estado_desc == "SI" and num_c > 0 and imp_c < 1000: + suma_c += imp_c; cont_c += 1 + if estado_desc == "SI" and num_c > 0: + monto_real_c += imp_c + if cont_c > 0: + str_cuota_val = f"S/ {suma_c / cont_c:,.0f}" + monto_eval = monto_real_c + acum_suma_cuotas_global += suma_c + acum_cont_cuotas_global += cont_c + else: + str_cuota_val = f"S/ {inv_neta_soles:,.0f}" + monto_eval = inv_neta_soles + acum_suma_cuotas_global += inv_neta_soles + acum_cont_cuotas_global += 1 + + str_desc_e_val = "" + if monto_eval >= 1900 and estado_desc == "SI": + if clase_alumno in ["TEAC", "TERC"]: d_calc = 3400 - monto_eval + elif clase_alumno in ["AREQUIPA", "PIURA", "TRUJILLO"]: d_calc = 2740 - monto_eval + else: d_calc = 0 + desc_e_val = min(max(d_calc - 200, 0.0), 200.0) + str_desc_e_val = f"S/ {desc_e_val:,.0f}" + acum_suma_desc_e_global += desc_e_val + acum_cont_desc_e_global += 1 + + alumnos_lista.append([ + vendedor, alumno_nombre, fecha_mat_limpia, fch_canc_limpia, + tipo_final, str_cuota_val, str_desc_e_val, f"S/ {inv_neta_soles:,.0f}", + estado_mat # columna oculta para detectar RET + ]) + + alumnos_lista.sort(key=lambda x: x[1]) + + prom_gral_cuota = (acum_suma_cuotas_global / acum_cont_cuotas_global) if acum_cont_cuotas_global > 0 else 0.0 + prom_gral_desc = (acum_suma_desc_e_global / acum_cont_desc_e_global) if acum_cont_desc_e_global > 0 else 0.0 + + str_gral_cuota = f"S/ {prom_gral_cuota:,.0f}" if acum_cont_cuotas_global > 0 else "" + str_gral_desc = f"S/ {prom_gral_desc:,.0f}" if acum_cont_desc_e_global > 0 else "" + + alumnos_lista.append([ + "TOTAL GENERAL", "", "", "", "", + str_gral_cuota, str_gral_desc, f"S/ {acum_inv_neta_global:,.0f}", + "" # columna oculta extra para TOTAL + ]) + + return alumnos_lista + + def exportar_a_excel(self, datos, ano, mes): + if not datos: raise ValueError("No hay datos para exportar") + df = pd.DataFrame(datos) + archivo = f"reporte_rentabilidad_{ano}_{mes}.xlsx" + df.to_excel(archivo, index=False) + return archivo + + def _get_sql_matriculas_modificado(self): + if not hasattr(self, '_sql_matriculas_cache') or not self._sql_matriculas_cache: + sql = self.data_manager.query_matriculas_sql + if not sql: return "" + sql = re.sub( + r'YEAR\(\s*sgeca_matricula\.fch_matricula\s*\)', + 'YEAR(sgede_RP_programa.fch_inicio)', + sql, flags=re.IGNORECASE + ) + sql = re.sub( + r'MONTH\(\s*sgeca_matricula\.fch_matricula\s*\)', + 'MONTH(sgede_RP_programa.fch_inicio)', + sql, flags=re.IGNORECASE + ) + self._sql_matriculas_cache = sql + return self._sql_matriculas_cache + + def _get_sql_cuotas(self): + if not hasattr(self, '_sql_cuotas_cache') or not self._sql_cuotas_cache: + try: + res = requests.get(self.data_manager.github_cuota_url) + self._sql_cuotas_cache = res.text + except: + self._sql_cuotas_cache = "" + return self._sql_cuotas_cache + def obtener_datos_costos_programa(self, programa, ano, mes): + """Devuelve el desglose de costos e ingresos para el modal Editar""" + datos = self.obtener_datos_procesados(ano, mes) + if not datos: return None + + curso = None + for d in datos: + nombre = d.get('programa_frecuencia', d.get('dsc_programa', '')) + if str(nombre).strip() == str(programa).strip(): + curso = d; break + if not curso: return None + + cfg_costos = self.data_manager.costos_data + if not cfg_costos: return None + + # OVERRIDES desde Supabase + num_idx = str(curso.get('num_indice', '')).strip() + if num_idx.endswith('.0'): num_idx = num_idx[:-2] + overrides = self.data_manager.cargar_overrides_costos() + ov_curso = overrides.get(num_idx, {}) + ov_inicial = ov_curso.get('inicial', {}) + ov_actual = ov_curso.get('actual', {}) + + cat = curso.get('Categoria_Programa', 'OTROS') + prog_crudo = curso.get('dsc_programa', '') + try: total_inscritos = int(curso.get('Inscritos_Totales', 0)) + except: total_inscritos = 0 + try: en_curso = int(curso.get('Inscritos_En_Curso', curso.get('Inscritos_Activos', 0))) + except: en_curso = 0 + + epp_u = self._obtener_costo_segun_categoria(cfg_costos.get("epp", {}), cat, prog_crudo) + cert_u = self._obtener_costo_segun_categoria(cfg_costos.get("certificado", {}), cat, prog_crudo) + cons_u = self._obtener_costo_segun_categoria(cfg_costos.get("consumibles", {}), cat, prog_crudo) + mkt = self._obtener_costo_segun_categoria(cfg_costos.get("marketing", {}), cat, prog_crudo) + doc = self._obtener_costo_segun_categoria(cfg_costos.get("docente", {}), cat, prog_crudo) + + # INICIAL + epp_i = float(ov_inicial['epp']) if ov_inicial.get('epp') is not None else total_inscritos * epp_u + cert_i = float(ov_inicial['certificado']) if ov_inicial.get('certificado') is not None else total_inscritos * cert_u + cons_i = float(ov_inicial['consumibles']) if ov_inicial.get('consumibles') is not None else total_inscritos * cons_u + mkt_i = float(ov_inicial['marketing']) if ov_inicial.get('marketing') is not None else mkt + doc_i = float(ov_inicial['docente']) if ov_inicial.get('docente') is not None else doc + costo_i = epp_i + cert_i + cons_i + mkt_i + doc_i + + # ACTUAL + epp_a = float(ov_actual['epp']) if ov_actual.get('epp') is not None else total_inscritos * epp_u + cert_a = float(ov_actual['certificado']) if ov_actual.get('certificado') is not None else en_curso * cert_u + cons_a = float(ov_actual['consumibles']) if ov_actual.get('consumibles') is not None else total_inscritos * cons_u + mkt_a = float(ov_actual['marketing']) if ov_actual.get('marketing') is not None else mkt + doc_a = float(ov_actual['docente']) if ov_actual.get('docente') is not None else doc + costo_a = epp_a + cert_a + cons_a + mkt_a + doc_a + + vi = float(curso.get('Valor_Venta', 0.0)) + va = float(curso.get('Valor_Venta_Actual', 0.0)) + + mbi = (1 - costo_i / vi) * 100 if vi > 0 else 0.0 + mba = (1 - costo_a / va) * 100 if va > 0 else 0.0 + + return { + 'num_indice': num_idx, + 'venta_inicial': vi, 'costo_inicial': costo_i, 'mb_inicial': mbi, + 'venta_actual': va, 'costo_actual': costo_a, 'mb_actual': mba, + 'epp_inicial': epp_i, 'cert_inicial': cert_i, 'cons_inicial': cons_i, + 'mkt_inicial': mkt_i, 'doc_inicial': doc_i, + 'epp_actual': epp_a, 'cert_actual': cert_a, 'cons_actual': cons_a, + 'mkt_actual': mkt_a, 'doc_actual': doc_a, + # Lo que ya estaba en Supabase, para detectar qué fue editado + 'ov_inicial': ov_inicial, + 'ov_actual': ov_actual, + } \ No newline at end of file diff --git a/backend/modules/rentabilidad/processor.py b/backend/modules/rentabilidad/processor.py new file mode 100644 index 0000000..f7e3c06 --- /dev/null +++ b/backend/modules/rentabilidad/processor.py @@ -0,0 +1,290 @@ +# modules/rentabilidad/processor.py +from datetime import datetime +import unicodedata + +class RentabilidadProcessor: + """Procesador de datos para Rentabilidad - Hereda la lógica estricta de Ocupabilidad""" + + def __init__(self, data_manager): + self.data_manager = data_manager + + # Columnas exclusivas de rentabilidad + self.columnas = [ + 'programa_frecuencia', + 'fch_inicio', + 'Descuento', # INSCRITOS REFRIPERU + 'Inscritos_Continuidad', # INSCRITOS CONTINUIDAD + 'Inscritos_Nuevos', # Calculado en Logic + 'Inscritos_Totales', # TOTAL INSCRITOS + 'Inscritos_PC', # INSCRITOS P.C + 'Retirados', # INSCRITOS RETIRADOS + 'Inscritos_En_Curso', # INSCRITOS ACTIVOS + 'Promedio_Cuota', # Pendiente (0) + 'Promedio_Desc_E', # Pendiente (0) + 'Valor_Venta', # Pendiente (0) + 'Opciones' # Fijo "en cu" + ] + + def obtener_datos_procesados(self, ano, mes): + try: + from concurrent.futures import ThreadPoolExecutor + + with ThreadPoolExecutor(max_workers=3) as executor: + fut_cursos = executor.submit(self.data_manager.ejecutar_consulta_cursos, ano, mes) + fut_raw = executor.submit(self.data_manager.ejecutar_consulta_matriculados_detalle, ano, mes) + fut_matriculas = executor.submit(self.data_manager.cargar_datos_matriculas, ano, mes) + + datos_originales = fut_cursos.result() + datos_raw_matriculas = fut_raw.result() + datos_matriculas = fut_matriculas.result() + + lista_dnis = [] + if datos_raw_matriculas: + for alumno in datos_raw_matriculas: + dni = alumno.get('dsc_documento') + if dni: lista_dnis.append(dni) + + datos_historial = self.data_manager.consultar_historial_continuidad(lista_dnis) + + datos_procesados = self.aplicar_personalizaciones( + datos_originales, datos_matriculas, datos_raw_matriculas, datos_historial, ano, mes + ) + return datos_procesados + except Exception as e: + print(f"❌ Error obteniendo datos rentabilidad: {e}") + return [] + + def normalizar_texto(self, texto): + if not texto: return "" + texto = str(texto).upper().strip() + texto = unicodedata.normalize('NFD', texto) + return texto.encode('ascii', 'ignore').decode("utf-8") + + def obtener_categoria_programa(self, nombre_programa): + try: + nombre_limpio = self.normalizar_texto(nombre_programa) + clasificaciones = self.data_manager.meta_data.get('clasificacion_programas', {}) + for categoria, config in clasificaciones.items(): + patrones = config.get('patrones', []) + for patron in patrones: + if self.normalizar_texto(patron) in nombre_limpio: + return categoria + return "OTROS" + except: return "OTROS" + + def aplicar_personalizaciones(self, datos_originales, datos_matriculas, datos_raw_matriculas, datos_historial, ano_filtro, mes_filtro): + print("💰 Procesando variables de Rentabilidad...") + cursos_personalizados = self.data_manager.config_data.get('cursos_personalizados', {}) + datos_filtrados = [] + + try: ano_target, mes_target = int(ano_filtro), int(mes_filtro) + except: ano_target, mes_target = 0, 0 + + # FILTRADO Y ACTUALIZADOR EN VIVO + for curso in datos_originales: + num_indice = str(curso.get('num_indice', '')) + if num_indice in cursos_personalizados: + curso.update(cursos_personalizados[num_indice]) + + if curso.get('flg_activo', '') == 'NO': continue + + # Si el curso está suspendido, lo ignoramos y no se muestra en Rentabilidad + if str(curso.get('cod_estado', '')).strip().upper() == 'SUS': continue + + fch_valida = True + try: + raw_fecha = curso.get('fch_inicio') + if raw_fecha: + s_fecha = str(raw_fecha).strip() + if len(s_fecha) == 10 and s_fecha[2] == '-': f_obj = datetime.strptime(s_fecha, '%d-%m-%Y') + elif ' ' in s_fecha: f_obj = datetime.strptime(s_fecha.split('.')[0], '%Y-%m-%d %H:%M:%S') + else: f_obj = datetime.strptime(s_fecha, '%Y-%m-%d') + + if f_obj and (f_obj.year != ano_target or f_obj.month != mes_target): + fch_valida = False + except: pass + + if fch_valida: datos_filtrados.append(curso) + + datos_filtrados = self.aplicar_reemplazos_programas(datos_filtrados) + datos_filtrados = self.concatenar_programa_frecuencia(datos_filtrados) + for c in datos_filtrados: c['fch_inicio'] = self.formatear_fecha(c.get('fch_inicio', '')) + + # CÁLCULOS CENTRALES + datos_filtrados, alumnos_refriperu = self.agregar_descuento(datos_filtrados, datos_raw_matriculas) + datos_filtrados = self.agregar_continuidad(datos_filtrados, datos_raw_matriculas, datos_historial, alumnos_refriperu) + datos_filtrados = self.agregar_inscritos_mes(datos_filtrados, datos_matriculas) + datos_filtrados = self.agregar_inscritos_pc(datos_filtrados, datos_raw_matriculas) + + # EXTRACCIÓN REAL DE BD Y VALORES PENDIENTES + for c in datos_filtrados: + c['Retirados'] = int(c.get('Inscritos_Retirados', 0)) # <--- AHORA JALA LA DATA REAL DEL SQL + + c['Promedio_Cuota'] = 0.0 + c['Promedio_Desc_E'] = 0.0 + c['Valor_Venta'] = 0.0 + c['Opciones'] = "en cu" + + return datos_filtrados + + def aplicar_reemplazos_programas(self, datos): + reemplazos = self.data_manager.replace_data.get('reemplazos_programas', {}) + for curso in datos: + prog = curso.get('dsc_programa', '') + if prog in reemplazos: curso['dsc_programa'] = reemplazos[prog] + return datos + + def concatenar_programa_frecuencia(self, datos): + for c in datos: + p, f = c.get('dsc_programa', ''), c.get('cod_frecuencia', '') + c['programa_frecuencia'] = f"{p} - {f}" if p and f else p or f or "" + return datos + + def formatear_fecha(self, fecha_str): + try: + if not fecha_str: return "" + if len(str(fecha_str)) == 10 and str(fecha_str)[2] == '-': return str(fecha_str) + if '.' in str(fecha_str): return datetime.strptime(str(fecha_str), '%Y-%m-%d %H:%M:%S.%f').strftime('%d-%m-%Y') + return datetime.strptime(str(fecha_str), '%Y-%m-%d %H:%M:%S').strftime('%d-%m-%Y') + except: return str(fecha_str) + + def identificar_linea_carrera(self, nombre_programa): + categoria = self.obtener_categoria_programa(nombre_programa) + if categoria in ["AREQUIPA", "TRUJILLO", "PIURA", "TEAC", "TERC"]: + return "CARRERA_COMPATIBLE" + return None + + def parse_fecha(self, fecha_raw): + try: + if isinstance(fecha_raw, datetime): return fecha_raw + if not fecha_raw: return None + s_fecha = str(fecha_raw).strip() + if len(s_fecha) == 10 and s_fecha[2] == '-': return datetime.strptime(s_fecha, '%d-%m-%Y') + if ' ' in s_fecha: return datetime.strptime(s_fecha.split('.')[0], '%Y-%m-%d %H:%M:%S') + return datetime.strptime(s_fecha, '%Y-%m-%d') + except: return None + + # Lógica estricta de Refriperu + def agregar_descuento(self, datos, datos_raw_matriculas): + conteo_por_curso = {} + alumnos_refriperu = set() + correcciones_descuento = self.data_manager.config_data.get('correcciones_descuento', {}) + + if datos_raw_matriculas: + for alumno in datos_raw_matriculas: + try: + if str(alumno.get('estado_matricula', '')).strip().upper() not in ['ALU', 'PRE']: continue + num_indice = str(alumno.get('num_indice', '')) + mat_id = str(alumno.get('num_matricula', '')).strip() + if mat_id.endswith('.0'): mat_id = mat_id[:-2] + + if mat_id in correcciones_descuento: + if str(correcciones_descuento[mat_id]).upper().strip() == "SI": + conteo_por_curso[num_indice] = conteo_por_curso.get(num_indice, 0) + 1 + alumnos_refriperu.add(mat_id) + continue + elif str(correcciones_descuento[mat_id]).upper().strip() == "NO": continue + + nombre_programa = str(alumno.get('dsc_programa', '')) + cod_moneda = str(alumno.get('cod_moneda', 'SOL')).strip().upper() + try: + inv_neta = float(alumno.get('INV_NETA', 0) or 0) + imp_tc = float(alumno.get('imp_tc', 0) or 0) + if imp_tc <= 0: imp_tc = 3.45 # TC por defecto si no hay comprobante + except: inv_neta, imp_tc = 0.0, 3.45 + + inv_neta_final = round(inv_neta * imp_tc if cod_moneda == 'DOL' else inv_neta, 2) + categoria_json = self.obtener_categoria_programa(nombre_programa) + + es_descuento = False + if categoria_json in ["AREQUIPA", "TRUJILLO", "PIURA"] and 1200 <= inv_neta_final <= 1700: es_descuento = True + elif categoria_json in ["TEAC", "TERC"] and 1400 <= inv_neta_final <= 1900: es_descuento = True + + if es_descuento: + conteo_por_curso[num_indice] = conteo_por_curso.get(num_indice, 0) + 1 + alumnos_refriperu.add(mat_id) + except: continue + + for curso in datos: curso['Descuento'] = conteo_por_curso.get(str(curso.get('num_indice', '')), 0) + return datos, alumnos_refriperu + + # Lógica estricta de Continuidad + def agregar_continuidad(self, datos, datos_raw_matriculas, datos_historial, alumnos_refriperu): + conteo_por_curso = {} + correcciones_continuidad = self.data_manager.config_data.get('correcciones_continuidad', {}) + + if datos_raw_matriculas and datos_historial: + + # PRE-ÍNDICE: {dni: [(linea_carrera, fecha), ...]} + # Calculamos identificar_linea_carrera UNA sola vez por programa del historial + historial_indexado = {} + for dni, antecedentes in datos_historial.items(): + lineas = [] + for ant in antecedentes: + linea = self.identificar_linea_carrera(str(ant.get('programa', ''))) + fecha = ant.get('fecha') + if linea and fecha: + lineas.append((linea, fecha)) + if lineas: + historial_indexado[dni] = lineas + + alumnos_por_curso = {} + for alu in datos_raw_matriculas: + idx = str(alu.get('num_indice', '')) + if idx not in alumnos_por_curso: alumnos_por_curso[idx] = [] + alumnos_por_curso[idx].append(alu) + + for curso in datos: + num_indice = str(curso.get('num_indice', '')) + fecha_inicio_actual = self.parse_fecha(curso.get('fch_inicio')) + linea_actual = self.identificar_linea_carrera(str(curso.get('dsc_programa', ''))) + + if not linea_actual or not fecha_inicio_actual: continue + + contador_fieles = 0 + for alumno in alumnos_por_curso.get(num_indice, []): + if str(alumno.get('estado_matricula', '')).strip().upper() not in ['ALU', 'PRE']: continue + + mat_id = str(alumno.get('num_matricula', '')).strip() + if mat_id.endswith('.0'): mat_id = mat_id[:-2] + + if mat_id in alumnos_refriperu: continue + + dni = str(alumno.get('dsc_documento', 'SD')).strip() + es_fiel = False + + if mat_id in correcciones_continuidad: + accion = str(correcciones_continuidad[mat_id]).upper().strip() + if accion == "SI": es_fiel = True + elif accion == "NO": continue + + if not es_fiel and dni in historial_indexado: + for linea_pasada, fecha_pasada in historial_indexado[dni]: + if fecha_pasada >= fecha_inicio_actual: continue + if (fecha_inicio_actual - fecha_pasada).days < 60: continue + if linea_pasada == linea_actual: + es_fiel = True + break + + if es_fiel: contador_fieles += 1 + conteo_por_curso[num_indice] = contador_fieles + + for curso in datos: curso['Inscritos_Continuidad'] = conteo_por_curso.get(str(curso.get('num_indice', '')), 0) + return datos + + def agregar_inscritos_mes(self, datos, datos_matriculas): + dict_norm = {str(k): v for k, v in datos_matriculas.items()} + for curso in datos: curso['Inscritos_Mes'] = dict_norm.get(str(curso.get('num_indice', '')), 0) + return datos + + def agregar_inscritos_pc(self, datos, datos_raw_matriculas): + conteo_pc = {} + if datos_raw_matriculas: + for m in datos_raw_matriculas: + try: + if str(m.get('estado_matricula', '')).strip() in ['ALU', 'PRE'] and float(m.get('imp_saldo_matricula', 0) or 0) < 1 and float(m.get('imp_saldo_cuota1', 0) or 0) < 1: + nid = str(m.get('num_indice', '')) + conteo_pc[nid] = conteo_pc.get(nid, 0) + 1 + except: continue + for curso in datos: curso['Inscritos_PC'] = conteo_pc.get(str(curso.get('num_indice', '')), 0) + return datos \ No newline at end of file diff --git a/backend/modules/saldo_pendiente/__init__.py b/backend/modules/saldo_pendiente/__init__.py new file mode 100644 index 0000000..e69de29 diff --git a/backend/modules/saldo_pendiente/logic.py b/backend/modules/saldo_pendiente/logic.py new file mode 100644 index 0000000..6fb8573 --- /dev/null +++ b/backend/modules/saldo_pendiente/logic.py @@ -0,0 +1,193 @@ +# modules/saldo_pendiente/logic.py +from .processor import SaldoProcessor +from datetime import datetime + +class SaldoLogic: + """ + Controlador lógico optimizado. + 1. Filtro Global Manual (lista_saldo_pendiente). + 2. Filtro REFRIPERU (Precio Neto < 1900/1000 o Etiquetas). + 3. Filtros de Negocio (Vendedor, Fecha, Estado). + """ + + def __init__(self, data_manager): + self.data_manager = data_manager + self.processor = SaldoProcessor(self.data_manager) + + def obtener_saldos_consolidados(self, tipo_cuota): + # 1. Recargar Configuración (Para leer tu nueva lista en vivo) + try: self.data_manager.cargar_toda_configuracion() + except: pass + + all_debtors = [] + years_to_scan = [2025, 2026] + + print(f"⚡ [Logic] Iniciando carga para {tipo_cuota}...") + + for year in years_to_scan: + try: + # Usamos la consulta anual optimizada + raw_year_data = self.data_manager.ejecutar_consulta_saldos_anual(str(year)) + if raw_year_data: + datos_procesados = self._procesar_lote_local(raw_year_data, tipo_cuota) + all_debtors.extend(datos_procesados) + except AttributeError: + print("⚠️ Error: DataManager no actualizado.") + continue + + # Ordenar alfabéticamente + all_debtors.sort(key=lambda x: (x.get('VENDEDOR', '') or "ZZZ", x.get('ALUMNO', '') or "")) + print(f"✅ Carga Finalizada. Total en tabla: {len(all_debtors)}") + return all_debtors + + def _procesar_lote_local(self, raw_data, tipo_cuota): + datos_limpios = [] + + # --- Configuración --- + ahora = datetime.now() + ano_actual = ahora.year + mes_actual = ahora.month + + config = self.data_manager.config_data + + # 1. CARGAMOS TUS LISTAS DEL JSON + correcciones_refri = config.get("correcciones_descuento", {}) + exclusion_manual_global = config.get("lista_saldo_pendiente", {}) # <--- TU NUEVA LISTA + + # 2. Lista Vendedores Permitidos + lista_raw = config.get("lista_pendientes", []) + if not lista_raw: + lista_raw = ["AGUILAR U. JUAN CARLOS", "CHAVEZ P. DIANA", "HUAMAN C. ALONSO AGUSTIN", + "LA ROSA C. VERONICA ASTRID", "LAZARO Q. DIEGO ARTURO", + "MONTOYA D. CARMEN ISABEL", "PERALTA C. ALMENDRA LUCIA"] + lista_permitidos = set([str(v).strip().upper() for v in lista_raw]) + + # 3. Mapeo de columnas + mapa_cols = { + "1° Cuota": ("imp_saldo_cuota1", "fch_venc_cuota1"), + "2° Cuota": ("imp_saldo_cuota2", "fch_venc_cuota2"), + "3° Cuota": ("imp_saldo_cuota3", "fch_venc_cuota3"), + "4° Cuota": ("imp_saldo_cuota4", "fch_venc_cuota4"), + "5° Cuota": ("imp_saldo_cuota5", "fch_venc_cuota5"), + } + col_saldo, col_venc = mapa_cols.get(tipo_cuota, (None, None)) + if not col_saldo: return [] + + for row in raw_data: + # Identificadores + num_mat = str(row.get('num_matricula', '')).split('.')[0].strip() + + # ================================================================= + # 🛑 FILTRO 0: EXCLUSIÓN GLOBAL MANUAL (TU NUEVO PEDIDO) + # ================================================================= + # Si la matrícula está en "lista_saldo_pendiente" con valor "NO", ADIÓS. + if num_mat in exclusion_manual_global: + val_excl = str(exclusion_manual_global[num_mat]).strip().upper() + if val_excl == "NO": + continue # Se salta inmediatamente, no importa nada más. + + # ================================================================= + # 🛑 FILTRO 1: DETECCIÓN DE REFRIPERU (PRECIO NETO / ETIQUETAS) + # ================================================================= + es_refriperu = False + + # A) Manual (correcciones_descuento) + if num_mat in correcciones_refri: + val = str(correcciones_refri[num_mat]).strip().upper() + if val == "SI": es_refriperu = True + elif val == "NO": es_refriperu = False # Forzamos a cobrar + else: + # B) Automático (Etiquetas) + dsc_beca = str(row.get('dsc_beca', '')).strip().upper() + dsc_prog = str(row.get('dsc_programa', '')).strip().upper() + dsc_prom = str(row.get('dsc_promocion', '')).strip().upper() + + if 'REFRIPERU' in dsc_beca or '100%' in dsc_beca or 'BECA' in dsc_beca: + es_refriperu = True + elif 'REFRIPERU' in dsc_prog or 'REFRIPERU' in dsc_prom: + es_refriperu = True + + # C) Automático por PRECIO FINAL (INV_NETA) + if not es_refriperu: + try: + # Usamos INV_NETA (Precio Real) + inv_neta = float(row.get('INV_NETA', 0)) + except: + inv_neta = 0.0 + + if inv_neta > 0: + # Rango Técnicos/Especialistas + if ("TECNICO" in dsc_prog or "ESPECIALISTA" in dsc_prog or "TEAC" in dsc_prog): + if inv_neta < 1900: es_refriperu = True # ej: 1799 + + # Rango Gestión/Ventas + elif "GESTION" in dsc_prog or "VENTA" in dsc_prog: + if inv_neta < 1000: es_refriperu = True + + if es_refriperu: + continue + + # ================================================================= + # 🛑 FILTROS ESTÁNDAR (VENDEDOR, ESTADO, FECHA) + # ================================================================= + + # Vendedor + vendedor = str(row.get('dsc_vendedor', '')).strip().upper() + if lista_permitidos: + encontrado = False + if vendedor in lista_permitidos: encontrado = True + else: + for p in lista_permitidos: + if p.replace(" ","") in vendedor.replace(" ",""): + encontrado = True; break + if not encontrado: continue + + # Estado + estado = str(row.get('estado_matricula', '')).strip().upper() + if estado not in ('ALU', 'PRE'): continue + + # Fecha Futura (Solo 2da cuota en adelante) + if tipo_cuota != "1° Cuota": + fch_raw = row.get(col_venc) + if fch_raw: + try: + if isinstance(fch_raw, str): f_obj = datetime.strptime(fch_raw[:10], '%Y-%m-%d') + else: f_obj = fch_raw + if f_obj.year > ano_actual: continue + elif f_obj.year == ano_actual and f_obj.month > mes_actual: continue + except: pass + + # Saldo Positivo + try: val = float(row.get(col_saldo, 0)) + except: val = 0.0 + if val <= 0.1: continue + + # --- 4. Construcción de Fila --- + def fmt(v): + if not v: return "" + if isinstance(v, str): return v[:10] + if isinstance(v, datetime): return v.strftime('%d-%m-%Y') + return str(v) + + fila = { + 'MATRICULA': row.get('num_matricula'), + 'VENDEDOR': row.get('dsc_vendedor'), + 'ALUMNO': row.get('dsc_alumno'), + 'PROGRAMA': row.get('dsc_promocion'), + 'FECHA INICIO': fmt(row.get('fch_inicio')), + 'FECHA MATR.': fmt(row.get('fch_matricula')), + 'SALDO MAT.': float(row.get('imp_saldo_matricula', 0)), + f'SALDO {tipo_cuota.upper()}': val, + 'VENCIMIENTO': fmt(row.get(col_venc)), + 'INV. NETA': float(row.get('INV_NETA', 0)), + 'DNI': row.get('dsc_documento', ''), + 'CELULAR': row.get('dsc_telefono_1', '') + } + datos_limpios.append(fila) + + return datos_limpios + + # Métodos legacy + def obtener_saldos(self, ano, mes, tipo_cuota): return self.processor.obtener_datos_procesados(ano, mes, tipo_cuota) + def get_current_year(self): return self.data_manager.get_current_year() + def get_current_month(self): return self.data_manager.get_current_month() \ No newline at end of file diff --git a/backend/modules/saldo_pendiente/processor.py b/backend/modules/saldo_pendiente/processor.py new file mode 100644 index 0000000..ecce7f9 --- /dev/null +++ b/backend/modules/saldo_pendiente/processor.py @@ -0,0 +1,162 @@ +# modules/saldo_pendiente/processor.py +from datetime import datetime + +class SaldoProcessor: + """ + Procesador de lógica de negocio para Saldos Pendientes. + Filtra estrictamente por estado ALU/PRE, saldos positivos, + vendedores permitidos y FECHA DE VENCIMIENTO (No mostrar futuro). + """ + + def __init__(self, data_manager): + self.data_manager = data_manager + + def obtener_datos_procesados(self, ano, mes, tipo_cuota): + """ + Recupera datos crudos y aplica los filtros de negocio. + """ + # 1. Traer la data cruda desde DataManager + raw_data = self.data_manager.ejecutar_consulta_saldos_pendientes(ano, mes) + + datos_limpios = [] + + # 2. Obtener fecha actual para saber qué es "futuro" + ahora = datetime.now() + ano_actual = ahora.year + mes_actual = ahora.month + + # 3. Cargar la "Lista Blanca" de vendedores desde el JSON + config = self.data_manager.config_data + lista_raw = config.get("lista_pendientes", []) + + # RESPALDO DE EMERGENCIA + if not lista_raw: + lista_raw = [ + "AGUILAR U. JUAN CARLOS", + "CHAVEZ P. DIANA", + "HUAMAN C. ALONSO AGUSTIN", + "LA ROSA C. VERONICA ASTRID", + "LAZARO Q. DIEGO ARTURO", + "MONTOYA D. CARMEN ISABEL", + "PERALTA C. ALMENDRA LUCIA" + ] + + # Normalizamos la lista + lista_permitidos = set([str(v).strip().upper() for v in lista_raw]) + + # 4. Mapeo de columnas según la selección + mapa_columnas = { + "1° Cuota": ("imp_saldo_cuota1", "fch_venc_cuota1"), + "2° Cuota": ("imp_saldo_cuota2", "fch_venc_cuota2"), + "3° Cuota": ("imp_saldo_cuota3", "fch_venc_cuota3"), + } + + col_saldo_target, col_venc_target = mapa_columnas.get(tipo_cuota, (None, None)) + + if not col_saldo_target: + return [] + + for row in raw_data: + # ================================================================= + # 🛑 FILTRO 1: VENDEDOR PERMITIDO + # ================================================================= + vendedor_actual = str(row.get('dsc_vendedor', '')).strip().upper() + + if lista_permitidos: + if vendedor_actual not in lista_permitidos: + # Búsqueda parcial por si hay errores de espacios + encontrado = False + for permitido in lista_permitidos: + v_norm = vendedor_actual.replace(" ", "") + p_norm = permitido.replace(" ", "") + if p_norm in v_norm: + encontrado = True + break + if not encontrado: + continue + + # ================================================================= + # 🛑 FILTRO 2: ESTADO (ALU/PRE) + # ================================================================= + estado = str(row.get('estado_matricula', '')).strip().upper() + if estado not in ('ALU', 'PRE'): + continue + + # ================================================================= + # 🛑 FILTRO 3: FECHA DE VENCIMIENTO (NO MOSTRAR FUTURO) + # ================================================================= + # Este filtro aplica PRINCIPALMENTE para 2° Cuota en adelante. + # (Aunque la lógica es válida para todas, la 1° suele ser inmediata). + + if tipo_cuota != "1° Cuota": + fch_venc_raw = row.get(col_venc_target) + + es_futuro = False + if fch_venc_raw: + try: + # Convertir a objeto fecha si es texto + if isinstance(fch_venc_raw, str): + # Asumimos formato SQL YYYY-MM-DD + f_obj = datetime.strptime(fch_venc_raw[:10], '%Y-%m-%d') + else: + f_obj = fch_venc_raw # Ya es datetime + + venc_ano = f_obj.year + venc_mes = f_obj.month + + # LÓGICA DE TIEMPO: + # Si el año de vencimiento es mayor al actual -> ES FUTURO + if venc_ano > ano_actual: + es_futuro = True + # Si es el mismo año, pero el mes es mayor al actual -> ES FUTURO + elif venc_ano == ano_actual and venc_mes > mes_actual: + es_futuro = True + + except Exception as e: + # Si falla la fecha, asumimos que no es futuro para no ocultar por error + pass + + # Si la cuota vence en el futuro (ej: Marzo cuando estamos en Febrero), LA OCULTAMOS. + if es_futuro: + continue + + # ================================================================= + # 🛑 FILTRO 4: SALDO > 0 + # ================================================================= + try: + val = row.get(col_saldo_target, 0) + saldo_a_mostrar = float(val) if val is not None else 0.0 + except: + saldo_a_mostrar = 0.0 + + if saldo_a_mostrar <= 0.1: + continue + + # --- FORMATEO PARA VISUALIZACIÓN --- + def format_date(val): + if not val: return "" + if isinstance(val, str): return val[:10] + if isinstance(val, datetime): return val.strftime('%d-%m-%Y') + return str(val) + + f_inicio = format_date(row.get('fch_inicio')) + f_matr = format_date(row.get('fch_matricula')) + f_vencimiento = format_date(row.get(col_venc_target)) + + # --- CONSTRUCCIÓN DE LA FILA FINAL --- + fila = { + 'MATRICULA': row.get('num_matricula'), + 'VENDEDOR': row.get('dsc_vendedor'), + 'ALUMNO': row.get('dsc_alumno'), + 'PROGRAMA': row.get('dsc_promocion'), + 'FECHA INICIO': f_inicio, + 'FECHA MATR.': f_matr, + 'SALDO MAT.': float(row.get('imp_saldo_matricula', 0)), + f'SALDO {tipo_cuota.upper()}': saldo_a_mostrar, + 'VENCIMIENTO': f_vencimiento, # Aquí se verá la fecha (ej: 14-02-2026) + 'INV. NETA': float(row.get('INV_NETA', 0)), + } + + datos_limpios.append(fila) + + return datos_limpios \ No newline at end of file diff --git a/backend/modules/ventas/__init__.py b/backend/modules/ventas/__init__.py new file mode 100644 index 0000000..e69de29 diff --git a/backend/modules/ventas/logic.py b/backend/modules/ventas/logic.py new file mode 100644 index 0000000..0a30bcb --- /dev/null +++ b/backend/modules/ventas/logic.py @@ -0,0 +1,767 @@ +# modules/ventas/logic.py +import pandas as pd +from datetime import datetime +import requests +import re + +class VentasLogic: + """Clase que maneja la lógica de negocio y procesamiento de datos para Ventas""" + + def __init__(self, data_manager): + self.data_manager = data_manager + self._config_sedes = None + + def _clasificar_sede_comisiones(self, dsc_programa): + """Clasifica la sede usando EXACTAMENTE la misma lógica de Cobranza (sede.json).""" + try: + if not hasattr(self, '_cob_processor') or self._cob_processor is None: + from modules.cobranza.processor import CobranzaProcessor + self._cob_processor = CobranzaProcessor(self.data_manager) + return self._cob_processor.clasificar_sede(dsc_programa) + except Exception: + prog_up = str(dsc_programa or "").upper() + for s in ("AREQUIPA", "PIURA", "TRUJILLO"): + if s in prog_up: + return s + return "LIMA" + + def buscar_todos_matriculados(self): + """Devuelve TODOS los matriculados (todos los años/meses) para el buscador. + Ejecuta la query de matrículas quitando el filtro de YEAR/MONTH de fch_matricula. + Retorna filas con el mismo formato que el detalle (para reusar columnas).""" + import re as _re + sql_base = self.data_manager.query_matriculas_sql + if not sql_base: + return [] + # Quitar las condiciones de año y mes de fch_matricula + sql = _re.sub(r"AND\s+YEAR\(\s*sgeca_matricula\.fch_matricula\s*\)\s*=\s*\?", "", sql_base, flags=_re.IGNORECASE) + sql = _re.sub(r"AND\s+MONTH\(\s*sgeca_matricula\.fch_matricula\s*\)\s*=\s*\?", "", sql, flags=_re.IGNORECASE) + # Por si están sin AND (primera condición) + sql = _re.sub(r"YEAR\(\s*sgeca_matricula\.fch_matricula\s*\)\s*=\s*\?", "1=1", sql, flags=_re.IGNORECASE) + sql = _re.sub(r"MONTH\(\s*sgeca_matricula\.fch_matricula\s*\)\s*=\s*\?", "1=1", sql, flags=_re.IGNORECASE) + # El buscador debe traer TODOS los matriculados excepto ANU (incluye SUS, no pagados, etc.) + # El buscador muestra TODOS los matriculados, incluso ANU + sql = _re.sub(r"AND\s+sgeca_matricula\.cod_estado\s+NOT\s+IN\s*\([^)]*\)", "", sql, flags=_re.IGNORECASE) + sql = _re.sub(r"NOT\s+IN\s*\(\s*'ANU'\s*,\s*'SUS'\s*\)", "NOT IN ('ZZZ')", sql, flags=_re.IGNORECASE) + sql = _re.sub(r"NOT\s+IN\s*\(\s*'ANU'\s*,\s*'SUS'\s*,\s*'RET'\s*\)", "NOT IN ('ZZZ')", sql, flags=_re.IGNORECASE) + + conn = self.data_manager.get_connection() + cursor = conn.cursor() + cursor.execute(sql) # sin parámetros de fecha + columns = [c[0] for c in cursor.description] + datos = [dict(zip(columns, row)) for row in cursor.fetchall()] + + # Traer fecha de cancelación de la cuota 1 de TODAS las matrículas (cualquier refinanciamiento) + fechas_canc = {} + try: + cursor.execute(""" + SELECT num_matricula, MAX(fch_cancelacion) + FROM sgede_cronograma_matricula + WHERE num_cuota = 1 AND fch_cancelacion IS NOT NULL + GROUP BY num_matricula + """) + for r in cursor.fetchall(): + k = str(r[0]).strip() + if k.endswith('.0'): k = k[:-2] + fechas_canc[k] = r[1] + except Exception: + pass + conn.close() + + filas = [] + for d in datos: + raw_mat = d.get('num_matricula') + mat_id = "" + if raw_mat is not None: + v = str(raw_mat).strip() + if v.endswith('.0'): v = v[:-2] + mat_id = v + alumno = d.get('dsc_alumno', 'SIN NOMBRE') + # MOSTRAR: detallado (dsc_promocion = sgede_RP_programa.dsc_det_programa) + programa = (d.get('dsc_promocion') or d.get('dsc_det_programa') or d.get('dsc_programa') or '') + # CLASIFICAR sede: prioriza dsc_programa + prog_clasificacion = (d.get('dsc_programa') or d.get('dsc_det_programa') or d.get('dsc_promocion') or '') + vendedor = d.get('dsc_vendedor', 'SIN VENDEDOR') or 'SIN VENDEDOR' + inv = d.get('INV_NETA', 0) or 0 + saldo_mat = d.get('imp_saldo_matricula', 0) or 0 + saldo_c1 = d.get('imp_saldo_cuota1', 0) or 0 + def _fdate(v): + if not v or str(v).strip() in ("","None"): return "" + if hasattr(v,'strftime'): return v.strftime('%d/%m/%Y') + s = str(v)[:10] + if len(s)==10 and s[4]=='-': p=s.split('-'); return f"{p[2]}/{p[1]}/{p[0]}" + return s + f_mat = _fdate(d.get('fch_matricula')) + f_ini = _fdate(d.get('fch_inicio')) + f_canc = _fdate(fechas_canc.get(mat_id)) + sede = self._clasificar_sede_comisiones(prog_clasificacion) + # mismo layout que el detalle: 16 columnas + fila = [ + vendedor, alumno, f_mat, f_canc, "", "", "", + f"S/ {float(inv):,.0f}", programa, f_ini, + f"S/ {float(saldo_mat):,.0f}", f"S/ {float(saldo_c1):,.0f}", + "", "-", sede, mat_id, + ] + filas.append(fila) + return filas + + def obtener_datos_brutos(self, ano, mes_numero): + datos = self.data_manager.ejecutar_consulta_ventas(str(ano), str(mes_numero)) + return datos or [] + + def obtener_datos_brutos_filtrado(self, ano, mes_numero, sede="TODOS", programa="TODOS"): + datos = self.data_manager.ejecutar_consulta_ventas(str(ano), str(mes_numero), sede, programa) + return datos or [] + + # ========================================================================= + # FUNCIONES AUXILIARES + # ========================================================================= + def clasificar_programa(self, dsc_programa): + if not dsc_programa: return "OTROS" + dsc_prog_upper = str(dsc_programa).upper() + meta_data = self.data_manager.meta_data + clasificaciones = meta_data.get("clasificacion_programas", {}) + + for clase, data in clasificaciones.items(): + for patron in data.get("patrones", []): + if patron.upper() in dsc_prog_upper: + return clase + return meta_data.get("clasificacion_default", {}).get("categoria", "SEMINARIOS") + + def identificar_linea_carrera(self, nombre_programa): + categoria = self.clasificar_programa(nombre_programa) + if categoria in ["AREQUIPA", "TRUJILLO", "PIURA", "TEAC", "TERC", "CARRERA"]: + return "CARRERA_COMPATIBLE" + return None + + def parse_fecha(self, fecha_raw): + try: + if isinstance(fecha_raw, datetime): return fecha_raw + if not fecha_raw: return None + s_fecha = str(fecha_raw).strip() + if len(s_fecha) == 10 and s_fecha[2] == '-': + return datetime.strptime(s_fecha, '%d-%m-%Y') + if ' ' in s_fecha: + return datetime.strptime(s_fecha.split('.')[0], '%Y-%m-%d %H:%M:%S') + return datetime.strptime(s_fecha, '%Y-%m-%d') + except: + return None + + # ========================================================================= + # OBTENCIÓN DE DETALLE POR VENDEDOR (LÓGICA PURA) + # ========================================================================= + def obtener_detalle_vendedor(self, vendedor, ano, mes_numero): + try: + key_mes = f"{int(mes_numero):02d}-{ano}" + lista_raw = self.data_manager.historico_pendientes.get(key_mes, []) + set_vip_actual = set() + lista_vip_str = [] + + for item in lista_raw: + try: + val = int(item) + set_vip_actual.add(val) + lista_vip_str.append(str(val)) + except: pass + # Lista PURA de BASE_PENDIENTES (sin overrides). Venta Pendientes usa SOLO esto. + set_lista_pendientes = set(set_vip_actual) + # Incluir matrículas con override de fecha (igual que ejecutar_consulta_ventas) + + # Incluir matrículas con override de fecha (igual que ejecutar_consulta_ventas) + _fov_vip = getattr(self.data_manager, '_fecha_canc_overrides', None) or {} + for mk in _fov_vip.keys(): + try: + val = int(float(str(mk))) + set_vip_actual.add(val) + if str(val) not in lista_vip_str: + lista_vip_str.append(str(val)) + except: pass + + correcciones_mat = self.data_manager.config_data.get("correcciones_matriculas", {}) + correcciones_desc = self.data_manager.config_data.get('correcciones_descuento', {}) + correcciones_cont = self.data_manager.config_data.get('correcciones_continuidad', {}) + + sql_base = self.data_manager.query_matriculas_sql + if not sql_base: + return {"Venta Inscritos": [], "Venta P.C": [], "Venta Pendientes": []} + + sql_in_clause = "(-1)" + if lista_vip_str: + sql_in_clause = "(" + ",".join(lista_vip_str) + ")" + + sql_modificado = re.sub( + r"YEAR\(\s*sgeca_matricula\.fch_matricula\s*\)\s*=\s*\?", + r"( (YEAR(sgeca_matricula.fch_matricula) = ?", + sql_base, flags=re.IGNORECASE + ) + sql_modificado = re.sub( + r"MONTH\(\s*sgeca_matricula\.fch_matricula\s*\)\s*=\s*\?", + rf"""MONTH(sgeca_matricula.fch_matricula) = ?) OR sgeca_matricula.num_matricula IN {sql_in_clause} + OR EXISTS (SELECT 1 FROM sgede_cronograma_matricula crono + WHERE crono.cod_localidad = sgeca_matricula.cod_localidad + AND crono.num_matricula = sgeca_matricula.num_matricula + AND crono.num_cuota = 1 AND crono.fch_cancelacion IS NOT NULL + AND YEAR(crono.fch_cancelacion) = ? AND MONTH(crono.fch_cancelacion) = ?) )""", + sql_modificado, flags=re.IGNORECASE + ) + + # Permitir matrículas VIP/override aunque estén ANU/SUS (igual que la tabla principal) + if lista_vip_str: + sql_modificado = re.sub( + r"sgeca_matricula\.cod_estado\s+NOT\s+IN\s*\(\s*'ANU'\s*,\s*'SUS'\s*\)", + rf"(sgeca_matricula.cod_estado NOT IN ('ANU', 'SUS') OR sgeca_matricula.num_matricula IN {sql_in_clause})", + sql_modificado, flags=re.IGNORECASE + ) + + conn = self.data_manager.get_connection() + cursor = conn.cursor() + + cursor.execute(sql_modificado, ano, mes_numero, ano, mes_numero) + columns = [column[0] for column in cursor.description] + datos_raw = [dict(zip(columns, row)) for row in cursor.fetchall()] + + # DEDUP por num_matricula: el LEFT JOIN con RP_programa puede duplicar filas + # (una con fch_cancelacion y otra sin). Nos quedamos con UNA sola por matrícula, + # priorizando la que TENGA fecha de cancelación (verdad del pago). + _dedup = {} + for _d in datos_raw: + _m = str(_d.get('num_matricula', '')).strip() + if _m.endswith('.0'): _m = _m[:-2] + _prev = _dedup.get(_m) + _tiene_f = bool(_d.get('fch_cancelacion_cuota1')) + if _prev is None: + _dedup[_m] = _d + elif _tiene_f and not bool(_prev.get('fch_cancelacion_cuota1')): + _dedup[_m] = _d + datos_raw = list(_dedup.values()) + + # 🔥 DESCARGA DEL CRONOGRAMA COMPLETO (SIN IMPORTAR EL MES) 🔥 + lista_mats = list(set([str(d.get('num_matricula')).replace('.0','').strip() for d in datos_raw if d.get('num_matricula')])) + cuotas_raw = [] + + if lista_mats: + mats_str_q = ",".join([f"'{m}'" for m in lista_mats]) + try: + res_cuo = requests.get(self.data_manager.github_cuota_url) + sql_cuotas_base = res_cuo.text + + # Convertimos las validaciones de Año y Mes en "1=1" para que no esconda los cronogramas de otros meses + sql_cuotas_base = re.sub(r"YEAR\s*\([^)]+\)\s*=\s*\?", "1=1", sql_cuotas_base, flags=re.IGNORECASE) + sql_cuotas_base = re.sub(r"MONTH\s*\([^)]+\)\s*=\s*\?", "1=1", sql_cuotas_base, flags=re.IGNORECASE) + sql_cuotas_base = re.sub(r"ORDER\s+BY\s+.*$", "", sql_cuotas_base, flags=re.IGNORECASE | re.DOTALL) + + sql_final_cuotas = f"SELECT * FROM ({sql_cuotas_base}) AS sub_cuotas WHERE num_matricula IN ({mats_str_q})" + + cursor.execute(sql_final_cuotas) + cols_cuo = [c[0] for c in cursor.description] + cuotas_raw = [dict(zip(cols_cuo, row)) for row in cursor.fetchall()] + except Exception as e: + print(f"Error DAX Cuotas: {e}") + + try: cursos_raw = self.data_manager.ejecutar_consulta_cursos(ano, mes_numero) + except: cursos_raw = [] + + conn.close() + + # Agrupar Cuotas + cuotas_por_mat = {} + for c in cuotas_raw: + m_id = str(c.get('num_matricula', '')).strip() + if m_id.endswith('.0'): m_id = m_id[:-2] + if m_id not in cuotas_por_mat: cuotas_por_mat[m_id] = [] + cuotas_por_mat[m_id].append(c) + + fecha_inicio_prog = {} + for c in cursos_raw: + prog = str(c.get('dsc_programa', '')).strip().upper() + if prog not in fecha_inicio_prog: + fecha_inicio_prog[prog] = self.parse_fecha(c.get('fch_inicio')) + + lista_dnis = [str(d.get('dsc_documento', '')).strip() for d in datos_raw if d.get('dsc_documento')] + try: datos_historial = self.data_manager.consultar_historial_continuidad(lista_dnis) + except: datos_historial = {} + + listas_datos = { + "Venta Inscritos": {"filas": [], "s_cuota": 0.0, "c_cuota": 0, "s_desc": 0.0, "c_desc": 0, "s_neta": 0.0}, + "Venta P.C": {"filas": [], "s_cuota": 0.0, "c_cuota": 0, "s_desc": 0.0, "c_desc": 0, "s_neta": 0.0}, + "Venta Pendientes":{"filas": [], "s_cuota": 0.0, "c_cuota": 0, "s_desc": 0.0, "c_desc": 0, "s_neta": 0.0} + } + + vendedor_target = str(vendedor).upper().replace(".", "").replace(",", "") + vendedor_target = " ".join(vendedor_target.split()) + traer_todos = (vendedor_target == "__TODOS__") + + for d in datos_raw: + vend_name = str(d.get('dsc_vendedor', 'SIN VENDEDOR')).upper().replace(".", "").replace(",", "") + vend_name_clean = " ".join(vend_name.split()) + + if not traer_todos and vendedor_target not in vend_name_clean and vend_name_clean not in vendedor_target: + continue + + estado = str(d.get('estado_matricula', '')).strip().upper() + # Permitir ANU/otros si tiene override de fecha; si no, solo ALU/PRE/RET + _rm = d.get('num_matricula') + _mk = "" + if _rm is not None: + _mk = str(_rm).strip() + if _mk.endswith('.0'): _mk = _mk[:-2] + _fov_chk = getattr(self.data_manager, '_fecha_canc_overrides', None) or {} + if estado not in ['ALU', 'PRE', 'RET'] and _mk not in _fov_chk: continue + + raw_mat = d.get('num_matricula') + mat_id = "" + matricula_int = -1 + if raw_mat is not None: + val_str = str(raw_mat).strip() + if val_str.endswith('.0'): val_str = val_str[:-2] + mat_id = val_str + try: matricula_int = int(float(val_str)) + except: pass + + dni = str(d.get('dsc_documento', '')).strip() + alumno_nombre = d.get('dsc_alumno', 'SIN NOMBRE') + nombre_prog_crudo = str(d.get('dsc_programa', '')).strip().upper() + + inv_neta_raw = float(d.get('INV_NETA', 0.0)) + cod_moneda = str(d.get('cod_moneda', 'SOL')).strip().upper() + + # Buscar imp_tc desde el CRONOGRAMA (no del comprobante) + imp_tc = 0 + cuotas_alumno = cuotas_por_mat.get(mat_id, []) + for c_aux in cuotas_alumno: + try: + tc_aux = float(c_aux.get('imp_tc', 0) or 0) + if tc_aux >= 2: # Tomar el primer TC válido del cronograma + imp_tc = tc_aux + break + except: continue + if imp_tc < 2: imp_tc = 3.45 # TC por defecto si no hay cronograma o es inválido + + saldo_mat = float(d.get('imp_saldo_matricula', 0.0)) + saldo_c1 = float(d.get('imp_saldo_cuota1', 0.0)) + fch_canc_raw = d.get('fch_cancelacion_cuota1') + fch_canc_real_sql = d.get('fch_cancelacion_cuota1') # SQL puro, sin override + fch_mat = d.get('fch_matricula') + + # Override de fecha cancelación 1 (Supabase) → prioridad para clasificación + cuenta como pagado + _fov = getattr(self.data_manager, '_fecha_canc_overrides', None) or {} + _mat_key = str(mat_id).strip() + if _mat_key.endswith('.0'): _mat_key = _mat_key[:-2] + tiene_override_fecha = _mat_key in _fov + fecha_vaciada_override = False # override "borrar" → tiene prioridad sobre todo + if tiene_override_fecha: + s = str(_fov[_mat_key]).strip() + if s == "__VACIO__": + # Fecha borrada a propósito → anula la del SQL (no cuenta como pagado) + fch_canc_raw = None + tiene_override_fecha = False + fecha_vaciada_override = True + else: + # Normalizar dd/mm/yyyy o d/m/yyyy → yyyy-mm-dd + if '/' in s: + p = s.split('/') + if len(p) == 3: + s = f"{p[2]}-{int(p[1]):02d}-{int(p[0]):02d}" + fch_canc_raw = s + + if mat_id in correcciones_mat: + datos_corregidos = correcciones_mat[mat_id] + if "imp_tc" in datos_corregidos: imp_tc = float(datos_corregidos["imp_tc"]) + if "imp_saldo_cuota1" in datos_corregidos: saldo_c1 = float(datos_corregidos["imp_saldo_cuota1"]) + if "imp_saldo_matricula" in datos_corregidos: saldo_mat = float(datos_corregidos["imp_saldo_matricula"]) + # Supabase (vaciado) tiene prioridad: la corrección manual NO restaura la fecha + if "fch_cancelacion_cuota1" in datos_corregidos and not fecha_vaciada_override: + fch_canc_raw = datos_corregidos["fch_cancelacion_cuota1"] + + # Prioridad TC: Supabase (mes) > corrección > cronograma + _tc_ov = getattr(self.data_manager, '_tc_override_mes', None) + if _tc_ov: imp_tc = float(_tc_ov) + + if cod_moneda == 'DOL': inv_neta_soles = round(inv_neta_raw * imp_tc, 2) + else: inv_neta_soles = round(inv_neta_raw, 2) + + row_year, row_month = -1, -1 + fecha_mat_limpia = "" + if fch_mat: + try: + if hasattr(fch_mat, 'strftime'): + row_year, row_month = fch_mat.year, fch_mat.month + fecha_mat_limpia = fch_mat.strftime('%d/%m/%Y') + else: + f_obj = datetime.strptime(str(fch_mat)[:10], '%Y-%m-%d') + row_year, row_month = f_obj.year, f_obj.month + fecha_mat_limpia = f_obj.strftime('%d/%m/%Y') + except: fecha_mat_limpia = str(fch_mat)[:10] + + fch_canc_limpia = "" + if fch_canc_raw and str(fch_canc_raw).strip() != "None": + try: + if hasattr(fch_canc_raw, 'strftime'): fch_canc_limpia = fch_canc_raw.strftime('%d/%m/%Y') + else: + tmp = str(fch_canc_raw)[:10] + if len(tmp) == 10 and tmp[4] == '-': p = tmp.split('-'); fch_canc_limpia = f"{p[2]}/{p[1]}/{p[0]}" + else: fch_canc_limpia = tmp + except: fch_canc_limpia = str(fch_canc_raw)[:10] + + clase_alumno = self.clasificar_programa(nombre_prog_crudo) + linea_actual = self.identificar_linea_carrera(nombre_prog_crudo) + fecha_inicio_actual = fecha_inicio_prog.get(nombre_prog_crudo) + + es_refriperu = False + if mat_id in correcciones_desc: + if str(correcciones_desc[mat_id]).upper() == "SI": es_refriperu = True + elif str(correcciones_desc[mat_id]).upper() == "NO": es_refriperu = False + else: + if clase_alumno in ["AREQUIPA", "TRUJILLO", "PIURA"] and 1200 <= inv_neta_soles <= 1700: es_refriperu = True + elif clase_alumno in ["TEAC", "TERC", "CARRERA"] and 1400 <= inv_neta_soles <= 1900: es_refriperu = True + + tipo_final = "NUEVO" + if es_refriperu: tipo_final = "REFRIPERU" + else: + es_cont = False + if mat_id in correcciones_cont: + if str(correcciones_cont[mat_id]).upper() == "SI": es_cont = True + elif str(correcciones_cont[mat_id]).upper() == "NO": es_cont = False + else: + if fecha_inicio_actual and linea_actual and (dni in datos_historial): + for antecedente in datos_historial[dni]: + nombre_pasado = str(antecedente.get('programa', '')) + fecha_pasada = antecedente.get('fecha') + if not fecha_pasada: continue + if not (fecha_pasada < fecha_inicio_actual): continue + dias_diff = (fecha_inicio_actual - fecha_pasada).days + if dias_diff < 60: continue + linea_pasada = self.identificar_linea_carrera(nombre_pasado) + if linea_pasada == linea_actual: + es_cont = True + break + if es_cont: tipo_final = "CONTINUIDAD" + + # =============================================================== + # 🔥 MATEMÁTICA PURA EXACTAMENTE COMO LA PEDISTE 🔥 + # =============================================================== + suma_cuotas = 0.0 + mis_cuotas = cuotas_por_mat.get(mat_id, []) + + for c_dict in mis_cuotas: + try: num_c = int(c_dict.get('num_cuota', 0)) + except: num_c = 0 + + # REGLA: Si el número de cuota es mayor a 0, sumar (imp_total - imp_dscto) + if num_c > 0: + t_val = c_dict.get('imp_total', 0) + d_val = c_dict.get('imp_dscto', 0) + + try: t_monto = float(t_val) if t_val is not None else 0.0 + except: t_monto = 0.0 + try: d_monto = float(d_val) if d_val is not None else 0.0 + except: d_monto = 0.0 + + imp_c = t_monto - d_monto + + # Conversión si es Dólares + tc_over = None + if mat_id in correcciones_mat and "imp_tc" in correcciones_mat[mat_id]: + tc_over = float(correcciones_mat[mat_id]["imp_tc"]) + + cod_m_c = str(c_dict.get('cod_moneda', 'SOL')).strip().upper() + if cod_m_c == "DOL": + if tc_over is not None: tc_c = tc_over + else: + try: tc_c = float(c_dict.get('imp_tc', 0) or 0) + except: tc_c = 0 + if tc_c < 2: tc_c = 3.45 # TC por defecto si es inválido + imp_c *= tc_c + + suma_cuotas += imp_c + + # =============================================================== + # DIVISIÓN SEGÚN CLASIFICACIÓN + # =============================================================== + if suma_cuotas > 0: + if clase_alumno in ["TEAC", "TERC", "CARRERA"]: + valor_cuota_final = suma_cuotas / 5.0 + elif clase_alumno in ["AREQUIPA", "TRUJILLO", "PIURA"]: + valor_cuota_final = suma_cuotas / 6.0 + else: + valor_cuota_final = suma_cuotas + + str_cuota_val = f"S/ {valor_cuota_final:,.0f}" + else: + valor_cuota_final = 0.0 + # Si no tiene cuotas mayores a 0, se queda en blanco limpio + str_cuota_val = "" + + # =============================================================== + # LÓGICA DESC. ESPECIAL (Sobre la suma pura) + # =============================================================== + desc_e_raw = 0.0 + if suma_cuotas >= 1900: + if clase_alumno in ["TEAC", "TERC", "CARRERA"]: d_calc = 3400 - suma_cuotas + elif clase_alumno in ["AREQUIPA", "PIURA", "TRUJILLO"]: d_calc = 2740 - suma_cuotas + else: d_calc = 0 + + if d_calc > 0: + desc_e_raw = min(max(d_calc - 200, 0.0), 200.0) + + str_desc_e_val = f"S/ {desc_e_raw:,.0f}" if desc_e_raw > 0 else "" + + # ========================================== + # DISTRIBUCIÓN EN LAS 3 LISTAS + # ========================================== + vendedor_real = d.get('dsc_vendedor', 'SIN VENDEDOR') + if not vendedor_real: vendedor_real = 'SIN VENDEDOR' + + # Campos extra para el popup de Comisiones (mismo alumno / num_indice) + # NOTA: la query trae el programa DETALLADO con alias 'dsc_promocion' + # (sgede_RP_programa.dsc_det_programa AS dsc_promocion). + # MOSTRAR: prioriza el detallado (dsc_promocion) + det_programa = (d.get('dsc_promocion') or d.get('dsc_det_programa') + or d.get('dsc_programa') or '') + # CLASIFICAR (sede/filtro): prioriza dsc_programa + prog_clasificacion = (d.get('dsc_programa') or d.get('dsc_det_programa') + or d.get('dsc_promocion') or '') + fch_ini_raw = d.get('fch_inicio', '') + fch_ini_limpia = "" + if fch_ini_raw and str(fch_ini_raw).strip() != "None": + try: + if hasattr(fch_ini_raw, 'strftime'): fch_ini_limpia = fch_ini_raw.strftime('%d/%m/%Y') + else: + t = str(fch_ini_raw)[:10] + if len(t) == 10 and t[4] == '-': + p = t.split('-'); fch_ini_limpia = f"{p[2]}/{p[1]}/{p[0]}" + else: fch_ini_limpia = t + except: fch_ini_limpia = str(fch_ini_raw)[:10] + str_saldo_mat = f"S/ {saldo_mat:,.0f}" if saldo_mat else "S/ 0" + str_saldo_c1 = f"S/ {saldo_c1:,.0f}" if saldo_c1 else "S/ 0" + + # ── Cálculos extra para Comisiones ────────────────────────── + # DÍAS ANTICIPACIÓN = Fecha Inicio - Fecha Cancelación 1 (en días) + dias_anticipacion = "-" + try: + def _to_date(v): + if not v or str(v).strip() in ("", "None"): return None + if hasattr(v, 'year'): return datetime(v.year, v.month, v.day) + s = str(v)[:10] + if len(s) == 10 and s[4] == '-': return datetime.strptime(s, '%Y-%m-%d') + if len(s) == 10 and s[2] == '/': + p = s.split('/'); return datetime(int(p[2]), int(p[1]), int(p[0])) + return None + di = _to_date(fch_ini_raw) + dc = _to_date(fch_canc_raw) + if di and dc: + dias_anticipacion = str((di - dc).days) + except Exception: + dias_anticipacion = "-" + + # TIPO PROGRAMA y sede (clasificación tipo Cobranza vía sede.json) + sede_alumno = self._clasificar_sede_comisiones(prog_clasificacion or nombre_prog_crudo) + tipo_programa = sede_alumno # según sede.json (LIMA/AREQUIPA/PIURA/TRUJILLO) + + # VALOR CUOTA ADICIONAL = Promedio cuota - 640 (solo si sede = LIMA, mínimo 0) + if sede_alumno == "LIMA" and valor_cuota_final > 0: + valor_adicional = valor_cuota_final - 640 + if valor_adicional < 0: + valor_adicional = 0 + str_valor_adicional = f"S/ {valor_adicional:,.0f}" + else: + str_valor_adicional = "-" + + fila_final = [ + vendedor_real, alumno_nombre, fecha_mat_limpia, fch_canc_limpia, + tipo_final, str_cuota_val, str_desc_e_val, f"S/ {inv_neta_soles:,.0f}", + # Extra para Comisiones (índices 8+): programa, fch inicio, saldos + det_programa, fch_ini_limpia, str_saldo_mat, str_saldo_c1, + # Nuevos (índices 12+): días anticipación, valor cuota adicional, tipo programa + dias_anticipacion, str_valor_adicional, tipo_programa, + # Índice [15]: num_matricula (clave para overrides de Comisiones) + mat_id, + # Índice [16]: nombre para CLASIFICAR (prioriza dsc_programa). Oculto en UI. + prog_clasificacion + ] + + es_venta_del_mes = (str(row_year) == str(ano)) and (str(row_month) == str(mes_numero)) + saldos_ok = (saldo_mat == 0 and saldo_c1 == 0) + if tiene_override_fecha: + saldos_ok = True + + def agregar_a_lista(nombre_lista): + listas_datos[nombre_lista]["filas"].append(fila_final) + listas_datos[nombre_lista]["s_neta"] += inv_neta_soles + + if valor_cuota_final > 0: + listas_datos[nombre_lista]["s_cuota"] += valor_cuota_final + listas_datos[nombre_lista]["c_cuota"] += 1 + + if desc_e_raw > 0: + listas_datos[nombre_lista]["s_desc"] += desc_e_raw + listas_datos[nombre_lista]["c_desc"] += 1 + + + + + + # Sacamos la validación de fecha de cancelación AFUERA para que sirva a ambas listas + # Sacamos la validación de fecha de cancelación AFUERA para que sirva a ambas listas + pago_en_fecha = False + if fch_canc_raw and str(fch_canc_raw).strip() != "None": + try: + if isinstance(fch_canc_raw, str): + f_obj = datetime.strptime(fch_canc_raw[:10], '%Y-%m-%d') + f_ano, f_mes = f_obj.year, f_obj.month + else: + f_ano, f_mes = fch_canc_raw.year, fch_canc_raw.month + + if str(f_ano) == str(ano) and str(f_mes) == str(mes_numero): + pago_en_fecha = True + except: pass + + # ¿Matrícula de un mes ANTERIOR al filtro? + matricula_mes_pasado = False + try: + ym_mat = int(row_year) * 100 + int(row_month) + ym_filtro = int(ano) * 100 + int(mes_numero) + matricula_mes_pasado = ym_mat < ym_filtro + except: pass + + if es_venta_del_mes: + agregar_a_lista("Venta Inscritos") + if saldos_ok and pago_en_fecha: + agregar_a_lista("Venta P.C") + + # VENTA PENDIENTES: SOLO de tu lista BASE_PENDIENTES y que pagaron su 1ª + # cuota EN EL MES/AÑO DEL FILTRO. Usa la FECHA REAL DEL SQL (sin override). + _pago_mes_real = False + if fch_canc_real_sql and str(fch_canc_real_sql).strip() != "None": + try: + if isinstance(fch_canc_real_sql, str): + _fo = datetime.strptime(fch_canc_real_sql[:10], '%Y-%m-%d') + _fa, _fm = _fo.year, _fo.month + else: + _fa, _fm = fch_canc_real_sql.year, fch_canc_real_sql.month + if int(_fa) == int(ano) and int(_fm) == int(mes_numero): + _pago_mes_real = True + except: pass + if matricula_int in set_lista_pendientes and _pago_mes_real: + agregar_a_lista("Venta Pendientes") + + + + + + + + # ========================================== + # ORDENAR Y ARMAR TOTAL GENERAL + # ========================================== + resultado_final = {} + for k, dict_data in listas_datos.items(): + dict_data["filas"].sort(key=lambda x: x[1]) + + p_cuota = (dict_data["s_cuota"] / dict_data["c_cuota"]) if dict_data["c_cuota"] > 0 else 0.0 + p_desc = (dict_data["s_desc"] / dict_data["c_desc"]) if dict_data["c_desc"] > 0 else 0.0 + + str_gral_cuota = f"S/ {p_cuota:,.0f}" if dict_data["c_cuota"] > 0 else "" + str_gral_desc = f"S/ {p_desc:,.0f}" if dict_data["c_desc"] > 0 else "" + + dict_data["filas"].append([ + "TOTAL GENERAL", "", "", "", "", + str_gral_cuota, str_gral_desc, f"S/ {dict_data['s_neta']:,.0f}" + ]) + resultado_final[k] = dict_data["filas"] + + return resultado_final + + except Exception as e: + print(f"Error procesando alumnos para modal Ventas: {e}") + return {"Venta Inscritos": [], "Venta P.C": [], "Venta Pendientes": []} + + def formatear_datos_para_tabla(self, datos): + if not datos: + return [] + + sheet_data = [] + total_monto = total_pc = total_pendientes = total_avance_pc_total = 0.0 + total_cantidad = total_cantidad_pc = total_cantidad_pendientes = 0 + + for registro in datos: + vendedor = registro.get('VENDEDOR', 'SIN VENDEDOR') + monto = float(registro.get('MONTO', 0.0)) + cantidad = int(registro.get('CANTIDAD', 0)) + ventas_pc = float(registro.get('VENTAS_PC', 0.0)) + cantidad_pc = int(registro.get('INSCRITOS_PC', 0)) + pendientes = float(registro.get('PENDIENTES', 0.0)) + cant_pendientes = int(registro.get('INSCRITOS_PENDIENTES', 0)) + + avance_pc_total = ventas_pc + pendientes + + total_monto += monto; total_cantidad += cantidad; total_pc += ventas_pc + total_cantidad_pc += cantidad_pc; total_pendientes += pendientes + total_cantidad_pendientes += cant_pendientes; total_avance_pc_total += avance_pc_total + + sheet_data.append([ + vendedor, cantidad, f"S/ {monto:,.0f}", cantidad_pc, f"S/ {ventas_pc:,.0f}", + cant_pendientes, f"S/ {pendientes:,.0f}", f"S/ {avance_pc_total:,.0f}", + " ≡ ▼ " + ]) + + sheet_data.append([ + "TOTAL GENERAL", total_cantidad, f"S/ {total_monto:,.0f}", + total_cantidad_pc, f"S/ {total_pc:,.0f}", total_cantidad_pendientes, + f"S/ {total_pendientes:,.0f}", f"S/ {total_avance_pc_total:,.0f}", + "" + ]) + + return sheet_data + + def exportar_detalle_alumnos_excel(self, vendedor, lista_nombre, headers, datos): + if not datos: raise ValueError("No hay datos para exportar") + vend_limpio = "".join([c if c.isalnum() else "_" for c in str(vendedor)])[:30] + lista_limpia = "".join([c if c.isalnum() else "_" for c in str(lista_nombre)]) + archivo = f"Ventas_{vend_limpio}_{lista_limpia}.xlsx" + + df = pd.DataFrame(datos, columns=headers) + try: + with pd.ExcelWriter(archivo, engine='openpyxl') as writer: + df.to_excel(writer, index=False, sheet_name='Detalle_Ventas') + worksheet = writer.sheets['Detalle_Ventas'] + try: + from openpyxl.styles import PatternFill, Font, Border, Side, Alignment + fill_header = PatternFill(start_color="12345F", end_color="12345F", fill_type="solid") + font_header = Font(color="FFFFFF", bold=True) + thin_border = Border(left=Side(style='thin', color="DDDDDD"), right=Side(style='thin', color="DDDDDD"), + top=Side(style='thin', color="DDDDDD"), bottom=Side(style='thin', color="DDDDDD")) + + for cell in worksheet[1]: + cell.fill = fill_header + cell.font = font_header + cell.border = thin_border + cell.alignment = Alignment(horizontal="center", vertical="center", wrap_text=True) + + for row in worksheet.iter_rows(min_row=2): + for cell in row: + cell.border = thin_border + cell.alignment = Alignment(vertical="center") + + for col in worksheet.columns: + max_len = 0 + col_letter = col[0].column_letter + for cell in col: + if cell.value: max_len = max(max_len, len(str(cell.value))) + worksheet.column_dimensions[col_letter].width = min(max_len + 3, 50) + except: pass + except: df.to_excel(archivo, index=False) + return archivo + + def exportar_a_excel(self, datos, ano, nombre_mes): + if not datos: raise ValueError("No hay datos para exportar") + datos_export = [] + for d in datos: + nuevo_d = dict(d) + nuevo_d['AVANCE_PC_TOTAL'] = float(d.get('VENTAS_PC', 0)) + float(d.get('PENDIENTES', 0)) + datos_export.append(nuevo_d) + + df = pd.DataFrame(datos_export) + archivo = f"ventas_{ano}_{nombre_mes}.xlsx" + df.to_excel(archivo, index=False) + return archivo \ No newline at end of file diff --git a/backend/requirements.txt b/backend/requirements.txt index 0b80d1a..1c2d5da 100644 --- a/backend/requirements.txt +++ b/backend/requirements.txt @@ -1,6 +1,10 @@ -fastapi -uvicorn -python-dotenv -pyodbc -psycopg2-binary -requests +fastapi==0.115.0 +uvicorn[standard]==0.30.6 +pyodbc==5.1.0 +requests==2.32.3 +pandas==2.2.2 +openpyxl==3.1.5 +python-dotenv==1.0.1 +supabase==2.15.1 +httpx==0.28.1 +pytz==2024.1 diff --git a/backend/services.py b/backend/services.py index c12d124..8c56a99 100644 --- a/backend/services.py +++ b/backend/services.py @@ -1,11 +1,31 @@ # backend/services.py -"""Servicios: traen datos crudos (cacheados) y arman la respuesta del módulo Leads.""" -from data_manager_v2 import DataManager -import leads_logic as L -from cache_manager import cache_get_or_set, cache_invalidate +""" +Capa de servicios: envuelve la lógica existente (modules/) con caché. +NO modifica la lógica de negocio — solo la llama y serializa el resultado. +""" +from core.data_manager import DataManager +from modules.ocupabilidad.logic import AnalizadorCursos +from modules.ventas.logic import VentasLogic +from modules.cobranza.logic import CobranzaLogic +from modules.rentabilidad.logic import RentabilidadLogic +from modules.saldo_pendiente.logic import SaldoLogic +from cache_manager import cache_get_or_set +# Instancia única del DataManager (como @st.cache_resource) _DM = None +# Hora de la última actualización de DATOS (se setea al precargar/refrescar) +_ultima_actualizacion = None + +def _marcar_actualizacion(): + global _ultima_actualizacion + from datetime import datetime + _ultima_actualizacion = datetime.now() + +def ultima_actualizacion(): + """Devuelve la hora (ISO) del último refresco de datos, o None.""" + return {"hora": _ultima_actualizacion.isoformat() if _ultima_actualizacion else None} + def get_dm() -> DataManager: global _DM @@ -14,1755 +34,875 @@ def get_dm() -> DataManager: return _DM -# ── Prefijos de cache que dependen del mapa de campañas (leyendas). Al cambiar -# una leyenda se invalidan estos para que TODOS los apartados se reconstruyan -# en su proxima peticion (perezoso: solo lo que se pida, ~2-5s), sin esperar -# los 15 min ni recargar todo. NO se toca la logica, solo se refresca el cache. -_PREF_CAMPANIAS = ( - "campanias_map", "campanias_sc", "leads_raw", "leads_dash", "leads_filtros", - "leads_alertas", "vendedores_dash", "roas_dash", "otros_general", - "matriz_always", "matriz_webform", "matriz_asignados", "matriz_plantillas", - "tiempo_resp", "importe_pauta_periodo", "resultados_pauta_periodo", -) +def _serializar_dicts(datos): + out = [] + for d in (datos or []): + fila = {} + for k, v in d.items(): + fila[k] = v if isinstance(v, (str, int, float, bool)) or v is None else str(v) + out.append(fila) + return out -def _invalidar_por_campanias(): - """Invalida el cache de campañas (Supabase) y de todos los apartados que - dependen de las leyendas, para que el cambio se vea de inmediato.""" - from data_manager_v2 import invalidar_campanias_cache - invalidar_campanias_cache() - for p in _PREF_CAMPANIAS: - cache_invalidate(p) +def _serializar_filas(filas, limite=None): + out = [] + for f in (filas or []): + vals = f[:limite] if limite else f + out.append([str(v) if v is not None else "" for v in vals]) + return out -# ── Datos crudos cacheados (consultas pesadas, una sola vez) ──── -def _leads_crudos(): - return cache_get_or_set("leads_raw", ("GLOBAL",), - lambda: L.procesar_leads(get_dm().traer_leads_chatwoot())) - - -def _cursos_crudos(): - return cache_get_or_set("cursos_raw", ("GLOBAL",), lambda: get_dm().traer_cursos()) - - -def _matriculas_crudas(): - return cache_get_or_set("mat_raw", ("GLOBAL",), lambda: get_dm().traer_matriculas()) - - -def _pauta_cruda(): - return cache_get_or_set("pauta_raw", ("GLOBAL",), lambda: get_dm().traer_pauta_cursos()) - - -def _programa_pautas(): - """{num_indice: [pautas]} desde la tabla programa_pautas (muchos-a-muchos).""" - return cache_get_or_set("programa_pautas", ("GLOBAL",), - lambda: get_dm().traer_programa_pautas()) - - -def _pautas_de_indice(): - """{num_indice: [pautas]} combinando: - - la pauta de basebi_programacion (1 por num_indice), y - - las pautas extra de programa_pautas (varias). - Sin duplicados. Un num_indice puede terminar con varias pautas que se SUMAN.""" - def _load(): - pm = _pauta_cruda() # {num_indice: {pauta,...}} - extra = _programa_pautas() # {num_indice: [pautas]} - out = {} - for ni, info in pm.items(): - p = info.get("pauta") - if p: - out.setdefault(str(ni).strip(), []).append(str(p).strip()) - for ni, pautas in extra.items(): - lst = out.setdefault(str(ni).strip(), []) - for p in pautas: - if str(p).strip() not in lst: - lst.append(str(p).strip()) - return out - return cache_get_or_set("pautas_de_indice", ("GLOBAL",), _load) - - -def _campanias_map(): - return cache_get_or_set("campanias_map", ("GLOBAL",), - lambda: get_dm().traer_campanias_map()) - - -def _conjunto_pauta(): - return cache_get_or_set("conjunto_pauta", ("GLOBAL",), - lambda: get_dm().traer_conjunto_pauta()) - - -def _meta_filas(): - """Filas crudas del CSV de Meta: [{conjunto, importe, inicio}, ...].""" - return cache_get_or_set("meta_filas", ("GLOBAL",), - lambda: get_dm().traer_meta_importe()) - - -def _importe_por_pauta(): - """{pauta: importe_gastado_total} = suma del importe de TODAS las filas de los - conjuntos ligados a esa pauta (conjunto_pauta × Meta CSV). Sin filtro de fecha.""" - def _load(): - conj_pauta = _conjunto_pauta() # {pauta: [conjunto,...]} - imp_norm = {} - for f in _meta_filas(): - k = " ".join(str(f.get("conjunto")).split()).upper() - imp_norm[k] = imp_norm.get(k, 0.0) + float(f.get("importe") or 0.0) - out = {} - for pauta, conjuntos in conj_pauta.items(): - total = sum(imp_norm.get(" ".join(str(co).split()).upper(), 0.0) for co in conjuntos) - out[str(pauta).strip()] = round(total, 2) - return out - return cache_get_or_set("importe_pauta", ("GLOBAL",), _load) - - -def _importe_por_pauta_periodo(ano, mes, dia): - """{pauta: importe} sumando solo las filas del CSV cuyo 'Inicio del informe' - cae dentro del periodo filtrado (año/mes/día). Respeta el filtro de arriba.""" - def _load(): - conj_pauta = _conjunto_pauta() - imp_norm = {} - sin_filtro = (ano in ("TODOS", None) and mes in ("TODOS", None) and dia in ("TODOS", None)) - for f in _meta_filas(): - fx = L._to_date(f.get("inicio")) - if sin_filtro: - pass # sin filtro: cuenta todo (incluye filas sin fecha) = total - elif not L._en_periodo(fx, ano, mes, dia): - continue - k = " ".join(str(f.get("conjunto")).split()).upper() - imp_norm[k] = imp_norm.get(k, 0.0) + float(f.get("importe") or 0.0) - out = {} - for pauta, conjuntos in conj_pauta.items(): - total = sum(imp_norm.get(" ".join(str(co).split()).upper(), 0.0) for co in conjuntos) - out[str(pauta).strip()] = round(total, 2) - return out - return cache_get_or_set("importe_pauta_periodo", (ano, mes, dia), _load) - - -def _resultados_por_pauta_periodo(ano, mes, dia): - """{pauta: resultados} sumando solo las filas del CSV cuyo 'Inicio del informe' - cae en el periodo filtrado. Analogo a _importe_por_pauta_periodo pero con Resultados.""" - def _load(): - conj_pauta = _conjunto_pauta() - res_norm = {} - sin_filtro = (ano in ("TODOS", None) and mes in ("TODOS", None) and dia in ("TODOS", None)) - for f in _meta_filas(): - if not sin_filtro and not L._en_periodo(L._to_date(f.get("inicio")), ano, mes, dia): - continue - k = " ".join(str(f.get("conjunto")).split()).upper() - res_norm[k] = res_norm.get(k, 0.0) + float(f.get("resultados") or 0.0) - out = {} - for pauta, conjuntos in conj_pauta.items(): - total = sum(res_norm.get(" ".join(str(co).split()).upper(), 0.0) for co in conjuntos) - out[str(pauta).strip()] = int(total) - return out - return cache_get_or_set("resultados_pauta_periodo", (ano, mes, dia), _load) - - -def _campanias_sede_cargo(): - return cache_get_or_set("campanias_sc", ("GLOBAL",), - lambda: get_dm().traer_campanias_sede_cargo()) - - -def matriz_always(ano="TODOS", mes="TODOS", dia="TODOS", sede="TODOS", programa="TODOS"): - """Matriz de gasto Meta Ads de pautas ALWAYS (con gasto pero SIN num_indice). - Agrupa Sede -> Programa (TEAC/TERC/SEMINARIOS) con Importe, Resultados, - Leads Nuevos (fecha_creada en el mes) y Leads Nuevos Asignados (con asesor). - Sede/programa salen de la tabla campanias. Pautas sin campanias NO se cuentan.""" - def _load(): - conj_pauta = _conjunto_pauta() # {pauta: [conjuntos]} - camp = _campanias_sede_cargo() # {pauta: {sede,cargo}} - pauta_map = _pauta_cruda() # {num_indice: {pauta,...}} - con_indice = {str(v.get("pauta")).strip() for v in pauta_map.values() if v.get("pauta")} - - # Leads nuevos (unicos) por pauta = codigo, cuya fecha_creada cae en el mes filtrado - leads = _leads_crudos() - leads_nuevos = {} # codigo -> nº leads unicos del mes - leads_nuevos_asig = {} # codigo -> nº leads unicos del mes con asesor - tel_lead_mes = {} # telefono -> (codigo, fecha_creada) del lead unico del mes - for l in leads: - if not l.get("es_unico"): - continue - if not L._en_periodo(l.get("fecha"), ano, mes, dia): - continue - cod = str(l.get("codigo") or "").strip() - if not cod: - continue - leads_nuevos[cod] = leads_nuevos.get(cod, 0) + 1 - if str(l.get("asesor") or "").strip(): - leads_nuevos_asig[cod] = leads_nuevos_asig.get(cod, 0) + 1 - tel = str(l.get("telefono") or "").strip() - if tel: - tel_lead_mes[tel] = (cod, l.get("fecha")) - - # MATRICULAS por pauta: matriculas cuyo telefono = un lead nuevo del mes, y con - # fch_matricula >= fecha_creada del lead. Cuenta CADA matricula (una vez c/u), - # atribuida a la pauta del lead. Cruce por telefono (tel_1, o tel_2 si vacio). - matriculas_pauta = {} # codigo -> nº matriculas - venta_pauta = {} # codigo -> suma INV_NETA en soles (DOL ×3.34) - _vistas = set() # (num_matricula) para no contar 2 veces - for m in _matriculas_crudas(): - t1 = str(m.get("dsc_telefono_1") or "").strip() - t2 = str(m.get("dsc_telefono_2") or "").strip() - ph = t1 if t1 else t2 - if ph not in tel_lead_mes: - continue - cod, f_lead = tel_lead_mes[ph] - fm = L._to_date(m.get("fch_matricula")) - if not fm or not f_lead or fm < f_lead: - continue # matricula anterior al ingreso del lead -> no cuenta - nm = str(m.get("num_matricula")) - if nm in _vistas: - continue - _vistas.add(nm) - matriculas_pauta[cod] = matriculas_pauta.get(cod, 0) + 1 - # INV_NETA en soles: si moneda DOL, ×3.34 (igual que tabla por Sede) - try: - inv = float(m.get("INV_NETA", 0) or 0) - except (TypeError, ValueError): - inv = 0.0 - if str(m.get("cod_moneda", "")).strip().upper() == "DOL": - inv *= 3.34 - venta_pauta[cod] = venta_pauta.get(cod, 0.0) + inv - - # Importe y Resultados por conjunto, filtrando por el MES de arriba - imp = {}; res = {} - sin_filtro = (ano in ("TODOS", None) and mes in ("TODOS", None) and dia in ("TODOS", None)) - for f in _meta_filas(): - if not sin_filtro and not L._en_periodo(L._to_date(f.get("inicio")), ano, mes, dia): - continue - k = " ".join(str(f.get("conjunto")).split()).upper() - imp[k] = imp.get(k, 0.0) + float(f.get("importe") or 0.0) - res[k] = res.get(k, 0.0) + float(f.get("resultados") or 0.0) - - # Acumular por Sede -> Programa -> Pauta (solo pautas ALWAYS que esten en campanias) - from collections import defaultdict - grupos = defaultdict(lambda: defaultdict(lambda: {"importe": 0.0, "resultados": 0.0, - "nuevos": 0, "nuevos_asig": 0, - "matriculas": 0, "venta": 0.0, "pautas": []})) - for pauta, conjuntos in conj_pauta.items(): - p = str(pauta).strip() - if p in con_indice: # tiene num_indice -> NO es always - continue - info = camp.get(p) - if not info: # no esta en campanias -> no se cuenta - continue - se = str(info.get("sede") or "").upper() - gr = L.grupo_programa_lead(info.get("cargo")) # TEAC/TERC/SEMINARIOS - ti = sum(imp.get(" ".join(str(c).split()).upper(), 0.0) for c in conjuntos) - tr = sum(res.get(" ".join(str(c).split()).upper(), 0.0) for c in conjuntos) - if ti == 0 and tr == 0: - continue # sin gasto en el mes -> no aparece - # filtros de arriba - if sede not in ("TODOS", None) and se != str(sede).upper(): - continue - if programa not in ("TODOS", None) and gr != str(programa).upper(): - continue - nv = leads_nuevos.get(p, 0) - na = leads_nuevos_asig.get(p, 0) - mt = matriculas_pauta.get(p, 0) - vv = venta_pauta.get(p, 0.0) - g = grupos[se][gr] - g["importe"] += ti - g["resultados"] += tr - g["nuevos"] += nv - g["nuevos_asig"] += na - g["matriculas"] += mt - g["venta"] += vv - g["pautas"].append({"pauta": p, "importe": round(ti, 2), "resultados": int(tr), - "nuevos": nv, "nuevos_asig": na, "matriculas": mt, - "venta": round(vv, 0)}) - - # Armar filas: Sede -> subfilas por programa -> pautas (solo con gasto) - filas = [] - for se in sorted(grupos.keys()): - subs = [] - s_imp = s_res = 0.0; s_nv = s_na = s_mt = 0; s_vv = 0.0 - for gr in ("TEAC", "TERC", "SEMINARIOS"): - if gr in grupos[se]: - d = grupos[se][gr] - pautas = sorted(d["pautas"], key=lambda x: -x["importe"]) - subs.append({"programa": gr, "importe": round(d["importe"], 2), - "resultados": int(d["resultados"]), - "nuevos": d["nuevos"], "nuevos_asig": d["nuevos_asig"], - "matriculas": d["matriculas"], "venta": round(d["venta"], 0), - "pautas": pautas}) - s_imp += d["importe"]; s_res += d["resultados"] - s_nv += d["nuevos"]; s_na += d["nuevos_asig"]; s_mt += d["matriculas"]; s_vv += d["venta"] - filas.append({"sede": se, "importe": round(s_imp, 2), "resultados": int(s_res), - "nuevos": s_nv, "nuevos_asig": s_na, "matriculas": s_mt, - "venta": round(s_vv, 0), "subfilas": subs}) - tot_i = round(sum(f["importe"] for f in filas), 2) - tot_r = int(sum(f["resultados"] for f in filas)) - tot_nv = sum(f["nuevos"] for f in filas) - tot_na = sum(f["nuevos_asig"] for f in filas) - tot_mt = sum(f["matriculas"] for f in filas) - tot_vv = round(sum(f["venta"] for f in filas), 0) - return {"filas": filas, "total": {"importe": tot_i, "resultados": tot_r, - "nuevos": tot_nv, "nuevos_asig": tot_na, - "matriculas": tot_mt, "venta": tot_vv}} - - return cache_get_or_set("matriz_always", (ano, mes, dia, sede, programa), _load) - - -def matriz_web_formulario(ano="TODOS", mes="TODOS", dia="TODOS", sede="TODOS", programa="TODOS"): - """Matriz de leads con canal WEB_FORMULARIO (cartera_junta), agrupados Sede -> Programa. - Valores: Leads Recibidos (todos), Leads Procesados (con asesor), Matriculas y - Valor Venta (cruce por telefono, fch_matricula >= fecha_creada del lead).""" - def _load(): - rows = _cartera_rows_cache() - # 1) leads WEB_FORMULARIO cuya fila es el ORIGEN del telefono en TODA la cartera - # (es_origen=SI) y con fecha_creada en el periodo. Asi NO cuenta si el telefono - # ya vino antes por otro canal (igual criterio que las demas tablas). - vistos = {} # telefono -> {fecha, sede, prog, asesor} - for r in rows: - if str(r.get("canal") or "").strip().upper() != "WEB_FORMULARIO": - continue - if str(r.get("es_origen") or "").strip().upper() != "SI": - continue # solo el origen real del telefono - tel = str(r.get("telefono") or "").strip() - if not tel: - continue - f = L._to_date(r.get("fecha_creada")) - if not L._en_periodo(f, ano, mes, dia): - continue - # sede y programa YA vienen normalizados en cartera_junta. Reducir a 4 grupos. - se = " ".join(str(r.get("sede") or "").upper().split()) or "SIN SEDE" - pr = " ".join(str(r.get("programa") or "").upper().split()) - if pr == "TEAC": - gr = "TEAC" - elif pr == "TERC": - gr = "TERC" - elif pr in ("SEMINARIOS", "VRF", "CO2", "DIPLOMADO", "VENTILACIÓN", "VENTILACION"): - gr = "SEMINARIOS" - else: - gr = "OTROS" - vistos[tel] = {"fecha": f, "sede": se, "prog": gr, - "asesor": str(r.get("asesor") or "").strip()} - - # 2) matriculas por telefono (num_matricula, fecha, inv en soles) - from collections import defaultdict - mat_por_tel = defaultdict(list) - for m in _matriculas_crudas(): - t1 = str(m.get("dsc_telefono_1") or "").strip() - t2 = str(m.get("dsc_telefono_2") or "").strip() - ph = t1 if t1 else t2 - if not ph: - continue - fm = L._to_date(m.get("fch_matricula")) - try: - inv = float(m.get("INV_NETA", 0) or 0) - except (TypeError, ValueError): - inv = 0.0 - if str(m.get("cod_moneda", "")).strip().upper() == "DOL": - inv *= 3.34 - mat_por_tel[ph].append((str(m.get("num_matricula")), fm, inv)) - - # 3) agrupar Sede -> Programa - grupos = defaultdict(lambda: defaultdict(lambda: {"recibidos": 0, "procesados": 0, - "matriculas": 0, "venta": 0.0})) - for tel, info in vistos.items(): - se = info["sede"]; gr = info["prog"]; f_lead = info["fecha"] - if sede not in ("TODOS", None) and se != str(sede).upper(): - continue - if programa not in ("TODOS", None) and gr != str(programa).upper(): - continue - g = grupos[se][gr] - g["recibidos"] += 1 - if info["asesor"]: - g["procesados"] += 1 - for (nm, fm, inv) in mat_por_tel.get(tel, []): - if fm and f_lead and fm >= f_lead: - g["matriculas"] += 1 - g["venta"] += inv - - # 4) filas - filas = [] - for se in sorted(grupos.keys()): - subs = [] - s_rec = s_proc = s_mt = 0; s_vv = 0.0 - for gr in ("TEAC", "TERC", "SEMINARIOS", "OTROS"): - if gr in grupos[se]: - d = grupos[se][gr] - subs.append({"programa": gr, "recibidos": d["recibidos"], - "procesados": d["procesados"], "matriculas": d["matriculas"], - "venta": round(d["venta"], 0)}) - s_rec += d["recibidos"]; s_proc += d["procesados"] - s_mt += d["matriculas"]; s_vv += d["venta"] - filas.append({"sede": se, "recibidos": s_rec, "procesados": s_proc, - "matriculas": s_mt, "venta": round(s_vv, 0), "subfilas": subs}) - tot = {"recibidos": sum(f["recibidos"] for f in filas), - "procesados": sum(f["procesados"] for f in filas), - "matriculas": sum(f["matriculas"] for f in filas), - "venta": round(sum(f["venta"] for f in filas), 0)} - return {"filas": filas, "total": tot} - - return cache_get_or_set("matriz_webform", (ano, mes, dia, sede, programa), _load) - - -def _asignacion_respuesta_crudos(): - return cache_get_or_set("asig_resp", ("GLOBAL",), - lambda: get_dm().traer_asignacion_respuesta()) - - -def _leads_asignados_crudos(): - # UNIFICADO: usa la MISMA consulta/cache que el grafico (asignacion+respuesta+etiquetas), - # asi la tarjeta, la matriz de asignados y el grafico nunca se desfasan. - return _asignacion_respuesta_crudos() - - -def _actividad_asesores_crudos(): - return cache_get_or_set("act_asesores", ("GLOBAL",), - lambda: get_dm().traer_actividad_asesores()) - - -def matriz_asignados(ano="TODOS", mes="TODOS", dia="TODOS"): - """Matriz pivot: filas = asesor (user_name) con sus telefonos; columnas = dias del - mes; valor = cantidad de telefonos asignados a ese asesor ese dia. - Fecha = created_at del mensaje de asignacion (ya con -5h).""" - def _load(): - import calendar - from collections import defaultdict - rows = _leads_asignados_crudos() - # dias del mes filtrado (columnas) - if mes not in ("TODOS", None) and ano not in ("TODOS", None): - ndias = calendar.monthrange(int(ano), int(mes))[1] - dias_cols = list(range(1, ndias + 1)) - else: - dias_cols = list(range(1, 32)) - - # asesores excluidos de esta matriz - EXCLUIR = {"SIN ASESOR", "COPITO RIVERA"} - # asesor -> dia -> [telefonos] - por = defaultdict(lambda: defaultdict(list)) - for r in rows: - f = L._to_date(r.get("created_at")) - if not L._en_periodo(f, ano, mes, dia): - continue - ase = str(r.get("user_name") or "Sin Asesor").strip() or "Sin Asesor" - if ase.upper() in EXCLUIR: - continue - tel = str(r.get("telefono") or "").strip() - por[ase][f.day].append(tel) - - filas = [] - tot_por_dia = defaultdict(int) - for ase in sorted(por.keys()): - pordia = {d: len(por[ase].get(d, [])) for d in dias_cols} - total = sum(pordia.values()) - # telefonos por dia (para expandir con +) - tels_dia = {d: sorted(por[ase].get(d, [])) for d in dias_cols if por[ase].get(d)} - for d, n in pordia.items(): - tot_por_dia[d] += n - filas.append({"asesor": ase, "por_dia": pordia, "total": total, "tels_dia": tels_dia}) - filas.sort(key=lambda x: -x["total"]) - total_gral = sum(f["total"] for f in filas) - return {"dias": dias_cols, "filas": filas, - "total_por_dia": {d: tot_por_dia.get(d, 0) for d in dias_cols}, - "total": total_gral} - return cache_get_or_set("matriz_asignados", (ano, mes, dia), _load) - - -def _plantillas_crudas(): - return cache_get_or_set("plantillas_raw", ("GLOBAL",), - lambda: get_dm().traer_plantillas()) - - -def matriz_plantillas(ano="TODOS", mes="TODOS", dia="TODOS"): - """Matriz de plantillas COBRADAS por plantilla. Columnas: - ENVIADAS = Mas_de_24h=SI, created_at_peru en el periodo filtrado - RESPONDIDAS= de esas, con respuesta del contacto (siguiente_mensaje_1) - ASIGNADAS = de esas, con asesor Y respondida por el contacto - MATRICULAS = matriculas de esos telefonos (fch_matricula >= envio mas antiguo). Sin filtro de mes. - VENTA = INV_NETA (DOL x3.34) de esas matriculas.""" - from datetime import timedelta, datetime - from collections import defaultdict - - def _load(): - rows = _plantillas_crudas() - UMBRAL = timedelta(hours=24) - - def _lleno(s): - return s is not None and str(s).strip() != "" - - enviadas = defaultdict(int) - respondidas = defaultdict(int) - asignadas = defaultdict(int) - prim_por_tel = {} # telefono -> (fecha_envio, plantilla) la cobrada mas antigua DEL PERIODO - - for r in rows: - plantilla = r.get("plantilla") - envio = r.get("created_at_peru") - f = L._to_date(envio) - # ENVIADAS/RESP/ASIG respetan el filtro de mes (por created_at_peru) - if not L._en_periodo(f, ano, mes, dia): - continue - anterior = r.get("hora_anterior_contacto") - sig = r.get("siguiente_mensaje_1") - es_si = False - if plantilla == "descuento_egresados_seminarios": - es_si = True - elif anterior is not None and (envio - anterior) > UMBRAL: - es_si = True - if not es_si: - continue - enviadas[plantilla] += 1 - if _lleno(sig): - respondidas[plantilla] += 1 - if _lleno(r.get("user_name")) and _lleno(sig): - asignadas[plantilla] += 1 - tel = str(r.get("telefono") or "").strip() - if tel and envio is not None: - if tel not in prim_por_tel or envio < prim_por_tel[tel][0]: - prim_por_tel[tel] = (envio, plantilla) - - # MATRICULAS + VENTA de los telefonos filtrados (sin filtro de mes en la matricula) - mat_por_tel = defaultdict(list) - for m in _matriculas_crudas(): - t1 = str(m.get("dsc_telefono_1") or "").strip() - t2 = str(m.get("dsc_telefono_2") or "").strip() - ph = t1 if t1 else t2 - if not ph: - continue - fm = m.get("fch_matricula") - if isinstance(fm, datetime): fm = fm.date() - try: - inv = float(m.get("INV_NETA", 0) or 0) - except (TypeError, ValueError): - inv = 0.0 - if str(m.get("cod_moneda", "")).strip().upper() == "DOL": - inv *= 3.34 - mat_por_tel[ph].append((str(m.get("num_matricula")), fm, inv)) - - matriculas = defaultdict(int) - venta = defaultdict(float) - _vistas = set() - for tel, (fenvio, plantilla) in prim_por_tel.items(): - fenvio_d = fenvio.date() if hasattr(fenvio, "date") else fenvio - for (nm, fm, inv) in mat_por_tel.get(tel, []): - if not fm or nm in _vistas: - continue - if fm >= fenvio_d: - _vistas.add(nm) - matriculas[plantilla] += 1 - venta[plantilla] += inv - - filas = [] - for p in sorted(enviadas.keys(), key=lambda x: -enviadas[x]): - filas.append({"plantilla": p, "enviadas": enviadas[p], - "respondidas": respondidas.get(p, 0), - "asignadas": asignadas.get(p, 0), - "matriculas": matriculas.get(p, 0), - "venta": round(venta.get(p, 0.0), 0)}) - tot = {"enviadas": sum(enviadas.values()), "respondidas": sum(respondidas.values()), - "asignadas": sum(asignadas.values()), "matriculas": sum(matriculas.values()), - "venta": round(sum(venta.values()), 0)} - return {"filas": filas, "total": tot} - - return cache_get_or_set("matriz_plantillas", (ano, mes, dia), _load) - - -def _norm_ni(x): - """Normaliza num_indice a texto (quita el '.0' si viniera como float).""" - s = str(x or "").strip() - return s[:-2] if s.endswith(".0") else s - - -def _mat_por_indice(): - """{num_indice: [(telefono_resuelto, fecha_matricula), ...]} desde las matrículas. - Teléfono resuelto = dsc_telefono_1 si existe; si no, dsc_telefono_2.""" - def _load(): - from collections import defaultdict - out = defaultdict(list) - for m in _matriculas_crudas(): - ni = _norm_ni(m.get("num_indice")) - t1 = str(m.get("dsc_telefono_1") or "").strip() - t2 = str(m.get("dsc_telefono_2") or "").strip() - fm = L._to_date(m.get("fch_matricula")) - out[ni].append((t1 if t1 else t2, fm)) - return out - return cache_get_or_set("mat_por_indice", ("GLOBAL",), _load) - - -def _cartera_rows_cache(): - """Filas crudas de cartera_junta cacheadas (se bajan de Supabase UNA sola vez). - Evita re-descargar las 86k filas en cada llamada/cambio de mes.""" - return cache_get_or_set("cartera_rows", ("GLOBAL",), - lambda: get_dm().traer_cartera_rows()) - - -def _cartera_idx(): - """Devuelve {'all':..., 'asig':...}, cada uno {(sede,programa):{telefono:fecha_min}}. - 'all' = todos los teléfonos; 'asig' = solo los que tienen asesor (no vacío). - Se baja la cartera UNA vez y queda cacheado.""" - def _load(): - from collections import defaultdict - CANAL_PAUTA = {"COPITO", "PAUTA_WSP", "PAUTA_WSP_FACE"} - CANAL_WEB = {"WEB_FORMULARIO", "WEB_WHATSAPP", "WHATSAPP WEB"} - - def _clase(canal): - if canal in CANAL_PAUTA: return "PAUTA" - if canal in CANAL_WEB: return "WEB" - return "OTROS" - - # PASO 1: DEDUP por (sede, prog, telefono) -> quedarse con la fila mas antigua. - # Se guarda la fecha, si tiene asesor, y el CANAL de esa fila ganadora. - # (Asi el canal de PAUTA/OTROS se decide DESPUES de deduplicar, como pide el usuario.) - ganador = {} # (sede, prog, tel) -> {"f":fecha, "asesor":bool, "canal":canal} - tels = set() - tels_canal = {} # telefono -> canal de su fila ganadora GLOBAL (para matriculas) - gan_global = {} # telefono -> fecha ganadora global (para decidir canal de matriculas) - origen = {} - for r in _cartera_rows_cache(): - tel = str(r.get("telefono") or "").strip() - if not tel: - continue - tels.add(tel) - sede = " ".join(str(r.get("sede") or "").upper().split()) - prog = " ".join(str(r.get("programa") or "").upper().split()) - canal = " ".join(str(r.get("canal") or "").upper().split()) - f = L._to_date(r.get("fecha_creada")) - if str(r.get("es_origen") or "").upper() == "SI" and f is not None: - origen[tel] = f - if f is None: - continue - con_asesor = bool(str(r.get("asesor") or "").strip()) - # ganador por sede+prog+tel (para la tabla) - k = (sede, prog, tel) - g = ganador.get(k) - if g is None or f < g["f"]: - ganador[k] = {"f": f, "asesor": con_asesor, "canal": canal} - # ganador global por tel (para clasificar matriculas por canal) - if tel not in gan_global or f < gan_global[tel]: - gan_global[tel] = f - tels_canal[tel] = canal - - # PASO 2: armar indices con la fila ganadora ya deduplicada - idx_all = defaultdict(dict); idx_asig = defaultdict(dict) - # por clase (PAUTA/WEB/OTROS): {clase: {"all":..,"asig":..}} - CLASES = ("PAUTA", "WEB", "OTROS") - idx_cl = {cl: {"all": defaultdict(dict), "asig": defaultdict(dict)} for cl in CLASES} - tels_cl = {cl: set() for cl in CLASES} - for (sede, prog, tel), g in ganador.items(): - f = g["f"]; cl = _clase(g["canal"]) - idx_all[(sede, prog)][tel] = f - if g["asesor"]: idx_asig[(sede, prog)][tel] = f - idx_cl[cl]["all"][(sede, prog)][tel] = f - if g["asesor"]: idx_cl[cl]["asig"][(sede, prog)][tel] = f - # telefonos por clase (segun ganador GLOBAL) para matriculas - for tel, canal in tels_canal.items(): - tels_cl[_clase(canal)].add(tel) - - out = {"all": idx_all, "asig": idx_asig, "tels": tels, "origen": origen} - for cl in CLASES: - out[f"all_{cl.lower()}"] = idx_cl[cl]["all"] - out[f"asig_{cl.lower()}"] = idx_cl[cl]["asig"] - out[f"tels_{cl.lower()}"] = tels_cl[cl] - return out - return cache_get_or_set("cartera_idx", ("GLOBAL",), _load) - - -# ── Respuesta del dashboard de Leads (con filtros) ────────────── -def leads_dashboard(ano="TODOS", mes="TODOS", dia="TODOS", programa="TODOS", sede="TODOS"): - def _load(): - leads = _leads_crudos() - cursos = _cursos_crudos() - mats = _matriculas_crudas() - - # Filtro por PROGRAMA (4 grupos: TEAC / TERC / SEMINARIOS / OTROS). - # Recalcula toda la pantalla filtrando las listas base ANTES de calcular. - # - leads: grupo por 'cargo' del código de campaña - # - cursos y matrículas: grupo por dsc_programa - if programa not in ("TODOS", None): - g = str(programa).upper() - leads = [l for l in leads if L.grupo_programa_lead(l.get("cargo")) == g] - cursos = [c for c in cursos if L.grupo_programa_curso(c.get("dsc_programa")) == g] - mats = [m for m in mats if L.grupo_programa_curso(m.get("dsc_programa")) == g] - - # Filtro por SEDE (recalcula toda la pantalla). Se filtran las listas base - # ANTES de calcular, para no tocar las funciones de cálculo existentes. - # - leads: sede POR CÓDIGO de campaña (NO sede_act; coincide con conteo real) - # - cursos y matrículas: sede por clasificar_sede(dsc_programa) - if sede not in ("TODOS", None): - s = str(sede).upper() - sede_cod = L.sede_por_codigo_map() - leads = [l for l in leads - if sede_cod.get(str(l.get("codigo") or "").strip()) == s] - cursos = [c for c in cursos if L.clasificar_sede(c.get("dsc_programa")) == s] - mats = [m for m in mats if L.clasificar_sede(m.get("dsc_programa")) == s] - - kpis = L.kpis_leads(leads, cursos, mats, ano, mes, dia) - tabla = L.tabla_estado_objecion(leads, ano, mes, dia) - por_dia = L.matriculas_por_dia(mats, cursos, ano, mes, dia) - leads_dia = L.leads_por_dia(leads, ano, mes, dia) - pauta = L.tabla_pauta(leads, mats, ano, mes, dia, - _importe_por_pauta_periodo(ano, mes, dia), - _resultados_por_pauta_periodo(ano, mes, dia), - _campanias_sede_cargo()) - ci = _cartera_idx() - cartera_canal = { - "PAUTA": {"all": ci.get("all_pauta"), "asig": ci.get("asig_pauta"), "tels": ci.get("tels_pauta")}, - "WEB": {"all": ci.get("all_web"), "asig": ci.get("asig_web"), "tels": ci.get("tels_web")}, - "OTROS": {"all": ci.get("all_otros"), "asig": ci.get("asig_otros"), "tels": ci.get("tels_otros")}, - } - matriz = L.matriz_cursos(cursos, leads, ano, mes, dia, _pauta_cruda(), - _campanias_map(), ci.get("all"), ci.get("asig"), - _mat_por_indice(), ci.get("tels"), ci.get("origen"), - _importe_por_pauta(), - _importe_por_pauta_periodo(ano, mes, dia), - cartera_canal, _conjunto_pauta(), _pautas_de_indice()) - return {"kpis": kpis, "estado_objecion": tabla, "matriculas_por_dia": por_dia, - "leads_por_dia": leads_dia, "tabla_pauta": pauta, "matriz_cursos": matriz} - - return cache_get_or_set("leads_dash", (ano, mes, dia, programa, sede), _load) - - -def _asesores(): - """{'map': {alias_norm: correcto}, 'lista': [los 8 vendedores]}.""" - return cache_get_or_set("asesores", ("GLOBAL",), lambda: get_dm().traer_asesores()) - - -def _norm_asesor(nombre, mapa): - """Normaliza un nombre de asesor a su 'correcto' via el diccionario.""" - k = " ".join(str(nombre or "").upper().split()) - return mapa.get(k) # None si no es uno de los vendedores - - -def _norm_tel_pe(v): - """Normaliza telefono igual que la cartera: quita simbolos y el '51' inicial - de celulares peruanos (rango 51900000000-51999999999). Asi cruzan con cartera_junta.""" - s = str(v or "") - for x in ("+51", "+", " ", "-", "(", ")"): - s = s.replace(x, "") - s = s.strip() - if s.isdigit() and 51900000000 <= int(s) <= 51999999999: - s = s[2:] - return s - - -def tiempo_respuesta_dashboard(ano="TODOS", mes="TODOS", dia="TODOS"): - """Tiempo de respuesta LABORAL (minutos) del asesor tras la asignacion. - - Turno detectado por dia/asesor segun donde hay MAS actividad: - tarde (13-18) -> Turno 1 (09-18, refrigerio 13-14 excluido). - noche (18-22) -> Turno 2 (09-13 + 18-22, sin refrigerio). - sabado: manana(09-13) o tarde(14-18), 4h, donde haya mas actividad. - sin actividad ese dia -> no trabajo (se salta). - - El tiempo cuenta SOLO minutos dentro del turno; si la asignacion cae fuera, - el reloj arranca al inicio del siguiente bloque laboral (saltando dias sin - actividad). Leads asignados en refrigerio (13-14) de turno1 se excluyen. - - Serie dia a dia por FECHA DE ASIGNACION: promedio de minutos de los leads - asignados ese dia (solo respondidos). Filtro ano/mes/dia por fecha asignacion. - - No respondidos -> se marcan aparte, NO entran en el promedio.""" - from datetime import datetime, timedelta, time as _time - def _load(): - from collections import defaultdict - ase = _asesores(); amap = ase["map"]; lista = ase["lista"] - - # ── 1) Detectar turno por (asesor_norm, fecha) segun actividad ── - # Mapa user_id -> nombre normalizado (de asignacion_respuesta). - uid2vend = {} - for r in _asignacion_respuesta_crudos(): - uid = r.get("user_id") - v = _norm_asesor(r.get("user_name"), amap) - if uid is not None and v: - uid2vend[uid] = v - - # Contar actividad por (vend, fecha, franja): tarde=13-18, noche=18-22, - # sab_manana=9-13, sab_tarde=14-18. - act = defaultdict(lambda: defaultdict(int)) # (vend,fecha) -> franja -> conteo - for a in _actividad_asesores_crudos(): - uid = a.get("user_id"); ts = a.get("created_at") - if uid not in uid2vend or not isinstance(ts, datetime): - continue - v = uid2vend[uid]; d = ts.date(); h = ts.hour + ts.minute / 60.0 - key = (v, d) - if d.weekday() == 6: # domingo: no trabaja - continue - if d.weekday() == 5: # sabado - if 9 <= h < 13: act[key]["sab_manana"] += 1 - elif 14 <= h < 18: act[key]["sab_tarde"] += 1 - else: # lun-vie - if 13 <= h < 18: act[key]["tarde"] += 1 - elif 18 <= h < 22: act[key]["noche"] += 1 - - def _turno_dia(v, d): - """Devuelve lista de bloques [(h_ini,h_fin), ...] del turno de ese dia, - o None si no trabajo. Refrigerio de turno1 (13-14) NO se incluye.""" - if d.weekday() == 6: - return None - fr = act.get((v, d)) - if not fr: - return None # sin actividad -> no trabajo - if d.weekday() == 5: # sabado (4h) - m = fr.get("sab_manana", 0); t = fr.get("sab_tarde", 0) - if m == 0 and t == 0: - return None - return [(9, 13)] if m >= t else [(14, 18)] - # lun-vie: comparar tarde vs noche - t = fr.get("tarde", 0); n = fr.get("noche", 0) - if t == 0 and n == 0: - return None - if n > t: - return [(9, 13), (18, 22)] # Turno 2 - return [(9, 13), (14, 18)] # Turno 1 (refrigerio 13-14 fuera) - - def _dt(d, hh): - return datetime(d.year, d.month, d.day) + timedelta(hours=hh) - - def _en_refrigerio_t1(v, ts): - """True si ts cae 13-15 y ese dia el asesor es turno 1 (lun-vie). - Estos leads NO se excluyen: cuentan como respondidos, pero su tiempo - (diferencia directa T2-T1) se reduce 45 min si supera 45.""" - d = ts.date() - if d.weekday() >= 5: - return False - fr = act.get((v, d)) - if not fr: - return False - t = fr.get("tarde", 0); n = fr.get("noche", 0) - es_t1 = not (n > t) and (t > 0 or n > 0) - h = ts.hour + ts.minute / 60.0 - return es_t1 and (13 <= h < 15) - - def _minutos_laborales(v, t1, t2): - """Minutos de turno entre t1 (asignacion) y t2 (respuesta), saltando - huecos y dias sin actividad. Devuelve None si no se puede (raro).""" - if not isinstance(t1, datetime) or not isinstance(t2, datetime) or t2 <= t1: - return 0 - total = 0.0 - cur = t1 - saltos = 0 - while cur < t2 and saltos < 60: # tope 60 dias por seguridad - d = cur.date() - bloques = _turno_dia(v, d) - if not bloques: - # dia sin trabajo -> saltar al dia siguiente 00:00 - cur = _dt(d, 24); saltos += 1; continue - avanzo = False - for (hi, hf) in bloques: - ini = _dt(d, hi); fin = _dt(d, hf) - if t2 <= ini: # la respuesta es antes de este bloque - break - if cur >= fin: # ya paso este bloque - continue - a = max(cur, ini) - b = min(t2, fin) - if b > a: - total += (b - a).total_seconds() / 60.0 - cur = fin # avanzar al fin del bloque - avanzo = True - if cur >= t2: - break - # pasar al dia siguiente - if cur.date() == d: - cur = _dt(d, 24); saltos += 1 - return round(total) - - # ── 2) Por lead: minutos laborales, agrupado por FECHA DE ASIGNACION ── - por_dia_sum = defaultdict(float) # (vend,dia) -> suma minutos - por_dia_cnt = defaultdict(int) # (vend,dia) -> nº respondidos - no_resp = defaultdict(int) # (vend,dia) -> nº sin responder - for r in _asignacion_respuesta_crudos(): - v = _norm_asesor(r.get("user_name"), amap) - if not v: - continue - t1 = r.get("created_at") - if not isinstance(t1, datetime): - continue - if not L._en_periodo(t1.date(), ano, mes, dia): - continue # filtro por fecha de asignacion - t2 = r.get("respuesta_fecha") - if not isinstance(t2, datetime): - no_resp[(v, t1.day)] += 1 # no respondio - continue - if _en_refrigerio_t1(v, t1): - # asignado 13-15 en turno1: tiempo = diferencia DIRECTA (T2-T1), - # y si supera 45 min se le restan 45 (nunca negativo). - dif = (t2 - t1).total_seconds() / 60.0 - mins = round(dif - 45) if dif > 45 else round(dif) - if mins < 0: - mins = 0 - else: - mins = _minutos_laborales(v, t1, t2) - por_dia_sum[(v, t1.day)] += mins - por_dia_cnt[(v, t1.day)] += 1 - - # ── 2b) Igual pero agrupado por FECHA DE RESPUESTA (dia en que respondio). - # Solo leads respondidos. Filtro por fecha de respuesta (t2). - # Si el tiempo laboral supera 960 min (2 dias laborales) -> NO entra en - # el promedio; se cuenta aparte como "respuesta tardia". - LIMITE_TARDIA = 960 # 2 dias laborales (8h/dia) - pr_sum = defaultdict(float) # (vend,dia_respuesta) -> suma minutos (validos) - pr_cnt = defaultdict(int) # (vend,dia_respuesta) -> nº validos (<=960) - pr_tardia = defaultdict(int) # (vend,dia_respuesta) -> nº tardios (>960) - for r in _asignacion_respuesta_crudos(): - v = _norm_asesor(r.get("user_name"), amap) - if not v: - continue - t1 = r.get("created_at"); t2 = r.get("respuesta_fecha") - if not isinstance(t1, datetime) or not isinstance(t2, datetime): - continue # sin respuesta -> no entra en este grafico - if not L._en_periodo(t2.date(), ano, mes, dia): - continue # filtro por FECHA DE RESPUESTA - if _en_refrigerio_t1(v, t1): - dif = (t2 - t1).total_seconds() / 60.0 - mins = round(dif - 45) if dif > 45 else round(dif) - if mins < 0: - mins = 0 - else: - mins = _minutos_laborales(v, t1, t2) - if mins > LIMITE_TARDIA: - pr_tardia[(v, t2.day)] += 1 # respuesta tardia -> fuera del promedio - continue - pr_sum[(v, t2.day)] += mins - pr_cnt[(v, t2.day)] += 1 - - # ── 3) Serie dia a dia (promedio min) por vendedor y total ── - def _serie(vends): - out = [] - for dnum in range(1, 32): - s = sum(por_dia_sum.get((v, dnum), 0) for v in vends) - c = sum(por_dia_cnt.get((v, dnum), 0) for v in vends) - nr = sum(no_resp.get((v, dnum), 0) for v in vends) - out.append({"dia": dnum, - "promedio_min": round(s / c) if c else 0, - "respondidos": c, "no_respondidos": nr}) - return out - - def _serie_resp(vends): - out = [] - for dnum in range(1, 32): - s = sum(pr_sum.get((v, dnum), 0) for v in vends) - c = sum(pr_cnt.get((v, dnum), 0) for v in vends) - td = sum(pr_tardia.get((v, dnum), 0) for v in vends) - out.append({"dia": dnum, - "promedio_min": round(s / c) if c else 0, - "respondidos": c, "tardios": td}) - return out - - serie_por_vend = {v: _serie([v]) for v in lista} - serie_total = _serie(lista) - serie_resp_por_vend = {v: _serie_resp([v]) for v in lista} - serie_resp_total = _serie_resp(lista) - return {"serie_por_vend": serie_por_vend, "serie_total": serie_total, - "serie_resp_por_vend": serie_resp_por_vend, - "serie_resp_total": serie_resp_total, - "vendedores": lista} - return cache_get_or_set("tiempo_resp", (ano, mes, dia), _load) - - -def vendedores_dashboard(ano="TODOS", mes="TODOS", dia="TODOS"): - """Por vendedor (los 8 de alias_normalizacion). Filtro Año/Mes/Día: - - Cartera (total/copito/otros): filtra por fecha_creada de cartera_junta. - - Matriculas: se cruzan por TELEFONO con los leads del mes (es_origen=SI, - fecha_creada en el periodo); la matricula cuenta en CUALQUIER fecha. - - Leads Procesados/Contactados: filtran por fecha del lead (mensaje campaña).""" - def _load(): - from collections import defaultdict - ase = _asesores() - amap = ase["map"]; lista = ase["lista"] - CANAL_COPITO = {"COPITO"} - - # 1) CARTERA por vendedor. Fila ORIGEN de cada telefono (es_origen=SI) cuya - # fecha_creada cae en el periodo filtrado. Cada telefono cuenta para UN solo asesor. - # Ademas guardamos {vendedor: set(telefonos del periodo)} para cruzar matriculas. - cart_total = defaultdict(int); cart_copito = defaultdict(int); cart_otros = defaultdict(int) - tels_por_vend = defaultdict(set) # vendedor -> telefonos (es_origen=SI del periodo) - cop_tels = defaultdict(set) # vendedor -> telefonos ya contados como Copito (sin repetir) - for r in _cartera_rows_cache(): - if str(r.get("es_origen") or "").strip().upper() != "SI": - continue # solo la fila origen de cada telefono - f = L._to_date(r.get("fecha_creada")) - if not L._en_periodo(f, ano, mes, dia): - continue # filtro por fecha_creada de la cartera - v = _norm_asesor(r.get("asesor"), amap) - if not v: # el asesor del origen no es uno de los 8 - continue - tel = str(r.get("telefono") or "").strip() - canal = " ".join(str(r.get("canal") or "").upper().split()) - ob = " ".join(str(r.get("origen_base") or "").upper().split()) - cart_total[v] += 1 - # Copito = union (origen_base=POSTGRE) OR (canal=COPITO), sin repetir telefono - es_copito = (ob == "POSTGRE") or (canal in CANAL_COPITO) - if es_copito: - if tel and tel in cop_tels[v]: - pass # ese telefono ya se conto como Copito -> no repetir - else: - cart_copito[v] += 1 - if tel: - cop_tels[v].add(tel) - else: - cart_otros[v] += 1 - if tel: - tels_por_vend[v].add(tel) - - # 2) MATRICULAS por vendedor. Se CRUZAN por TELEFONO con los leads del periodo - # (tels_por_vend). La matricula cuenta en CUALQUIER fecha (no se filtra por - # fch_matricula). Telefono de matricula: dsc_telefono_1, o _2 si el 1 esta vacio. - # Un telefono puede tener varias matriculas -> se cuentan todas (no unico). - # MATRICULAS: por dsc_vendedor + fch_matricula en el periodo (NO se cruza - # con la cartera por telefono). Filtro Año/Mes/Día sobre fch_matricula. - mat_total = defaultdict(int); mat_curso = defaultdict(int); mat_retir = defaultdict(int) - for m in _matriculas_crudas(): - vend = _norm_asesor(m.get("dsc_vendedor"), amap) - if not vend: - continue - estado = str(m.get("estado_matricula") or "").strip().upper() - if estado == "ANU": - continue # anuladas no cuentan - fm = L._to_date(m.get("fch_matricula")) - if not L._en_periodo(fm, ano, mes, dia): - continue # filtro por fch_matricula - mat_total[vend] += 1 - if estado in ("ALU", "PRE"): - mat_curso[vend] += 1 - elif estado == "RET": - mat_retir[vend] += 1 - - # 3) LEADS Procesados/Contactados por vendedor (leads de Chatwoot). Filtro por - # fecha del lead (mensaje de campaña). Procesados = lead unico con asesor; - # Contactados = de esos, ultima_etiqueta != "NO TRABAJADO". - lead_proc = defaultdict(int); lead_cont = defaultdict(int) - etiq = defaultdict(int) # clave: (vendedor, ultima_etiqueta) -> nº leads procesados - for l in _leads_crudos(): - if not l.get("es_unico"): - continue - if not L._en_periodo(l.get("fecha"), ano, mes, dia): - continue # filtro por fecha del lead - v = _norm_asesor(l.get("asesor"), amap) - if not v: - continue - lead_proc[v] += 1 # tiene asesor de los 8 => procesado - ult = l.get("ultima") or "NO TRABAJADO" - etiq[(v, ult)] += 1 # para la matriz Estado/Objeción - # NOTA: "Contactados" ya NO se cuenta aqui; ahora sale de los ASIGNADOS - # (bloque 3b), usando su ultima etiqueta. - - # 3b) LEADS ASIGNADOS por vendedor (mensajes "Asignado a..." de Chatwoot). - # Se cuenta por telefono (1 asignacion por telefono, la mas reciente). - # Filtro por fecha de asignacion (created_at). Asesor via user_name normalizado. - # CONTACTADOS = de los asignados, cuya ULTIMA ETIQUETA != "NO TRABAJADO". - lead_asig = defaultdict(int) - etiq_asig = defaultdict(int) # (vendedor, ultima_etiqueta) -> nº asignados (para matriz) - for a in _leads_asignados_crudos(): - f = L._to_date(a.get("created_at")) - if not L._en_periodo(f, ano, mes, dia): - continue # filtro por fecha de asignacion - v = _norm_asesor(a.get("user_name"), amap) - if not v: - continue # el asesor asignado no es uno de los 8 - lead_asig[v] += 1 - ult = L.ultima_etiqueta(a.get("etiquetas")) or "NO TRABAJADO" - etiq_asig[(v, ult)] += 1 # para la matriz Estado/Objeción (asignados) - if ult != "NO TRABAJADO": - lead_cont[v] += 1 # contactado = asignado con ultima etiqueta trabajada - - # SERIE DIARIA: Leads Asignados (por fecha de asignacion) y Matriculas (por fch_matricula), - # por vendedor y por dia del mes. clave: (vendedor, dia) -> conteo. - serie_proc = defaultdict(int) # (vendedor, dia) -> leads asignados - serie_mat = defaultdict(int) # (vendedor, dia) -> matriculas - for a in _leads_asignados_crudos(): - f = L._to_date(a.get("created_at")) - if not L._en_periodo(f, ano, mes, dia): - continue - v = _norm_asesor(a.get("user_name"), amap) - if v and f: - serie_proc[(v, f.day)] += 1 - for m in _matriculas_crudas(): - vend = _norm_asesor(m.get("dsc_vendedor"), amap) - if not vend: - continue - estado = str(m.get("estado_matricula") or "").strip().upper() - if estado == "ANU": - continue - fm = L._to_date(m.get("fch_matricula")) - if fm and L._en_periodo(fm, ano, mes, dia): - serie_mat[(vend, fm.day)] += 1 - - def _serie(vendedores): - """Lista 1..31 con asignados y matriculas del conjunto de vendedores.""" - out = [] - for d in range(1, 32): - p = sum(serie_proc.get((v, d), 0) for v in vendedores) - mm = sum(serie_mat.get((v, d), 0) for v in vendedores) - out.append({"dia": d, "asignados": p, "matriculas": mm}) - return out - - serie_por_vend = {v: _serie([v]) for v in lista} - serie_total = _serie(lista) - - # Matriz Estado/Objeción (Ultima_Etiqueta) por vendedor y total. - # Ahora se basa en los LEADS ASIGNADOS (etiq_asig), no en los de campaña. - etiquetas_all = sorted({e for (_, e) in etiq_asig.keys()}, key=lambda x: x.lower()) - - def _matriz_etiq(vendedores): - out = [] - for e in etiquetas_all: - c = sum(etiq_asig.get((v, e), 0) for v in vendedores) - if c > 0: - out.append({"estado": e, "cantidad": c}) - out.sort(key=lambda x: -x["cantidad"]) # mayor a menor por cantidad - return out - - matriz_etiq_por_vend = {v: _matriz_etiq([v]) for v in lista} - matriz_etiq_total = _matriz_etiq(lista) - - # 4) MATRIZ por TIPO DE PROGRAMA (TEAC/TERC/SEMINARIOS/OTROS). - # Filtro por fch_matricula (periodo) y dsc_vendedor. Total y Retiradas (RET). - # Se guarda por (vendedor, grupo) para poder filtrar por vendedor en el front. - GRUPOS_PROG = ["TEAC", "TERC", "SEMINARIOS", "OTROS"] - prog_tot = defaultdict(int); prog_ret = defaultdict(int) # clave: (vendedor, grupo) - for m in _matriculas_crudas(): - vend = _norm_asesor(m.get("dsc_vendedor"), amap) - if not vend: - continue - estado = str(m.get("estado_matricula") or "").strip().upper() - if estado == "ANU": - continue - fm = L._to_date(m.get("fch_matricula")) - if not L._en_periodo(fm, ano, mes, dia): - continue # filtro por fch_matricula - grupo = L.grupo_programa_curso(m.get("dsc_programa")) - prog_tot[(vend, grupo)] += 1 - if estado == "RET": - prog_ret[(vend, grupo)] += 1 - - def _matriz_prog(vendedores): - """Suma total/retiradas por grupo para el conjunto de vendedores dado.""" - out = [] - for g in GRUPOS_PROG: - t = sum(prog_tot.get((v, g), 0) for v in vendedores) - r = sum(prog_ret.get((v, g), 0) for v in vendedores) - out.append({"programa": g, "total": t, "retiradas": r, - "pct_retiradas": round(r / t * 100, 1) if t else 0}) - return out - - # matriz por programa para CADA vendedor y para el TOTAL (todos) - matriz_prog_por_vend = {v: _matriz_prog([v]) for v in lista} - matriz_prog_total = _matriz_prog(lista) - - filas = [] - for v in lista: - proc = lead_proc.get(v, 0); cont = lead_cont.get(v, 0) - asig = lead_asig.get(v, 0) - filas.append({ - "vendedor": v, - "cartera_total": cart_total.get(v, 0), - "cartera_copito": cart_copito.get(v, 0), - "cartera_otros": cart_otros.get(v, 0), - "mat_total": mat_total.get(v, 0), - "mat_curso": mat_curso.get(v, 0), - "mat_retiradas": mat_retir.get(v, 0), - "pct_retiradas": round(mat_retir.get(v, 0) / mat_total.get(v, 0) * 100, 1) - if mat_total.get(v, 0) else 0, - "leads_procesados": proc, - "leads_contactados": cont, - # % Contactados = contactados / ASIGNADOS (ambos de la misma fuente) - "pct_contactados": round(cont / asig * 100, 1) if asig else 0, - "leads_asignados": asig, - }) - tot = {"cartera_total": sum(f["cartera_total"] for f in filas), - "cartera_copito": sum(f["cartera_copito"] for f in filas), - "cartera_otros": sum(f["cartera_otros"] for f in filas), - "mat_total": sum(f["mat_total"] for f in filas), - "mat_curso": sum(f["mat_curso"] for f in filas), - "mat_retiradas": sum(f["mat_retiradas"] for f in filas), - "leads_procesados": sum(f["leads_procesados"] for f in filas), - "leads_contactados": sum(f["leads_contactados"] for f in filas), - "leads_asignados": sum(f["leads_asignados"] for f in filas)} - tot["pct_retiradas"] = (round(tot["mat_retiradas"] / tot["mat_total"] * 100, 1) - if tot["mat_total"] else 0) - tot["pct_contactados"] = (round(tot["leads_contactados"] / tot["leads_asignados"] * 100, 1) - if tot["leads_asignados"] else 0) - # Tiempo de respuesta laboral (min) dia a dia por asesor (por fecha asignacion) - tr = tiempo_respuesta_dashboard(ano, mes, dia) - return {"filas": filas, "total": tot, "vendedores": lista, - "matriz_prog": matriz_prog_por_vend, "matriz_prog_total": matriz_prog_total, - "matriz_etiq": matriz_etiq_por_vend, "matriz_etiq_total": matriz_etiq_total, - "serie_dia": serie_por_vend, "serie_dia_total": serie_total, - "tiempo_resp": tr.get("serie_por_vend", {}), - "tiempo_resp_total": tr.get("serie_total", []), - "tiempo_resp_r": tr.get("serie_resp_por_vend", {}), - "tiempo_resp_r_total": tr.get("serie_resp_total", [])} - return cache_get_or_set("vendedores_dash", (ano, mes, dia), _load) - - -def _conjunto_sede_prog(): - """{conjunto_UPPER: {sede, programa}} asignaciones manuales (tabla Supabase).""" - return cache_get_or_set("conjunto_sede_prog", ("GLOBAL",), - lambda: get_dm().traer_conjunto_sede_programa()) - - -def conjuntos_sin_sede(): - """Lista los conjuntos del Meta CSV que NO estan ligados a ninguna sede - (ni por pauta->campania, ni por asignacion manual). Para el apartado de - asignacion. Sin filtro de mes. Incluye la sede/programa YA asignados (si tiene). - Devuelve [{conjunto, importe, resultados, sede, programa}].""" - def _load(): - SEDES = {"LIMA", "PIURA", "AREQUIPA", "TRUJILLO"} - conj_pauta = _conjunto_pauta() - camp = _campanias_sede_cargo() - manual = _conjunto_sede_prog() - # conjuntos que SÍ tienen sede via pauta -> campania - con_sede = set() - for pauta, conjuntos in conj_pauta.items(): - sp = camp.get(str(pauta).strip()) - sede = " ".join(str((sp or {}).get("sede") or "").upper().split()) - if sp and sede in SEDES: - for co in conjuntos: - con_sede.add(" ".join(str(co).split()).upper()) - agg = {} - for f in _meta_filas(): - co = " ".join(str(f.get("conjunto")).split()) - if not co: - continue - k = co.upper() - if k in con_sede: - continue # ya tiene sede por campania -> no aparece aqui - d = agg.setdefault(k, {"conjunto": co, "importe": 0.0, "resultados": 0, - "sede": manual.get(k, {}).get("sede", ""), - "programa": manual.get(k, {}).get("programa", "")}) - d["importe"] += float(f.get("importe") or 0.0) - d["resultados"] += int(float(f.get("resultados") or 0.0)) - out = sorted(agg.values(), key=lambda x: -x["importe"]) - for d in out: - d["importe"] = round(d["importe"], 2) - return out - return cache_get_or_set("conjuntos_sin_sede", ("GLOBAL",), _load) - - -def guardar_conjunto_sede(cambios): - """Guarda asignaciones conjunto->sede/programa e invalida cachés dependientes.""" - r = get_dm().guardar_conjunto_sede_programa(cambios) - for pref in ("conjunto_sede_prog", "conjuntos_sin_sede", "roas_dash"): - cache_invalidate(prefix=pref) - return r - - -def borrar_conjunto_sede(conjunto): - """Borra la asignacion de un conjunto e invalida cachés dependientes.""" - r = get_dm().borrar_conjunto_sede_programa(conjunto) - for pref in ("conjunto_sede_prog", "conjuntos_sin_sede", "roas_dash"): - cache_invalidate(prefix=pref) - return r - - -def roas_dashboard(ano="TODOS", mes="TODOS", dia="TODOS"): - """Matriz ROAS por SEDE (LIMA, PIURA, AREQUIPA, TRUJILLO): Importe Gastado y - Resultados del Google Sheet (Meta Ads), filtrado por Año/Mes (Inicio del informe). - Cadena: conjunto -> pauta (conjunto_pauta) -> sede (campanias). Conjuntos sin - pauta/sede se omiten por ahora.""" - def _load(): - SEDES = ["LIMA", "PIURA", "AREQUIPA", "TRUJILLO", "OTROS"] # OTROS = 5ta fila (manual) - CAMP_SEDES = {"LIMA", "PIURA", "AREQUIPA", "TRUJILLO"} # sedes validas por campania - conj_pauta = _conjunto_pauta() # {pauta: [conjunto,...]} - camp = _campanias_sede_cargo() # {pauta: {sede, cargo}} - - PROGS_OK = {"TEAC", "TERC", "SEMINARIOS", "OTROS"} - - # conjunto (normalizado) -> (sede, programa) via su pauta -> campania - conj_sede = {} # conjunto -> sede - conj_prog = {} # conjunto -> programa (grupo) - for pauta, conjuntos in conj_pauta.items(): - sp = camp.get(str(pauta).strip()) - if not sp: - continue - sede = " ".join(str(sp.get("sede") or "").upper().split()) - if sede not in CAMP_SEDES: - continue - prog = L.grupo_programa_lead(sp.get("cargo")) # TEAC/TERC/SEMINARIOS - for co in conjuntos: - k = " ".join(str(co).split()).upper() - conj_sede[k] = sede - conj_prog[k] = prog - - # + asignaciones MANUALES (sede + programa). Prioridad sobre la campania. - for k, v in _conjunto_sede_prog().items(): - sede = v.get("sede") - if sede in SEDES: - conj_sede[k] = sede - prog = str(v.get("programa") or "").strip().upper() - if prog: # acepta CUALQUIER programa asignado manualmente (no solo los fijos) - conj_prog[k] = prog - - # sumar importe y resultados por sede y por (sede, programa), filtrando por Año/Mes - imp = {s: 0.0 for s in SEDES} - res = {s: 0 for s in SEDES} - imp_pg = {} # (sede, prog) -> importe - res_pg = {} # (sede, prog) -> resultados - # conjuntos por (sede, prog): nombre_conjunto -> {importe, resultados} - conj_det = {} # (sede, prog) -> { conjunto_original: {importe, resultados} } - sin_filtro = (ano in ("TODOS", None) and mes in ("TODOS", None) and dia in ("TODOS", None)) - for f in _meta_filas(): - if not sin_filtro and not L._en_periodo(L._to_date(f.get("inicio")), ano, mes, dia): - continue - co = " ".join(str(f.get("conjunto")).split()) - k = co.upper() - sede = conj_sede.get(k) - if not sede: - continue # conjunto sin pauta/sede -> se omite - i = float(f.get("importe") or 0.0) - rr = int(float(f.get("resultados") or 0.0)) - imp[sede] += i - res[sede] += rr - prog = conj_prog.get(k, "SIN PROGRAMA") - imp_pg[(sede, prog)] = imp_pg.get((sede, prog), 0.0) + i - res_pg[(sede, prog)] = res_pg.get((sede, prog), 0) + rr - dd = conj_det.setdefault((sede, prog), {}) - d = dd.setdefault(co, {"conjunto": co, "importe": 0.0, "resultados": 0}) - d["importe"] += i - d["resultados"] += rr - - ORDEN_PROG = ["TEAC", "TERC", "SEMINARIOS", "OTROS", "SIN PROGRAMA"] - - def _conjuntos(sede, prog): - """Lista de conjuntos de anuncio de un (sede, programa), ordenada por importe.""" - det = list(conj_det.get((sede, prog), {}).values()) - det.sort(key=lambda x: -x["importe"]) - for d in det: - d["importe"] = round(d["importe"], 2) - return det - - def _sub(sede): - """Desglose por programa de una sede (solo los que tienen algo). - Primero los fijos en su orden, luego CUALQUIER otro programa asignado - (ej. BRANDING), y al final SIN PROGRAMA.""" - progs_de_sede = [p for (s, p) in imp_pg.keys() if s == sede] - extras = sorted(set(progs_de_sede) - set(ORDEN_PROG)) - orden = [p for p in ORDEN_PROG if p != "SIN PROGRAMA"] + extras + ["SIN PROGRAMA"] - out = [] - for p in orden: - i = imp_pg.get((sede, p), 0.0); r = res_pg.get((sede, p), 0) - if i or r: - out.append({"programa": p, "importe": round(i, 2), "resultados": r, - "conjuntos": _conjuntos(sede, p)}) - return out - - # Las 4 sedes reales siempre se muestran. OTROS solo si tiene algo (>0). - filas = [] - for s in SEDES: - if s == "OTROS" and imp[s] == 0 and res[s] == 0: - continue - filas.append({"sede": s, "importe": round(imp[s], 2), "resultados": res[s], - "programas": _sub(s)}) - tot = {"importe": round(sum(imp.values()), 2), "resultados": sum(res.values())} - return {"filas": filas, "total": tot} - return cache_get_or_set("roas_dash", (ano, mes, dia), _load) - - -def otros_general(ano="TODOS", mes="TODOS", dia="TODOS"): - """Solo las 4 matrices de la pagina 'Otros General' (sin KPIs/graficos/tabla_pauta). - Mas liviano que leads_dashboard -> filtrar por mes es mas rapido.""" +# ── OCUPABILIDAD ─────────────────────────────────────────────────────────── +def ocupabilidad(ano, mes, sede="TODOS", programa="TODOS"): def _load(): + dm = get_dm() + analizador = AnalizadorCursos(dm) + datos = analizador.obtener_datos_procesados(str(ano), str(mes), sede, programa) + filas = analizador.formatear_datos_para_tabla(datos) return { - "matriz_always": matriz_always(ano, mes, dia, "TODOS", "TODOS"), - "matriz_webform": matriz_web_formulario(ano, mes, dia, "TODOS", "TODOS"), - "matriz_asignados": matriz_asignados(ano, mes, dia), - "matriz_plantillas": matriz_plantillas(ano, mes, dia), + "datos": _serializar_dicts(datos), + "filas": _serializar_filas(filas), } - return cache_get_or_set("otros_general", (ano, mes, dia), _load) + return cache_get_or_set("ocupabilidad", (ano, mes, sede, programa), _load) -def conjuntos_sin_pauta(): - """Lista de conjuntos de anuncios sin pauta (para el desplegable del pop-up).""" - return get_dm().traer_conjuntos_sin_pauta() - - -def programas_ocultos(): - """Programas con contar=NO en basebi_programacion (ocultos de la matriz). - Cada item: {num_indice, dsc_det_programa, fch_inicio, pauta}.""" - pm = _pauta_cruda() - ocultos_ni = {ni for ni, info in pm.items() if str(info.get("contar") or "").upper() == "NO"} - prog_de_ni = {} - fch_de_ni = {} - for c in _cursos_crudos(): - ni = _norm_ni(c.get("num_indice")) - prog_de_ni[ni] = str(c.get("dsc_det_programa") or c.get("dsc_programa") or "").strip() - f = L._to_date(c.get("fch_inicio")) - fch_de_ni[ni] = f.strftime("%d/%m/%Y") if f else "" - filas = [] - for ni in ocultos_ni: - filas.append({"num_indice": ni, - "dsc_det_programa": prog_de_ni.get(ni, "(sin nombre)"), - "fch_inicio": fch_de_ni.get(ni, ""), - "pauta": (pm.get(ni) or {}).get("pauta") or ""}) - filas.sort(key=lambda x: x["dsc_det_programa"]) - return {"filas": filas} - - -def encender_programas(num_indices): - """Pone contar=SI a los num_indice dados en basebi_programacion (los reactiva).""" - from cache_manager import cache_invalidate - dm = get_dm() - for ni in num_indices: - dm.guardar_pauta_basebi(ni, "", "SI") # pauta vacia -> no toca pauta, solo contar - for pref in ("pauta_raw", "leads_dash", "otros_general", "leads_filtros"): - cache_invalidate(pref) - return {"encendidos": len(num_indices)} - - -def programas_disponibles(): - """Lista de dsc_det_programa de cursos con fch_inicio >= 2026-01-01 (para el - desplegable de Programa en la Leyenda). Cada item: {num_indice, dsc_det_programa}.""" - from datetime import date - corte = date(2026, 1, 1) - vistos = {} - for c in _cursos_crudos(): - f = L._to_date(c.get("fch_inicio")) - if not f or f < corte: - continue - ni = _norm_ni(c.get("num_indice")) - nombre = str(c.get("dsc_det_programa") or c.get("dsc_programa") or "").strip() - if not nombre: - continue - finicio = f.strftime("%d/%m/%Y") - label = f"{nombre} · {finicio}" - vistos[ni] = {"num_indice": ni, "dsc_det_programa": nombre, - "fch_inicio": finicio, "label": label} - filas = sorted(vistos.values(), key=lambda x: x["label"]) - return {"programas": filas} - - -# ── LEYENDA (campanias de Supabase): listar / agregar / borrar ── -def campanias_listar(): - return get_dm().listar_campanias() - - -def campania_agregar(datos): - res = get_dm().agregar_campania(datos) - _invalidar_por_campanias() # la leyenda nueva se refleja de inmediato en todo el dashboard - return res - - -def campania_editar(cid, datos): - res = get_dm().editar_campania(cid, datos) - _invalidar_por_campanias() # el cambio se refleja de inmediato en todo el dashboard - return res - - -def campania_borrar(cid): - res = get_dm().borrar_campania(cid) - _invalidar_por_campanias() - return res - - -def leyenda_anuncios(): - """Tabla: todos los conjuntos del Sheet con su pauta (si tiene) y el programa - (dsc_det_programa) del num_indice que usa esa pauta. Cacheado (usa insumos ya - en memoria) para que abrir la Leyenda sea rapido.""" +def ocupabilidad_alumnos(num_indice): + """Alumnos de un curso (num_indice) para el popup Ver: nombre + estado (sin ANU).""" def _load(): - conj_pauta = _conjunto_pauta() # cacheado - pauta_de_conj = {} - for pa, cjs in conj_pauta.items(): - for c in cjs: - pauta_de_conj[" ".join(str(c).split())] = str(pa).strip() - # pauta -> [num_indices] usando TODAS las vinculaciones (basebi + programa_pautas) - ni_de_pauta = {} - for ni, pautas in _pautas_de_indice().items(): - for p in pautas: - ni_de_pauta.setdefault(str(p).strip(), []).append(str(ni).strip()) - prog_de_ni = {} - for c in _cursos_crudos(): # cacheado - prog_de_ni[_norm_ni(c.get("num_indice"))] = str(c.get("dsc_det_programa") or c.get("dsc_programa") or "").strip() - def _programa(pauta): - if not pauta: - return "" - nis = ni_de_pauta.get(str(pauta).strip(), []) - nombres = [prog_de_ni.get(n, "") for n in nis if prog_de_ni.get(n)] - return " | ".join(sorted(set(nombres))) - filas = [] - vistos = set() - for f in _meta_filas(): # cacheado (CSV de Meta) - co = " ".join(str(f.get("conjunto")).split()) - if not co or co in vistos: + dm = get_dm() + analizador = AnalizadorCursos(dm) + alumnos = analizador.curso_processor.obtener_alumnos_curso(num_indice) + return {"alumnos": alumnos} + return cache_get_or_set("ocup_alumnos", (str(num_indice),), _load) + + +# ── VENTAS ───────────────────────────────────────────────────────────────── +def ventas(ano, mes, sede="TODOS", programa="TODOS", con_overrides=False): + def _load(): + dm = get_dm() + # Los overrides de Supabase SOLO aplican en Comisiones (con_overrides=True). + # En Ventas se ignoran: la tabla muestra los datos reales del SQL. + if con_overrides: + dm._tc_override_mes = comisiones_tc_del_mes(ano, mes) # TC de Supabase o None + dm._fecha_canc_overrides = comisiones_overrides_fecha() # {mat: fecha_canc override} + dm._inv_neta_overrides = comisiones_overrides_inv_neta() # {mat: inv_neta override} + else: + dm._tc_override_mes = None + dm._fecha_canc_overrides = {} + dm._inv_neta_overrides = {} + logic = VentasLogic(dm) + datos = logic.obtener_datos_brutos_filtrado(str(ano), str(mes), sede, programa) \ + if hasattr(logic, "obtener_datos_brutos_filtrado") else logic.obtener_datos_brutos(str(ano), str(mes)) + datos = [d for d in datos if d.get('VENDEDOR', 'SIN VENDEDOR') != 'SIN VENDEDOR'] + + # PENDIENTES: recalcular desde el MISMO detalle del "Ver" (__TODOS__), para que + # la tabla principal y el popup Ver salgan SIEMPRE idénticos (misma fuente/regla). + try: + det = logic.obtener_detalle_vendedor("__TODOS__", str(ano), str(mes)) + pend_filas = det.get("Venta Pendientes", []) if isinstance(det, dict) else [] + pend_por_vend = {} + for f in pend_filas: + if not f or str(f[0]).strip().upper() == "TOTAL GENERAL": + continue + vend = str(f[0]).strip() + # INV NETA está en la posición [7] como "S/ x" + try: + monto = float(str(f[7]).replace("S/", "").replace(",", "").strip()) + except Exception: + monto = 0.0 + acc = pend_por_vend.setdefault(vend, {"monto": 0.0, "cant": 0}) + acc["monto"] += monto + acc["cant"] += 1 + # Sobrescribir PENDIENTES en cada registro de la tabla principal + for d in datos: + v = str(d.get("VENDEDOR", "")).strip() + acc = pend_por_vend.get(v, {"monto": 0.0, "cant": 0}) + d["PENDIENTES"] = round(acc["monto"], 2) + d["INSCRITOS_PENDIENTES"] = acc["cant"] + except Exception as e: + print(f"[ventas] no se pudo alinear PENDIENTES con el Ver: {e}") + + filas = logic.formatear_datos_para_tabla(datos) + return { + "filas": _serializar_filas(filas), + "datos": _serializar_dicts(datos), + } + return cache_get_or_set("ventas", (ano, mes, sede, programa, con_overrides), _load) + + +def _clasif_filtro_programa(dm, dscp): + """Misma clasificación de programa que ejecutar_consulta_ventas (SEMINARIOS/TEAC/TERC/OTROS).""" + up = str(dscp or "").upper() + fdata = dm.meta_data.get("clasificacion_filtro_programa", {}) + for cat in ["OTROS", "SEMINARIOS", "TEAC", "TERC"]: + for pat in fdata.get(cat, {}).get("patrones", []): + if pat.upper() in up: + return cat + return fdata.get("DEFAULT", "OTROS") if isinstance(fdata.get("DEFAULT"), str) else "OTROS" + + +def ventas_detalle(vendedor, ano, mes, tipo_lista, sede="TODOS", programa="TODOS"): + def _load(): + dm = get_dm() + dm._tc_override_mes = comisiones_tc_del_mes(ano, mes) + dm._fecha_canc_overrides = comisiones_overrides_fecha() + logic = VentasLogic(dm) + resultado = logic.obtener_detalle_vendedor(vendedor, str(ano), str(mes)) + filas = resultado.get(tipo_lista, []) if isinstance(resultado, dict) else [] + filas = _aplicar_overrides_comisiones(filas) + # Filtro por SEDE [14] y PROGRAMA (clasificado desde el nombre [16]), + # mismas reglas que la tabla principal. Omite la fila TOTAL GENERAL. + _sede = str(sede or "TODOS").upper() + _prog = str(programa or "TODOS").upper() + if _sede != "TODOS" or _prog != "TODOS": + out = [] + for f in filas: + if str(f[0]).strip().upper() == "TOTAL GENERAL": + continue # el TOTAL se recalcula en el frontend + if len(f) < 15: + out.append(f); continue + if _sede != "TODOS" and str(f[14]).strip().upper() != _sede: + continue + # Clasificar programa por el nombre de CLASIFICACIÓN [16] (prioriza dsc_programa); + # si no existe, usar el mostrado [8]. + _prog_nombre = f[16] if len(f) > 16 else f[8] + if _prog != "TODOS" and _clasif_filtro_programa(dm, _prog_nombre) != _prog: + continue + out.append(f) + filas = out + return {"filas": _serializar_filas(filas)} + return cache_get_or_set("ventas_det", (vendedor, ano, mes, tipo_lista, sede, programa), _load) + + +def comisiones_detalle_todos(ano, mes): + """Devuelve TODOS los matriculados (todos los años/meses) para el buscador. + Aplica overrides de Supabase. Cacheado globalmente (no depende del mes).""" + def _load(): + dm = get_dm() + logic = VentasLogic(dm) + filas = logic.buscar_todos_matriculados() + filas = _aplicar_overrides_comisiones(filas) + return {"filas": _serializar_filas(filas)} + return cache_get_or_set("comisiones_det_todos", ("GLOBAL",), _load) + + +def comisiones_overrides_fecha(): + """Devuelve dict {num_matricula: fecha_cancelacion1_override} para clasificación.""" + try: + sb = _sb() + res = sb.table("comisiones_overrides").select("num_matricula,fecha_cancelacion1").execute() + out = {} + for r in (res.data or []): + mat = str(r["num_matricula"]) + v = r.get("fecha_cancelacion1") + sv = "" if v is None else str(v).strip() + # Solo "__VACIO__" = fecha borrada a propósito → anula la del SQL. + # None/"" = la fila tiene override de OTROS campos pero no toco la fecha -> usar SQL. + if sv == "__VACIO__": + out[mat] = "__VACIO__" + elif sv != "": + out[mat] = sv + return out + except Exception: + return {} + + +def comisiones_overrides_inv_neta(): + """Devuelve dict {num_matricula: inversion_neta(float)} para la tabla principal. + El valor es el monto final en soles (no se re-convierte por TC).""" + try: + sb = _sb() + res = sb.table("comisiones_overrides").select("num_matricula,inversion_neta").execute() + out = {} + for r in (res.data or []): + v = r.get("inversion_neta") + if v is None: continue - vistos.add(co) - pa = pauta_de_conj.get(co, "") - filas.append({"conjunto": co, "pauta": pa, "programa": _programa(pa)}) - filas.sort(key=lambda x: x["conjunto"]) - return {"filas": filas} - return cache_get_or_set("leyenda_anuncios", ("GLOBAL",), _load) + s = str(v).replace("S/", "").replace(",", "").strip() + if s == "": + continue + try: + out[str(r["num_matricula"])] = float(s) + except Exception: + pass + return out + except Exception: + return {} -def guardar_leyenda(cambios): - """cambios = [{conjunto, pauta, num_indice?}]. - - conjunto -> pauta: upsert en conjunto_pauta. - - si viene num_indice: conecta ese num_indice a la pauta en basebi_programacion. - Invalida solo cachés dependientes de pauta/conjunto (no la cartera).""" - from cache_manager import cache_invalidate - dm = get_dm() - for c in cambios: - conjunto = c.get("conjunto") - pauta = (c.get("pauta") or "").strip() - ni = c.get("num_indice") - if conjunto: - dm.upsert_conjunto_pauta(conjunto, pauta) - # si eligió un programa (num_indice), AGREGAR el vínculo num_indice<->pauta - # en programa_pautas (muchos-a-muchos, se SUMA, no reemplaza). - if ni and pauta: - dm.agregar_programa_pauta(str(ni).strip(), pauta) - for pref in ("conjunto_pauta", "pauta_raw", "programa_pautas", "pautas_de_indice", - "meta_filas", "importe_pauta", "importe_pauta_periodo", - "resultados_pauta_periodo", "leads_dash", "otros_general", - "matriz_always", "matriz_plantillas", "leyenda_anuncios"): - cache_invalidate(pref) - return {"guardados": len(cambios)} +def _aplicar_overrides_comisiones(filas): + """Sobreescribe valores de cada fila con los guardados en Supabase (por num_matricula). + Índices de fila: [2]F.MAT [7]INV.NETA [9]F.INI [10]SALDO MAT [11]SALDO C1 + [12]DÍAS [13]VALOR ADIC [14]TIPO PROG [15]num_matricula. (5=PROMEDIO CUOTA)""" + try: + dm = get_dm() + if not getattr(dm, "supabase_client", None): + return filas + res = dm.supabase_client.table("comisiones_overrides").select("*").execute() + ov = {str(r["num_matricula"]): r for r in (res.data or [])} + if not ov: + return filas + # columna override -> índice en la fila + mapa = { + "fch_matricula": 2, "promedio_cuota": 5, "inversion_neta": 7, + "fecha_inicio": 9, "saldo_matricula": 10, "saldo_cuota1": 11, + "dias_anticipacion": 12, "valor_cuota_adicional": 13, "tipo_programa": 14, + "fecha_cancelacion1": 3, + } + for f in filas: + if len(f) < 16: + continue + mat = str(f[15]) + # [16] = nombre para clasificar (si no vino, usar el mostrado [8]) + # [17] = flag "tiene override" (0 por defecto) + if len(f) == 16: + f.append(f[8]) # buscador: no trae [16] → reutiliza el nombre mostrado + if len(f) == 17: + f.append("0") + if mat in ov: + r = ov[mat] + for col, idx in mapa.items(): + val = r.get(col) + if val is None: + continue + if str(val) == "__VACIO__": + f[idx] = "" # forzar vacío explícito (override "borrar") + elif str(val) != "": + f[idx] = val + f[17] = "1" # marcar fila como editada + return filas + except Exception as e: + print(f"[overrides comisiones] {e}") + return filas -def uso_de_pauta(pauta, excluir_num_indice=None): - """Verifica si una pauta ya esta en uso. Devuelve los cursos (dsc_det_programa) - y conjuntos que la usan (para la advertencia antes de guardar).""" - dm = get_dm() - nis = dm.num_indices_de_pauta(pauta) - excl = str(excluir_num_indice or "").strip() - nis = [n for n in nis if n != excl] - # dsc_det_programa de esos num_indice (desde cursos de SQL, ya cacheados) - cursos = _cursos_crudos() - detalle = [] - for c in cursos: - ni = _norm_ni(c.get("num_indice")) - if ni in nis: - detalle.append({"num_indice": ni, - "dsc_det_programa": str(c.get("dsc_det_programa") or c.get("dsc_programa") or "").strip()}) - conjuntos = _conjunto_pauta().get(str(pauta).strip(), []) - return {"en_uso": bool(nis) or bool(conjuntos), - "cursos": detalle, "num_indices": nis, "conjuntos": conjuntos} - - -def guardar_edicion_curso(num_indice, pauta, conjunto=None, contar=None): - """Guarda pauta y contar (SI/NO) en basebi_programacion (upsert) y, si se eligió, - vincula el conjunto a esa pauta en conjunto_pauta. Invalida SOLO los cachés que - dependen de pauta/conjunto (NO la cartera, para que la recarga sea rápida).""" - from cache_manager import cache_invalidate - dm = get_dm() - res = dm.guardar_pauta_basebi(num_indice, pauta, contar) - if conjunto: - dm.guardar_conjunto_pauta(conjunto, pauta) - # invalidar solo lo afectado por pauta/conjunto (la cartera NO se re-baja) - for pref in ("pauta_raw", "pautas_de_indice", "conjunto_pauta", "meta_filas", - "importe_pauta", "importe_pauta_periodo", "resultados_pauta_periodo", - "leads_dash", "otros_general", "matriz_always", "matriz_plantillas", - "leads_filtros", "roas_dash"): - cache_invalidate(pref) - return res - - -def _tipo_de_curso(c): - """Categoría de tipo de programa para el filtro (PROGRAMAS/PROVINCIA/SEMINARIOS/OTROS).""" - dscp = c.get("dsc_programa", "") - otros = L.clasificar_tipo_programa(dscp) - if otros == "OTROS": - return "OTROS" - up = str(dscp).upper() - cat = "TEAC" if ("AIRE ACONDICIONADO" in up or "TEAC" in up) else ( - "TERC" if ("REFRIGERACION COMERCIAL" in up or "REFRIGERACIÓN COMERCIAL" in up or "TERC" in up) else "SEM") - sede = L.clasificar_sede(dscp) - return L.tipo_programa_cohorte(sede, cat) - - -# ── Listas para los filtros (años, tipos de programa) ─────────── -def opciones_filtros(): +# ── COBRANZA ─────────────────────────────────────────────────────────────── +def cobranza(ano, mes, sectorista="TODOS", agrupacion="SEDE", sede_filtro="TODOS", prog_filtro="TODOS", venc_hasta="TODOS"): def _load(): - cursos = _cursos_crudos() - anos = sorted({L._to_date(c.get("fch_inicio")).year for c in cursos - if L._to_date(c.get("fch_inicio"))}, reverse=True) - # Grupos de programa fijos para el filtro PROGRAMA - tipos = ["TEAC", "TERC", "SEMINARIOS", "OTROS"] - return {"anos": anos or [2026], "tipos": tipos} - return cache_get_or_set("leads_filtros", ("GLOBAL",), _load) + dm = get_dm() + logic = CobranzaLogic(dm) + filas = logic.obtener_datos_tabla(str(ano), str(mes), sectorista, agrupacion, sede_filtro, prog_filtro, venc_hasta) + sectoristas = logic.obtener_lista_sectoristas(str(ano), str(mes)) + return { + "filas": _serializar_filas(filas), + "sectoristas": sectoristas or ["TODOS"], + } + return cache_get_or_set("cobranza", (ano, mes, sectorista, agrupacion, sede_filtro, prog_filtro, venc_hasta), _load) -# ── Alertas: valores de programa/sede no identificados en cartera_junta ── -def alertas(): - return cache_get_or_set("leads_alertas", ("GLOBAL",), - lambda: get_dm().traer_no_identificados()) +def cobranza_detalle(grupo, ano, mes, sectorista, agrupacion="PROGRAMA", prog_filtro="TODOS", sede_filtro="TODOS", venc_hasta="TODOS"): + def _load(): + dm = get_dm() + logic = CobranzaLogic(dm) + proc = logic.processor + pf = str(prog_filtro).upper() + sf = str(sede_filtro).upper() + vh = venc_hasta + # Mapa MATRICULA -> programa, para filtrar por tipo de programa y/o sede (REPLACE_META) + mats_prog = None + if pf not in ("TODOS", "", "NONE") or sf not in ("TODOS", "", "NONE"): + crudos_pf = proc.obtener_detalle_programa(str(ano), str(mes), sectorista, "TODOS") + mats_prog = set() + for d in (crudos_pf or []): + prog = d.get("PROGRAMA", "") or d.get("dsc_programa", "") + ok_prog = pf in ("TODOS", "", "NONE") or str(proc.clasificar_filtro_programa(prog)).upper() == pf + ok_sede = sf in ("TODOS", "", "NONE") or str(proc.clasificar_sede_meta(prog)).upper() == sf + if ok_prog and ok_sede: + mats_prog.add(str(d.get("MATRICULA", ""))) + if agrupacion == "ASESOR": + datos = logic.obtener_detalle_programa_formateado(str(ano), str(mes), grupo, "TODOS", vh) + elif agrupacion == "SEDE": + # Filtrar por sede usando el MISMO clasificador del processor (sede.json) + crudos = proc.obtener_detalle_programa(str(ano), str(mes), sectorista, "TODOS") + grupo_up = str(grupo).upper() + mats_sede = set() + for d in (crudos or []): + prog = d.get("PROGRAMA", "") or d.get("dsc_programa", "") + sede_det = str(proc.clasificar_sede(prog)).upper() + if sede_det == grupo_up: + mats_sede.add(str(d.get("MATRICULA", ""))) + todas = logic.obtener_detalle_programa_formateado(str(ano), str(mes), sectorista, "TODOS", vh) + # Solo alumnos de la sede (sin la fila TOTAL global; el frontend recalcula el total) + datos = [f for f in (todas or []) if str(f[0]) in mats_sede] + else: # PROGRAMA + datos = logic.obtener_detalle_programa_formateado(str(ano), str(mes), sectorista, grupo, vh) + # Filtro por Sede y/o tipo de programa (TEAC/TERC/...) si aplica + if mats_prog is not None: + datos = [f for f in (datos or []) if str(f[0]) in mats_prog or str(f[0]).upper() == "TOTAL"] + return {"filas": _serializar_filas(datos)} + return cache_get_or_set("cobranza_det", (grupo, ano, mes, sectorista, agrupacion, prog_filtro, sede_filtro, venc_hasta), _load) -# ── Diagnóstico de cursos (para cuadrar ocupabilidad) ─────────── -def debug_cursos(ano, mes): - cursos = _cursos_crudos() - periodo = [c for c in cursos if L._en_periodo(L._to_date(c.get("fch_inicio")), ano, mes, "TODOS")] - detalle = [] - tot_insc = 0 - tot_meta = 0 - for c in periodo: - insc = int(c.get("Inscritos_Totales", 0) or 0) - meta = L.meta_curso(c.get("dsc_programa")) - tp = L.tipo_programa_curso(c.get("dsc_programa")) - tot_insc += insc - tot_meta += meta - detalle.append({ - "num_indice": c.get("num_indice"), - "dsc_programa": c.get("dsc_programa"), - "fch_inicio": str(c.get("fch_inicio"))[:10], - "cod_estado": c.get("cod_estado"), - "inscritos": insc, - "tipo": tp, - "meta": meta, - }) - return { - "num_cursos": len(periodo), - "suma_inscritos": tot_insc, - "suma_meta": tot_meta, - "ocupabilidad": round((tot_insc / tot_meta * 100), 2) if tot_meta else 0, - "cursos": detalle, - } +# ── RENTABILIDAD ─────────────────────────────────────────────────────────── +def rentabilidad(ano, mes, sede="TODOS", filtro_prog="TODOS"): + def _load(): + dm = get_dm() + logic = RentabilidadLogic(dm) + datos = logic.obtener_datos_procesados(str(ano), str(mes), sede, filtro_prog) + filas = logic.formatear_datos_para_tabla(datos) + filas_s = _serializar_filas(filas, 13) + nombres = [str(f[0]) for f in filas_s if "TOTAL" not in str(f[0]).upper()] + return {"filas": filas_s, "programas": nombres} + return cache_get_or_set("rentabilidad", (ano, mes, sede, filtro_prog), _load) -# ── Precarga / refresco ───────────────────────────────────────── -def _periodos_actual_anterior(): - """[(ano, mes), ...] = mes actual y mes anterior (segun fecha de hoy).""" - from datetime import date - hoy = date.today() - ano, mes = hoy.year, hoy.month - if mes == 1: - prev = (ano - 1, 12) - else: - prev = (ano, mes - 1) - return [(str(ano), str(mes)), (str(prev[0]), str(prev[1]))] +def rentabilidad_detalle(programa, ano, mes): + def _load(): + dm = get_dm() + logic = RentabilidadLogic(dm) + resultado = logic.obtener_detalle_programa(programa, str(ano), str(mes)) + return {"filas": _serializar_filas(resultado)} + return cache_get_or_set("rentabilidad_det", (programa, ano, mes), _load) -import os as _os -_LOG_CARGA = _os.path.join(_os.path.dirname(_os.path.abspath(__file__)), "carga_tiempos.log") +def rentabilidad_costos(programa, ano, mes): + def _load(): + dm = get_dm() + logic = RentabilidadLogic(dm) + return {"costos": logic.obtener_datos_costos_programa(programa, str(ano), str(mes))} + return cache_get_or_set("rentabilidad_costos", (programa, ano, mes), _load) -def _log_carga(linea, reset=False): - """Escribe una linea en carga_tiempos.log (lo lee la ventana de tiempos).""" - try: - with open(_LOG_CARGA, "w" if reset else "a", encoding="utf-8") as f: - f.write(linea + "\n") - except Exception: - pass - - -import threading as _thr -_TIEMPOS = {} # etiqueta -> segundos (para el resumen final) -_TIEMPOS_LOCK = _thr.Lock() -_HILOS_LISTOS = set() # {"leads","otros"} — cuando estan los 2, se imprime resumen - - -def _cron(etiqueta, base, fn, apartado=None): - """Ejecuta fn() midiendo el tiempo. Imprime y ademas guarda en el log: - paso, base de datos y segundos. Se ve en la ventana del BACKEND y en la - ventana de TIEMPOS al iniciar, para saber que carga cada cosa. - Si 'apartado' se indica, acumula el tiempo para el resumen final.""" - import time as _t - t0 = _t.perf_counter() - r = fn() - dt = _t.perf_counter() - t0 - n = "" - try: - if isinstance(r, (list, dict)): - n = f"({len(r)} filas)" - except Exception: - pass - linea = f" [carga] {etiqueta:32} {base:14} {dt:6.2f}s {n}" - print(linea, flush=True) - _log_carga(linea) - with _TIEMPOS_LOCK: - _TIEMPOS[apartado or etiqueta] = _TIEMPOS.get(apartado or etiqueta, 0.0) + dt - return r - - -def _hilo_termino(nombre): - """Marca un hilo como listo. Cuando ambos ("leads" y "otros") terminan, - imprime el resumen final por apartado en el log.""" - with _TIEMPOS_LOCK: - _HILOS_LISTOS.add(nombre) - listos = {"leads", "otros"}.issubset(_HILOS_LISTOS) - tiempos = dict(_TIEMPOS) - if not listos: - return - _log_carga("") - _log_carga("=" * 60) - _log_carga(" RESUMEN — tiempo listo para abrir cada apartado") - _log_carga("=" * 60) - orden = ["Leads", "Vendedores", "Otros General", "ROAS"] - for ap in orden: - seg = tiempos.get(ap) - if seg is not None: - estado = "instantaneo al abrir" if seg < 1 else f"listo tras {seg:.1f}s" - _log_carga(f" {ap:16} {seg:6.2f}s -> {estado}") - _log_carga("-" * 60) - _log_carga(" Ya precargados: al hacer clic se muestran AL INSTANTE (cache).") - _log_carga("=" * 60) +# ── SALDO PENDIENTE ──────────────────────────────────────────────────────── +def saldo_pendiente(tipo_cuota): + def _load(): + dm = get_dm() + logic = SaldoLogic(dm) + datos = logic.obtener_saldos_consolidados(tipo_cuota) + return {"datos": _serializar_dicts(datos)} + return cache_get_or_set("saldo", (tipo_cuota,), _load) +# ── PRECARGA GLOBAL (calienta todo el caché) ─────────────────────────────── def precargar_todo(): - """Precarga en segundo plano: insumos crudos + el dashboard del mes actual y - anterior (con filtros en TODOS), para que el usuario no espere al abrir/filtrar.""" + from datetime import datetime + ahora = datetime.now() + ano, mes = ahora.year, ahora.month + tareas = [ + lambda: ocupabilidad(ano, mes), + lambda: ventas(ano, mes), + lambda: cobranza(ano, mes, "TODOS", "SEDE"), + lambda: cobranza(ano, mes, "TODOS", "PROGRAMA"), + lambda: cobranza(ano, mes, "TODOS", "ASESOR"), + lambda: rentabilidad(ano, mes), + lambda: saldo_pendiente("1° Cuota"), + ] + for t in tareas: + try: + t() + except Exception as e: + print(f"[precarga] error: {e}") + _marcar_actualizacion() + # Precargar mes actual + anterior de TODOS los módulos (sin entrar a ellos) + precargar_todos_modulos() + + +_refresh_count = 0 + +def _recalcular_clave(key): + """Dada una clave 'prefijo:arg1|arg2|...', recalcula su valor sin usar el caché viejo.""" + from cache_manager import cache_invalidate try: - import time as _t - _log_carga("=" * 60, reset=True) - _log_carga(" CARGA DEL DASHBOARD LEADS — " + - _t.strftime("%d/%m/%Y %H:%M:%S")) - _log_carga("=" * 60) - print(">>> Precargando LEADS (hilo 1)...", flush=True) - _log_carga(">>> Hilo 1: LEADS (PostgreSQL + SQL Server)") - _cron("Leads (mensajes)", "PostgreSQL", _leads_crudos) - _cron("Cursos", "SQL Server", _cursos_crudos) - _cron("Matriculas", "SQL Server", _matriculas_crudas) - _cron("Leads asignados/respuesta", "PostgreSQL", _leads_asignados_crudos) - # Dashboard (Leads) del mes actual y anterior (lo mas usado). Otros General - # NO se precarga aqui (sus consultas son pesadas); se calcula al entrar. - p = _periodos_actual_anterior() - a0, m0 = p[0] - for (a, m) in p: - _cron(f"Apartado Leads {a}-{m}", "cache", - lambda a=a, m=m: leads_dashboard(a, m, "TODOS", "TODOS", "TODOS"), apartado="Leads") - # Vendedores y ROAS del periodo actual: se precargan para abrir al instante. - _cron("Apartado Vendedores", "cache", - lambda: vendedores_dashboard(a0, m0, "TODOS"), apartado="Vendedores") - _cron("Apartado ROAS", "cache", - lambda: roas_dashboard(a0, m0, "TODOS"), apartado="ROAS") - _marcar_actualizacion() - print(">>> Hilo 1 (Leads) LISTO.", flush=True) - _log_carga(">>> Hilo 1 (Leads) LISTO.") - _hilo_termino("leads") + prefijo, _, resto = key.partition(":") + args = resto.split("|") if resto else [] + # Invalidar SOLO esta entrada para forzar su recálculo + cache_invalidate(prefijo + ":" + resto if resto else prefijo) + if prefijo == "ocupabilidad" and len(args) == 4: + return ocupabilidad(args[0], args[1], args[2], args[3]) + if prefijo == "ventas" and len(args) == 2: + return ventas(args[0], args[1]) + if prefijo == "ventas" and len(args) == 5: + return ventas(args[0], args[1], args[2], args[3], args[4] == "True") + if prefijo == "cobranza" and len(args) == 4: + return cobranza(args[0], args[1], args[2], args[3]) + if prefijo == "rentabilidad" and len(args) == 4: + return rentabilidad(args[0], args[1], args[2], args[3]) + if prefijo == "saldo" and len(args) == 1: + return saldo_pendiente(args[0]) + if prefijo == "cobranza_det_todos" and len(args) == 3: + return cobranza_detalle_todos(args[0], args[1], args[2]) except Exception as e: - print(f"[precarga] {e}", flush=True) - _log_carga(f"[precarga] ERROR: {e}") - _hilo_termino("leads") - - -def precargar_otros_general(): - """Precarga (aparte, mas pesada) las 4 matrices de Otros General del mes actual - y anterior. Se llama en su propio hilo para no bloquear.""" - try: - print(">>> Precargando CARTERA + OTROS GENERAL (hilo 2)...", flush=True) - _log_carga(">>> Hilo 2: CARTERA (Supabase) + OTROS GENERAL") - _cron("Plantillas", "Google Sheet", _plantillas_crudas) - _cron("Cartera", "Supabase", _cartera_rows_cache) # la mas pesada - for (a, m) in _periodos_actual_anterior(): - _cron(f"Otros General {a}-{m}", "cache", - lambda a=a, m=m: otros_general(a, m, "TODOS"), apartado="Otros General") - print(">>> Hilo 2 (Cartera/Otros) LISTO.", flush=True) - _log_carga(">>> Hilo 2 (Cartera/Otros) LISTO.") - _hilo_termino("otros") - except Exception as e: - print(f"[precarga-otros] {e}", flush=True) - _log_carga(f"[precarga-otros] ERROR: {e}") - _hilo_termino("otros") - - -# Hora de la última actualización (hora Perú) -_ULTIMA_ACTUALIZACION = None - - -def _marcar_actualizacion(): - global _ULTIMA_ACTUALIZACION - from datetime import datetime, timezone, timedelta - peru = timezone(timedelta(hours=-5)) - _ULTIMA_ACTUALIZACION = datetime.now(peru).strftime("%d/%m/%Y %H:%M") - - -def ultima_actualizacion(): - return {"hora": _ULTIMA_ACTUALIZACION} + print(f"[recalcular] {key}: {e}") + return None # los detalles puntuales se recalculan al pedirse def refrescar_todo(): - from cache_manager import cache_invalidate - from data_manager_v2 import invalidar_campanias_cache - cache_invalidate() # vaciar y recargar TODO - invalidar_campanias_cache() # tambien las campañas (cache aparte) - precargar_todo() # leads (mes actual/anterior) - precargar_otros_general() # cartera + Otros General (para que no quede vacia) + """Refresca SOLO las entradas ya cacheadas (no vacía el caché), para que los + meses ya visitados se mantengan rápidos. Cada ~1h recarga config de GitHub.""" + global _refresh_count + from cache_manager import cache_refresh_existing, cache_keys + _refresh_count += 1 + # El hilo corre cada 900s (15 min); 4 ciclos ≈ 60 min → recargar config GitHub + if _refresh_count % 4 == 0: + try: + get_dm().cargar_toda_configuracion() + print("[config] Recarga de queries/JSON de GitHub completada") + except Exception as e: + print(f"[config] error al recargar GitHub: {e}") + + # Si el caché está vacío (primer arranque), hacer precarga normal + if not cache_keys(): + precargar_todo() + else: + # Limpiar el caché anual de cobranza para que el recálculo lea SQL fresco + try: + get_dm().limpiar_cache_cobranza() + except Exception: + pass + cache_refresh_existing(_recalcular_clave) + _marcar_actualizacion() + # Reprecargar mes actual + anterior de todos los módulos (incluye combos nuevos) + precargar_todos_modulos() + + +def refrescar_manual(clave_actual=None): + """Refresco a demanda (botón 'Actualizar'): + 1) VACÍA el caché y RE-LEE las bases (SQL/Postgre/Supabase) para la vista que el + usuario está viendo AHORA (clave_actual) → se devuelve al instante. + 2) El resto de vistas cacheadas se recalculan en SEGUNDO PLANO (hilo aparte), + sin bloquear la respuesta. + NO afecta al ciclo automático de 15 min.""" + import threading + from cache_manager import cache_keys, cache_invalidate + + claves_previas = cache_keys() + # Vaciar TODO el caché para forzar re-lectura real de las bases + cache_invalidate() + # También el caché anual de cobranza (si no, el recálculo usaría datos viejos) + try: + get_dm().limpiar_cache_cobranza() + except Exception: + pass + + # 1) Vista actual primero (bloqueante, rápido) + if clave_actual: + try: + _recalcular_clave(clave_actual) + except Exception as e: + print(f"[refresh manual] vista actual {clave_actual}: {e}") + + # 2) El resto en segundo plano + resto = [k for k in claves_previas if k != clave_actual] + + def _fondo(): + for k in resto: + try: + _recalcular_clave(k) + except Exception as e: + print(f"[refresh manual bg] {k}: {e}") + _marcar_actualizacion() + print(f"[refresh manual] segundo plano completado ({len(resto)} vistas)") + + threading.Thread(target=_fondo, daemon=True).start() + # Reprecargar mes actual + anterior de todos los módulos con datos frescos + precargar_todos_modulos() _marcar_actualizacion() + return ultima_actualizacion() + + +# ── PRECARGA EN SEGUNDO PLANO (cache warming por módulo) ──────────────────── +# Calienta en 2º plano TODAS las combinaciones de la TABLA PRINCIPAL del año +# indicado, de a una y con micro-pausas para NO saturar las bases. Solo lo que +# consulta al backend; los filtros que se resuelven en el cliente (sede/frecuencia +# en Cobranza) quedan instantáneos sin precargar nada. Los detalles (Ver/buscar) +# NO se precargan. Cada llamada nueva reemplaza (supersede) la precarga anterior. +import threading as _threading +_precarga_gen = {} # modulo -> id de generación (para cancelar la anterior) +_precarga_estado = {} # modulo -> {"total","hechas","completo","ano"} +_precarga_lock = _threading.Lock() +_PRECARGA_PAUSA = 0.15 # seg entre vistas, para no golpear las bases + + +def precarga_estado(modulo): + """Progreso de la precarga de un módulo (para el aviso en el frontend).""" + modulo = (modulo or "").lower() + with _precarga_lock: + e = _precarga_estado.get(modulo) + return dict(e) if e else {"total": 0, "hechas": 0, "fallidas": 0, "completo": False} + + +def _periodos_act_ant(): + """(año, mes) del mes actual y el anterior (maneja el cambio de año en enero).""" + from datetime import datetime + hoy = datetime.now() + prev = (hoy.year - 1, 12) if hoy.month == 1 else (hoy.year, hoy.month - 1) + return [(hoy.year, hoy.month), prev] + + +def _combos_cobranza(ano): + """Lista de (ano, mes, sectorista, agrupacion) a calentar para Cobranza. + SOLO el mes actual y el mes anterior (no todo el año).""" + periodos = _periodos_act_ant() + agrupaciones = ["SEDE", "PROGRAMA", "ASESOR"] + combos = [] + for (yy, mm) in periodos: + # sectoristas reales de ese mes (+ TODOS). Si falla, solo TODOS. + try: + logic = CobranzaLogic(get_dm()) + secs = logic.obtener_lista_sectoristas(str(yy), str(mm)) or ["TODOS"] + except Exception: + secs = ["TODOS"] + secs = list(dict.fromkeys(["TODOS"] + [s for s in secs if s and s != "TODOS"])) + for ag in agrupaciones: + for sec in secs: + combos.append((yy, mm, sec, ag)) + return combos + + +def precargar_modulo(modulo, ano, en_hilo=True): + """Precarga la tabla principal del módulo para el año (mes actual + anterior). + Si en_hilo=True lanza un hilo y devuelve al instante; si False corre sincrónico + (para encadenar varios módulos en un solo hilo, sin ráfagas de conexiones).""" + modulo = (modulo or "").lower() + with _precarga_lock: + gen = _precarga_gen.get(modulo, 0) + 1 + _precarga_gen[modulo] = gen + _precarga_estado[modulo] = {"total": 0, "hechas": 0, "fallidas": 0, "completo": False, "ano": ano} + + def _vigente(): + with _precarga_lock: + return _precarga_gen.get(modulo) == gen + + def _sumar(campo): + with _precarga_lock: + if _precarga_gen.get(modulo) == gen: + _precarga_estado[modulo][campo] += 1 + + def _set_total(n): + with _precarga_lock: + if _precarga_gen.get(modulo) == gen: + _precarga_estado[modulo]["total"] = n + + def _marcar_completo(): + with _precarga_lock: + if _precarga_gen.get(modulo) == gen: + _precarga_estado[modulo]["completo"] = True + + def _fondo(): + import time + if modulo == "cobranza": + combos = _combos_cobranza(ano) + _set_total(len(combos)) + for (yy, mm, sec, ag) in combos: + if not _vigente(): + return # una precarga más nueva la reemplazó + try: + cobranza(str(yy), str(mm), sec, ag) # cache_get_or_set: si ya está, no reconsulta + _sumar("hechas") + except Exception as e: + print(f"[precarga cobranza] {yy}-{mm} {ag}/{sec}: {e}") + _sumar("fallidas") + time.sleep(_PRECARGA_PAUSA) + _marcar_completo() + print(f"[precarga cobranza] {ano} completado ({len(combos)} vistas)") + elif modulo in ("ocupabilidad", "ventas", "rentabilidad"): + # Solo mes actual y anterior, con filtros por defecto (TODOS/TODOS) + periodos = _periodos_act_ant() + _set_total(len(periodos)) + for (yy, mm) in periodos: + if not _vigente(): + return + try: + if modulo == "ocupabilidad": + ocupabilidad(str(yy), str(mm), "TODOS", "TODOS") + elif modulo == "ventas": + ventas(str(yy), str(mm), "TODOS", "TODOS") + else: + rentabilidad(str(yy), str(mm), "TODOS", "TODOS") + _sumar("hechas") + except Exception as e: + print(f"[precarga {modulo}] {yy}-{mm}: {e}") + _sumar("fallidas") + time.sleep(_PRECARGA_PAUSA) + _marcar_completo() + print(f"[precarga {modulo}] {ano} completado ({len(periodos)} vistas)") + else: + print(f"[precarga] módulo no soportado aún: {modulo}") + + if en_hilo: + _threading.Thread(target=_fondo, daemon=True).start() + else: + _fondo() + return {"status": "precarga iniciada", "modulo": modulo, "ano": ano} + + +def precargar_todos_modulos(): + """Precarga (en 2º plano) el mes actual y anterior de TODOS los módulos, de forma + SECUENCIAL en un solo hilo para no saturar el SQL. Se llama al arrancar, en cada + ciclo de 15 min y tras el refresco manual. No requiere entrar a cada módulo.""" + from datetime import datetime + ano = datetime.now().year + + def _todo(): + for m in ("cobranza", "ocupabilidad", "ventas", "rentabilidad"): + try: + precargar_modulo(m, ano, en_hilo=False) + except Exception as e: + print(f"[precarga todos] {m}: {e}") + print("[precarga todos] completado (todos los módulos)") + + _threading.Thread(target=_todo, daemon=True).start() + + +# ── GUARDAR COSTOS (override Supabase) ───────────────────────────────────── +def guardar_costos(num_indice, costos_inicial, costos_actual): + dm = get_dm() + ok1 = dm.guardar_override_costo(num_indice, "inicial", costos_inicial) + ok2 = dm.guardar_override_costo(num_indice, "actual", costos_actual) + from cache_manager import cache_invalidate + cache_invalidate("rentabilidad") + cache_invalidate("rentabilidad_costos") + return bool(ok1 and ok2) + + +# ── CLASIFICACIÓN DE SEDE (sede.json) ────────────────────────────────────── +def clasificar_programas(nombres): + """Devuelve {programa: sede} usando el clasificador del processor (sede.json).""" + dm = get_dm() + logic = CobranzaLogic(dm) + return {n: str(logic.processor.clasificar_sede(n)) for n in nombres} + + +def clasificar_programas_full(nombres): + """Devuelve {programa: {sede, filtro}} usando el JSON REPLACE_META (meta_data): + - sede: clasificacion_sedes (LIMA/PIURA/AREQUIPA/TRUJILLO) + - filtro: clasificacion_filtro_programa (TEAC/TERC/SEMINARIOS/OTROS).""" + dm = get_dm() + logic = RentabilidadLogic(dm) # su identificar_sede/identificar_filtro_programa usan meta_data + out = {} + for n in nombres: + out[n] = {"sede": str(logic.identificar_sede(n)), + "filtro": str(logic.identificar_filtro_programa(n))} + return out + + +def cobranza_detalle_todos(ano, mes, sectorista="TODOS"): + """Trae TODOS los alumnos en UNA sola consulta (para export y buscador).""" + def _load(): + dm = get_dm() + logic = CobranzaLogic(dm) + brutos = logic.processor.obtener_detalle_programa(str(ano), str(mes), sectorista, "TODOS") + alumnos = [] + for d in (brutos or []): + prog = d.get("Programa", d.get("PROGRAMA", "-")) or "-" + cta_ant = float(d.get("CTA_COB_ANT", 0.0)); cob_ant = float(d.get("COB_ANT", 0.0)) + cta_cur = float(d.get("CTA_COB_MES_CURSO", 0.0)); cob_cur = float(d.get("COB_MES_CURSO", 0.0)) + cta_tot = float(d.get("TOTAL_CTA_COB", 0.0)); cob_tot = float(d.get("TOTAL_COBRADO", 0.0)) + saldo = float(d.get("SALDO", 0.0)) + alumnos.append({ + "matricula": str(d.get("MATRICULA", "")), + "alumno": d.get("ALUMNO", d.get("Alumno", "")), + "programa": prog, + "sede": str(logic.processor.clasificar_sede(prog)), + "frecuencia": d.get("FRECUENCIA", d.get("Frecuencia", "-")), + "num_cuota": d.get("NUM_CUOTA", "-"), + "fch_venc": d.get("FCH_VENC", "-"), + "cta_ant": cta_ant, "cob_ant": cob_ant, + "cta_cur": cta_cur, "cob_cur": cob_cur, + "cta_tot": cta_tot, "cob_tot": cob_tot, + "saldo": saldo, + }) + return {"alumnos": alumnos} + return cache_get_or_set("cobranza_det_todos", (ano, mes, sectorista), _load) + + +# ── GESTIÓN DE USUARIOS (Supabase Auth + tabla perfiles) ─────────────────── +def _sb(): + dm = get_dm() + if not dm.supabase_client: + raise RuntimeError("Supabase no está conectado") + return dm.supabase_client + +# ── Estado/observaciones por alumno (tabla cobranza_estado_alumno) ── +def alumno_estado_obtener(matricula): + """Devuelve {estado, observaciones} de un alumno. Si no existe, valores por defecto.""" + sb = _sb() + res = sb.table("cobranza_estado_alumno").select("*").eq("matricula", str(matricula)).execute() + fila = (res.data or [None])[0] + if not fila: + return {"estado": "EN CURSO", "observaciones": []} + return {"estado": fila.get("estado") or "EN CURSO", + "observaciones": fila.get("observaciones") or []} + +def alumno_estado_guardar(matricula, estado, observaciones, usuario=None): + """Guarda (upsert) el estado y la lista de observaciones del alumno.""" + sb = _sb() + from datetime import datetime, timezone + payload = { + "matricula": str(matricula), + "estado": estado or "EN CURSO", + "observaciones": observaciones or [], + "actualizado_en": datetime.now(timezone.utc).isoformat(), + "actualizado_por": usuario or None, + } + sb.table("cobranza_estado_alumno").upsert(payload).execute() + return {"status": "ok"} + +def alumnos_por_retirar(): + """Lista de matrículas marcadas como POR RETIRAR (para tachar la fila en la tabla).""" + sb = _sb() + res = sb.table("cobranza_estado_alumno").select("matricula").eq("estado", "POR RETIRAR").execute() + return {"matriculas": [str(r["matricula"]) for r in (res.data or [])]} + +def usuarios_listar(): + sb = _sb() + perfiles = sb.table("perfiles").select("id, nombre, rol, activo").execute().data or [] + try: + users = sb.auth.admin.list_users() + lista = users if isinstance(users, list) else getattr(users, "users", []) + correo_por_id = {str(u.id): u.email for u in lista} + except Exception: + correo_por_id = {} + out = [] + for p in perfiles: + out.append({ + "id": p["id"], + "email": correo_por_id.get(str(p["id"]), "-"), + "nombre": p.get("nombre"), + "rol": p.get("rol"), + "activo": p.get("activo", True), + }) + return {"usuarios": out} + +def usuarios_crear(email, password, nombre, rol): + sb = _sb() + res = sb.auth.admin.create_user({ + "email": email, + "password": password, + "email_confirm": True, + }) + user = getattr(res, "user", None) or res + uid = str(user.id) + sb.table("perfiles").upsert({"id": uid, "nombre": nombre or email, "rol": rol, "activo": True}).execute() + return {"status": "ok", "id": uid} + +def usuarios_actualizar_rol(user_id, rol): + sb = _sb() + sb.table("perfiles").update({"rol": rol}).eq("id", user_id).execute() + return {"status": "ok"} + +def usuarios_eliminar(user_id): + sb = _sb() + sb.auth.admin.delete_user(user_id) + return {"status": "ok"} + + +# ── VENDEDORES MANUALES (Comisiones, en Supabase) ────────────────────────── +# ── CONFIG MENSUAL COMISIONES (IMP_TC, META, COMISIÓN por tipo de programa) ── +def comisiones_config_listar(ano, mes): + """Lista la config de un mes (todas las filas por tipo_programa).""" + sb = _sb() + res = sb.table("comisiones_config_mensual").select("*").eq("ano", int(ano)).eq("mes", int(mes)).execute() + return {"config": res.data or []} + +def comisiones_config_guardar(ano, mes, filas): + """Reemplaza la config del mes. filas = [{tipo_programa, imp_tc, meta, comision}].""" + sb = _sb() + sb.table("comisiones_config_mensual").delete().eq("ano", int(ano)).eq("mes", int(mes)).execute() + payload = [] + for f in filas: + payload.append({ + "ano": int(ano), "mes": int(mes), + "tipo_programa": f.get("tipo_programa", ""), + "imp_tc": float(f.get("imp_tc", 0) or 0), + "meta": float(f.get("meta", 0) or 0), + "comision": float(f.get("comision", 0) or 0), + }) + if payload: + sb.table("comisiones_config_mensual").insert(payload).execute() + from cache_manager import cache_invalidate + cache_invalidate("ventas") + cache_invalidate("ventas_det") + return {"status": "ok"} + +def comisiones_tc_del_mes(ano, mes): + """Devuelve el IMP_TC configurado para el mes (toma el primero que tenga TC > 0), o None.""" + try: + sb = _sb() + res = sb.table("comisiones_config_mensual").select("imp_tc").eq("ano", int(ano)).eq("mes", int(mes)).execute() + for r in (res.data or []): + tc = float(r.get("imp_tc", 0) or 0) + if tc > 0: return tc + except Exception: + pass + return None + + +def vendedores_manuales_listar(ano, mes): + sb = _sb() + query = sb.table("vendedores_manuales").select("*").eq("ano", int(ano)) + if int(mes) != 0: # mes=0 → traer todo el año (para cache en frontend) + query = query.eq("mes", int(mes)) + res = query.execute() + return {"vendedores": res.data or []} + +def vendedores_manuales_crear(nombre, descripcion, fch_emision, monto, ano, mes): + sb = _sb() + payload = { + "nombre": nombre, "descripcion": descripcion or "", + "fch_emision": fch_emision or "", "monto": float(monto or 0), + "ano": int(ano), "mes": int(mes), + } + res = sb.table("vendedores_manuales").insert(payload).execute() + return {"status": "ok", "data": res.data} + +def vendedores_manuales_eliminar(id): + sb = _sb() + sb.table("vendedores_manuales").delete().eq("id", id).execute() + return {"status": "ok"} + + +def vendedores_manuales_actualizar(id, descripcion, fch_emision, monto): + sb = _sb() + sb.table("vendedores_manuales").update({ + "descripcion": descripcion or "", "fch_emision": fch_emision or "", + "monto": float(monto or 0), + }).eq("id", id).execute() + return {"status": "ok"} + + +def vendedores_manuales_guardar_lote(nombre, ano, mes, filas): + """Reemplaza TODAS las filas de un vendedor manual en una sola operación. + filas = lista de dicts {descripcion, fch_emision, monto}. Si filas vacía → elimina el vendedor.""" + sb = _sb() + # Borrar las existentes de ese vendedor/mes + sb.table("vendedores_manuales").delete().eq("nombre", nombre).eq("ano", int(ano)).eq("mes", int(mes)).execute() + # Insertar las nuevas en un solo batch + payload = [] + for f in filas: + payload.append({ + "nombre": nombre, + "descripcion": f.get("descripcion","") or "", + "fch_emision": f.get("fch_emision","") or "", + "monto": float(f.get("monto",0) or 0), + "ano": int(ano), "mes": int(mes), + }) + if payload: + sb.table("vendedores_manuales").insert(payload).execute() + return {"status": "ok"} + + + + +# ── OVERRIDES DE COMISIONES (editar valores por num_matricula) ───────────── +def comisiones_override_guardar(registros): + """Guarda/actualiza overrides en UNA sola operación (batch upsert).""" + sb = _sb() + from cache_manager import cache_invalidate + validos = [r for r in registros if r.get("num_matricula")] + if validos: + sb.table("comisiones_overrides").upsert(validos).execute() + cache_invalidate("ventas_det") + cache_invalidate("ventas") + cache_invalidate("comisiones_det_todos") + return {"status": "ok"} + +def comisiones_override_restaurar(num_matricula): + """Borra el override de un alumno (vuelve a los valores de SQL).""" + sb = _sb() + from cache_manager import cache_invalidate + sb.table("comisiones_overrides").delete().eq("num_matricula", str(num_matricula)).execute() + cache_invalidate("ventas_det") + cache_invalidate("ventas") + cache_invalidate("comisiones_det_todos") + return {"status": "ok"} diff --git a/docker-compose.yml b/docker-compose.yml index cdd192d..729a6ed 100644 --- a/docker-compose.yml +++ b/docker-compose.yml @@ -1,38 +1,33 @@ -# ============================================================ -# Dashboard Leads - despliegue con Docker Compose -# -# IP Pública: 161.132.96.129 | IP Privada: 192.168.1.107 -# -# Mapeo de puertos en el Host / Nginx Reverse Proxy: -# dashboardv1.escueladerefrigeracion.edu.pe -> host:3002 (frontend nginx) -# dashboardapi.escueladerefrigeracion.edu.pe -> host:8001 (backend uvicorn) -# ============================================================ - services: + # 1. EL BACKEND (FastAPI - Python) backend: build: context: ./backend - dockerfile: Dockerfile - restart: unless-stopped ports: - - "8001:8001" - expose: - - "8001" - healthcheck: - test: ["CMD-SHELL", "python -c \"import urllib.request;urllib.request.urlopen('http://127.0.0.1:8001/api/health')\" || exit 1"] - interval: 30s - timeout: 10s - retries: 5 - start_period: 60s + - "8000:8000" + environment: + - "SQL_SERVER=191.98.134.80" + - "SQL_DATABASE=BDUS_CK000040_0001" + - "SQL_USERNAME=ASEBASTIAN" + - "SQL_PASSWORD=24MY36$$z>&Uf" + - "PG_HOST=191.98.134.81" + - "PG_DATABASE=chatwoot_production" + - "PG_USER=postgres" + - "PG_PASSWORD=2165$$%sd3%DFG" + - "PG_PORT=5432" + - "SUPABASE_URL=https://ogzjtkxnfswpbmnbhnjd.supabase.co" + - "SUPABASE_KEY=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJzdXBhYmFzZSIsInJlZiI6Im9nemp0a3huZnN3cGJtbmJobmpkIiwicm9sZSI6InNlcnZpY2Vfcm9sZSIsImlhdCI6MTc3NjYzNDk4MywiZXhwIjoyMDkyMjEwOTgzfQ.D7XB6GIs8UvI97lcMdf6Y6-8ON2ENhh0DOaiMro2f9Y" + - "GITHUB_BASE=https://raw.githubusercontent.com/aron1798/prueba1/main/DASHBOARD" + # 2. EL FRONTEND (Vite - React) frontend: build: context: ./frontend - dockerfile: Dockerfile - restart: unless-stopped + args: + - "VITE_SUPABASE_URL=https://ogzjtkxnfswpbmnbhnjd.supabase.co" + - "VITE_SUPABASE_ANON_KEY=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJpc3MiOiJzdXBhYmFzZSIsInJlZiI6Im9nemp0a3huZnN3cGJtbmJobmpkIiwicm9sZSI6ImFub24iLCJpYXQiOjE3NzY2MzQ5ODMsImV4cCI6MjA5MjIxMDk4M30.OEMjCJOXHBgAHPxtncQUOVC8iDjW40CnT5pczU-gz0U" + - "VITE_API_URL=https://dashboardapi.escueladerefrigeracion.edu.pe" ports: - - "3002:80" - expose: - - "80" + - "80:5173" depends_on: - backend diff --git a/frontend/.env.example b/frontend/.env.example index 34fbc8c..b9e8804 100644 --- a/frontend/.env.example +++ b/frontend/.env.example @@ -1,4 +1,5 @@ -# URL base del backend FastAPI que consume el frontend. -# Local: http://localhost:8001 -# Despliegue: https://dashboardapi.escueladerefrigeracion.edu.pe -VITE_API_URL=http://localhost:8001 +# Credenciales públicas de Supabase para el login (frontend) +# La URL es la misma de tu proyecto. +# La ANON KEY es la PÚBLICA (anon/public), NO la service_role. +VITE_SUPABASE_URL=https://ogzjtkxnfswpbmnbhnjd.supabase.co +VITE_SUPABASE_ANON_KEY=pega_aqui_tu_anon_public_key diff --git a/frontend/.env.production b/frontend/.env.production new file mode 100644 index 0000000..8f08bae --- /dev/null +++ b/frontend/.env.production @@ -0,0 +1 @@ +VITE_API_URL=https://dashboardapi.escueladerefrigeracion.edu.pe \ No newline at end of file diff --git a/frontend/.gitignore b/frontend/.gitignore new file mode 100644 index 0000000..dd8fe26 --- /dev/null +++ b/frontend/.gitignore @@ -0,0 +1,4 @@ +node_modules/ +dist/ +*.log +.env diff --git a/frontend/Dockerfile b/frontend/Dockerfile index 3e0ed07..9411a15 100644 --- a/frontend/Dockerfile +++ b/frontend/Dockerfile @@ -1,20 +1,27 @@ -# ── Etapa 1: build del frontend con Vite ── -FROM node:20-alpine AS build +# Usamos Node.js para compilar el proyecto +FROM node:18-alpine +# Creamos la carpeta de trabajo WORKDIR /app -COPY package.json package-lock.json* ./ -RUN npm ci --no-audit --no-fund || npm install --no-audit --no-fund +# Declaramos que recibiremos estos argumentos durante el build +ARG VITE_SUPABASE_URL +ARG VITE_SUPABASE_ANON_KEY +ARG VITE_API_URL +# Los convertimos en variables de entorno para que Vite los vea al compilar +ENV VITE_SUPABASE_URL=$VITE_SUPABASE_URL +ENV VITE_SUPABASE_ANON_KEY=$VITE_SUPABASE_ANON_KEY +ENV VITE_API_URL=$VITE_API_URL + +# Copiamos los archivos de configuración e instalamos dependencias +COPY package*.json ./ +RUN npm install + +# Copiamos el código y construimos la web (ahora Vite sí verá las variables) COPY . . RUN npm run build -# ── Etapa 2: servir el build con nginx ── -FROM nginx:alpine - -COPY --from=build /app/dist /usr/share/nginx/html -COPY nginx.conf /etc/nginx/conf.d/default.conf - -EXPOSE 80 - -CMD ["nginx", "-g", "daemon off;"] +# Instalamos el servidor estático y lo ejecutamos +RUN npm install -g serve +CMD ["serve", "-s", "dist", "-l", "5173"] \ No newline at end of file diff --git a/frontend/README.md b/frontend/README.md new file mode 100644 index 0000000..0c04ae2 --- /dev/null +++ b/frontend/README.md @@ -0,0 +1,29 @@ +# Frontend — Dashboard React + +## Requisitos +- Node.js 18+ (descarga: https://nodejs.org) + +## Instalación (una sola vez) +``` +npm install +``` + +## Ejecutar +``` +npm run dev +``` +Abre: http://localhost:3000 + +⚠️ El backend FastAPI debe estar corriendo en http://localhost:8000 +(en otra terminal: `py -3.12 main.py`) + +## Estado +- ✅ Sidebar + navegación +- ✅ Ocupabilidad (conectado al backend) +- 🚧 Ventas, Cobranza, Rentabilidad, Saldo Pendiente, Asesores (próximas sesiones) + +## Cambiar IP del backend +Si el backend corre en otra máquina, edita `src/lib/api.js` línea 3: +```js +const BASE_URL = "http://IP_DEL_SERVIDOR:8000"; +``` diff --git a/frontend/index.html b/frontend/index.html index a467813..4f9f9a2 100644 --- a/frontend/index.html +++ b/frontend/index.html @@ -1,9 +1,9 @@ - +
-