Commit graph

109 commits

Author SHA1 Message Date
pablomartincalvo
ee8df1b635 Corregido queries de anuncios viejos. 2018-11-05 23:40:54 +01:00
pablomartincalvo
71456d3c92 Adaptado capturer y base de datos para soportar datos de m2 con
decimales.
2018-11-05 20:49:54 +01:00
pablomartincalvo
dd3362aa3c Typo en capturer 2018-11-05 20:09:04 +01:00
pablomartincalvo
4ec8e3210c Mas correciones menores para testing. 2018-11-04 20:16:37 +01:00
pablomartincalvo
403bb2c0cc Mas correciones menores para testing. 2018-11-04 19:52:47 +01:00
pablomartincalvo
94b604997c Mas correciones menores para testing. 2018-11-02 19:21:52 +01:00
pablomartincalvo
906d8b5cd9 Mas cambios en deployer. 2018-11-01 19:50:38 +01:00
pablomartincalvo
9a7ba03cd9 Avances en sistema de deployment y configuracion. 2018-10-29 21:57:20 +01:00
pablomartincalvo
a2dcec95f4 Corregido criterio para identificar anuncios muertos en el capturer. 2018-10-26 20:34:43 +02:00
pablomartincalvo
25e52a9e25 Creando scripts de deployment del sistema. 2018-10-26 20:28:07 +02:00
pablomartincalvo
a3a2165f43 Testeando error en geocoder. 2018-10-23 23:18:12 +02:00
pablomartincalvo
06e1f78f40 Testeando error en geocoder. 2018-10-23 20:49:37 +02:00
pablomartincalvo
29072f0926 Testeando error en geocoder. 2018-10-22 00:15:44 +02:00
pablomartincalvo
0248e75606 Testeando error en geocoder. 2018-10-22 00:01:36 +02:00
pablomartincalvo
bebfe12d74 Testeando error en geocoder. 2018-10-21 17:42:14 +02:00
pablomartincalvo
98b9c48a6a Testeando error en geocoder. 2018-10-21 14:01:15 +02:00
pablomartincalvo
600ff889be Retoques menores en geocoder y capturer por problemas de tipos. 2018-10-20 15:58:37 +02:00
pablomartincalvo
c40d39e558 Merge branch 'dev' into testing
# Conflicts:
#	.idea/workspace.xml
2018-10-19 19:18:14 +02:00
pablomartincalvo
3a4a4fc195 Finalizado y testado localmente el modulo de Geocoding, listo
para probar en entorno integrado.
2018-10-19 19:17:48 +02:00
pablomartincalvo
5d261328b8 Ajustado error de tipos en dead_ad_checker. 2018-10-19 18:05:35 +02:00
pablomartincalvo
c3c16e7015 Arreglos menores en capturer y refresher. 2018-10-19 17:22:09 +02:00
pablomartincalvo
e379708c04 Corregido tiempo de sleep. 2018-10-18 22:53:10 +02:00
pablomartincalvo
256f54a1e4 Añadidos varios __init__.py 2018-10-18 22:48:09 +02:00
pablomartincalvo
99c33a421d Añadidos varios __init__.py 2018-10-18 22:47:13 +02:00
pablomartincalvo
ea7d579fa6 Añadidos varios __init__.py 2018-10-18 22:45:36 +02:00
pablomartincalvo
238b0f5305 Retoques menores en refresher. 2018-10-18 22:36:10 +02:00
pablomartincalvo
3fdbc5f766 Finalizado y testeado localmente refresher, listo para testear en
entorno.
2018-10-16 21:19:35 +02:00
pablomartincalvo
8f5a120096 Iniciado refresher. 2018-10-14 19:24:17 +02:00
pablomartincalvo
e0216060b9 Retoques menores en capturer y explorer. De vuelta al testing. 2018-10-14 18:41:12 +02:00
pablomartincalvo
6342a95f40 Puesto bien mains en explorer y capturer. 2018-10-14 17:19:48 +02:00
pablomartincalvo
0ddbc0a83e Puesto mains en explorer y capturer. 2018-10-13 18:17:05 +02:00
pablomartincalvo
7cee343bab Testeos en desarrollo del sistema de capturas. Pequeños retoques. 2018-10-13 18:07:32 +02:00
pablomartincalvo
4edff2e0c1 Siguen los retoques. Tests locales exitosos, listo para mover a entorno
de pruebas y dejar corriendo junto a explorer.
2018-10-13 17:45:42 +02:00
pablomartincalvo
6a0baf4de6 Testeos en desarrollo del sistema de capturas. Pequeños retoques. 2018-10-13 02:08:58 +02:00
pablomartincalvo
e97bbba274 Creada la clase parser. Finalizado el modulo de capturas, que esta listo
para ser testeado.
2018-10-12 20:08:18 +02:00
pablomartincalvo
240a61649c Cambios notables. Creadas interfaces para la tabla de capturing task
y la tabla de capturas.

Traslado todo lo relacionado a Geocoding a un servicio independiente
del capturer.

Replanteo totalmente el parseo del html, creando un objeto nuevo.
2018-10-06 19:09:44 +02:00
pablomartincalvo
3bd8de0e02 Creado cache de Geocoding. Avanzado en Geocoding Task. Decido mover parte de la gestion del geocoding al capturer. 2018-10-02 23:14:24 +02:00
pablomartincalvo
9d947f7e2b Avanzado en desarrollo de capturing task. Creado clase GeocodingTask 2018-09-26 22:56:45 +02:00
pablomartincalvo
1d68575fd7 Avanzado en desarrollo de capturing task. 2018-09-23 21:04:00 +02:00
pablomartincalvo
7b47b1e766 Iniciadas clases de capturing_task y scraptargetfield. 2018-09-22 23:56:01 +02:00
pablomartincalvo
80d65b7a7c Corregidos pequeños errores y type tras primer test del servicio. 2018-09-22 23:17:49 +02:00
pablomartincalvo
1f372b85b6 Refactorizado Explorer para que el Explorer, y no el exploring_task, se encargue de postear las tareas de captura.
Creado una funcion independiente de creacion de capturas para que sea compartida entre todos aquellos servicios que las creen.
2018-09-21 18:19:33 +02:00
pablomartincalvo
b77a4752b8 Pequeños detalles en Explorer. 2018-09-09 19:42:52 +02:00
pablomartincalvo
7a795d1fb8 Finalizado modulo de alertas. Testeado clase ExploringTask a fondo. 2018-09-09 19:22:21 +02:00
pablomartincalvo
5eedb037ed Correcciones en wrapper_mysql y avance en metodos de explorer. Iniciado modulo de alertas. 2018-08-30 19:38:31 +02:00
pablomartincalvo
02973f0d48 'Avanzado Dockerfile de mysql' 2018-08-15 22:31:40 +02:00
pablomartincalvo
e883f9031b Creador dockerfile para mysql 2018-08-14 21:03:57 +02:00
pablomartincalvo
e466986721 Mas avances en el explorer 2018-08-14 20:02:40 +02:00
pablomartincalvo
7e8daab6ce Avanzado en la clase de Exploring Task y Explorer. 2018-08-13 23:55:17 +02:00
pablomartincalvo
c0b398b9c6 Creado clase de Exploring Task. Creado modulo de scraping utils 2018-08-12 23:14:47 +02:00