[Python] Give Me the Garbage (GMG)

Muy interesante!

#4
¿ Por que SQLite y JQuery ?

• SQLite es por defecto, de momento no necesito cosas complejas... más adelante usaré postgresql (De momento no estoy usando vistas, pero tengo pensado usar "materialized views"): https://docs.sqlalchemy.org/en/14/dialects/#support-levels-for-included-dialects y https://www.postgresql.org/docs/current/rules-materializedviews.html
• JQuery por puro azúcar sintáctico y utilidades como "merge"... resumiendo: pereza xD

¿ Y porque cssNano y JsMin ?

• CSSNano porque es el que recomienda tailwindcss. Antes usaba "cssmin" pero, al menos con la configuración que tenía, se notaba mucho más lento. Tampoco he mirado mucho más.
• JSmin porque hace lo que quiero. Seguramente termine usando "terser"... la parte del cliente aún recién la estoy haciendo.

¿Porque Node y Python ? ¿2 Backends?

• Python porque es un lenguaje con el que estoy familiarizado.
• NodeJS porque las herramientas para generar los assets se apoyan en esta tecnología.
  ** No son dos backends, la aplicación está escrita únicamente en python. El uso de Node tienes que verlo como si se estuviera usando Electron. No es un servicio que queda activo o algo por el estilo. Flask-Assets invoca al programa "X" dándole una entrada y esperando una salida... como esté escrito este programa y que tecnologías use es indiferente siempre que respete lo que se le pasa como entrada y lo que tiene que dar de salida.

#6 Son las justas y necesarias ... Igual llama la atención pero es que cuando usas tecnologías peladas es normal ir metiendo capas. Otros frameworks tienen la misma o mas mierda por detrás
Por ejemplo, podría usar "Flask-Diamond" y ya solo listar una dependencia... eso no quita que Flask-Diamond por detrás use 10000 mierdas xD

#8 Gracias por la info

Pido ayuda "creativa" para completar los diccionarios... palabras que sean usadas, nada extraño o rebuscado... si alguien pone m13rd4 pues no pasa nada, no se contabiliza y a otra cosa xD

insults = r"puta|[gj]ilipollas|tont[oa]|est[uú]pid[oa]|subnormal|atontad[oa]|restrasad[oa]|anormal|maguf[oa]|chupamela|pargela|que\s?te\s?den|jodan?|ignorante|analfabet[oa]"
swear_words = r"h?ostia|joder|mierda|[ck]awen|we[bv]os|coño|po(?:ll|y)a|chumino|follar|cipote|maldit[oa]|"
good_words = r"[:;]-?[3\)DB]|\^\^|\bgracias\b|\bagradezco\b|\bcomparto\b|\bfant[aá]stico\b"
love_words = r"\bte\s?quiero\b|\bes\s(?:el|la)\smejor\b|\bes\suna?\scrack\b|\bte\samo\b"
laugh_words = r"xD+|ja(?:ja)+|je(?:je)+|jios|juas|\bl+o+l+\b"
sad_words = r"[:;]-?\(|orf+|estoy\s(?:mal|cansad[oa]|triste)|me\ssiento\s(?:mal|cansad[oa]|triste"
dead_words = r"\bsuicidar\b|\bsuicidio\b|\baca[bv]ar\scon\smi\s[vb]ida\b"
sex_words = r"\bporno\b|\bnopor\b|\bxxx\b|\bsexo\b"

#12 Esta clarinete que podría usar soluciones OOTB y quitarme de historias... pero esto lo hago por "gusto" y me gusta hacer mierdas lo más "artesanales" que pueda (siempre en un equilibrio claro... voy a seguir comprando las tijeras y no ir a la mina a picar y luego a la factoría a planchar el metal xD).

Vamos... que es un proyecto sin "deadlines" ni nada... ¿que me equivoco y tengo que retroceder 4 pasos? los retrocedo.

Respecto al tema "reactivo" igual le hago algo con "Proxy Objects".

P.D: Tampoco tengo ganas de aprender ningún otro framework... con el que uso en el curro me llega y basta joisjsiojs

#14 Se agradecen los comentarios.
En mi caso he pasado a usar postgresql por motivos de facilitarme la vida con las consultas al permitir funciones más potentes que sqlite. Todo era hermoso con sqlite hasta que tuve que manejar fechas... corriendo a postgresql!!

Tal y como tengo el capturador de mensajes su funcionamiento es el siguiente:

• Cada 3 minutos se consulta la sección "spy" los hilos con fecha mayor o igual a la ultima fecha en la que se miró la sección spy
• Ya con hilos, entro y reviso la penúltima y última página con comentarios... creando nuevos registros para los mensajes o actualizando los datos como numero de votaciones etc...
• Por cada mensaje se analiza el contenido:
  • Por un lado los metadatos: Autor, si ha sido editado, fechas de creación y edición, votos, etc...
  • Por otro lado un analisis de las palabras usadas
  • Por otro lado un analisis de los enlaces compartidos
  • Por otro lado se mira a que usuarios se ha mencionado
  • Por otro lado se analizan las respuestas a mensajes, para esto se consulta la página donde está el mensaje que se está respondiendo y se realiza todo el proceso mencionado para esa página (y así en bucle hasta que todo quede resuelto).

Todo tiene su modelo: AnalyzerUser, AnalyzerThreadCategory, AnalyzerThread, AnalyzerPost, AnalyzerPostStat, AnalyzerPostMedia, ...

** Como contra-medida para evitar floodeos, siempre existe un delay de 3 segundos entre consulta y consulta dentro de un mismo hilo y de 5 segundos por cada hilo.
** No pueden existir dos tareas programadas para el mismo foro (mediavida) ejecutándose a la vez, en caso de lanzar una nueva tarea para un sitio que ya este realizando un trabajo, se esperará a que este trabajo termine antes de permitir la creación de nuevas tareas.
** Dentro del tiempo de ejecución de una tarea programada las páginas se cachean.

Donde más me estoy demorando es en hacer el lado del cliente... maquetar y tal es menos divertido xD y entre semana no toco nada de esto :/ así que a ver si mañana y este finde en general dejo el resto de páginas aunque sea empezadas.

Pff, muy curioso. Muy lindo trabajo lo sigo de cerca

#22 estoy seguro que mis palabras mas usadas son todas positivas y de animo. porque me rio mucho del fpero medio pero sobretodo animo a los chavales a esforzarse y cumplir sus sue;os porque creo en ellos.

a ver si nos libera esta preciosa info algun dia el jefe.

Se agradece el interés por este modesto proyecto

@desu solo tengo 9 mensajes analizados tuyos... se ve que de algún foro de vacunas porque las palabras con más peso son todas "vacunas", "arnm", "vaccines", "virus", etc... xDD y no da para saber el "estado" de tu cuenta (si eres tóxico, afable, etc...)... yo creo que me dará tóxico en cuanto tenga algo de donde rascar
*** Me acabo de dar cuenta con esto que tengo un fallo... estoy contabilizando palabras de los quotes como palabras dichas por el usuario que responde. Estará solucionado para este finde :B

Que pasada, guardado en favoritos

Según mis datos hoy está el día crispado en mediavida... ya me da que está confortable :3

Mediavida se va a dormir entre las 01:00 - 02:00 y se despierta entre las 09:00 - 10:00 ... entre las 13:00 y 14:00 está a tope.