Requerimiento: Solución de Web Scraping para Portales de Medios de Información Objetivo del Proyecto Diseñar e implementar una solución automatizada de web scraping para recopilar información de portales de medios de información. Los datos recolectados deberán ser almacenados en una base de datos mediante la ejecución de un procedimiento almacenado (stored procedure) en SQL. ________________________________________ Alcance 1. Realizar scraping en sitios web de medios de información predefinidos, incluyendo, pero no limitado a: o Noticias nacionales o Noticias internacionales o Deportes o Entretenimiento o Economía 2. Recolectar información clave, como: o Título de la noticia o Fecha de publicación o Autor (si está disponible) o Resumen o encabezado o Contenido completo del artículo o Categoría o sección del portal o URL de la noticia o Fuente del medio 3. Guardar los datos en una base de datos SQL mediante un stored procedure que permita: o Validar la integridad de los datos antes de insertarlos. o Evitar duplicidad de registros. ________________________________________ Requerimientos Funcionales 1. Extracción de Datos: o Implementar un módulo para realizar scraping de páginas HTML dinámicas y estáticas. o Manejar sitios con diferentes estructuras HTML, incluyendo aquellos que requieran interacción con JavaScript. 2. Gestión de Acceso: o Incorporar control de acceso para sitios protegidos (si aplica), como inicios de sesión. o Considerar técnicas anti-bloqueo (User-Agent Rotation, IP Proxy). 3. Almacenamiento de Datos: o Diseñar un esquema en SQL que soporte la información recolectada. o Implementar un procedimiento almacenado para insertar los datos en la base de datos, manejando validaciones como: Verificación de duplicados por URL. Registro de errores o inconsistencias en una tabla de logs. 4. Escalabilidad: o Posibilidad de agregar nuevos portales sin modificar significativamente el código base. 5. Frecuencia: o Programar ejecuciones automáticas en intervalos configurables (diario, semanal, etc.). ________________________________________ Requerimientos Técnicos 1. Lenguaje de Programación: o Python (preferiblemente) o Node.js, utilizando frameworks como Beautiful Soup, Scrapy o Puppeteer. 2. Base de Datos: o SQL Server o un motor compatible que permita la ejecución de procedimientos almacenados. 3. Integración con la Base de Datos: o El programa de scraping debe ejecutar el stored procedure tras procesar cada lote de datos. 4. Manejo de Excepciones: o Registro detallado de errores durante el scraping, almacenamiento o ejecución de stored procedures. 5. Compatibilidad: o Diseñar la solución para que sea compatible con sistemas operativos Windows y Linux. ________________________________________ Criterios de Aceptación 1. La solución debe ser capaz de recolectar y almacenar información de al menos 5 portales de noticias iniciales. 2. La inserción en la base de datos debe completarse sin errores y siguiendo las validaciones establecidas. 3. El sistema debe ser modular para facilitar la adición de nuevos portales. 4. Los datos deben ser accesibles para consultas SQL tras su almacenamiento. ________________________________________
Medical Insurance Claim Form Completion Category: Admin Support, Compliance, Customer Service, Data Entry, Data Management, Excel, HIPAA, Word Budget: $30 - $250 USD
04 Nov 2025 23:02 GMT
Finalize Lovable Supabase JS Web App Category: API Development, Backend Development, CSS, Database Management, Frontend Development, Full Stack Development, JavaScript, SEO, SQL, Web Development Budget: min €36 EUR
04 Nov 2025 23:01 GMT
Evolution Gaming Live Data & Video Scraping Api Category: AngularJS, Backend Development, Frontend Development, JavaScript, MongoDB, Node.js, NoSQL Couch & Mongo, React.js, Statistical Analysis, Technical Documentation Budget: €30 - €250 EUR
04 Nov 2025 23:00 GMT
Wix Product Page Layout Refresh Category: CSS, Graphic Design, HTML, UI / User Interface, Web Design, Web Development, Wix Budget: $25 - $50 USD
04 Nov 2025 22:57 GMT
Modern Gold Logo Creation Category: Adobe Illustrator, Photoshop, Branding, Graphic Design, Illustration, Logo Design, Vector Design Budget: $25 - $50 CAD
04 Nov 2025 22:56 GMT
Omegle-Style Chat Website Build Category: API Development, Backend Development, Express JS, HTML, JavaScript, Node.js, React.js, Web Development, WebRTC, Web Design Budget: ₹12500 - ₹37500 INR
04 Nov 2025 22:55 GMT
Informative Don Julio Proposal Video Category: Adobe Premiere Pro, Advertising, Brand Management, Business Development, Content Creation, Digital Marketing, Marketing, Proposal Writing, Social Media Marketing, Video Production Budget: $250 - $750 USD
04 Nov 2025 22:52 GMT
Remote PowerPoint Slide Organizer Category: Data Entry, Desktop Support, Microsoft, Microsoft Office, Powerpoint, Virtual Assistant Budget: $2 - $8 USD
Power BI Data Modeling Expert Category: Big Data Sales, Data Analysis, Data Modeling, Data Visualization, Database Administration, Database Development, Hadoop, MongoDB, MySQL, Power BI Budget: $10 - $30 AUD
04 Nov 2025 22:46 GMT
Edición Fotos y Vídeos Parabrisas Category: Photoshop, Adobe Premiere Pro, Content Creation, Graphic Design, Photo Editing, Social Media Marketing, Video Editing, Visual Design Budget: €6 - €12 EUR
