Servicio infraestructura y sistemas de Big Data

Corporació Catalana de Mitjans Audiovisuals, S.A.

Servicio infraestructura y sistemas de Big Data para dar servicio a los procesos de recogida, procesamiento, almacenamiento y visualización de grandes volúmenes de información en tiempo real y procesamiento en batch

Plazo

El plazo para la recepción de ofertas era de 2022-09-23. La contratación se publicó en 2022-08-24.

Proveedores

Los siguientes proveedores se mencionan en decisiones de adjudicación u otros documentos de contratación:

• Nextret, S.L.

¿A quién?

• Corporació Catalana de Mitjans Audiovisuals, S.A.

¿Cómo?

• Servicios relacionados con datos › Servicios de tratamiento de datos

¿dónde?

• Cataluña › Barcelona

Historial de adquisiciones

Fecha	Documento
2022-08-24	Anuncio de licitación
2022-12-14	Anuncio de adjudicación de contrato

Anuncio de licitación (2022-08-24)
Objeto
Alcance de la contratación
Título: Servicios de tratamiento de datos
Número de referencia: 2207OB07
Breve descripción:

Metadatos del anuncio
Idioma original: español 🗣️
Tipo de documento: Anuncio de licitación
Naturaleza del contrato: Servicios
Reglamentación: Unión Europea con participación de Estados ACP
Vocabulario común de contratación pública (CPV)
Código: Servicios de tratamiento de datos 📦
Lugar de ejecución
Región NUTS: Cataluña 🏙️

Procedimiento
Tipo de procedimiento: Procedimiento abierto
Tipo de oferta: Oferta para todos los lotes
Criterios de adjudicación
Oferta más económica

Autoridad contratante
Identidad
País: España 🇪🇸
Tipo de poder adjudicador: Organismo de Derecho público
Nombre del poder adjudicador: Corporació catalana de mitjans audiovisuals, s.a.
Dirección postal: Carrer Oriol Martorell, 1
Código postal: 08970
Ciudad postal: Barcelona
Contacto
Dirección de internet: https://contractaciopublica.gencat.cat/ecofin_pscp/AppJava/cap.pscp?reqCode=viewDetail&idCap=203758&cap=Corporaci%F3%20Catalana%20de%20Mitjans%20Audiovisuals,%20SA%20(CCMA,%20SA) 🌏
Correo electrónico: administracioiserveiscompres@ccma.cat 📧
Teléfono: +34 934999489 📞
Fax: +34 933721253 📠
URL de los documentos: https://contractaciopublica.gencat.cat/ecofin_pscp/AppJava/notice.pscp?reqCode=searchCn&reqPhase=Cn&pagingPage=0&idCap=203758 🌏

Referencia
Fechas
Fecha de envío: 2022-08-24 📅
Fecha límite de presentación: 2022-09-23 📅
Fecha de publicación: 2022-08-29 📅
Identificadores
Número de anuncio: 2022/S 165-469078
Número del DO-S: 165

Objeto
Alcance de la contratación
Valor total estimado: 490 051 EUR 💰
Breve descripción:

En esta concurrencia pública, se solicita un servicio gestionado que ofrezca el siguiente stack tecnológico:

1. Entrada Datos (firewall + Balanceo HA + node + kafka + storm + HDFS + ES)

2. Infraestructura Big Data con las siguientes tecnologías. Si en algún componente se propone una versión superior o un componente alternativo, deberá justificarse el motivo y pactarlo con la CCMA, SA:

a. HDFS v2.7.3 [o sistema de archivos distribuido similar compatible con el resto de componentes del stack tecnológico (HIVE, HUE, Spark, STORM...)]. En este sistema de archivos habrá configuradas estas 4 zonas

i. Stage: Zona de recogida de información pendiente de procesar. Suele haber archivos comprimidos que después pasan a la siguiente zona

ii. RAW: zona con datos en bruto con cierta estructura y formato. En caso de ser HDFS debe poder configurarse particiones y formatos de AVRO y Parquet. Estos datos deben poderse consultar y procesar por los diferentes componentes, como son HIVE, Spark o Storm

iii. Enterprise: Zona con datos procesados y consolidados disponibles para consumir desde distintos componentes, como pueden ser HIVE, Spark o Storm

iv. Consumer: Zona con datos preparados por usuarios (informes de seguimiento o similar)

b. YARN v2.7.3

c. MapReduce2 v2.7.3

d. Tez v0.7.0

e. Hive v1.2.1000

f. HUE 3.11.0

g. Sqoop v1.4.6

h. Oozie v4.2.0

i. ZooKeeper v3.4.6

j. Storm v1.1.0

k. Ambari

l. Kafka v1.0.0

m. Spark v1.6.3

n. Elastic 6.3.1 + kibana 6.3.1

o. Jupyter notebook

p. Python 2 y python 3

3. Entornos diferenciados de Preproducción y Producción con infraestructura separada.

a. Las tecnologías antes mencionadas estarán replicadas en ambos entornos.

b. Dimensionamiento entorno preproducción

i. VCPU: 84

ii. RAM: 512 GB

iii. Fast Storage: 1.500 GB

iv. Standard Storage: 10.000 GB

v. BW: IN - 3Mbps con picos de 20-25Mbps / OUT - 1Mbps

c. Dimensionamiento entorno Producción

i. VCPU: 192

ii. RAM: 1.024GB

iii. Fast Storage: 25.000 GB

iv. Standard Storage: 65.000 GB

v. BW: IN-OUT 1Mbps

d. Tanto el entorno de preproducción como el de producción deben cumplir que:

i. Deben tener interconexión con CCMA

ii. Posibilidad de realizar las acciones de:

1. Visualización de las consultas y procesos en ejecución

2. Detener/matar consultas en ejecución (Ambari/Hive/Yarn)

3. Conexiones directas vía ODBC para conectar aplicaciones tipo MS Excel

4. Visualizar disponibilidad/ocupación de recursos de la plataforma: containers/cores/memoria/hdfs ocupado y disponible/…

5. Posibilidad de traspasar datos entre entornos: PRO <--> PRE

6. Jobs Sqoop

7. Conexión hacia FTP: procesos como Zapping

8. Creación de dashboards, objetos e índices en Elastic

9. Acceso al Cerebro de Elastic

10. Acceso a HUE para utilizar los distintos componentes como:

a. Creación, modificación y programación de workflows (Oozie). Incluyendo la exportación e importación para facilitar el despliegue entre entornos.

b. Consultas con HIVE

c. Acceso al HDFS

Esta infraestructura debe estar conectada a la CCMA, dado que existe intercambio de información bidireccional entre sistemas alojados en la CCMA y esta infraestructura de Big Data. Algunos ejemplos son:

a. El recomendador de contenidos consulta cierta información en el sistema de indexación de la CCMA (Apache Solr)

b. Las recomendaciones generadas por la plataforma de Big Data deben indexarse en el Apache SOLR de la CCMA para dar servicio a los productos digitales.

Esta conectividad se realizará a través de una VPN y se consensuarán los rangos de direccionamiento privado visibles en cada extremo.

Duración: 24 meses
Descripción de las renovaciones:

El contrato tendrá una duración inicial de dos años y se prorrogará automáticamente por anualidades hasta sumar un máximo de cinco años, salvo que alguna de las partes manifieste a la otra parte, con una antelación mínima de 90 días a la fecha de finalización del período inicial o del prorrogado, su voluntad de no prorrogar el contrato.

Procedimiento
Base jurídica: 32014L0024
Hora de recepción de las ofertas: 13:00
Lenguas en las que pueden presentarse las ofertas o solicitudes de participación: catalán 🗣️
español 🗣️
Fecha de apertura de ofertas: 2022-09-26 📅
Hora de apertura de ofertas: 09:00
Criterios de adjudicación
Criterio de calidad (nombre): Criterios subjetivos
Criterio de calidad (ponderación): 28
Criterio de coste (nombre): Criterios cuantificables
Criterio de coste (ponderación): 2
Criterio de coste (nombre): Oferta económica
Criterio de coste (ponderación): 70

Autoridad contratante
Identidad
Número de registro nacional: ESA08849622
Contacto
Punto de contacto: Marta Escudé
Dirección del perfil de comprador: https://contractaciopublica.gencat.cat/ecofin_pscp/AppJava/cap.pscp?reqCode=viewDetail&idCap=203758&cap=Corporaci%F3%20Catalana%20de%20Mitjans%20Audiovisuals,%20SA%20(CCMA,%20SA) 🌏
URL de los documentos: https://contractaciopublica.gencat.cat/ecofin_pscp/AppJava/notice.pscp?reqCode=searchCn&reqPhase=Cn&pagingPage=0&idCap=203758 🌏

Información complementaria
Órgano de revisión
Nombre: Tribunal Català de Contractes del Sector Públic
Dirección postal: Carrer del Foc, 57
Ciudad postal: Barcelona
Código postal: 08038
País: España 🇪🇸
Teléfono: +34 935676300 📞
Correo electrónico: tcsp@gencat.cat 📧
Dirección de internet: www.gencat.cat 🌏
Organismo responsable de los procedimientos de mediación
Igual que: Órgano de revisión
Fuente: OJS 2022/S 165-469078 (2022-08-24)

Anuncio de adjudicación de contrato (2022-12-14)
Objeto
Alcance de la contratación
Valor total de la contratación: 490 051 EUR 💰
Metadatos del anuncio
Tipo de documento: Anuncio de adjudicación de contrato

Procedimiento
Tipo de oferta: No procede

Referencia
Fechas
Fecha de envío: 2022-12-14 📅
Fecha de publicación: 2022-12-19 📅
Identificadores
Número de anuncio: 2022/S 244-706569
Se refiere al anuncio: 2022/S 165-469078
Número del DO-S: 244

Adjudicación del contrato
Fecha de celebración del contrato: 2022-12-09 📅
Nombre: Nextret, s.l.
Número de registro nacional: B60345527
Ciudad postal: Barcelona
Código postal: 08007
País: España 🇪🇸
Cataluña 🏙️
Valor total de la contratación: 462 715 EUR 💰
Información sobre licitaciones
Número de ofertas recibidas: 1
Fuente: OJS 2022/S 244-706569 (2022-12-14)

Nuevas adquisiciones en categorías afines 🆕

Servicios TI: consultoría, desarrollo de software, Internet y apoyo (>20 nuevas adquisiciones)

Servicios relacionados con datos (17)

Servicios de tratamiento de datos (9)