Com funciona el rastrejador de cola?
Com funciona el rastrejador de cola?

Vídeo: Com funciona el rastrejador de cola?

Vídeo: Com funciona el rastrejador de cola?
Vídeo: ¿Conviene tener un refrigerador de coca cola en una Tienda de Abarrotes? 2024, De novembre
Anonim

2 respostes. El CRAWLER crea les metadades que permeten COLA i serveis com ATHENA per visualitzar la informació S3 com una base de dades amb taules. És a dir, et permet crear el Cola Catàleg. D'aquesta manera es pot veure la informació que té s3 com a base de dades composta per diverses taules.

Aleshores, com funciona el rastrejador de cola AWS?

An rastrejador AWS Glue es connecta a un magatzem de dades, avança a través d'una llista prioritzada de classificadors per extreure l'esquema de les vostres dades i altres estadístiques, i després omple el Cola Catàleg de dades amb aquestes metadades.

Posteriorment, la pregunta és: AWS glue és de codi obert? Amazon Fonts obertes Biblioteca Python per AWS Glue . Amazon té obert -procedent d'una biblioteca de Python coneguda com Athena Cola Registres de servei (AGSlogger) que facilita l'anàlisi dels formats de registre AWS Glue per a l'anàlisi i està pensat per utilitzar-lo amb AWS registres de servei.

Simplement així, es pot configurar amb cola AWS?

AWS Glue no té servidor, de manera que no hi ha infraestructura conjunt aixecar o gestionar. Vostè llauna també utilitzeu el AWS Glue Operacions de l'API amb les quals interaccionar AWS Glue serveis. Editeu, depureu i proveu el vostre codi ETL de Python o Scala Apache Spark mitjançant un entorn de desenvolupament conegut.

L'AWS no té cola?

Un objecte al AWS Glue El catàleg de dades és una taula, versió de taula, partició o base de dades. El primer milió de sol·licituds d'accés al AWS Glue Catàleg de dades per mes són lliure . Si supereu el milió de sol·licituds en un mes, se us cobrarà 1,00 $ per milió de sol·licituds per sobre del primer milió.

Recomanat: