none
Consultar Datos Masivos de Telemetria RRS feed

  • Question

  • Tengo un Azure Data Lake que almacena información de telemetria IoT, tengo un año de información almacenada (formato json) y seguirá creciendo.

    Actualmente me pidieron realizar una aplicación web en C#, donde los usuarios puedan consultar por rango de fechas esta información almacenada y mostrar gráficos.

    Les agradeceré me puedan indicar que solución de Microsoft (Hdinsight, DataBricks, etc) pueda usar para consultar estos datos en el menor tiempo posible y poder usarla tambien desde C#.

    Espero su ayuda.

    Thursday, February 13, 2020 10:38 PM

All replies

  • hola

    de verdad una aplicacion c# para esto, mm no es lo correcto, se te muere la aplicacion con ese volumen de datos

    En que medio esta almacenada esos json? imagino en un storage, pero ojo que segun como configuraron el storage como Cool o Archive acceder a esos datos puede elevar el costo, valida previamente temas de costos de acceso

    Azure Blob storage: hot, cool, and archive access tiers

    a donde voy es que si vas a dar acceso seguido a esos archivo pero definieron el storage como archive vas a tener una penalizacion en costos, solo validalo

    Despues recomendaria que no sea algo en C# puro que acceda a los datos, quizas algo embebido

    No estoy seguro que servicio usar para procesar los json, quizas un Azure Data WereHouse con un Azure Data Factory alcance o quizas Hdinsight

    Lo que si recomendaria es que lo visual lo implementes con Power BI

    Azure and Power BI

    despues si quieres dar acceso a los dashboard de power bi directo o si quieres embeber estos en una app c# creo que tambine se puede, aunque habria que ver que tan bien quedan, por ahi en algo web quede mejor

    saludos


    Leandro Tuttini

    Blog
    MVP Profile
    Buenos Aires
    Argentina


    Thursday, February 13, 2020 11:56 PM