Cada punto visto en la seccion es tan importante en lo que respecta a la calidad de datos. Me interesa y motiva ver mas en lo que respecta al lenguaje M y el Editor Avanzado.

Me resultó muy interesante este módulo. La importancia de las keys y los joins, las diferencias entre merge y append queries y conocer algo más del código M, como forma de mejorar la limpieza, transformación y carga de los datos, conceptos fundamentales para agilizar los procesos.

Aprendí a comprobar carga de tablas, examinar las fuentes de errores en los datos, errores de formatos, etc. También cómo anexar y combinar tablas similares. Y lo más valioso fue aprender a ver y modificar el código M y cómo se va generando con los pasos que se van creando.

En este tema también he aprendido algo que no sabía y a su vez me ha surgido una duda. A ver si alguien me la podría resolver. Hasta la fecha siempre que tenía que hacer un Merge o relacionar tablas en el modelo, si la clave que unía dos tablas, era la unión de diferentes columnas, siempre me creaba una columna auxiliar con esta combinación, pero en este tema hemos visto que se puede realizar el Merge seleccionando el conjunto de columnas. Ahora bien, si yo quisiera unir estas tablas, de una forma similar a como lo hicimos con el Merge, ¿sería posible hacer algo similar a lo que pongo en la foto o es necesario crear la columna auxiliar? Espero haberme explicado bien Gracias

Hola @jluis , ¿la pregunta hace referencia a relacionar las tablas en el modelo de datos? En Power BI, cuando creas relaciones entre las tablas en tu modelo, no puedes hacerlo tomando en cuenta varias columnas, ahí sí tienes que utilizar la columna auxiliar.

Gracias @Diego! Sí, me refería al modelo de datos y suponía que era así pero era por tener claro si había alguna alternativa. Gracias por la respuesta. Saludos

Este capítulo nos explica conceptos fundamentales como la limpieza, transformación y carga de datos, para poder trabajarlos en el Query Editor. Es un proceso indispensable al que hay que dedicarle tiempo para que las consultas y las visualizaciones posteriores nos den los resultados esperados. Las herramientas que se ven en esta sección como pivot, unpivot, joins, keys, merge, append, el reemplazo de nombres o valores, son una parte importante en la preparación de los datos que se van a manejar. Esta es una sección fundamental.

Hola, en esta sección aprendí a reemplazar valores erróneos, analizar la calidad de los datos crear columnas de diferentes formas. Me resultó muy interesante la explicación de los joins en la presentación donde se ve con claridad los diferentes tipos de join y su aplicación con merge y append.sin embargo, no pude implementarlo en un trabajo en el que buscaba realizar un filtro con información de 3 tablas. Como las tablas eran muy extensas realicé la creación de 3 nuevas tablas con ciertas columnas para simplificar el join. Una vez creadas quise utilizar el append del power query pero no pude ya que no se visualiza en el power query las tablas creadas. Por lo tanto, Intenté realizar el append directamente con las 3 tablas originales pero el proceso nunca termina ya que las había creado como import en lugar de direct query. Finalmente, me hubiese gustado poder armar 3 tablas nuevas a partir de las existentes (para reducir columnas) y anexarlas para realizar la consulta. Alguna recomendación para poder hacerlo? Respecto a lo aprendido, también me sirvió la parte de agrupar, pivot y unpivot, comprender lo que se escribe en el código M y como hacer para que las tablas aparezcan o no en el dashboard. Saludos

Creo importante profundizar en el leguaje M para darle mas calidad a tus datos, desconocía como controlar que se procesa en el servidor SQL y que en tu aplicación, eso fue importante

Hola, aunque tenia la claridad sobre como utilizar la unión y combinación de columnas, fue como realizar una columna KEY con solo marcar las columnas en el paso del Merge.

Como limpiar los errores, como transforma filas a columnas y columnas a filas, como leer el codigo M

Fue muy interesante este modulo, aprendi sobre la importancia de las keys y los joins, las diferencias entre merge y append queries y de como solucionar los errores.

Hola, aprendi a examinar las fuentes de errores, crear key, etc..

Clara y concisa la explicación de toda la metodología de ETL. Sobre todo la aclaración de los métodos de Join.

Saludos, del tema Limpiar, Transformar y Cargar los Datos he concluído lo siguiente: -La combinación y anexo de consultas son degran utilidad para hacer un join de información o adjuntar filas en una tabla con las mismas columnas, lo cual reduce el modelo y carga del mismo al poder posteriormente evitar usar más tablas desactivando estas dentro de Power Query. -A diferencia de excel, no puede existir celdas de diferentes datos. En PowerBi es necesario establecer un mismo tipo de dato para cada columna, lo cual genera un correcto orden de estos y sirve esencialmente para poder hacer "operaciones" con consultas. -El código M tiene una estructura de forma general bastante sencilla de utilizar, pero convertirse en un experto en el tema conllevaría su praxis. El uso de código a diferencia de los pasos que se hacen utilizando la interfaz gráfica es el hecho de acceder profundamente a un caso específico generando pasos propios y útiles acorde a lo necesitado.

dlom dijo

¿Qué aprendiste en la sección “Clean, Transform, and Load the data”? En esta sección conocí el proceso de configuración para conectar datos. También afiance mis conocimientos en el lenguaje M y diferenciar el método de trasponer y pivotear una tabla, en power query ¿Cómo te servirá esto que aprendiste en tus desarrollos de Power BI? Este tema es muy importante ya que hacer bien el proceso de ETL es clave para el análisis de datos ¿Cómo te servirá esto que aprendiste al presentar el examen de certificación? me ayudara hacer mejores análisis, apoyar mejor los procesos de cualquier compañía o apoyar algún compañero en este tema  si lo requiere.

 

¿Qué aprendiste en la sección “Clean, Transform, and Load the data”? : -Como la funcion "append" te permite anexar varias tablas, y "merge" te ayuda a fusionar las consultas. -Las opciones transpose y unpivot para facilitar la lectura de estructuras mas complejas. -El editor avanzado para el uso de lenguaje M. -La función habilitar y deshabilitar las cargas de las tablas para no mostrar en el modelado las tablas que no necesites. -La gestión y manejo de los errores para una correcta lectura de los datos.

Muy interesante esta sección, si bien ya me eran familiares varias de las funciones y herramientas aquí mencionadas resalto dos que no conocía a profundidad el como funcionaban: 1) La opción del KEPT ERRORS en Power Query, lo cual facilita la revisión y análisis de valores errados o fallados en nuestras consultas. 2) Lenguaje M, yo pensaba que el # se colocaba en cada nuevo paso o linea de codigo, pero solo se coloca si el nombre de ese nuevo paso tiene; en su nombre, un espacio en blanco. Gracias por lo compartido, Saludos

Merge y Apend son 2 excelentes funciones para combinar tus tablas, crear relaciones y luego inactivar o eliminar tablas que no precises. Los tips de mejores prácticas son muy buenos y va a depender del tipo de uso que tengan los usuarios finales. En mi caso particular le dejeria el nombre dim y fact para tener referencias y cambiaria los nombres en los objetos visuales para que el usuario final tenga el entendimiento simple y nosotros por otro lado tengamos una comprensión más rapida del tipo de tables (mas cuando tenemos muchas tablas) Por ultimo comentar que en el ejercicio de Merge no funcionaba porque tienen fechas distintas es decir funciona pero no encuentra combinaciones; la solución es unir las tablas con dos campos sin necesidad de crear la key o cambiar las fechas para que encuentre relaciones. Gracias.

¿Qué aprendiste en la sección “Clean, Transform, and Load the data”? A manejar y ordenar la data e Power Query. ¿Cómo te servirá esto que aprendiste en tus desarrollos de Power BI? Si la data está organizada desde el principio el trabajo con DAX será mucho más sencillo. ¿Cómo te servirá esto que aprendiste al presentar el examen de certificación? Me di cuenta de que tenía unas lagunas al leer lenguaje M y al entender Trasponer y Columnas Dinámicas (Unpivot).

Aprendí/recordé/aclaré conceptos relacionados con la combinación de tablas, transformación de la estructura de las tablas, identificar y resolver errores en los datos, no considerar tablas a nivel del Power BI lo cual me disminuye el peso del archivo, las diferentes formas de ajustar/actualizar el origen de los datos. Todo esto me ayuda a realizar mas rapido de forma eficiente el proceso de limpieza, transformación y carga de los datos, lo que optimiza los tiempos de desarrollo de las aplicaciones y tableros; lo cual esta directamente relacionado con el tema “Transformar y cargar datos” del apartado “Preparar los datos” del examen.  

1. Aprendí diversas herramientas para limpiar los datos, tipos para mejorar la legibilidad de las consultas y columnas, a combinar consultas. Es importante evaluar los tipos de datos de las columnas y darles el tipo de datos adecuado ya que ello impacta en el rendimiento de nuestras consultas. También aprendí a usar la sintaxis del Editor avanzado, el lenguaje M nos puede dar muchas posibilidades en la limpieza de nuestros datos. Esto me servirá para tratar una parte crucial de nuestros desarrollos en Power BI como es el Limpiar y transformar los datos antes de que sean llevados al modelo. Conceptos y herramientas muy necesarias para la certificación.

Dentro de esta sección aprendí una serie de técnicas y habilidades esenciales que son fundamentales para la preparación de datos antes de su análisis y visualización. Este proceso es crucial porque los datos raramente están en el formato perfecto para análisis directo y requieren una manipulación cuidadosa para asegurar que sean precisos, completos y útiles. Con lo visto en este modulo más práctica adicional se debería dominar lo siguiente: 1. Identificar y corregir  problemas comunes en los datos como: Datos faltantes, errores de ingreso, formatos inconsistentes. 2. Saber las técnicas para modificar datos de formas que los hagan más útiles para análisis como: creación de nuevas columnas, agrupación, Pivot y Unpivot Columns, transpose, etc. 3. Cargar datos transformados en PBI: optimizar modelo de datos, saber las relaciones entre tablas.

dlom dijo

¿Qué aprendiste en la sección “Clean, Transform, and Load the data”?   Que podemos agregar contenido similar a tablas existentes desde otras fuentes con estructura igual o similar ¿Cómo te servirá esto que aprendiste en tus desarrollos de Power BI?   Unificar Tablas de Excel que están separadas en diferentes libros o archivos ¿Cómo te servirá esto que aprendiste al presentar el examen de certificación? Si hay alguna pregunta acerca de unificar o transformar información

 

En esta sección del curso, aprendí la estructura del lenguaje M. No sabía que el inicio hace referencia al paso anterior en la declaración in.   Saludos.

En esta sección los conceptos que se repasan son muy ùtiles, sobre todo para la preparación de los datos previo a la generación de un reporte. Destaco la función de código M de "Text.From" algo que desconocía y me hubiese servido tiempo atrás.

Hola! comparto mis puntos claves de esta sección, basado en los aspectos que fueron relevantes para mi.   Gracias   Detección de errores: No borrarlos, analizarlos. Recomendación: keep Error para analizarlos. Luego clikear en el error y observar de dónde vienen. Nulos: Fill down, puede usarse en casos de que hay valores nulos, pero debería repetirse el que está arriba. Se pueden remover o reemplazar. Values replacement: reemplazar valores por otros. Cuidado cuando se reemplaza texto que no se esté reemplazando parte del texto de otra celda que no queramos reemplazar. En números no es lo mismo, si reemplazo el 1 y una celda tiene el 165, ese 1 no será reemplazado en ningún caso que la coincidencia no sea total, es decir, que tengamos "1". Cuidado con la cantidad de reemplazos que agrega pasos en la consulta y hace más pesado el fichero y se tardará mucho más en cargar el PBI. Tratamiento de errores: reemplazar, modificar o corregir: Cuidado con eliminar las filas con error. Preferentemente identificar y corregir el error. Mejor si se corrige en el origen, si fuera el caso, para evitar pasos innecesarios Advanced Editor: incluir/modificar pasos. Ver funciones dentro. Cuidado con la coma al final de cada paso (salvo en el último) y luego del in debe ir uno de los pasos que hay en let. Cada paso debe indicarse con #' salvo que contenga palabras sin espacios. Combinar consultas y anexarlas: se hacen con el Append o Merge. Key column para combinar consultas: se puede crear esta columna con los valores de varias columnas o bien al realizar el merge se seleccionan las columnas que generan la clave única en cada table. Pasos en advanced Editor: cada paso incrementa el tiempo de carga. Se deben minimizar los pasos y transformaciones. Tipos de datos al combinar: cuando se combinan dos tablas, el tipo de dato de la columna utilizada para combinar debe ser el mismo en ambas tablas.