Eu tenho um Map[String, Dataframe]
. Eu quero combinar todos os dados dentro desse Mapa em um único Dataframe. Pode uma dataframe tem uma coluna do Mapa de tipo de dados?
def sample(dfs : Map[String,Dataframe]): Dataframe =
{
.........
}
Exemplo:
DF1
id name age
1 aaa 23
2 bbb 34
DF2
game time score
ludo 10 20
rummy 30 40
Eu passo os dois acima DFs como Mapa para a função. Em seguida, colocar os dados de cada dataframes em uma única coluna da saída dataframe como formato json.
fora do DF
+---------------------------------------------------------------------------------------+
| column1 |
+---------------------------------------------------------------------------------------+
| [{"id":"1","name":"aaa","age":"23"},{"id":21","name":"bbb","age":"24"}] |
| [{"game":"ludo","time":"10","score":"20"},{"game":"rummy","time":"30","score":"40"}] |
+---------------------------------------------------------------------------------------+