Hello Gurus，
我们正在开始将MySQL数据迁移到NOSQL，我们希望将所有表格格式数据迁移到嵌套JSON格式。 在某些情况下，我们将执行连接来获取数据（应该以嵌套数组或结构格式保存），因此我们应该如何将这些数据放到嵌套的json格式中。我们需要就此提出建议。 我们正试图在sqoop，hive，pig等hadoop工具的帮助下构建这个解决方案。
请您建议我们实现这一目标的可能方式。
我们尝试使用以下sqoop import命令： sqoop import --username * --password * --connect＆＃39; jdbc：mysql：//realstart.abc：3306 / retail_db＆＃39; --query＆＃39; select orders.order_id，customers.customer_id AS＆＃34; customers.customer_id＆＃34;，customers.customer_fname AS＆＃34; customers.customer_fname＆＃34; FROM订单LEFT JOIN客户ON orders.order_customer_id = customers.customer_id WHERE $ CONDITIONS＆＃39; --hcatalog-database default --hcatalog-table orders --split-by order_id
我们使用以下查询创建了hcat表： hcat -e＆＃34;创建表命令（order_id int，customers struct）行格式serde＆＃39; org.openx.data.jsonserde.JsonSerDe＆＃39;＆＃34;
但不确定如何在-sery of sqoop import中匹配hcat架构的架构。
谢谢＆amp;问候， 马亨德拉
答案 0 :(得分：0)
我认为最好的选择是使用hadoop map reduce类并编写自定义作业来创建嵌套JSON输出或从mysql db和转换数据执行转储。您可以在hadoop或pig中查看有关自定义作业的文档：
我认为没有任何＆＃34;准备使用＆＃34; Sqoop中用于创建JSON输出的选项。