从Amazon Ion文件中提取“数据”

Question

有人使用过Amazon Quantum账本数据库（QLDB）Amazon ion文件吗？如果是这样，您知道如何提取“数据”部分来制定表格吗？也许可以使用python来刮取数据？ 我试图从存储在s3中的这些文件中获取“数据”信息（我无法访问QLDB，因此无法直接查询），然后将结果上传到Glue

我正在尝试使用GLue执行ETL作业，但GLue不喜欢Amazon Ion文件，因此我需要从这些文件中查询数据或从文件中获取相关信息

谢谢。   PS：我所说的“数据”信息是指：

{
    PersonId:"4tPW8xtKSGF5b6JyTihI1U",
    LicenseNumber:"LEWISR261LL",
    LicenseType:"Learner",
    ValidFromDate:2016–12–20,
    ValidToDate:2020–11–15
}

ref：https://docs.aws.amazon.com/qldb/latest/developerguide/working.userdata.html

Answer 1

你试过使用Amazon Ion库吗

假设问题中提到的数据存在于一个名为“myIonFile.ion”的文件中，并且如果该文件中只有ion对象，我们可以按如下方式从该文件中读取数据：

from amazon.ion import simpleion

file = open("myIonFile.ion", "rb")                    # opening the file
data = file.read()                                    # getting the bytes for the file
iondata = simpleion.loads(data, single_value=False)   # Loading as ion data
print(iondata['PersonId'])                            # should print "4tPW8xtKSGF5b6JyTihI1U"

关于使用离子库的进一步指导见Ion Cookbook

此外，我不确定您的用例，但是与QLDB的交互也可以通过QLDB Driver完成，它直接依赖于离子库