Question

OpenFST提供python extension。是否可以使用该API从已编译的FST模型中读取输入符号（isyms）？

我无法找到合适的属性或方法：

>>> import fst
>>> f = fst.Fst('/home/jan/Downloads/en_us_nostress/model.fst')
>>> dir(f)
['__class__', '__delattr__', '__doc__', '__format__',
'__getattribute__', '__hash__', '__init__', '__new__', '__reduce__',
'__reduce_ex__', '__repr__', '__setattr__', '__sizeof__', '__str__',
'__subclasshook__', '_arc_type', '_check_mutating_imethod',
'_fst_type', '_weight_type', 'arcsort', 'closure', 'concat',
'connect', 'decode', 'encode', 'invert', 'minimize', 'project',
'properties', 'prune', 'push', 'relabel', 'reweight', 'rmepsilon',
'topsort', 'union', 'verify', 'write']
>>> dir(fst)
['ACCEPTOR','ACCESSIBLE', 'ACYCLIC', 'ADD_ARC_PROPERTIES',
'ADD_STATE_PROPERTIES', 'ADD_SUPERFINAL_PROPERTIES', 
'ARC_SORT_PROPERTIES', 'BINARY_PROPERTIES', 'COACCESSIBLE',
'COPY_PROPERTIES', 'CYCLIC', 'DELETE_ARC_PROPERTIES', 
'DELETE_STATE_PROPERTIES', 'EPSILONS', 'ERROR', 'EXPANDED', 
'EXTRINSIC_PROPERTIES', 'FST_PROPERTIES', 'Fst',
'FstError', 'FstWarning', 'INITIAL_ACYCLIC', 'INITIAL_CYCLIC',
'INTRINSIC_PROPERTIES', 'I_DETERMINISTIC', 'I_EPSILONS',
'I_LABEL_INVARIANT_PROPERTIES', 'I_LABEL_SORTED', 'MUTABLE',
'NEG_TRINARY_PROPERTIES', 'NON_I_DETERMINISTIC',
'NON_O_DETERMINISTIC', 'NOT_ACCEPTOR', 'NOT_ACCESSIBLE',
'NOT_COACCESSIBLE', 'NOT_I_LABEL_SORTED', 'NOT_O_LABEL_SORTED',
'NOT_STRING', 'NOT_TOP_SORTED', 'NO_EPSILONS', 'NO_I_EPSILONS',
'NO_O_EPSILSONS', 'NULL_PROPERTIES', 'O_DETERMINISTIC', 'O_EPSILONS',
'O_LABEL_INVARIANT_PROPERTIES', 'O_LABEL_SORTED',
'POS_TRINARY_PROPERTIES', 'RM_SUPERFINAL_PROPERTIES',
'SET_ARC_PROPERTIES', 'SET_FINAL_PROPERTIES', 'SET_START_PROPERTIES',
'STATE_SORT_PROPERTIES', 'STRING', 'TOP_SORTED',
'TRINARY_PROPERTIES', 'UNWEIGHTED', 'WEIGHTED',
'WEIGHT_INVARIANT_PROPERTIES', 'Weight', '_Fst', '_MutableFst',
'__builtins__', '__doc__', '__file__', '__name__', '__package__',
'__pyx_capi__', '__test__', '_fst_error_fatal_old',
'_get_compose_filter', '_get_queue_type', '_get_rand_arc_selection',
'_get_replace_label_type', 'arcmap', 'compose', 'convert',
'determinize', 'difference', 'disambiguate', 'epsnormalize',
'equal', 'equivalent', 'intersect', 'isomorphic', 'prune', 'push', 'randequivalent', 'randgen', 'replace', 'reverse', 'rmepsilon',
'shortestdistance', 'shortestpath', 'synchronize']

Answer 1

我怀疑您使用的是OpenFST版本1.5.0，但该功能不可用。我相信这是在1.5.1版左右添加的。 http://www.openfst.org/twiki/bin/view/News/FstNews

我正在使用1.5.3并且能够使用input_symbols和output_symbols访问符号表。

>>> dir(fst._Fst)
    ['__class__', '__delattr__', '__doc__', '__format__',
    '__getattribute__', '__hash__', '__init__', '__new__',
    '__pyx_vtable__', '__reduce__', '__reduce_ex__', '__repr__',
    '__setattr__', '__sizeof__', '__str__', '__subclasshook__',
    '_repr_svg_', 'arc_type', 'arcs', 'copy', 'draw', 'final',
    'fst_type', 'input_symbols', 'num_arcs', 'num_input_epsilons',
    'num_output_epsilons', 'output_symbols', 'properties', 'start',
    'states', 'text', 'verify', 'weight_type', 'write']

“FST对象属性和属性”下的http://www.openfst.org/twiki/bin/view/FST/PythonExtension可以获得更多信息

Answer 2

在OpenFST 1.7.6中，作为FSTPRINT的一个选项，可以提取输入和输出符号表。这是该命令的“帮助”中选项的编辑版本。 FST文件将打印到屏幕上，但是您会在指定的文件中找到符号表。

更新：为避免长时间打印屏幕，只需将FSTPRINT的输出发送到暂存文件（例如“ junk.txt”），即可在保存符号表文件时将其删除。请参阅代码结尾部分添加的示例。

fstprint --help
Prints out binary FSTs in simple text format.

  Usage: c:\OpenFST\fstprint.exe [binary.fst [text.fst]]

  Flags Description:
    .
    .
    .
    .
    --save_isymbols: type = string, default = ""
      Save input symbol table to file
    --save_osymbols: type = string, default = ""
      Save output symbol table to file
   .
   .
   .

在Windows 10中的Powershell命令提示符下使用的示例：

 fstprint --save_osymbols=HCLout.sym HCL.fst junk.txt

HCLout.sym将是HCL.fst的输出符号表，而junk.txt将是简单文本格式的二进制fst的内容，可以将其删除。

如何使用OpenFST python扩展从fst模型获取输入符号？

2 个答案: