模型训练日志 2024-11-05 8:03 | 104 | 0 | 未分类 282 字 | 2 分钟 开启配置,先数据清洗,写了一个format.py,处理成可以处理的格式 接着加入了一个函数,这样整个梳理,处理成正常形式 开始使用默认配置,单文件配置 ./build/bin/lmplz -o 2 -S 10G < data/test/test.txt > models/test/test.arpa 简单优化一下n和内存,效果进步 ./…