日期: 2024 年 11 月 5 日

1 篇文章

thumbnail
模型训练日志
开启配置,先数据清洗,写了一个format.py,处理成可以处理的格式 接着加入了一个函数,这样整个梳理,处理成正常形式 开始使用默认配置,单文件配置 ./build/bin/lmplz -o 2 -S 10G < data/test/test.txt > models/test/test.arpa 简单优化一下n和内存,效果进步 ./…