Files
MaaAssistantArknights/tools/AutoLocalization/tests/test_xaml_load.py
Lucien Shaw e461208bf9 chore: 完善容器配置及依赖安装 (#14208)
格式化工具部分:
1. pre-commit 引入 python 的格式化工具,包括 black(代码格式化)和 isort(对“包导入顺序”的规范)
2. 允许 prettier 对文档站的 markdown 文件格式化
3. 不允许 prettier 对 markdown 文件中的代码块的代码本身进行格式化
4. 升级了 pre-commit 的各个 hook 的版本
5. 优化了 pre-commit 的日志文本显示

容器总览部分:
1. 由原来的单一轻量环境转为区分空环境、轻量环境和全量环境
2. 空环境是裸 Linux 镜像(Ubuntu),为默认环境
3. 轻量环境适合开发文档站前端
4. 全量环境适合开发 MaaCore
5. 目前,全量环境完整包含了轻量环境,轻量环境完整包含了空环境
6. 在仓库 README.md 中更新了三个环境的描述,并将链接分别设置为对应环境的创建链接
   **注意:没有修改文档站中的对应文件**
7. 在各个语言的开发指南的最后,移除了 Codespace 部分的“安装额外依赖”相关描述,且将链接设置为全量环境的创建链接
   **注意:没有添加“开发文档站”的指南和对应 codespace 的使用方式**

容器的轻量环境和全量环境共有部分:
1. 安装 black 和 isort 包
2. 调整 VS Code 设置,取消先前(对 markdown 文件单独指定 markdownlint 扩展作为格式化工具)的错误设置,现在 markdown 文件仍然使用默认的 prettier 扩展作为格式化工具
3. 引入 markdown-all-in-one 扩展作为语法提示工具
4. 将 node_modules 和 3rdparty 排除在 VS Code 的文本的搜索路径之外

容器的全量环境部分:
1. 为 tools 下的所有 python 脚本安装依赖
2. 使用 tools/maadeps-download.py 下载 maadeps,且将必要二进制文件软链接到 /usr/local/bin/
3. 使用 apt 安装 cmake 和 clangd-20,将后者通过 update-alternatives 设置为系统 clangd 的默认版本
4. 使用 cmake tools 扩展,并按照 Linux 编译方法进行配置
5. 使用 clang-format 作为 c/cpp 的格式化工具,clang-format 程序主体来自 maadeps(已经软链接到 /usr/local/bin/)
6. 使用 clangd 作为 c/cpp 的语法提示工具
7. 将 MaaDeps、install 和 build 排除在 VS Code 的文本搜索路径之外

其它手动调整:
1. 更新文档站的 package.json,指定 pnpm 包管理器的版本
2. 手动保证 markdown 文件中的列表前后有空行(注意到 MarkdownLint 官方规则不一定能精准定位所有“列表前后空行”的问题,详见:https://github.com/DavidAnson/markdownlint/blob/main/doc/Rules.md#md032---lists-should-be-surrounded-by-blank-lines )
3. 修改了部分 markdown 文件中的 json 代码块的语法问题
   **注意:相同的问题并未全部发现,仅修改了两处**
4. 在 tools 目录中,一处 python 脚本的包名误用(本地包名和某个 pip 包重名),这里修改了相应代码
5. 在 tools 目录中,一处 python 脚本使用了弃用的包 cchardet 的问题,这里更换了推荐使用的功能相近的包并修改了相应代码

自动化脚本提交的修改:
1. 自动格式化了大量 tools 中的 python 脚本
2. 自动格式化了大量 docs 中的 markdown 文件

Commits:

* chore: pre-commit引入black和isort规范py文件

* chore: Auto update by pre-commit hooks [skip changelog]

* chore: devcontainer添加isort扩展,排序python导入

* chore: pre-commit任务命名及更名

* style: isort fix

* chore: Auto update by pre-commit hooks [skip changelog]

* chore: 更新pre-commit的hook版本

* fix: 模块名与第三方库重名,大忌

* chore: 容器构建时额外安装isort

* docs: md -> markdown

* chore: 容器安装python包和maadeps

* fix: 修复过时python包

* chore: 指定pnpm版本

* chore: container支持选择轻量环境

* chore: 去掉rust

* chore: add plain env

* chore: 使用clangd语言服务器

* chore: 无需单独设置markdown的格式化工具

* chore: 更新安装的clangd版本

* docs: 简易文档适配

* docs: 在仓库README中重新编排codespaces相关指引

* chore: Auto update by pre-commit hooks [skip changelog]

* style: 调整缩进

* chore: 格式化工具不用特意排除被gitignore忽略的文件

* chore: sh文件在gitattributes中单列一类

* chore: 格式化docs下的markdown文件

* chore: 暂时不修改md文件中的代码块

* style: 人为明确markdown中的部分列表相关格式

* docs: 补上部分markdown的json代码块中缺失的逗号

* chore: Auto update by pre-commit hooks [skip changelog]

* chore: Auto update by pre-commit hooks [skip changelog]

* fix: 补上tools的服务器排序相关代码中缺失的逗号

Co-authored-by: Copilot <175728472+Copilot@users.noreply.github.com>

* chore: 使用maadeps的clangd

* build: 更新maadeps工具链版本

* style: prettier fix

* revert: 还原maadeps版本

* revert: 取消使用maadeps的clangd依赖,改用系统apt安装

---------

Co-authored-by: pre-commit-ci[bot] <66853113+pre-commit-ci[bot]@users.noreply.github.com>
Co-authored-by: Copilot <175728472+Copilot@users.noreply.github.com>
2025-09-30 19:39:48 +08:00

152 lines
7.2 KiB
Python

import os
import unittest
from src.auto_localization import XamlParser, judge_encoding, parse_lang_str
class TestXamlParser(unittest.TestCase):
def setUp(self):
self.zh_sample_path = "example/zh-cn.xaml"
self.zh_new_sample_path = "example/zh-cn_new.xaml"
self.en_sample_path = "example/en-us.xaml"
self.en_force_sample_path = "example/en-us_force.xaml"
self.en_compare_sample_path = "example/en-us_compare.xaml"
self.en_update_sample_path = "example/en-us_update.xaml"
os.path.abspath(self.zh_sample_path)
with open(self.zh_sample_path, "r", encoding="utf-8") as f:
self.zh_sample_content = f.read()
with open(self.zh_new_sample_path, "r", encoding="utf-8") as f:
self.zh_new_sample_content = f.read()
with open(self.en_sample_path, "r", encoding="utf-8") as f:
self.en_sample_content = f.read()
with open(self.en_force_sample_path, "r", encoding="utf-8") as f:
self.en_force_sample_content = f.read()
with open(self.en_compare_sample_path, "r", encoding="utf-8") as f:
self.en_compare_sample_content = f.read()
with open(self.en_update_sample_path, "r", encoding="utf-8") as f:
self.en_update_sample_content = f.read()
if not os.path.exists("tests/data"):
os.makedirs("tests/data")
self.zh_path = "tests/data/zh-cn.xaml"
self.zh_new_path = "tests/data/zh-cn_new.xaml"
self.en_force_path = "tests/data/en-us_force.xaml"
self.en_compare_path = "tests/data/en-us_compare.xaml"
self.en_update_path = "tests/data/en-us_update.xaml"
self.zh_tw_path = "tests/data/zh-tw.xaml"
self.ja_path = "tests/data/ja-jp.xaml"
self.ko_path = "tests/data/ko-kr.xaml"
with open(self.zh_path, "w", encoding="utf-8") as f:
f.write(self.zh_sample_content)
with open(self.zh_new_path, "w", encoding="utf-8") as f:
f.write(self.zh_new_sample_content)
with open(self.en_force_path, "w", encoding="utf-8") as f:
f.write(self.en_sample_content)
with open(self.en_compare_path, "w", encoding="utf-8") as f:
f.write(self.en_sample_content)
with open(self.en_update_path, "w", encoding="utf-8") as f:
f.write(self.en_sample_content)
def test_judge_encoding(self):
expected_encoding = "UTF-8"
result_encoding = judge_encoding(self.zh_path)
self.assertEqual(expected_encoding, result_encoding)
def test_parse_lang_str(self):
expected_zh_cn_language = "Chinese (Simplified)"
expected_zh_tw_language = "Chinese (Traditional)"
expected_en_language = "English"
expected_ja_language = "Japanese"
expected_ko_language = "Korean"
self.assertEqual(expected_zh_cn_language, parse_lang_str(self.zh_path))
self.assertEqual(expected_zh_tw_language, parse_lang_str(self.zh_tw_path))
self.assertEqual(expected_en_language, parse_lang_str(self.en_force_path))
self.assertEqual(expected_en_language, parse_lang_str(self.en_compare_path))
self.assertEqual(expected_en_language, parse_lang_str(self.en_update_path))
self.assertEqual(expected_ja_language, parse_lang_str(self.ja_path))
self.assertEqual(expected_ko_language, parse_lang_str(self.ko_path))
with self.assertRaises(ValueError):
parse_lang_str("./test/bla")
def test_init(self):
zh_parser = XamlParser(parse_type=0, file=self.zh_path)
with self.assertRaises(AssertionError):
XamlParser(parse_type=1, xaml_string=self.zh_sample_content)
zh_string_parser = XamlParser(
parse_type=1, language="Chinese", xaml_string=self.zh_sample_content
)
self.assertIsInstance(zh_parser, XamlParser)
self.assertIsInstance(zh_string_parser, XamlParser)
self.assertFalse(zh_string_parser.write_xaml())
with self.assertRaises(ValueError):
XamlParser(parse_type=2)
with self.assertRaises(AssertionError):
XamlParser(parse_type=0, file="./test/blah.xaml")
s = zh_parser.tostring
self.assertTrue(s.count("&#x0a;") == 0)
def test_xpath(self):
zh_parser = XamlParser(parse_type=0, file=self.zh_sample_path)
# 检验空结果
with self.assertRaises(AssertionError):
next(zh_parser.xpath(".//test"))
self.assertIsNone(next(zh_parser.xpath(".//test", accept_empty=True)))
# 检验多结果
with self.assertRaises(AssertionError):
next(zh_parser.xpath(".//s:String[@x:Key]"))
self.assertLess(
1, len(list(zh_parser.xpath(".//s:String[@x:Key]", only_one=False)))
)
# 检验单结果
res = list(zh_parser.xpath('.//s:String[@x:Key="Settings"]'))
self.assertEqual(1, len(res))
self.assertEqual("设置", res[0].text)
def test_translate_compare_structure(self):
zh_parser = XamlParser(parse_type=0, file=self.zh_sample_path)
en_parser = XamlParser(parse_type=0, file=self.en_sample_path)
en_compare_parser = XamlParser(parse_type=0, file=self.en_compare_sample_path)
self.assertFalse(zh_parser.compare_structure(en_parser))
self.assertTrue(zh_parser.compare_structure(en_compare_parser))
def test_translate_force(self):
zh_parser = XamlParser(parse_type=0, file=self.zh_path)
zh_parser.translate_force(self.en_force_path, skip_translate=True)
with open(self.en_force_path, "r", encoding="utf-8") as f:
translated_content = f.read()
compare_parser = XamlParser(parse_type=0, file=self.en_force_path)
self.assertEqual(translated_content, self.en_force_sample_content)
self.assertTrue(zh_parser.compare_structure(compare_parser))
def test_translate_compare(self):
zh_parser = XamlParser(parse_type=0, file=self.zh_path)
en_parser = XamlParser(parse_type=0, file=self.en_compare_path)
en_parser.translate_compare(zh_parser, skip_translate=True)
with open(self.en_compare_path, "r", encoding="utf-8") as f:
# translated_content = f.read()
compare_parser = XamlParser(parse_type=0, file=self.en_compare_path)
# self.assertEqual(translated_content, self.en_compare_sample_content)
self.assertTrue(zh_parser.compare_structure(compare_parser))
def test_update_translate(self):
zh_parser = XamlParser(parse_type=0, file=self.zh_path)
zh_new_parser = XamlParser(parse_type=0, file=self.zh_new_path)
en_parser = XamlParser(parse_type=0, file=self.en_update_path)
en_new_parser = XamlParser(parse_type=0, file=self.en_compare_path)
en_parser.update_translate(zh_parser, zh_new_parser, skip_translate=True)
en_new_parser.update_translate(zh_parser, zh_new_parser, skip_translate=True)
with open(self.en_update_path, "r", encoding="utf-8") as f:
# translated_content = f.read()
compare_parser = XamlParser(parse_type=0, file=self.en_update_path)
# self.assertEqual(translated_content, self.en_update_sample_content)
self.assertTrue(zh_new_parser.compare_structure(compare_parser))
if __name__ == "__main__":
unittest.main()