mirror of
https://github.com/MaaAssistantArknights/MaaAssistantArknights.git
synced 2026-07-16 01:40:46 +08:00
格式化工具部分: 1. pre-commit 引入 python 的格式化工具,包括 black(代码格式化)和 isort(对“包导入顺序”的规范) 2. 允许 prettier 对文档站的 markdown 文件格式化 3. 不允许 prettier 对 markdown 文件中的代码块的代码本身进行格式化 4. 升级了 pre-commit 的各个 hook 的版本 5. 优化了 pre-commit 的日志文本显示 容器总览部分: 1. 由原来的单一轻量环境转为区分空环境、轻量环境和全量环境 2. 空环境是裸 Linux 镜像(Ubuntu),为默认环境 3. 轻量环境适合开发文档站前端 4. 全量环境适合开发 MaaCore 5. 目前,全量环境完整包含了轻量环境,轻量环境完整包含了空环境 6. 在仓库 README.md 中更新了三个环境的描述,并将链接分别设置为对应环境的创建链接 **注意:没有修改文档站中的对应文件** 7. 在各个语言的开发指南的最后,移除了 Codespace 部分的“安装额外依赖”相关描述,且将链接设置为全量环境的创建链接 **注意:没有添加“开发文档站”的指南和对应 codespace 的使用方式** 容器的轻量环境和全量环境共有部分: 1. 安装 black 和 isort 包 2. 调整 VS Code 设置,取消先前(对 markdown 文件单独指定 markdownlint 扩展作为格式化工具)的错误设置,现在 markdown 文件仍然使用默认的 prettier 扩展作为格式化工具 3. 引入 markdown-all-in-one 扩展作为语法提示工具 4. 将 node_modules 和 3rdparty 排除在 VS Code 的文本的搜索路径之外 容器的全量环境部分: 1. 为 tools 下的所有 python 脚本安装依赖 2. 使用 tools/maadeps-download.py 下载 maadeps,且将必要二进制文件软链接到 /usr/local/bin/ 3. 使用 apt 安装 cmake 和 clangd-20,将后者通过 update-alternatives 设置为系统 clangd 的默认版本 4. 使用 cmake tools 扩展,并按照 Linux 编译方法进行配置 5. 使用 clang-format 作为 c/cpp 的格式化工具,clang-format 程序主体来自 maadeps(已经软链接到 /usr/local/bin/) 6. 使用 clangd 作为 c/cpp 的语法提示工具 7. 将 MaaDeps、install 和 build 排除在 VS Code 的文本搜索路径之外 其它手动调整: 1. 更新文档站的 package.json,指定 pnpm 包管理器的版本 2. 手动保证 markdown 文件中的列表前后有空行(注意到 MarkdownLint 官方规则不一定能精准定位所有“列表前后空行”的问题,详见:https://github.com/DavidAnson/markdownlint/blob/main/doc/Rules.md#md032---lists-should-be-surrounded-by-blank-lines ) 3. 修改了部分 markdown 文件中的 json 代码块的语法问题 **注意:相同的问题并未全部发现,仅修改了两处** 4. 在 tools 目录中,一处 python 脚本的包名误用(本地包名和某个 pip 包重名),这里修改了相应代码 5. 在 tools 目录中,一处 python 脚本使用了弃用的包 cchardet 的问题,这里更换了推荐使用的功能相近的包并修改了相应代码 自动化脚本提交的修改: 1. 自动格式化了大量 tools 中的 python 脚本 2. 自动格式化了大量 docs 中的 markdown 文件 Commits: * chore: pre-commit引入black和isort规范py文件 * chore: Auto update by pre-commit hooks [skip changelog] * chore: devcontainer添加isort扩展,排序python导入 * chore: pre-commit任务命名及更名 * style: isort fix * chore: Auto update by pre-commit hooks [skip changelog] * chore: 更新pre-commit的hook版本 * fix: 模块名与第三方库重名,大忌 * chore: 容器构建时额外安装isort * docs: md -> markdown * chore: 容器安装python包和maadeps * fix: 修复过时python包 * chore: 指定pnpm版本 * chore: container支持选择轻量环境 * chore: 去掉rust * chore: add plain env * chore: 使用clangd语言服务器 * chore: 无需单独设置markdown的格式化工具 * chore: 更新安装的clangd版本 * docs: 简易文档适配 * docs: 在仓库README中重新编排codespaces相关指引 * chore: Auto update by pre-commit hooks [skip changelog] * style: 调整缩进 * chore: 格式化工具不用特意排除被gitignore忽略的文件 * chore: sh文件在gitattributes中单列一类 * chore: 格式化docs下的markdown文件 * chore: 暂时不修改md文件中的代码块 * style: 人为明确markdown中的部分列表相关格式 * docs: 补上部分markdown的json代码块中缺失的逗号 * chore: Auto update by pre-commit hooks [skip changelog] * chore: Auto update by pre-commit hooks [skip changelog] * fix: 补上tools的服务器排序相关代码中缺失的逗号 Co-authored-by: Copilot <175728472+Copilot@users.noreply.github.com> * chore: 使用maadeps的clangd * build: 更新maadeps工具链版本 * style: prettier fix * revert: 还原maadeps版本 * revert: 取消使用maadeps的clangd依赖,改用系统apt安装 --------- Co-authored-by: pre-commit-ci[bot] <66853113+pre-commit-ci[bot]@users.noreply.github.com> Co-authored-by: Copilot <175728472+Copilot@users.noreply.github.com>
152 lines
7.2 KiB
Python
152 lines
7.2 KiB
Python
import os
|
|
import unittest
|
|
|
|
from src.auto_localization import XamlParser, judge_encoding, parse_lang_str
|
|
|
|
|
|
class TestXamlParser(unittest.TestCase):
|
|
|
|
def setUp(self):
|
|
self.zh_sample_path = "example/zh-cn.xaml"
|
|
self.zh_new_sample_path = "example/zh-cn_new.xaml"
|
|
self.en_sample_path = "example/en-us.xaml"
|
|
self.en_force_sample_path = "example/en-us_force.xaml"
|
|
self.en_compare_sample_path = "example/en-us_compare.xaml"
|
|
self.en_update_sample_path = "example/en-us_update.xaml"
|
|
os.path.abspath(self.zh_sample_path)
|
|
with open(self.zh_sample_path, "r", encoding="utf-8") as f:
|
|
self.zh_sample_content = f.read()
|
|
with open(self.zh_new_sample_path, "r", encoding="utf-8") as f:
|
|
self.zh_new_sample_content = f.read()
|
|
with open(self.en_sample_path, "r", encoding="utf-8") as f:
|
|
self.en_sample_content = f.read()
|
|
with open(self.en_force_sample_path, "r", encoding="utf-8") as f:
|
|
self.en_force_sample_content = f.read()
|
|
with open(self.en_compare_sample_path, "r", encoding="utf-8") as f:
|
|
self.en_compare_sample_content = f.read()
|
|
with open(self.en_update_sample_path, "r", encoding="utf-8") as f:
|
|
self.en_update_sample_content = f.read()
|
|
if not os.path.exists("tests/data"):
|
|
os.makedirs("tests/data")
|
|
self.zh_path = "tests/data/zh-cn.xaml"
|
|
self.zh_new_path = "tests/data/zh-cn_new.xaml"
|
|
self.en_force_path = "tests/data/en-us_force.xaml"
|
|
self.en_compare_path = "tests/data/en-us_compare.xaml"
|
|
self.en_update_path = "tests/data/en-us_update.xaml"
|
|
self.zh_tw_path = "tests/data/zh-tw.xaml"
|
|
self.ja_path = "tests/data/ja-jp.xaml"
|
|
self.ko_path = "tests/data/ko-kr.xaml"
|
|
with open(self.zh_path, "w", encoding="utf-8") as f:
|
|
f.write(self.zh_sample_content)
|
|
with open(self.zh_new_path, "w", encoding="utf-8") as f:
|
|
f.write(self.zh_new_sample_content)
|
|
with open(self.en_force_path, "w", encoding="utf-8") as f:
|
|
f.write(self.en_sample_content)
|
|
with open(self.en_compare_path, "w", encoding="utf-8") as f:
|
|
f.write(self.en_sample_content)
|
|
with open(self.en_update_path, "w", encoding="utf-8") as f:
|
|
f.write(self.en_sample_content)
|
|
|
|
def test_judge_encoding(self):
|
|
expected_encoding = "UTF-8"
|
|
result_encoding = judge_encoding(self.zh_path)
|
|
self.assertEqual(expected_encoding, result_encoding)
|
|
|
|
def test_parse_lang_str(self):
|
|
expected_zh_cn_language = "Chinese (Simplified)"
|
|
expected_zh_tw_language = "Chinese (Traditional)"
|
|
expected_en_language = "English"
|
|
expected_ja_language = "Japanese"
|
|
expected_ko_language = "Korean"
|
|
self.assertEqual(expected_zh_cn_language, parse_lang_str(self.zh_path))
|
|
self.assertEqual(expected_zh_tw_language, parse_lang_str(self.zh_tw_path))
|
|
self.assertEqual(expected_en_language, parse_lang_str(self.en_force_path))
|
|
self.assertEqual(expected_en_language, parse_lang_str(self.en_compare_path))
|
|
self.assertEqual(expected_en_language, parse_lang_str(self.en_update_path))
|
|
self.assertEqual(expected_ja_language, parse_lang_str(self.ja_path))
|
|
self.assertEqual(expected_ko_language, parse_lang_str(self.ko_path))
|
|
with self.assertRaises(ValueError):
|
|
parse_lang_str("./test/bla")
|
|
|
|
def test_init(self):
|
|
zh_parser = XamlParser(parse_type=0, file=self.zh_path)
|
|
with self.assertRaises(AssertionError):
|
|
XamlParser(parse_type=1, xaml_string=self.zh_sample_content)
|
|
zh_string_parser = XamlParser(
|
|
parse_type=1, language="Chinese", xaml_string=self.zh_sample_content
|
|
)
|
|
self.assertIsInstance(zh_parser, XamlParser)
|
|
self.assertIsInstance(zh_string_parser, XamlParser)
|
|
self.assertFalse(zh_string_parser.write_xaml())
|
|
with self.assertRaises(ValueError):
|
|
XamlParser(parse_type=2)
|
|
with self.assertRaises(AssertionError):
|
|
XamlParser(parse_type=0, file="./test/blah.xaml")
|
|
s = zh_parser.tostring
|
|
self.assertTrue(s.count("
") == 0)
|
|
|
|
def test_xpath(self):
|
|
zh_parser = XamlParser(parse_type=0, file=self.zh_sample_path)
|
|
# 检验空结果
|
|
with self.assertRaises(AssertionError):
|
|
next(zh_parser.xpath(".//test"))
|
|
self.assertIsNone(next(zh_parser.xpath(".//test", accept_empty=True)))
|
|
|
|
# 检验多结果
|
|
with self.assertRaises(AssertionError):
|
|
next(zh_parser.xpath(".//s:String[@x:Key]"))
|
|
self.assertLess(
|
|
1, len(list(zh_parser.xpath(".//s:String[@x:Key]", only_one=False)))
|
|
)
|
|
|
|
# 检验单结果
|
|
res = list(zh_parser.xpath('.//s:String[@x:Key="Settings"]'))
|
|
self.assertEqual(1, len(res))
|
|
self.assertEqual("设置", res[0].text)
|
|
|
|
def test_translate_compare_structure(self):
|
|
zh_parser = XamlParser(parse_type=0, file=self.zh_sample_path)
|
|
en_parser = XamlParser(parse_type=0, file=self.en_sample_path)
|
|
en_compare_parser = XamlParser(parse_type=0, file=self.en_compare_sample_path)
|
|
self.assertFalse(zh_parser.compare_structure(en_parser))
|
|
self.assertTrue(zh_parser.compare_structure(en_compare_parser))
|
|
|
|
def test_translate_force(self):
|
|
zh_parser = XamlParser(parse_type=0, file=self.zh_path)
|
|
zh_parser.translate_force(self.en_force_path, skip_translate=True)
|
|
with open(self.en_force_path, "r", encoding="utf-8") as f:
|
|
translated_content = f.read()
|
|
compare_parser = XamlParser(parse_type=0, file=self.en_force_path)
|
|
self.assertEqual(translated_content, self.en_force_sample_content)
|
|
self.assertTrue(zh_parser.compare_structure(compare_parser))
|
|
|
|
def test_translate_compare(self):
|
|
zh_parser = XamlParser(parse_type=0, file=self.zh_path)
|
|
en_parser = XamlParser(parse_type=0, file=self.en_compare_path)
|
|
|
|
en_parser.translate_compare(zh_parser, skip_translate=True)
|
|
|
|
with open(self.en_compare_path, "r", encoding="utf-8") as f:
|
|
# translated_content = f.read()
|
|
compare_parser = XamlParser(parse_type=0, file=self.en_compare_path)
|
|
# self.assertEqual(translated_content, self.en_compare_sample_content)
|
|
self.assertTrue(zh_parser.compare_structure(compare_parser))
|
|
|
|
def test_update_translate(self):
|
|
zh_parser = XamlParser(parse_type=0, file=self.zh_path)
|
|
zh_new_parser = XamlParser(parse_type=0, file=self.zh_new_path)
|
|
en_parser = XamlParser(parse_type=0, file=self.en_update_path)
|
|
en_new_parser = XamlParser(parse_type=0, file=self.en_compare_path)
|
|
|
|
en_parser.update_translate(zh_parser, zh_new_parser, skip_translate=True)
|
|
en_new_parser.update_translate(zh_parser, zh_new_parser, skip_translate=True)
|
|
with open(self.en_update_path, "r", encoding="utf-8") as f:
|
|
# translated_content = f.read()
|
|
compare_parser = XamlParser(parse_type=0, file=self.en_update_path)
|
|
# self.assertEqual(translated_content, self.en_update_sample_content)
|
|
self.assertTrue(zh_new_parser.compare_structure(compare_parser))
|
|
|
|
|
|
if __name__ == "__main__":
|
|
unittest.main()
|