[CodeStyle] add pre-commit hook remove-tabs for python files
#46290
Conversation
SigureMo
changed the title
remove-tabs for python files
.flake8
Outdated
| ./build, | ||
| # A trick to exclude fluid/ but keep fluid/tests/ | ||
| ./python/paddle/fluid/[!t]**, | ||
| ./python/paddle/fluid/transpiler/ |
There was a problem hiding this comment.
根据 #46288 (comment) 的讨论，目前 Flake8 忽略 python/paddle/fluid 整个目录，但需要单独保留 python/paddle/fluid/tests。
Flake8 路径相关使用的是 glob 语法（见 https://en.wikipedia.org/wiki/Glob_(programming) ），glob 语法并不能很好地直接实现这样的需求，Stack Overflow 上也有很多问题说明了这一问题（如 https://stackoverflow.com/questions/20638040/glob-exclude-pattern ）
这里先使用 ./python/paddle/fluid/[!t]** 以排除所有 ./python/paddle/fluid/ 下第一个字母不是 t 的路径，这样的路径包含了 tests/ 子目录、transpiler/ 子目录、trainer_desc.py 和 trainer_factory.py，因此实际上其余以 transpiler/、trainer_desc.py 和 trainer_factory.py 也被「豁免」了。为了解决这一问题，使用额外一项排除掉这样的路径，这样通过两条 glob 实现了上述的需求。
| E201,E202,E203,E221,E225,E226,E228,E231,E241,E251,E261,E262,E265,E266,E271,E272,E275, | ||
| E301,E302,E303,E305,E306, | ||
| E401,E402, | ||
| E501,E502, | ||
| E701,E711,E712,E713,E714,E721,E722,E731,E741, | ||
|
|
||
| # F, see https://flake8.pycqa.org/en/latest/user/error-codes.html | ||
| F401,F402,F403,F404,F405, |
There was a problem hiding this comment.
E124 和 F404 是原本不存在的问题，统计出错是因为 #46014 (comment) 统计时候包含了 autopep8 产生的增量，因此这里把这俩也删掉了
此前现存问题应该是 68 个，已在 tracking issue 中更新
There was a problem hiding this comment.
根据最新统计，又移除了 E221、E275、F523、F823，部分应该是由于排除掉了 fluid，另外一部分应该是因为 #46410 移除了部分 disable 掉的格式化，重新格式化后部分错误码消失了
之后在 tracking issue 更新
PR types
Others
PR changes
Others
Describe
添加 remove-tabs pre-commit hook，以自动删除 tab，并且移除 Flake8 配置中 ignore 的 W191 和 E101 错误码
本 PR 仅针对 python 相关文件
全局忽略第三方库 gast（#34556 引入），
remove-tabs配置忽略一些单测必须要 tabs 的文件