issue/356 - support qwen3_moe by naive modules

[pengcheng888]

qwen3moe 从v0.1临时分支迁移适配到v0.2

nvidia平台测试
单次推理

python examples/test_infer.py --device nvidia --model=/data-aisoft/mechdancer/models/Qwen3-30B-A3B --tp=1 --max-new-tokens=100 --enable-paged-attn --attn=paged-attn

服务测试

 python python/infinilm/server/inference_server.py \
--device nvidia \
--model=/data-aisoft/mechdancer/models/Qwen3-30B-A3B/ \
--temperature 1.0 \
--top-p 0.8 \
--top-k 1 \
--port 8103 \
--tp 2  \
--block-size 256 \
--max-new-tokens 256 \
--num-blocks 512 \
--max-batch-size 64 \
--attn paged-attn \
--enable-paged-attn

metax平台
单次推理
python examples/test_infer.py --device metax --model=/data-aisoft/wangpengcheng_data/Qwen3-30B-A3B_small --tp=1 --max-new-tokens=10 --enable-paged-attn --attn=paged-attn

服务测试

 python python/infinilm/server/inference_server.py \
--device metax \
--model=/data-aisoft/mechdancer/models/Qwen3-30B-A3B/ \
--temperature 1.0 \
--top-p 0.8 \
--top-k 1 \
--port 8000 \
--tp 2  \
--block-size 256 \
--max-new-tokens 256 \
--num-blocks 512 \
--max-batch-size 64 \
--attn paged-attn \
--enable-paged-attn

[pengcheng888]

依赖infinicore的pr