【LongCat实习】 大模型推理AI工程师

1.负责大模型推理引擎的研发和优化，包括推理系统优化、模型量化压缩和模型部署；
2.负责开发和维护基于大规模数据的推理引擎；
3.参与解决推理过程中的技术难题，提升推理算法的性能和效果；
4.开展相关领域的技术研究，提出创新性的解决方案。

1.大学本科及以上学历，计算机相关专业优先；
2.有软件开发经验，有推理引擎开发经验者优先考虑；
3. 熟练掌握C++、CUDA编程，熟悉常见的数据结构和算法；
4. 熟悉机器学习和深度学习理论，具备扎实的编程能力，熟悉Transformer结构优化者优先；
5. 熟悉常用的深度学习框架，如TensorFlow、PyTorch等，熟悉以下推理框架者优先sglang/vllm、FasterTransformer、DeepSpeed FastGen、TensorRT-LLM等；
6. 具备良好的团队合作精神和沟通能力，能够承担一定的工程管理职责。