我们正在寻找一位经验丰富的 Python 开发工程师,加入我们的团队,参与爬虫开发、AI 项目搭建和后端系统开发。作为该岗位的一员,您将负责设计和实现高效、可扩展的爬虫架构,搭建 AI Agent相关系统,并支持后端服务的开发和优化。
1. 负责基于 Python 的爬虫开发,采集和处理大量数据,保证数据质量和采集效率;
2.根据需求搭建和优化 AI 项目,包括数据预处理、模型训练与部署;
3.参与后端系统的设计与开发,使用 Python 编写高效的服务端逻辑; 4. 编写高质量的代码,进行单元测试、性能调优和代码复审;
5.与团队成员紧密合作,解决技术难题,并持续优化现有系统;
6.根据项目需求,编写相关文档并进行技术分享。
岗位要求:
1.扎实的 Python 编程基础,熟悉常见的开发框架(如 Flask、Django 等);
2. 具备爬虫开发经验,能够熟练使用 Scrapy、BeautifulSoup、Selenium 等爬虫工具;
3. 熟悉机器学习/深度学习框架(如 TensorFlow、PyTorch 等),有 AI 项目开发经验者优先;
4. 熟练掌握 MySQL、PostgreSQL 或其他数据库的使用,能进行高效的数据库设计与优化;
5. 具备 RESTful API 设计与开发经验,能够编写高效的后端服务;
6. 熟悉 Linux 操作系统和常用开发工具,能够高效使用 Git 进行版本控制;
7. 良好的团队合作能力,沟通能力和自我驱动力,能够独立解决问题。
加分项:
• 有大规模数据爬取和处理经验,了解反爬虫机制;
• 了解分布式爬虫和数据存储优化方案;
• 有 AI 项目相关实践经验,特别是在模型部署、性能优化等方面;
• 有使用 Docker、Kubernetes 等容器化技术的经验;
•了解云计算平台(如 AWS、GCP)及相关服务。