编程语言
熟练使用python进行编程,也有Java、JS使用经验,熟悉python常见并发及异步框架
Apache Airflow
具备长期的Airflow实践经验,精通工作流的设计、调度、监控和优化,能够高效地构建、管理和扩展复杂的数据管道和自动化任务,可以独立构建运维高可用的大规模的任务调度系统。
数据处理相关
熟悉Flink,Spark,HBase等大数据处理和存储相关工具,熟练对结构化和非结构化数据的处理
Web开发技能
可以熟练使用Flask,FastApi框架进行api开发,熟悉RESTful API,能编写高并发下的鲁棒api。
容器及容器编排
1.熟悉docker,能使用docker-compose和k8s对容器进行编排管理
2.熟练编写dockerfile,并可结合gitlab进行持续部署
数据库相关
1. 熟悉Redis架构设计、性能优化、持久化机制、主从复制、哨兵系统及Redis集群部署与维护,能够高效地利用Redis解决高并发和大数据量处理问题
2. 具有一定的SQL优化经验,熟练掌握复杂查询优化、索引设计,熟悉MySQL和PostgreSQL
3. 了解Mongodb, Elasticsearch等非结构化数据库
Linux
有多种Linux发行版(Ubuntu,CentOS)使用经验,了解常用shell命令工具及shell脚本编写
常用算法及数据结构
熟练掌握常用算法及数据结构,能够根据项目需求,设计高效的算法解决方案,并有效地提升程序的运行效率和资源利用率。
自然语言处理
有自然语言处理相关经验,了解RAG相关技术。
个人信息
出生日期
08/04/1993
技能
教育
- 北北京航空航天大学 - 生物与医学工程
- 北北京航空航天大学 - 材料科学工程
工作经历
- AAutoX
- 中中国司法大数据研究院有限公司
简历摘要
2
公司
1
语言