大数据开发工程师

工作职责： 1、大数据设施搭建和维护 2、大数据质量治理（数据采集、清洗和计算） 3、大数据功能完善、设计和开发; 4、大模型数据训练和调优、提示词优化等 岗位需求： 1、本科学历以上，有3~4年以上工作经验，计算数学、数理统计、计算机硬件、网络、软件、信息系统、自动化等专业毕业优先； 2、可独立完成AI大数据相关设施的研究、搭建和软件设计开发；熟悉主流开源数据仓库设施至少一种，比如TiDB HTAP类存储、SPARK、Flink调度设施等； 3、了解大模型工作机理和架构，有大模型设施搭建、数据处理、训练和调优经验优先； 4、有且不限于Java、Python、SQL等爬虫和处理工具处理大数据经验； 5、具有良好的学习钻研能力，对大数据领域和大模型AI领域有所涉猎和兴趣； 6、深入理解常用的数据建模理论，可独立把控数据仓库的各层级设计和建设，具有大模型数据处理实施经验优先； 7、具有数据治理方法，熟悉数据质量调优方法、质量治理框架搭建等相关经验优先； 8、有良好的学习研究能力和主动工作精神，以及技术沟通能力；