岗位职责：
1.严格遵守工作流程、数据安全规范和开发代码规范；
2.配合开发部其他小组对需求进行确认，并制定整体计划，参与采集代码的开发与数据的清洗；
3.解决和攻克身份认证、封账号、封IP等数据采集问题；
4.对数据进行批量采集，保存数据库；
5.数据出现异常时，及时与其他部门的人员进行沟通修正；
6.负责数据采集、数据清洗、数据校验，性能方面的优化；
7.提高数据抓取的效率和质量；
8.解决数据的重复，识别垃圾数据；
9.能很好的和各工作组配合，分析数据，给与各工作组技术支持、技术解答、需求收集，大数据应用支持等；
10.根据项目要求，协助完成相关开发文件和资料的编写，并集中管理；
11.所有源代码按照代码管理要求，统一上传服务器集中管理。
"岗位要求：
1、计算机、管理科学与工程、数学、电子商务等相关专业，本科及以上学历；
2、有项目研发经验或数据治理经验；
3、熟练掌握C/C++/JAVA编程语言；理解操作系统原理、微机原理与接口技术；
4、熟悉软件工程规范，有良好的编程习惯；
5、踏实肯干，耐心细致，有责任心；
6、有良好的沟通能力；
7、有较强的学习能力，善于分析思考问题；
8、整体概念明确，思路清晰，独立性强，具有团队合作精神。