工作职责：
-负责海量数据抓取、爬虫算法策略研究，保证互联网数据的高效稳定爬取
-负责数据仓库的设计、建设与优化，包括Hadoop/Spark/Mysql的数据清洗、存储计算、高性能读写等。
-结合业务场景，建设数据平台，负责数据平台的设计和功能开发
-其他数据平台相关任务

任职要求：
1、计算机 、软件工程等相关专业本科及以上学历
2、能熟练使用C++/Python/GO等开发语言，并且有使用不同框架的开发经验；熟练应用Mysql、Oracle等数据库技术；
3、熟悉常用爬虫框架中的一种或多种，熟悉常用反爬对抗策略，有Android/IOS 端的采集和逆向经验者优先；
4、熟悉hadoop、MapReduce、spark等大数据处理的经验；
5、热爱互联网，对互联网相关业务或技术充满好奇及热情；
6、快速的产品及业务学习能力，敏捷而周到的逻辑思维能力；
7、有责任心、敢于担当，工作积极主动，具备良好的团队合作精神，能融入多功能团队，并与其他部门同事进行良好的沟通及合作。