logo
更新:2024-03-29
数据工程师
1.5-2.5万
深圳南山区  | 3-5年  | 本科  | 社招
去申请
收藏
举报
职位详情
员工旅游
定期体检
带薪年假
年终奖
节日福利
五险一金
生日福利
岗位职责:
1、负责分布式自动数据采集系统的架构设计和开发;
2、熟悉各类反反自动采集策略,负责反反自动采集技术难点攻坚,并有丰富的反反自动采集实战经验;
3、深刻理解自动采集系统架构,能对系统架构提出自己的见解和优化方案,提升数据抓取的效率,保证数据的质量和及时更新;
4、建立自动采集监测体系,及时分析及解决自动采集脚本在运行过程中出现的问题;
5、负责海量数据的采集、清洗、解析、入库;

任职要求:
1、全日制本科及以上学历,计算机相关专业;
2、4年及以上自动采集相关工作经验,具备丰富的海量数据自动采集工作经验,熟悉Python及常用的数据分析工具包进行数据分析和处理;
3、精通使用Django, Flask, Redis, Kakfa等, 熟悉主流框架,设计模式和消息中间件
4、掌握MySQL、PostgreSQL其中一种数据库的设计、开发以及数据库事务相关知识;
5、良好的代码能力,扎实的数据结构和算法功底,有快速迭代、逐步优化的工程项目经验;
6、精通自动采集和反自动采集技术,精通http底层协议;精通深度抓取、动态网页技术抓取、浏览器模拟抓取技术等,从结构化的和非结构化的数据中获取信息;
7、精通分布式系统、多线程、云服务,精通一种以上开源框架,熟悉scrapy、requests等其中一个或多个自动采集框架以及原理,有开发自动采集框架经验;
8、对主流自动采集架构有深入研究,具有成熟的自动采集工具开发经验、及Linux、Windows云服务器的运维经验;
9、有很强的学习能力和技术钻研能力,积极主动,思维灵活开放,有良好的沟通能力、团队合作精神。
工作地址
深圳南山区深圳湾科技生态园101
公司介绍
一、实力与规模:
深圳市东信时代信息技术有限公司成立于2004年,是中国领先的营销科技服务商,中国TOP4的效果类移动营销服务商。总部位于深圳,拥有移动媒体全流量资源、先进的大数据应用技术和丰富的客户服务经验,1/3的财富500强企业和1/2的中国互联网综合实力百强企业均为我司长期服务客户。
二、技术优势:
首先,东信具有极强的技术创新基因,共拥有国家发明专利114项,软著245项,集团旗下2家国家高新技术企业。为更好的将业务实践与技术创新相结合,东信于2022年初设立了“总部研发基地”,下半年成立了由深圳市人社局授予的“博士后创新实践基地”。
其次,东信拥有自主研发的营销云四大产品矩阵,覆盖客户品牌在各个阶段的营销需求,助力客户营销效果最大化。
(1)营赛数据:内容营销全流程洞察平台,发掘内容营销需求,辅助内容营销决策,提升内容营销效率,控制内容营销风险。
(2)鹊桥系统2.0:一站式智能广告投放管理平台,辅助账户搭建和自动化报表,智能化实时监测预警,10倍提高运营效率;
(3)云知数:引流电商数据聚合平台,通过建立新数据链路,实现实时订单的精准回传,帮助商家建立精准的用户模型,提高转化效果与消耗能力;
(4)MarketingDesk标准版,建立在大数据分析技术和专有AI算法模型基础上,面向小微企业个人用户的自助式营销云,具备营销洞察、创意洞察、数据归因等功能;
三、运营服务能力:
我司在全国16个城市设有35个运营中心,专注于网服、游戏、电商、金融、大消费、教育等行业,拥有头条、腾讯、快手、微博、爱奇艺、小红书、B站媒体代理授权,2022年全媒体消耗突破86亿,在深圳、北京、上海、广州、合肥、长沙等城市设有专业运营服务团队。公司运营和设计人员达600+人,采用“铁三角服务模式”为企业客户提供一对一的响应式服务;
四、内容制作能力:
为更好的满足客户的创意内容制作需求,东信在全国设置了7个创意拍摄基地,面积分别为:深圳2000平,北京2000平,上海1000平,合肥1000平,广州800平,海口800平,长沙200平,日输出视频创意3800+,日输出图文创意6000+;
五、媒介优势:
(1) 全媒体奖项加持:东信构建了全面的媒体资源网络,与字节跳动、腾讯、快手、微博、B站、小红书等众多互联网优势媒体均建立了深度合作关系,并因优异的运营实力获得了所有合作媒体的一致认可。
(2) 共创、共建、共享价值生态:
东信与国内众多大型综合媒体平台、社交网络平台建立了深层次的合作关系,构建了在数据资产合作、媒体资源合作、达人商业合作三个层面互利共赢的价值生态。
工商信息
以下信息来自
企业类型
有限责任公司
经营状态
存续
行业类型
软件和信息技术服务业
成立日期
2006年03月22日
注册地址
深圳市南山区高新技术产业园南区科技南八道豪威科技大厦22F
统一社会信用代码
91440300786559809H
若用人单位提供虚假招聘信息,以担保或其他任何名义收取财物,扣押或以保管为名索要证件,都属于违法行为,应当提高警惕。
发布于boss直聘