工作地点：北京
岗位职责
负责公司BI系统的开发、优化和日常维护（前端，ETL，数据集群等）；
负责公司数据仓库的开发和优化；
与需求方沟通数据需求，独立完成相关功能。
岗位要求
熟练使用java语言；
熟练使用数据库管理和操作；
有Hadoop/Hive 生产环境工作经验；
有大规模数据处理和日志处理经验的优先；
熟练使用BIEE，Cognos等BI工具者优先；
熟练使用ETL工具者优先；
具有统计学、数据分析等方面相关经验者优先；
熟练使用Linux/UNIX系统, 熟悉Linux/UNIX平台的python,shell,php编程优先；
严密的数学思维、突出的分析和归纳能力、优秀的沟通表达能力；
有责任心，良好的团队合作精神，积极上进，具备良好的学习能力。
联系邮箱: matrix.lisp#gmail.com(把#替换为@)
相关推荐
本文档主要关注如何将Hive数据库集成到SpagoBI中，以便利用Hive的数据处理能力进行报表生成和分析。 集成SpagoBI和Hive数据库的步骤如下： 1. **安装Hive**：首先，你需要在你的服务器上安装Hive，包括设置Hadoop...
在大数据领域，Hive 是一个不可或缺的工具，主要用于数据仓库和商业智能（BI）分析。虽然它的主要操作是通过 SQL 进行，但理解其内部原理和优化策略对于提升集群执行效率至关重要，也是衡量程序员技能水平的一个标志...
在本案例中，我们将重点关注Hive的表设计、数据导入、SQL查询和聚合操作，以及如何通过HiveQL（Hive Query Language）实现复杂的日志分析任务。 【压缩包子文件的文件名称列表】：hive综合应用案例 — 用户搜索日志...
在当今快速发展的信息技术行业中，大数据和商业智能（BI）作为两大热点话题，其发展动态备受业界关注。Yonghong Technology Co., Ltd.（永洪科技）在2014年提供了关于大数据BI发展分享的内容，其中涉及到的关键知识...
这有助于企业了解用户的关注点和兴趣所在，从而更好地调整产品和服务方向。下面是一个简单的SQL查询示例： ```sql SELECT search_term, COUNT(*) AS search_count FROM search_logs GROUP BY search_term ORDER BY ...
接着，前端应用主要关注报表和BI（商业智能）工具。报表工具如帆软finereport和润乾在国内市场占据主导地位，finereport以其全面的功能和强大的服务著称，而润乾则通过低价策略与之竞争。对于小型企业，选择报表工具...
10. **数据可视化**：虽然题目主要关注后端，但BI系统的核心是数据可视化，可能需要对接ECharts、D3.js等前端图表库，实现数据的图形化展示。 通过这个项目，学员可以全面了解BI系统的开发流程，从数据获取、处理到...
数仓注重架构设计和性能，大数据平台关注处理能力和灵活性，报表与BI工具则需兼顾易用性和功能丰富度，数据中台和治理关乎数据的价值释放和长期可持续性。通过全面对比，企业可以找到最符合自身需求的数据产品组合，...
为了帮助企业在选择合适的数据产品时有明确的方向，本文将对数仓、报表、BI、数据中台和数据治理等多个方面进行详尽的对比分析。 首先，数据仓库（数仓）是企业数据基础设施的关键组成部分，用于存储和管理大量的...
当Hive环境有新的修改或升级时，进行回归测试以确保现有功能不受影响。这包括重新运行之前通过的测试用例，确保改动没有引入新的错误。 6. 容量规划测试： 针对大数据环境，容量规划测试是必不可少的。测试团队...
- 有计算机科学、信息技术等相关领域的本科学历，至少5年的数据平台项目开发经验，3年以上的架构设计经验，有大数据平台大型项目架构设计经验者优先。 5. **额外职责与资格** - 构建基于Hadoop/Spark的数据挖掘...
5. 法规与政策：政府对大数据的监管也在不断加强，如欧盟的GDPR（通用数据保护条例）等，企业需要关注相关法规，以确保业务的合法合规。 6. 未来趋势：人工智能（AI）与大数据的结合将是未来的一个重要方向，通过...
总的来说，这个项目结合了网络爬虫技术、大数据处理框架Hadoop、数据仓库工具Hive以及数据可视化技术，全方位展示了如何从海量的二手房数据中挖掘有价值的信息，为房地产市场的研究和决策提供支持。在整个流程中，...
该方法论主要关注数据中台的技术架构与思路、构建过程、未来发展方向等方面，并且结合实际经验，总结了数据中台建设的经验教训。 数据中台技术架构与思路： 数据中台技术架构主要包括数据传输层、数据存储层、数据...
在本实验中，我们主要关注的是使用Hadoop和Hive进行MOMO聊天数据的ETL（抽取、转换、加载）操作以及数据的离线分析和可视化。以下是实验中的关键知识点： 1. **Hadoop分布式系统**：Hadoop是开源的大数据处理框架，...
9. **工具与算法经验**：有使用大数据工作站、BI（商业智能）工具、AI（人工智能）等经验的工程师更受欢迎。同时，具有机器学习背景，如推荐算法、聚类分析、分类算法和关联规则挖掘等项目经验，将大大提升其在数据...