`
guiyu0856
  • 浏览: 39152 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论
阅读更多

 

         今天我也奇葩了一把,因一个失误,酿成从业6年以来最严重的工作灾难事故。本来今天完成跨HDFS版本数据迁移和1.0IMPALA-LZO是非常值得我高兴的事情,却因在线上环境和测试环境之间迁移数据时,本该删除测试环境的,不小心递归删除了在线数据仓库的一个大目录,造成海量数据丢失,造成难以评估的结果。尼玛,老子人品暴跌吗?

       一再提醒自己细心处理在线事务,却还是在不经意间发生了本不该发生的事情,不是因为不熟悉,而是因为粗心,不可饶恕。

        这次误操作,我没有逃避,没有隐瞒,及时坦白地向上汇报,让事故造成的影响得到了最高程度的控制。目前公司还没有责罚我,不管怎么样,我愿意去承受我能承受的一切!但是还是感谢公司的宽容、领导的担当和大家的配合处理,让数据可以在24小时左右基本恢复!

 

        这次事故值得深思:

               1、主机权限控制问题;

               2、数据操作安全问题(屏蔽高危命令);

               3、数据可快速恢复问题(HDFS回收站)。

       

         接下来,必须做好预防措施和应急方案。 

1
4
分享到:
评论
2 楼 guiyu0856 2013-05-15  
thihy 写道
听过类似的。后来屏蔽了RM,使用MV来代替。

可惜是HDFS 的rmr,哎
1 楼 thihy 2013-05-15  
听过类似的。后来屏蔽了RM,使用MV来代替。

相关推荐

    rmr2_3.3.1

    《深入理解Rmr2_3.3.1:Rhadoop在大数据处理中的核心组件》 在当今的大数据处理领域,Hadoop已经成为了不可或缺的一部分。而Rhadoop,作为R语言与Hadoop之间的桥梁,使得R用户能够充分利用Hadoop的分布式计算能力。...

    PyPI 官网下载 | rmr-django-1.1.5.tar.gz

    《PyPI官网下载 | rmr-django-1.1.5.tar.gz——深入解析Django与Python后端开发》 PyPI(Python Package Index),是Python开发者常用的资源库,其中包含了大量的开源Python软件包和模块。"rmr-django-1.1.5.tar.gz...

    Python库 | rmr-django-1.0.31.tar.gz

    《Python库 rmr-django-1.0.31:深度探索Django后端开发的利器》 在Python的世界里,Django是一个备受推崇的Web开发框架,它以其高效、安全和可扩展性赢得了广大开发者的心。而"rmr-django-1.0.31.tar.gz"这个...

    基于Engauge Digitizer和Python matplotlib的岩体力学Q与RMR分类图中文版设计源码

    本项目提供基于Engauge Digitizer和Python matplotlib库的岩体力学Q与RMR分类图中文版设计源码,包含78个文件,涵盖63个csv数据文件、5个png图像文件、3个py脚本文件和3个pdf文档。该工具从英文文献中的Q分类和RMR...

    Python库 | rmr-django-1.0.29.tar.gz

    资源分类:Python库 所属语言:Python 资源全名:rmr-django-1.0.29.tar.gz 资源来源:官方 安装方法:https://lanzao.blog.csdn.net/article/details/101784059

    rest-rmr:RESTful RMR框架

    剩余rmr 昆士兰科技大学图书馆设计的模块化RESTful[RMR]框架。 文献资料 请参阅随附的。 魔法 框架将立即提供以下功能: HTTP [ ](一种内容协商协议)中的透明内容协商的一种变体的实现。 压缩,如果客户端指定...

    tutorial-rmr2-airline

    本教程以“tutorial-rmr2-airline”为例,详细解析如何利用 rmr2 进行航空公司的数据分析。 首先,理解 rmr2 包的基本概念至关重要。rmr2 提供了一套接口,使得 R 代码能够无缝地运行在 Hadoop 分布式计算环境中。...

    rmr:JavaScript JavaScriptWebGL中的音频React式视觉引擎

    开发者可能因为某种原因从THREE.js转向了rmr,可能是为了寻找更符合他们需求的工具,或者rmr提供了THREE.js所没有的特定功能,比如音频处理和React的集成。"享受!"一词表明rmr的设计目标是提供愉快的开发体验,可能...

    rmr-popover:JavaScript模块,用于创建简单的Popover事物

    今天我们要讨论的是一个名为"rmr-popover"的JavaScript模块,它专门用于创建弹出式窗口,也就是我们常说的Popover。Popover通常被用来展示额外的信息,或者提供一些用户操作的快捷方式,而不会干扰到页面的主要内容...

    damn11111:rmr

    标题中的"damn11111:rmr"可能是一个特定的代码或命令,而描述中的"该死的11 rmr"似乎是在表达一种情绪或者是对某个操作的描述,但信息不够明确,无法直接关联到具体的IT知识点。不过,我们可以根据提供的标签"CSS"来...

    基于广义Hoek-Brown准则的岩体等效强度

    为了更方便地求出岩体的等价粘聚力C和摩擦角φ,基于Hoek-Brown准则与RMR法岩体质量分级,求出不同RMR值下的C和φ,拟合出C和φ的折减系数关于RMR值的变化曲线。结果表明:对于质量等级较好的岩体,根据RMR值可以分别求得...

    rmr-fullscreen:JavaScript规范浏览器的各种全屏API

    "rmr-fullscreen" 是一个专门针对这个功能的无库JavaScript解决方案,旨在解决全屏API在不同浏览器间的兼容性问题。下面我们将深入探讨全屏API的相关知识点及其在实际开发中的应用。 **全屏API概述** 全屏API,也...

    论文研究 - 巴基斯坦KPK康提阿河沿岸岩体质量和变形模量的经验方法评估

    因此,在巴基斯坦开伯尔-普赫图赫瓦省的康提亚河谷,采用岩体质量评级(RMR)和隧道质量指数(Q)分类系统来分析拟建隧道路线中的22条水电。 RMR揭示了岩石质量范围为中等至优质的范围,而对于所研究的岩体段,Q...

    论文研究 - 巴基斯坦开伯尔-普赫图赫瓦省Mansehra地区小水电引水隧洞的岩体质量评估和支护估算

    这项研究的主要目的是利用开伯尔-普赫图赫瓦省曼塞赫拉地区沿小水电引水隧洞的岩体质量(Q)和岩体质量评级(RMR)系统对岩体质量进行分类。 进行了地质野外工作,以确定岩体的方向,间距,孔径,粗糙度和不连续性的...

    Big Data Analysis With RHadoop

    RHadoop的核心组件包括rhdfs(用于访问HDFS)、rmr2(用于编写MapReduce作业)和rhbase(用于与HBase交互)。 #### 三、RHadoop的关键特性 1. **易于上手:** - RHadoop的最大优点之一是它使用户能够使用他们已经...

    r语言使用hadoop的模块rhadoop安装脚本

    本文将详细讲解如何在Ubuntu操作系统中安装rhadoop模块,包括rhbase、rhdfs和rmr2这三个主要组件。 首先,我们需要理解rhadoop的组成。rhadoop是由R接口到Hadoop MapReduce(rmr2)和HDFS(rhdfs)以及R接口到HBase...

Global site tag (gtag.js) - Google Analytics