资讯月刊下载
Spark Block存储管理分析
Apache Spark中,对Block的查询、存储管理,是通过唯一的Block ID来进行区分的。所以,了解Block ID的生成规则,能够帮助我们了解Block查询、存储过程中是如何定位Block以及如何处理互斥存储/读取同一个Block的。 可以想到,同一个Spark Application,以及多个运行的Application之间,对应的Block都具有唯一的ID,通过代码可以看到,Blo ...
以不一样的视角看物联网协议
引用嵌入式系统接入互联网形成一个物联网系统,协议是必不可少的关键技术。传统上以解决人机对话为目标的互联网协议遇到了物物相连的物联网系统,显得像大马拉小车,有劲使不上,物联网协议就此应运而生。 毫无疑问,人类和嵌入式设备通过完全不同的方式使用互联网。人类主要通过万维网—运行在互联网上的应用集合—访问互联网。当然,网页并不是互联网人机交换的唯一选择,我们还可以通过电子邮件、短信、手机应用程序,以及一系列 ...
大脑理论与智能机器探索者——专访Jeff Hawkins
引用记者 | 卢鸫翔(ludx@csdn.net) 本文为《程序员》原创文章,未经允许不得转载,更多精彩文章请订阅2017年《程序员》 “虽然没人确切知道恐龙是怎么灭绝的,与之相关的理论却很多——关于大脑则完全相反。” 作为工程师,Jeff Hawkins创立了两家便携式计算机公司,Palm和Handspring,开发了风靡一时的PalmPilot和Treo智能电话。然而作为科学家,理解大脑运作方 ...
《近匠》专访Ayla Networks云平台工程部主管Sudha Su ...
引用《近匠》是 CSDN 于 2013 年 12 月正式推出的访谈栏目,其意思即为「走近工匠」,走近深耕于移动应用、物联网领域的工具及服务开发商们,听他们怎么看待现在的开发工作,自己精雕细琢出来的工具有何特点。也希望能够对工具的实际能力进行一番罗列与剖析,帮助开发者找寻到趁手的「兵器」。详情可以从【1】【2】了解。 在今年万物智能互联的背景下,我们特别推出《近匠》物联网 Top 100 系列访谈专 ...
漫谈千亿级数据优化实践:数据倾斜(纯干货)
0x00 前言 引用数据倾斜是大数据领域绕不开的拦路虎,当你所需处理的数据量到达了上亿甚至是千亿条的时候,数据倾斜将是横在你面前一道巨大的坎。 迈的过去,将会海阔天空!迈不过去,就要做好准备:很可能有几周甚至几月都要头疼于数据倾斜导致的各类诡异的问题。 郑重声明: 话题比较大,技术要求也比较高,笔者尽最大的能力来写出自己的理解,写的不对和不好的地方大家一起交流。 有些例子不是特别严谨,一些小细节对文 ...
《近匠》专访AbleCloud CTO孙志东——物联网云解决方 ...
引用《近匠》是 CSDN 于 2013 年 12 月正式推出的访谈栏目,其意思即为「走近工匠」,走近深耕于移动应用、物联网领域的工具及服务开发商们,听他们怎么看待现在的开发工作,自己精雕细琢出来的工具有何特点。也希望能够对工具的实际能力进行一番罗列与剖析,帮助开发者找寻到趁手的「兵器」。详情可以从【1】【2】了解。 在今年万物智能互联的背景下,我们特别推出《近匠》物联网 Top 100 系列访谈专 ...
看得“深”、看得“清” —— 深度学习在图像超清化 ...
引用作者:张延祥,就职于Google北京输入法团队。北航本硕,CSDN知名博主,有多篇CSDN博文流传甚广,对深度学习、自然语言处理和计算机视觉有极大的热忱。 责编:王艺,CSDN AI栏目编辑/记者,目前从事【AI创新者】系列人物访谈,合作及投稿请联系wangyi@csdn.net 本文为《程序员》原创文章,未经允许不得转载,更多精彩文章请订阅2017年《程序员》 日复一日的人像临摹练习使得画家能 ...
见微知著:细粒度图像分析进展
引用作者简介:魏秀参,南京大学计算机系机器学习与数据挖掘所(LAMDA)博士生,专攻计算机视觉和机器学习。曾在国际顶级期刊和会议发表多篇学术论文,并两次获得国际计算机视觉相关竞赛冠亚军。 责编:何永灿,欢迎人工智能领域技术投稿、约稿、给文章纠错,请发送邮件至heyc@csdn.net 本文为《程序员》原创文章,未经允许不得转载,更多精彩文章请订阅2017年《程序员》 有别于通用图像分析任务,细粒度图 ...
Apache Spark 内存管理详解
Spark 作为一个基于内存的分布式计算引擎,其内存管理模块在整个系统中扮演着非常重要的角色。理解 Spark 内存管理的基本原理,有助于更好地开发 Spark 应用程序和进行性能调优。本文旨在梳理出 Spark 内存管理的脉络,抛砖引玉,引出读者对这个话题的深入探讨。本文中阐述的原理基于 Spark 2.1 版本,阅读本文需要读者有一定的 Spark 和 Java 基础,了解 RDD、Shuffl ...
技术直播:大数据技术企业应用,实战hadoop!
写道 数据获取是大数据分析的基本功,那么到底数据该如何获取?本次直播将通过4个课时,让你学会如何获取数据,获取的数据怎么进行分析,以及最终该如何呈现。CSDN联合大数据实战专家徐培成老师共同出品,意在通过项目实例,让大家快速切入,重点讲解内容,让大家真正掌握。直播时间:4月12日开始起的每周三 晚上20:00开始,连续4周。直播平台:CSDN学院 下方微信群!主讲嘉宾:徐培成 IT十八掌创始人兼首 ...
工业物联网通讯框架 ServerSuperIO 的实践应用
引用声明:本文为作者投稿,版权归 CSDN 所有,未经允许,请勿转载。 作者:王强,有10年工业领域开发和管理经验,在煤炭行业、电力行业、环保和节能行业、冶金行业等多家工业和IT企业从事过开发技术与管理工作;对物联网和系统集成系统产品有丰富理论知识和行业背景经验;开发工作一直使用C#为主,现在从事工业领域大数据平台的建设工作。 【CSDN 有奖征稿啦】技术之路,共同进步,有优质移动开发、VR/AR/ ...
全面支持VS2017,ComponentOne 2017V1强势发布!
ComponentOne Studio Enterprise 是一款专注于企业应用的.NET全功能控件套包,支持WinForms、WPF、UWP、ASP.NET MVC等多个平台,帮助在缩减成本的同时,提前交付丰富的桌面、Web和移动企业应用。 在刚刚庆祝完Visual Studio20周年之后,我们迎来了ComponentOne 2017年第一个重要的版本。 ComponentOne St ...
Git 如何处理大仓库
git 是追踪代码库演进的最佳选择,并且它能让你与你的同事间高效协作。当你想要追踪的库非常巨大时会发生什么? 在这篇文章里,我会尝试着给你一些想法和技巧来恰当地处理不同种类的大仓库。 两种大代码库 如果仔细想想,大概会有两种导致仓库大规模增长的原因: 项目累积了非常长的历史(项目成长了很长一段时间并且积累了包袱)。 项目包括了巨大的二进制资产,需要与代码一起跟踪配对。 两者皆有。 因此,仓库的增 ...
CNN之父Yann LeCun:预测学习才是AI的未来
想必你也听说了,在一票难求的Yann LeCun清华演讲当天上午,LeCun本人现身中国科学院自动化研究所,参与了一个“限制级”的高端私享会。CSDN拿到一手音频及影像资料,以下为三条重要摘要。 我对什么感兴趣 非监督学习以及预测学习 迄今为止,在机器学习以及深度学习领域,我们已经取得了一些成功,这些成功都依赖于监督学习。监督学习有它本身的局限性,因为需要很多数据,并且这些数据需要经过人工标注, ...
TensorFlow架构与设计:会话生命周期
引用作者:刘光聪 ,中兴通讯高级系统架构师,专注机器学习算法,分布式系统架构与优化。 原文:TensorFlow架构与设计:会话生命周期 责编:王艺 CSDN AI记者,投稿、寻求报道、深入交流请邮件wangyi@csdn.net 相关文章: 图解TensorFlow架构与设计 TensorFlow架构与设计:图模块 TensorFlow的系统结构以C API为界,将整个系统分为「前端」和「后端」两 ...
使用SMACK堆栈进行快速数据分析
引用作者:马小龙,浙江财经大学数据分析和大数据计算的客座教授。2006年在德国不来梅大学获得数学博士学位后,在多特蒙德大学软件工程研究所从事研究和教学工作直到2011年来到中国。 本文为《程序员》原创文章,未经允许不得转载,更多精彩文章请订阅《程序员》 从大数据到快速数据 除了能够以批处理模式分析大型数据集之外,现代数据驱动型组织还需要尽快从所收集的数据中生成洞察,并最终采取行动。在这方面,传统的H ...
我是运维,我就这样挽救了800万用户
引用作者简介:李光,现任职于腾讯社交网络运营部/织云产品团队,负责运营平台规划与运维新产品开发工作,多年业务运维、运营规划经验。 一、概述 读完关于 DevOps 前世今生的《凤凰项目:一个运维的传奇故事》,书中传达了若干理念,其中一点也是老生常谈的IT的价值体现在帮助业务与用户的价值提升,当时看到这里的时候,想起团队进行过的一个挽救用户的项目。 IT价值交付链从对象层次上可分为公司、产品、用户, ...
WebAssembly,Web的新时代
引用作者:张敏,Intel开源技术中心Web团队软件技术经理,原Opera Software软件经理,在浏览器及Web Runtime领域工作10年,专注于Web及开源技术。 责编:陈秋歌(chenqg@csdn.net) 本文为《程序员》原创文章,未经允许不得转载,更多精彩文章请订阅《程序员》 在浏览器之争中,Chrome凭借JavaScript的卓越性能取得了市场主导地位,然而由于JavaScr ...
图解TensorFlow架构与设计
引用作者:刘光聪 中兴通讯高级系统架构师,专注机器学习算法,分布式系统架构与优化。 原文:TensorFlow架构与设计 责编:王艺 CSDN AI记者,投稿、寻求报道、深入交流请邮件wangyi@csdn.net或扫描文末二维码添加微信。 TensorFlow是什么? TensorFlow基于数据流图,用于大规模分布式数值计算的开源框架。节点表示某种抽象的计算,边表示节点之间相互联系的张量。 计 ...