Hadoop必知必会（HDFS+MapReduce部分）
Hadoop是一个分布式存储和并行计算综合的系统。分布式存储由HDFS,HBase,Hive等实现，并行计算由MapReduce计算框架实现。 也就是说，Hadoop系统主要分为分布式存储和并行计算部分。集群中一般有一个主控节点，和若干个从节点。分布式存储方面，主控节点维护一个N
2,993Ray源码解析之调度部分
Ray Version 0.4.0 调度部分包括六个文件： 调度策略：头文件scheduling_policy.h（定义SchedulingPolicy）和cpp文件scheduling_policy.cc（为SchedulingPolicy实现调度策略）。 调度队列：头文件s
5,332Ray源码解析之Task部分
Ray Version 0.4.0 task头文件描述了Task的数据结构。Task代表了一个Ray的任务及其规格，包括执行时获得的可变的规格和提交时就确定的不可变的规格。分别由TaskExecutionSpecification和TaskSpecification表示。初始化T
3,000Ray源码解析之整体逻辑结构
Ray Version 0.4.0 以一个Ray示例程序来说明，Ray执行多进程/分布式程序的过程。1234567891011import rayimport time@ray.remotedef f(): time.sleep(1) return 1ray.init
6,071Linux异常集锦
新开一贴，记录一下Linux使用中的一些问题。 ssh不通，并报如下错误12345678910111213@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ WARNING: REMOTE HOST ID
1,244近代史年表（1839-1911）
公元年份 朝代年号 大事记 1839 道光十九年 林则徐于虎门销毁鸦片。 1840 道光二十年 中英第一次鸦片战争爆发(1840~1842年)。 1841 道光二十一年 1842 道光二十二年 中英签订《南京条约》，英占香港岛，开放五口通商。 1843
2,694C++面向对象FQA
Q. 面向对象的理解？ 面向对象是一种程序设计方法。面向对象有三大特性：封装，继承，多态。 1) 封装： 封装可以隐藏实现细节，使得代码模块化；封装是把过程和数据包围起来，对数据的访问只能通过已定义的界面。面向对象计算始于这个基本概念，即现实世界可以被描绘成一系列完全自治、封装
3,649漫谈C++内存分配与管理
本文谈谈C++的内存分配与管理，主要包括内存布局，分配，管理，解配，以及内存错误和防范措施。漫谈漫谈，想到什么谈什么，不要在意前后衔接。 首先要了解程序占用的内存布局，顺便可以了解下对应的操作系统上的真实存储布局。 通常一个由 C/C++ 编译的程序占用的内存分为以下 5 个部分
4,234《软技能》读书笔记
偶然的机会，得阅《软技能》一书。 这本书蛮神奇，对于程序员这个职业代码之外的许多个方面结合作者的经验做了讲述。 涵盖主题从工作效率，工作方法，到博客，演讲，学习方法到健身，理财，营养学等多个方面，非常广泛，给人启发，愚以为软件从业人员值得一读。 其中有几点对我个人比较有启发，在这
1,374算法拾珠（二）
不知怎么的把算法拾珠（一）发到公众号上去了，底稿也删了，所以算法拾珠（一）只能见公众号文章了。 本文记录了三种算法问题的基本问题和一系列扩展问题（followup），可供深入理解这几类问题的解法。 这三类问题包括： X sum问题：一个序列中取X个数字，使它们的和凑成定值。股票
4,271