分布式计算思路(第一季:001)
1.粗粒度:应用采取分布式,也就是把应用放在多台机器上,并采用集群的机构,它是基于每一个IP进行分配。
2.中粒度:我个人认为,应该是线程级别的,每一个程都会对应到相对的应用。
3.细粒度:这个应该是基于CPU级别,每一条运算指令都可以分配到相应的集群中的CPU上。
对于粗粒度,也就是目前很成熟的多层架构中采用的集群。
中粒度和细粒度其实听说的比较少。
感觉还是基于概念比较多一些,当然还有采用分布式文件系统的方式,但是这个比较常见在淘宝类或者搜索引擎类的使用中。
我对于中细粒度比较感兴趣,毕竟是概念多一些。
这里就说说的自己的想法:(这两个合在一起说)
首先最好保证机器之间是光纤连接,这样能够支持大数据量的IO操作。
暂时抛开高可用性,我们基于原理来探讨一下。
1:开发语言应该是支持多内核的语种。
2:开发语言最终应该运行在类似JVM的RunTime上。
3:RunTime这一层对于CPU资源应该是充分的利用。
4:有完善的IO操作机制。
大概的原理是对于每一条指令,都会被分配到一个独立的进程(或者线程),然后由Runtime将该操作指令分配到CPU有空闲的服务器上,由该服务器负责处理。
处理后返回结果。
如果架构设计的合理的话,对服务器的架构也会产生一定的影响,比如服务器的配置,传统硬盘和固态硬盘的采用等。。。
当然只是一个大概,我会在随后的文章中逐渐完善各个部分的思路。
包括网络的设计,CPU空闲算法,RUNTIME的框架。
这里感谢http://lzy.iteye.com/
是他给了我具体的思路:)
同时感谢CCTV,MTV
呵呵,希望我能够完成这个万里路。
分享到:
相关推荐
- **噪声系数级联**:在多级放大器系统中,第一级放大器的噪声系数对整体噪声系数有决定性的影响。 - **镜像噪声贡献**:除了本振噪声外,还需要考虑镜像频率处的噪声对系统性能的影响。 - **宽带本振噪声**:本振...
传统的统计分析过程是 "定性 - 定量 - 再定性",第一个定性是为定量分析找准方向,主要靠经验 判断,一般针对数据短缺的情况下比较重要。现在大数据时代,可以直接通过数 据分析做出判断,所要做的是直接从 "定量...
【标题】"yifan_firstApp:2021SP_BigData_Mod2_Lab2.1" 是一个关于大数据处理的项目,可能是学生或开发者Yifan在2021年春季学期第二模块的第二部分实验。这个项目可能涵盖Java编程语言的应用,以及与大数据相关的...
55links友情链接网址跟踪器,放在桌面,每次直接打开就可以访问55links友情链接交易平台,方便快捷。
AB PLC例程代码项目案例 【备注】 1、该资源内项目代码都经过测试运行成功,功能ok的情况下才上传的,请放心下载使用!有问题请及时沟通交流。 2、适用人群:计算机相关专业(如计科、信息安全、数据科学与大数据技术、人工智能、通信、物联网、自动化、电子信息等)在校学生、专业老师或者企业员工下载使用。 3、用途:项目具有较高的学习借鉴价值,不仅适用于小白学习入门进阶。也可作为毕设项目、课程设计、大作业、初期项目立项演示等。 4、如果基础还行,或热爱钻研,亦可在此项目代码基础上进行修改添加,实现其他不同功能。 欢迎下载!欢迎交流学习!不清楚的可以私信问我!
moore_01_0909
FIBR English learning
AB PLC例程代码项目案例 【备注】 1、该资源内项目代码都经过测试运行成功,功能ok的情况下才上传的,请放心下载使用!有问题请及时沟通交流。 2、适用人群:计算机相关专业(如计科、信息安全、数据科学与大数据技术、人工智能、通信、物联网、自动化、电子信息等)在校学生、专业老师或者企业员工下载使用。 3、用途:项目具有较高的学习借鉴价值,不仅适用于小白学习入门进阶。也可作为毕设项目、课程设计、大作业、初期项目立项演示等。 4、如果基础还行,或热爱钻研,亦可在此项目代码基础上进行修改添加,实现其他不同功能。 欢迎下载!欢迎交流学习!不清楚的可以私信问我!
OIF_IEEE802.3_liaison_19OCt09
做网络安全FTP内容的实验必备
nagarajan_01_1107
AB PLC例程代码项目案例 【备注】 1、该资源内项目代码都经过测试运行成功,功能ok的情况下才上传的,请放心下载使用!有问题请及时沟通交流。 2、适用人群:计算机相关专业(如计科、信息安全、数据科学与大数据技术、人工智能、通信、物联网、自动化、电子信息等)在校学生、专业老师或者企业员工下载使用。 3、用途:项目具有较高的学习借鉴价值,不仅适用于小白学习入门进阶。也可作为毕设项目、课程设计、大作业、初期项目立项演示等。 4、如果基础还行,或热爱钻研,亦可在此项目代码基础上进行修改添加,实现其他不同功能。 欢迎下载!欢迎交流学习!不清楚的可以私信问我!
mellitz_3cd_01_0318
PyQt6实战派 配套代码
陕西省省级非物质文化遗产经纬度数据统计表 统计内容包含以下字段: 1. 项目名称 2. 遗产类别 3. 入选批次 4. 所属地区 5. 申报地区/单位 6. 地理经度 7. 地理纬度 该统计表系统记录了陕西省省级非物质文化遗产的地理空间信息,为文化遗产的数字化保护与研究工作提供了重要的数据支撑。
ran_3ck_02a_0918
毕业设计_基于springboot+vue开发的汽车租赁管理系统【源码+sql+可运行】【50308】.zip 全部代码均可运行,亲测可用,尽我所能,为你服务; 1.代码压缩包内容 代码:springboo后端代码+vue前端页面代码; 脚本:数据库SQL脚本 效果图:运行结果请看资源详情效果图 2.环境准备: - JDK1.8+ - maven3.6+ - nodejs14+ - mysql5.6+ - redis 3.技术栈 - 后台:springboot+mybatisPlus+Shiro - 前台:vue+iview+Vuex+Axios - 开发工具: idea、navicate 4.功能列表 - 系统设置:用户管理、角色管理、资源管理、系统日志 - 业务管理:汽车管理、客户管理、租赁订单 3.运行步骤: 步骤一:修改数据库连接信息(ip、port修改) 步骤二:找到启动类xxxApplication启动 4.若不会,可私信博主!!!
# Runcorder - 跑步训练管理系统 Runcorder 是一款专为跑步爱好者、马拉松运动员及高校体育生设计的本地化跑步训练管理工具,基于 Python 开发,结合 Tkinter 图形界面与强大的数据处理能力,为用户提供从训练记录到数据分析的全方位支持。无论是初学者还是专业跑者,Runcorder 都能帮助你科学规划训练、精准追踪进度,并通过可视化图表直观呈现训练成果,让你的跑步训练更智能、更高效! - **多用户管理**:支持创建、加载和删除用户档案,每个用户的数据独立存储,确保隐私与安全。 - **科学训练记录**:全维度记录跑步数据,包括日期、里程、配速、自评和晨跑标记,支持智能输入校验,避免数据错误。 - **多维数据分析**:通过动态可视化图表展示跑步里程趋势、平均配速曲线,支持自定义 Y 轴范围,帮助用户深入理解训练效果。 - **高阶功能**:提供 4 种科学训练模式(有氧/无氧/混合),支持历史记录修改与删除,数据以 JSON 格式持久化存储,跨平台兼容。
paatzsch_01_0708
AnythingLLM是一个全栈应用程序,您可以使用流行的开源大语言模型,再结合向量数据库解决方案构建个人本地AI大模型知识库