7.30

IT行业的工作方向

一：云计算 -- 大数据

            运维
               l      
            Linux操作系统（Windows--桌面工程师）
               l
-------------------------------------------------------------------------------------------------------------------------------------------------------
   l                                                                                                              l 
Linux运维                                         虚拟化KVM\XEN                     Hadoop + JAVA = 大数据存储方向
（web架构）                                           l                                                 l
（搭建自己的个人网站）                      openstack                    -----------------------------------------------------------
                                                                 l                                     l            l         l             l                    l         l
                                                      docker（k8s）                        HDFS   mr     Hive    zookeeper       ...     sprak（Scala）
                                                                                                                            SQL

                              开发--计算机语言
BASIC 早期的机械语言
C C++:系统开发、驱动开发
         （驱动程序：需要转换各个厂家设备之间的指令集，让厂家设备之间互通）
前端：JS php css html

JAVA

工具：脚本语言 -- shell\perl\python

数据库：MYSQL、nosql

 

二：                         客户
                             （结果）
冰箱+牛奶+模具=（雪糕）

数据存储：磁盘-- --SAN、NAS、DAS(专门将数据存储于磁盘陈列）
                             --
                             --分布式存储架构【HDFS：（Hadoop分布式文件系统）海量数据的存储】--集群（应用软件）

（冰箱）：系统 - Linux

模具：
1、HDFS：（Hadoop分布式文件系统）
2、map-reduces的数据处理集群：他是将海量数据按照一定的方式，修改为键值关系（key-value）
HDFS + map - reduces = Hadoop集群（运行于Linux上的一个高性能集群）

算法：
3、通过数学（统计学）+ Python = 算法
4、数据可视化

 

三、操作系统简介
1、操作系统是干什么的？
        平台--承上启下
         上：应用
         下：硬件设备（resource）

硬件设备平台的三大部件：CPU 存储器（内存） i/o设备（输入输出）
                    （运算器 控制器 存储器 input设备 output设备）
CPU:所有的运算
内存：向CPU提供数据，（CPU只能向内存读取数据），重启系统，内存中的数据会丢失；CPU读取内存中指定（需要的数据），这个过程，我们叫做寻址；（物理地址、逻辑地址）
IO设备：网卡（适配器adapter）：以太网（Ethernet）
磁盘（IDE、SAS、SSD）机械盘、固态盘
2、知识扩展：
                     osi七层模型----TCP/IP的四层模型
                     应用层--QQ                                             |应用层
                     表示层--指令转换                                    |
                     会话层--session建立会话                        |
                     传输层--通过端口区分应用                      |传输层
                     网络层--IP                                                |网络层
                     数据链路层--MAC地址                             |主机到主机层
                     物理层--具体的物理设备（硬件设备）     |
                      【下层为上层提供服务】

操作程序，本身就是一个软件程序，但是，它并不直接对客户提供应用，而是为其他应用提供硬件资源；
操作系统分为：用户空间和内核空间

 

标签：HDFS,7.30,Hadoop,内存,Linux,CPU,设备
来源： https://www.cnblogs.com/WANGRUNZE/p/11272281.html