Hadoop 学习之RPC的使用与实现原理

hadoop作为分布式的系统， 集群机器之间的通信是最基本，最常见的需求。
这种需求本质上是IPC, 即进程间通信。 按照传统的UINX编程模型，进程间通信无非是如下的几种方式:
管道， FIFO， 消息队列， 信号量， 共享存储， 套接字。只有套接字是可以跨机器的网络通信， 能满足hadoop的需求。

通常情况下， 网络通信的程序使用显式网络编程（即直接使用java.net包）。比如Web浏览器， Web服务器等。
但也有另一部分程序使用隐式网络编程， 比如利用hadoop RPC这种封装了底层通信细节的工具包。这样做使得底层的网络通信对于程序员透明。一则减轻了程序员的负担， 二则抽象了功能模块， 使得模块之间职责更清晰， 便于维护。

首先展示一个hadoop RPC功能demo， 了解hadoop RPC的用法。

step 1: 在pom.xml文件中添加依赖项step 2: 在src/main/resources中添加log4j.properties
step 3: 定义RPC协议
step 4: 实现RPC协议
step 5； 构造并启动 RPC Server
step 6: 构造 RPC Client 并发送 RPC 请求
step 7:开发云主机域名 启动RPC Server, 然后执行 RPC Client.

通过上面的例子可以发现， 通过这种编程方式，不用考虑网络层的细节，只需要编写接口和接口实现即可。
问渠那得清如许？ 通过hadoop RPC的源码， 或许可以管中窥豹。

hadoop RPC的实现原理很简单。
Client:
1. 通过动态代理，获取到调用接口的方法，参数类型。
2. 将调用信息编码，发送到服务器
3. 获取服务器的返回值， 并解码。
4. 返回调用方法的返回值。
Server:
1. 启动服务器， 并监听客户端。
2. 获取客户端发送过来的调用方法， 参数。
3. 执行实现类中相关的方法。
4. 将返回值发送到客户端。

理解原理后， 自己动手实现了一个非常粗糙， 只具备演示功能的RPC框架。

相关推荐: linux卸载mysql的详细步骤

下面一起来了解下linux卸载mysql的详细步骤，相信大家看完肯定会受益匪浅，文字在精不在多，希望linux卸载mysql的详细步骤这篇短内容是你想要的。 linux卸载mysql的步骤：1、首先查看mysql的安装情况显示之前安装了：2、停止mysql服务…