`
longgangbai
  • 浏览: 7340550 次
  • 性别: Icon_minigender_1
  • 来自: 上海
社区版块
存档分类
最新评论

【转】Apache Thrift - 可伸缩的跨语言服务开发框架(代码已修正)

阅读更多

个人学习参考所用,勿喷!

 

原文地址:http://www.ibm.com/developerworks/cn/java/j-lo-apachethrift/index.html

 

对原文的修改:

1.原文的服务器端代码的BUG,不论是0.8.0还是0.6.1版本的thrift,例如以下的创建server的方式都不对(正确结果看修正后的文中代码):

Java代码  收藏代码
  1. TServer server = new TThreadPoolServer(processor, serverTransport, proFactory);   
Java代码  收藏代码
  1. TServer server = new TThreadPoolServer(processor, serverTransport, proFactory);   

2.增加了maven的构建方式。

3.修正启动server时候的"Failedto load class org.slf4j.impl.StaticLoggerBinder"的BUG,参考地址:http://www.slf4j.org/codes.html#StaticLoggerBinder

4.附件为maven构建的工程代码

 

前言:

        目前流行的服务调用方式有很多种,例如基于 SOAP 消息格式的 Web Service,基于 JSON 消息格式的 RESTful 服务等。其中所用到的数据传输方式包括 XML,JSON 等,然而 XML 相对体积太大,传输效率低,JSON 体积较小,新颖,但还不够完善。本文将介绍由 Facebook 开发的远程服务调用框架 Apache Thrift,它采用接口描述语言定义并创建服务,支持可扩展的跨语言服务开发,所包含的代码生成引擎可以在多种语言中,如 C++, Java, Python, PHP, Ruby, Erlang, Perl, Haskell, C#, Cocoa, Smalltalk 等创建高效的、无缝的服务,其传输数据采用二进制格式,相对 XML 和 JSON 体积更小,对于高并发、大数据量和多语言的环境更有优势。本文将详细介绍 Thrift 的使用,并且提供丰富的实例代码加以解释说明,帮助使用者快速构建服务。

一个简单的 Thrift 实例

        本文首先介绍一个简单的 Thrift 实现实例,使读者能够快速直观地了解什么是 Thrift 以及如何使用 Thrift 构建服务。

创建一个简单的服务 Hello。首先根据 Thrift 的语法规范编写脚本文件 Hello.thrift,代码如下:


清单 1. Hello.thrift

Thrift代码  收藏代码
  1. namespace java service.demo   
  2. service Hello{   
  3.  string helloString(1:string para)   
  4.  i32 helloInt(1:i32 para)   
  5.  bool helloBoolean(1:bool para)   
  6.  void helloVoid()   
  7.  string helloNull()   
  8. }  
Thrift代码  收藏代码
  1. namespace java service.demo   
  2. service Hello{   
  3.  string helloString(1:string para)   
  4.  i32 helloInt(1:i32 para)   
  5.  bool helloBoolean(1:bool para)   
  6.  void helloVoid()   
  7.  string helloNull()   
  8. }  

其中定义了服务 Hello 的五个方法,每个方法包含一个方法名,参数列表和返回类型。每个参数包括参数序号,参数类型以及参数名。 Thrift 是对 IDL(Interface Definition Language) 描述性语言的一种具体实现。因此,以上的服务描述文件使用 IDL 语法编写。使用 Thrift 工具编译 Hello.thrift,就会生成相应的 Hello.java 文件。该文件包含了在 Hello.thrift 文件中描述的服务 Hello 的接口定义,即 Hello.Iface 接口,以及服务调用的底层通信细节,包括客户端的调用逻辑 Hello.Client 以及服务器端的处理逻辑 Hello.Processor,用于构建客户端和服务器端的功能。

创建 HelloServiceImpl.java 文件并实现 Hello.java 文件中的 Hello.Iface 接口,代码如下:


清单 2. HelloServiceImpl.java

Java代码  收藏代码
  1. package service.demo;  
  2.   
  3. import org.apache.thrift.TException;  
  4.   
  5. public class HelloServiceImpl implements Hello.Iface {  
  6.     @Override  
  7.     public boolean helloBoolean(boolean para) throws TException {  
  8.         return para;  
  9.     }  
  10.   
  11.     @Override  
  12.     public int helloInt(int para) throws TException {  
  13.         try {  
  14.             Thread.sleep(20000);  
  15.         } catch (InterruptedException e) {  
  16.             e.printStackTrace();  
  17.         }  
  18.         return para;  
  19.     }  
  20.   
  21.     @Override  
  22.     public String helloNull() throws TException {  
  23.         return null;  
  24.     }  
  25.   
  26.     @Override  
  27.     public String helloString(String para) throws TException {  
  28.         return para;  
  29.     }  
  30.   
  31.     @Override  
  32.     public void helloVoid() throws TException {  
  33.         System.out.println("Hello World");  
  34.     }  
  35. }  
Java代码  收藏代码
  1. package service.demo;  
  2.   
  3. import org.apache.thrift.TException;  
  4.   
  5. public class HelloServiceImpl implements Hello.Iface {  
  6.     @Override  
  7.     public boolean helloBoolean(boolean para) throws TException {  
  8.         return para;  
  9.     }  
  10.   
  11.     @Override  
  12.     public int helloInt(int para) throws TException {  
  13.         try {  
  14.             Thread.sleep(20000);  
  15.         } catch (InterruptedException e) {  
  16.             e.printStackTrace();  
  17.         }  
  18.         return para;  
  19.     }  
  20.   
  21.     @Override  
  22.     public String helloNull() throws TException {  
  23.         return null;  
  24.     }  
  25.   
  26.     @Override  
  27.     public String helloString(String para) throws TException {  
  28.         return para;  
  29.     }  
  30.   
  31.     @Override  
  32.     public void helloVoid() throws TException {  
  33.         System.out.println("Hello World");  
  34.     }  
  35. }  

创建服务器端实现代码,将 HelloServiceImpl 作为具体的处理器传递给 Thrift 服务器,代码如下:


清单 3. HelloServiceServer.java

Java代码  收藏代码
  1. package service.server;  
  2.   
  3. import org.apache.thrift.TProcessor;  
  4. import org.apache.thrift.protocol.TBinaryProtocol;  
  5. import org.apache.thrift.protocol.TBinaryProtocol.Factory;  
  6. import org.apache.thrift.server.TServer;  
  7. import org.apache.thrift.server.TThreadPoolServer;  
  8. import org.apache.thrift.transport.TServerSocket;  
  9. import org.apache.thrift.transport.TTransportException;  
  10. import service.demo.Hello;  
  11. import service.demo.HelloServiceImpl;  
  12.   
  13. public class HelloServiceServer {  
  14.     /** 
  15.      * 启动 Thrift 服务器 
  16.      *  
  17.      * @param args 
  18.      */  
  19.     @SuppressWarnings({ "rawtypes""unchecked""unused" })  
  20.     public static void main(String[] args) {  
  21.         try {  
  22.             // 设置服务端口为 7911  
  23.             TServerSocket serverTransport = new TServerSocket(7911);  
  24.             // 设置协议工厂为 TBinaryProtocol.Factory  
  25.             Factory proFactory = new TBinaryProtocol.Factory();  
  26.             // 关联处理器与 Hello 服务的实现  
  27.             TProcessor processor = new Hello.Processor(new HelloServiceImpl());  
  28.             TThreadPoolServer.Args argss = new TThreadPoolServer.Args(  
  29.                     serverTransport);  
  30.             // 默认情况就是TBinaryProtocol.Factory  
  31.             // argss.inputProtocolFactory(proFactory);  
  32.             // argss.outputProtocolFactory(proFactory);  
  33.             argss = argss.processor(processor);  
  34.             TServer server = new TThreadPoolServer(argss);  
  35.             System.out.println("Start server on port 7911...");  
  36.             server.serve();  
  37.   
  38.         } catch (TTransportException e) {  
  39.             e.printStackTrace();  
  40.         }  
  41.     }  
  42. }  
Java代码  收藏代码
  1. package service.server;  
  2.   
  3. import org.apache.thrift.TProcessor;  
  4. import org.apache.thrift.protocol.TBinaryProtocol;  
  5. import org.apache.thrift.protocol.TBinaryProtocol.Factory;  
  6. import org.apache.thrift.server.TServer;  
  7. import org.apache.thrift.server.TThreadPoolServer;  
  8. import org.apache.thrift.transport.TServerSocket;  
  9. import org.apache.thrift.transport.TTransportException;  
  10. import service.demo.Hello;  
  11. import service.demo.HelloServiceImpl;  
  12.   
  13. public class HelloServiceServer {  
  14.     /** 
  15.      * 启动 Thrift 服务器 
  16.      *  
  17.      * @param args 
  18.      */  
  19.     @SuppressWarnings({ "rawtypes""unchecked""unused" })  
  20.     public static void main(String[] args) {  
  21.         try {  
  22.             // 设置服务端口为 7911  
  23.             TServerSocket serverTransport = new TServerSocket(7911);  
  24.             // 设置协议工厂为 TBinaryProtocol.Factory  
  25.             Factory proFactory = new TBinaryProtocol.Factory();  
  26.             // 关联处理器与 Hello 服务的实现  
  27.             TProcessor processor = new Hello.Processor(new HelloServiceImpl());  
  28.             TThreadPoolServer.Args argss = new TThreadPoolServer.Args(  
  29.                     serverTransport);  
  30.             // 默认情况就是TBinaryProtocol.Factory  
  31.             // argss.inputProtocolFactory(proFactory);  
  32.             // argss.outputProtocolFactory(proFactory);  
  33.             argss = argss.processor(processor);  
  34.             TServer server = new TThreadPoolServer(argss);  
  35.             System.out.println("Start server on port 7911...");  
  36.             server.serve();  
  37.   
  38.         } catch (TTransportException e) {  
  39.             e.printStackTrace();  
  40.         }  
  41.     }  
  42. }  

创建客户端实现代码,调用 Hello.client 访问服务端的逻辑实现,代码如下:


清单 4. HelloServiceClient.java

Java代码  收藏代码
  1. package service.client;   
  2.  import org.apache.thrift.TException;   
  3.  import org.apache.thrift.protocol.TBinaryProtocol;   
  4.  import org.apache.thrift.protocol.TProtocol;   
  5.  import org.apache.thrift.transport.TSocket;   
  6.  import org.apache.thrift.transport.TTransport;   
  7.  import org.apache.thrift.transport.TTransportException;   
  8.  import service.demo.Hello;   
  9.   
  10.  public class HelloServiceClient {   
  11.  /**  
  12.      * 调用 Hello 服务 
  13.      * @param args  
  14.      */   
  15.     public static void main(String[] args) {   
  16.         try {   
  17.             // 设置调用的服务地址为本地,端口为 7911   
  18.             TTransport transport = new TSocket("localhost"7911);   
  19.             transport.open();   
  20.             // 设置传输协议为 TBinaryProtocol   
  21.             TProtocol protocol = new TBinaryProtocol(transport);   
  22.             Hello.Client client = new Hello.Client(protocol);   
  23.             // 调用服务的 helloVoid 方法  
  24.             client.helloVoid();   
  25.             transport.close();   
  26.         } catch (TTransportException e) {   
  27.             e.printStackTrace();   
  28.         } catch (TException e) {   
  29.             e.printStackTrace();   
  30.         }   
  31.     }   
  32.  }   
Java代码  收藏代码
  1. package service.client;   
  2.  import org.apache.thrift.TException;   
  3.  import org.apache.thrift.protocol.TBinaryProtocol;   
  4.  import org.apache.thrift.protocol.TProtocol;   
  5.  import org.apache.thrift.transport.TSocket;   
  6.  import org.apache.thrift.transport.TTransport;   
  7.  import org.apache.thrift.transport.TTransportException;   
  8.  import service.demo.Hello;   
  9.   
  10.  public class HelloServiceClient {   
  11.  /**  
  12.      * 调用 Hello 服务 
  13.      * @param args  
  14.      */   
  15.     public static void main(String[] args) {   
  16.         try {   
  17.             // 设置调用的服务地址为本地,端口为 7911   
  18.             TTransport transport = new TSocket("localhost"7911);   
  19.             transport.open();   
  20.             // 设置传输协议为 TBinaryProtocol   
  21.             TProtocol protocol = new TBinaryProtocol(transport);   
  22.             Hello.Client client = new Hello.Client(protocol);   
  23.             // 调用服务的 helloVoid 方法  
  24.             client.helloVoid();   
  25.             transport.close();   
  26.         } catch (TTransportException e) {   
  27.             e.printStackTrace();   
  28.         } catch (TException e) {   
  29.             e.printStackTrace();   
  30.         }   
  31.     }   
  32.  }   

代码编写完后运行服务器,再启动客户端调用服务 Hello 的方法 helloVoid,在服务器端的控制台窗口输出“Hello World”(helloVoid 方法实现在控制台打印字符串,没有返回值,所以客户端调用方法后没有返回值输出,读者可以自己尝试其他有返回值方法的调用,其结果可以打印在客户端的控制台窗口 )。

Thrift 架构

Thrift 包含一个完整的堆栈结构用于构建客户端和服务器端。下图描绘了 Thrift 的整体架构。


图 1. 架构图


 

如图所示,图中黄色部分是用户实现的业务逻辑,褐色部分是根据 Thrift 定义的服务接口描述文件生成的客户端和服务器端代码框架,红色部分是根据 Thrift 文件生成代码实现数据的读写操作。红色部分以下是 Thrift 的传输体系、协议以及底层 I/O 通信,使用 Thrift 可以很方便的定义一个服务并且选择不同的传输协议和传输层而不用重新生成代码。

Thrift 服务器包含用于绑定协议和传输层的基础架构,它提供阻塞、非阻塞、单线程和多线程的模式运行在服务器上,可以配合服务器 / 容器一起运行,可以和现有的 J2EE 服务器 /Web 容器无缝的结合。

服务端和客户端具体的调用流程如下:


图 2. Server 端启动、服务时序图(查看大图


 

该图所示是 HelloServiceServer 启动的过程以及服务被客户端调用时,服务器的响应过程。从图中我们可以看到,程序调用了 TThreadPoolServer 的 serve 方法后,server 进入阻塞监听状态,其阻塞在 TServerSocket 的 accept 方法上。当接收到来自客户端的消息后,服务器发起一个新线程处理这个消息请求,原线程再次进入阻塞状态。在新线程中,服务器通过 TBinaryProtocol 协议读取消息内容,调用 HelloServiceImpl 的 helloVoid 方法,并将结果写入 helloVoid_result 中传回客户端。


图 3. Client 端调用服务时序图(查看大图


 

该图所示是 HelloServiceClient 调用服务的过程以及接收到服务器端的返回值后处理结果的过程。从图中我们可以看到,程序调用了 Hello.Client 的 helloVoid 方法,在 helloVoid 方法中,通过 send_helloVoid 方法发送对服务的调用请求,通过 recv_helloVoid 方法接收服务处理请求后返回的结果。

 

数据类型

Thrift 脚本可定义的数据类型包括以下几种类型:

  • 基本类型:
    • bool:布尔值,true 或 false,对应 Java 的 boolean
    • byte:8 位有符号整数,对应 Java 的 byte
    • i16:16 位有符号整数,对应 Java 的 short
    • i32:32 位有符号整数,对应 Java 的 int
    • i64:64 位有符号整数,对应 Java 的 long
    • double:64 位浮点数,对应 Java 的 double
    • string:未知编码文本或二进制字符串,对应 Java 的 String
  • 结构体类型:
    • struct:定义公共的对象,类似于 C 语言中的结构体定义,在 Java 中是一个 JavaBean
  • 容器类型:
    • list:对应 Java 的 ArrayList
    • set:对应 Java 的 HashSet
    • map:对应 Java 的 HashMap
  • 异常类型:
    • exception:对应 Java 的 Exception
  • 服务类型:
    • service:对应服务的类

协议

Thrift 可以让用户选择客户端与服务端之间传输通信协议的类别,在传输协议上总体划分为文本 (text) 和二进制 (binary) 传输协议,为节约带宽,提高传输效率,一般情况下使用二进制类型的传输协议为多数,有时还会使用基于文本类型的协议,这需要根据项目 / 产品中的实际需求。常用协议有以下几种:

  • TBinaryProtocol —— 二进制编码格式进行数据传输

    使用方法如清单 3 和清单 4 所示。

  • TCompactProtocol —— 高效率的、密集的二进制编码格式进行数据传输

    构建 TCompactProtocol 协议的服务器和客户端只需替换清单 3 和清单 4 中 TBinaryProtocol 协议部分即可,替换成如下代码:

    清单 5. 使用 TCompactProtocol 协议构建的 HelloServiceServer.java
    Java代码  收藏代码
    1. TCompactProtocol.Factory proFactory = new TCompactProtocol.Factory();  
    Java代码  收藏代码
    1. TCompactProtocol.Factory proFactory = new TCompactProtocol.Factory();  
    清单 6. 使用 TCompactProtocol 协议的 HelloServiceClient.java
    Java代码  收藏代码
    1. TCompactProtocol protocol = new TCompactProtocol(transport);   
    Java代码  收藏代码
    1. TCompactProtocol protocol = new TCompactProtocol(transport);   
  • TJSONProtocol —— 使用 JSON 的数据编码协议进行数据传输

    构建 TJSONProtocol 协议的服务器和客户端只需替换清单 3 和清单 4 中 TBinaryProtocol 协议部分即可,替换成如下代码:


    清单 7. 使用 TJSONProtocol 协议构建的 HelloServiceServer.java
    Java代码  收藏代码
    1. TJSONProtocol.Factory proFactory = new TJSONProtocol.Factory();   
    Java代码  收藏代码
    1. TJSONProtocol.Factory proFactory = new TJSONProtocol.Factory();   
    清单 8. 使用 TJSONProtocol 协议的 HelloServiceClient.java
    Java代码  收藏代码
    1. TJSONProtocol protocol = new TJSONProtocol(transport);   
    Java代码  收藏代码
    1. TJSONProtocol protocol = new TJSONProtocol(transport);   
  • TSimpleJSONProtocol —— 只提供 JSON 只写的协议,适用于通过脚本语言解析

传输层

常用的传输层有以下几种:

  • TSocket —— 使用阻塞式 I/O 进行传输,是最常见的模式

    使用方法如清单 4 所示。

  • TFramedTransport —— 使用非阻塞方式,按块的大小进行传输,类似于 Java 中的 NIO

    若使用 TFramedTransport 传输层,其服务器必须修改为非阻塞的服务类型,客户端只需替换清单 4 中 TTransport 部分,代码如下,清单 9 中 TNonblockingServerTransport 类是构建非阻塞 socket 的抽象类,TNonblockingServerSocket 类继承 TNonblockingServerTransport


    清单 9. 使用 TFramedTransport 传输层构建的 HelloServiceServer.java
    Java代码  收藏代码
    1. TNonblockingServerTransport serverTransport;   
    2. serverTransport = new TNonblockingServerSocket(10005);   
    3. Hello.Processor processor = new Hello.Processor(new HelloServiceImpl());   
    4. TServer server = new TNonblockingServer(processor, serverTransport);   
    5. System.out.println("Start server on port 10005 ...");   
    6. server.serve();   
    Java代码  收藏代码
    1. TNonblockingServerTransport serverTransport;   
    2. serverTransport = new TNonblockingServerSocket(10005);   
    3. Hello.Processor processor = new Hello.Processor(new HelloServiceImpl());   
    4. TServer server = new TNonblockingServer(processor, serverTransport);   
    5. System.out.println("Start server on port 10005 ...");   
    6. server.serve();   
    清单 10. 使用 TFramedTransport 传输层的 HelloServiceClient.java
    Java代码  收藏代码
    1. TTransport transport = new TFramedTransport(new TSocket("localhost"10005));   
    Java代码  收藏代码
    1. TTransport transport = new TFramedTransport(new TSocket("localhost"10005));   
  • TNonblockingTransport —— 使用非阻塞方式,用于构建异步客户端

    使用方法请参考 Thrift 异步客户端构建

服务端类型

常见的服务端类型有以下几种:

  • TSimpleServer —— 单线程服务器端使用标准的阻塞式 I/O

    代码如下:


    清单 11. 使用 TSimpleServer 服务端构建的 HelloServiceServer.java
    Java代码  收藏代码
    1. TServerSocket serverTransport = new TServerSocket(7911);   
    2. TProcessor processor = new Hello.Processor(new HelloServiceImpl());   
    3. TServer server = new TSimpleServer(processor, serverTransport);   
    4. System.out.println("Start server on port 7911...");   
    5. server.serve();   
    Java代码  收藏代码
    1. TServerSocket serverTransport = new TServerSocket(7911);   
    2. TProcessor processor = new Hello.Processor(new HelloServiceImpl());   
    3. TServer server = new TSimpleServer(processor, serverTransport);   
    4. System.out.println("Start server on port 7911...");   
    5. server.serve();   

    客户端的构建方式可参考清单 4。

  • TThreadPoolServer —— 多线程服务器端使用标准的阻塞式 I/O

    使用方法如清单 3 所示。

  • TNonblockingServer —— 多线程服务器端使用非阻塞式 I/O

    使用方法请参考 Thrift 异步客户端构建

Thrift 异步客户端构建

Thrift 提供非阻塞的调用方式,可构建异步客户端。在这种方式中,Thrift 提供了新的类 TAsyncClientManager 用于管理客户端的请求,在一个线程上追踪请求和响应,同时通过接口 AsyncClient 传递标准的参数和 callback 对象,服务调用完成后,callback 提供了处理调用结果和异常的方法。

首先我们看 callback 的实现:

清单 12.CallBack 的实现:MethodCallback.java

Java代码  收藏代码
  1. package service.callback;   
  2. import org.apache.thrift.async.AsyncMethodCallback;   
  3.   
  4. public class MethodCallback implements AsyncMethodCallback {   
  5.    Object response = null;   
  6.   
  7.    public Object getResult() {   
  8.        // 返回结果值  
  9.        return this.response;   
  10.    }   
  11.   
  12.    // 处理服务返回的结果值  
  13.    @Override   
  14.    public void onComplete(Object response) {   
  15.        this.response = response;   
  16.    }   
  17.    // 处理调用服务过程中出现的异常  
  18.    @Override   
  19.    public void onError(Throwable throwable) {   
  20.   
  21.    }   
  22. }   
Java代码  收藏代码
  1. package service.callback;   
  2. import org.apache.thrift.async.AsyncMethodCallback;   
  3.   
  4. public class MethodCallback implements AsyncMethodCallback {   
  5.    Object response = null;   
  6.   
  7.    public Object getResult() {   
  8.        // 返回结果值  
  9.        return this.response;   
  10.    }   
  11.   
  12.    // 处理服务返回的结果值  
  13.    @Override   
  14.    public void onComplete(Object response) {   
  15.        this.response = response;   
  16.    }   
  17.    // 处理调用服务过程中出现的异常  
  18.    @Override   
  19.    public void onError(Throwable throwable) {   
  20.   
  21.    }   
  22. }   

如代码所示,onComplete 方法接收服务处理后的结果,此处我们将结果 response 直接赋值给 callback 的私有属性 response。onError 方法接收服务处理过程中抛出的异常,此处未对异常进行处理。

创建非阻塞服务器端实现代码,将 HelloServiceImpl 作为具体的处理器传递给异步 Thrift 服务器,代码如下:


清单 13.HelloServiceAsyncServer.java

Java代码  收藏代码
  1. package service.server;  
  2.   
  3. import org.apache.thrift.server.TNonblockingServer;  
  4. import org.apache.thrift.server.TServer;  
  5. import org.apache.thrift.transport.TNonblockingServerSocket;  
  6. import org.apache.thrift.transport.TNonblockingServerTransport;  
  7. import org.apache.thrift.transport.TTransportException;  
  8. import service.demo.Hello;  
  9. import service.demo.HelloServiceImpl;  
  10.   
  11. public class HelloServiceAsyncServer {  
  12.     /** 
  13.      * 启动 Thrift 异步服务器 
  14.      *  
  15.      * @param args 
  16.      */  
  17.     @SuppressWarnings({ "unchecked""rawtypes" })  
  18.     public static void main(String[] args) {  
  19.         TNonblockingServerTransport serverTransport;  
  20.         try {  
  21.             serverTransport = new TNonblockingServerSocket(10005);  
  22.             Hello.Processor processor = new Hello.Processor(  
  23.                     new HelloServiceImpl());  
  24.             // TServer server = new TNonblockingServer(processor,  
  25.             // serverTransport);  
  26.             TNonblockingServer.Args argss = new TNonblockingServer.Args(  
  27.                     serverTransport);  
  28.             argss.processor(processor);  
  29.             TServer server = new TNonblockingServer(argss);  
  30.             System.out.println("Start server on port 10005 ...");  
  31.             server.serve();  
  32.         } catch (TTransportException e) {  
  33.             e.printStackTrace();  
  34.         }  
  35.     }  
  36. }  
Java代码  收藏代码
  1. package service.server;  
  2.   
  3. import org.apache.thrift.server.TNonblockingServer;  
  4. import org.apache.thrift.server.TServer;  
  5. import org.apache.thrift.transport.TNonblockingServerSocket;  
  6. import org.apache.thrift.transport.TNonblockingServerTransport;  
  7. import org.apache.thrift.transport.TTransportException;  
  8. import service.demo.Hello;  
  9. import service.demo.HelloServiceImpl;  
  10.   
  11. public class HelloServiceAsyncServer {  
  12.     /** 
  13.      * 启动 Thrift 异步服务器 
  14.      *  
  15.      * @param args 
  16.      */  
  17.     @SuppressWarnings({ "unchecked""rawtypes" })  
  18.     public static void main(String[] args) {  
  19.         TNonblockingServerTransport serverTransport;  
  20.         try {  
  21.             serverTransport = new TNonblockingServerSocket(10005);  
  22.             Hello.Processor processor = new Hello.Processor(  
  23.                     new HelloServiceImpl());  
  24.             // TServer server = new TNonblockingServer(processor,  
  25.             // serverTransport);  
  26.             TNonblockingServer.Args argss = new TNonblockingServer.Args(  
  27.                     serverTransport);  
  28.             argss.processor(processor);  
  29.             TServer server = new TNonblockingServer(argss);  
  30.             System.out.println("Start server on port 10005 ...");  
  31.             server.serve();  
  32.         } catch (TTransportException e) {  
  33.             e.printStackTrace();  
  34.         }  
  35.     }  
  36. }  

HelloServiceAsyncServer 通过 java.nio.channels.ServerSocketChannel 创建非阻塞的服务器端等待客户端的连接。

创建异步客户端实现代码,调用 Hello.AsyncClient 访问服务端的逻辑实现,将 MethodCallback 对象作为参数传入调用方法中,代码如下:


清单 14.HelloServiceAsyncClient.java

Java代码  收藏代码
  1. package service.client;  
  2.   
  3. import java.io.IOException;  
  4. import org.apache.thrift.async.TAsyncClientManager;  
  5. import org.apache.thrift.protocol.TBinaryProtocol;  
  6. import org.apache.thrift.protocol.TProtocolFactory;  
  7. import org.apache.thrift.transport.TNonblockingSocket;  
  8. import org.apache.thrift.transport.TNonblockingTransport;  
  9. import service.callback.MethodCallback;  
  10. import service.demo.Hello;  
  11.   
  12. public class HelloServiceAsyncClient {  
  13.     /** 
  14.      *  调用 Hello 服务 
  15.      *  
  16.      * @param args 
  17.      */  
  18.     @SuppressWarnings("unchecked")  
  19.     public static void main(String[] args) throws Exception {  
  20.         try {  
  21.             TAsyncClientManager clientManager = new TAsyncClientManager();  
  22.             TNonblockingTransport transport = new TNonblockingSocket(  
  23.                     "localhost"10005);  
  24.             TProtocolFactory protocol = new TBinaryProtocol.Factory();  
  25.             Hello.AsyncClient asyncClient = new Hello.AsyncClient(protocol,  
  26.                     clientManager, transport);  
  27.             System.out.println("Client calls .....");  
  28.             MethodCallback callBack = new MethodCallback();  
  29.             asyncClient.helloString("Hello World", callBack);  
  30.             Object res = callBack.getResult();  
  31.             while (res == null) {  
  32.                 res = callBack.getResult();  
  33.             }  
  34.             System.out.println(((Hello.AsyncClient.helloString_call) res)  
  35.                     .getResult());  
  36.         } catch (IOException e) {  
  37.             e.printStackTrace();  
  38.         }  
  39.     }  
  40. }  
Java代码  收藏代码
  1. package service.client;  
  2.   
  3. import java.io.IOException;  
  4. import org.apache.thrift.async.TAsyncClientManager;  
  5. import org.apache.thrift.protocol.TBinaryProtocol;  
  6. import org.apache.thrift.protocol.TProtocolFactory;  
  7. import org.apache.thrift.transport.TNonblockingSocket;  
  8. import org.apache.thrift.transport.TNonblockingTransport;  
  9. import service.callback.MethodCallback;  
  10. import service.demo.Hello;  
  11.   
  12. public class HelloServiceAsyncClient {  
  13.     /** 
  14.      *  调用 Hello 服务 
  15.      *  
  16.      * @param args 
  17.      */  
  18.     @SuppressWarnings("unchecked")  
  19.     public static void main(String[] args) throws Exception {  
  20.         try {  
  21.             TAsyncClientManager clientManager = new TAsyncClientManager();  
  22.             TNonblockingTransport transport = new TNonblockingSocket(  
  23.                     "localhost"10005);  
  24.             TProtocolFactory protocol = new TBinaryProtocol.Factory();  
  25.             Hello.AsyncClient asyncClient = new Hello.AsyncClient(protocol,  
  26.                     clientManager, transport);  
  27.             System.out.println("Client calls .....");  
  28.             MethodCallback callBack = new MethodCallback();  
  29.             asyncClient.helloString("Hello World", callBack);  
  30.             Object res = callBack.getResult();  
  31.             while (res == null) {  
  32.                 res = callBack.getResult();  
  33.             }  
  34.             System.out.println(((Hello.AsyncClient.helloString_call) res)  
  35.                     .getResult());  
  36.         } catch (IOException e) {  
  37.             e.printStackTrace();  
  38.         }  
  39.     }  
  40. }  

HelloServiceAsyncClient 通过 java.nio.channels.Socketchannel 创建异步客户端与服务器建立连接。在本文中异步客户端通过以下的循环代码实现了同步效果,读者可去除这部分代码后再运行对比。


清单 15. 异步客户端实现同步效果代码段

Java代码  收藏代码
  1. Object res = callBack.getResult();  
  2. // 等待服务调用后的返回结果  
  3. while (res == null) {  
  4.    res = callBack.getResult();  
  5. }  
Java代码  收藏代码
  1. Object res = callBack.getResult();  
  2. // 等待服务调用后的返回结果  
  3. while (res == null) {  
  4.    res = callBack.getResult();  
  5. }  

 

通过与清单 9 和清单 10 的代码比较,我们可以构建一个 TNonblockingServer 服务类型的服务端,在客户端构建一个 TFramedTransport 传输层的同步客户端和一个 TNonblockingTransport 传输层的异步客户端,那么一个服务就可以通过一个 socket 端口提供两种不同的调用方式。有兴趣的读者可以尝试一下。

常见问题

NULL 问题

我们在对服务的某个方法调用时,有时会出现该方法返回 null 值的情况,在 Thrift 中,直接调用一个返回 null 值的方法会抛出 TApplicationException 异常。在清单 2 中,HelloServiceImpl 里实现了 helloNull 方法,返回 null 值,我们在 HelloServiceClient.java 中加入调用该方法的代码,出现如下图所示的异常:


图 4. TApplicationException 异常
图 4. TApplicationException 异常 

为了处理返回 null 值情况,我们要捕获该异常,并进行相应的处理,具体客户端代码实现如下:


清单 16. 处理服务返回值为 null 的代码

Java代码  收藏代码
  1. package service.client;   
  2.  import org.apache.thrift.TApplicationException;   
  3.  import org.apache.thrift.TException;   
  4.  import org.apache.thrift.protocol.TBinaryProtocol;   
  5.  import org.apache.thrift.protocol.TProtocol;   
  6.  import org.apache.thrift.transport.TSocket;   
  7.  import org.apache.thrift.transport.TTransport;   
  8.  import org.apache.thrift.transport.TTransportException;   
  9.  import service.demo.Hello;   
  10.   
  11.  public class HelloServiceClient {   
  12.     /**  
  13.      * 调用 Hello 服务,并处理 null 值问题 
  14.      * @param args  
  15.      */   
  16.     public static void main(String[] args) {   
  17.         try {   
  18.             TTransport transport = new TSocket("localhost"7911);   
  19.             transport.open();   
  20.             TProtocol protocol = new TBinaryProtocol(transport);   
  21.             Hello.Client client = new Hello.Client(protocol);   
  22.             System.out.println(client.helloNull());   
  23.             transport.close();   
  24.         } catch (TTransportException e) {   
  25.             e.printStackTrace();   
  26.         } catch (TException e) {   
  27.             if (e instanceof TApplicationException   
  28.                     && ((TApplicationException) e).getType() ==     
  29.                                  TApplicationException.MISSING_RESULT) {   
  30.                 System.out.println("The result of helloNull function is NULL");   
  31.             }   
  32.         }   
  33.     }   
  34.  }   
Java代码  收藏代码
  1. package service.client;   
  2.  import org.apache.thrift.TApplicationException;   
  3.  import org.apache.thrift.TException;   
  4.  import org.apache.thrift.protocol.TBinaryProtocol;   
  5.  import org.apache.thrift.protocol.TProtocol;   
  6.  import org.apache.thrift.transport.TSocket;   
  7.  import org.apache.thrift.transport.TTransport;   
  8.  import org.apache.thrift.transport.TTransportException;   
  9.  import service.demo.Hello;   
  10.   
  11.  public class HelloServiceClient {   
  12.     /**  
  13.      * 调用 Hello 服务,并处理 null 值问题 
  14.      * @param args  
  15.      */   
  16.     public static void main(String[] args) {   
  17.         try {   
  18.             TTransport transport = new TSocket("localhost"7911);   
  19.             transport.open();   
  20.             TProtocol protocol = new TBinaryProtocol(transport);   
  21.             Hello.Client client = new Hello.Client(protocol);   
  22.             System.out.println(client.helloNull());   
  23.             transport.close();   
  24.         } catch (TTransportException e) {   
  25.             e.printStackTrace();   
  26.         } catch (TException e) {   
  27.             if (e instanceof TApplicationException   
  28.                     && ((TApplicationException) e).getType() ==     
  29.                                  TApplicationException.MISSING_RESULT) {   
  30.                 System.out.println("The result of helloNull function is NULL");   
  31.             }   
  32.         }   
  33.     }   
  34.  }   

调用 helloNull 方法后,会抛出 TApplicationException 异常,并且异常种类为 MISSING_RESULT,本段代码显示,捕获该异常后,直接在控制台打印“The result of helloNull function is NULL”信息。

安装部署

MAVEN安装部署:

1.建立maven工程,pom.xml内容如下:

Xml代码  收藏代码
  1. <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"  
  2.     xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">  
  3.     <modelVersion>4.0.0</modelVersion>  
  4.   
  5.     <groupId>demo</groupId>  
  6.     <artifactId>thrift-demo</artifactId>  
  7.     <version>0.0.1-SNAPSHOT</version>  
  8.     <packaging>jar</packaging>  
  9.   
  10.     <name>thrift-demo</name>  
  11.     <url>http://maven.apache.org</url>  
  12.   
  13.     <properties>  
  14.         <project.build.sourceEncoding>UTF-8</project.build.sourceEncoding>  
  15.     </properties>  
  16.   
  17.     <dependencies>  
  18.         <dependency>  
  19.             <groupId>junit</groupId>  
  20.             <artifactId>junit</artifactId>  
  21.             <version>4.8.1</version>  
  22.             <scope>test</scope>  
  23.         </dependency>  
  24.   
  25.         <dependency>  
  26.             <groupId>org.apache.thrift</groupId>  
  27.             <artifactId>libthrift</artifactId>  
  28.             <version>0.8.0</version>  
  29.         </dependency>  
  30.         <dependency>  
  31.             <groupId>org.slf4j</groupId>  
  32.             <artifactId>slf4j-nop</artifactId>  
  33.             <version>1.5.8</version>  
  34.             <type>jar</type>  
  35.             <scope>compile</scope>  
  36.         </dependency>  
  37.     </dependencies>  
  38. </project>  
Xml代码  收藏代码
  1. <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"  
  2.     xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">  
  3.     <modelVersion>4.0.0</modelVersion>  
  4.   
  5.     <groupId>demo</groupId>  
  6.     <artifactId>thrift-demo</artifactId>  
  7.     <version>0.0.1-SNAPSHOT</version>  
  8.     <packaging>jar</packaging>  
  9.   
  10.     <name>thrift-demo</name>  
  11.     <url>http://maven.apache.org</url>  
  12.   
  13.     <properties>  
  14.         <project.build.sourceEncoding>UTF-8</project.build.sourceEncoding>  
  15.     </properties>  
  16.   
  17.     <dependencies>  
  18.         <dependency>  
  19.             <groupId>junit</groupId>  
  20.             <artifactId>junit</artifactId>  
  21.             <version>4.8.1</version>  
  22.             <scope>test</scope>  
  23.         </dependency>  
  24.   
  25.         <dependency>  
  26.             <groupId>org.apache.thrift</groupId>  
  27.             <artifactId>libthrift</artifactId>  
  28.             <version>0.8.0</version>  
  29.         </dependency>  
  30.         <dependency>  
  31.             <groupId>org.slf4j</groupId>  
  32.             <artifactId>slf4j-nop</artifactId>  
  33.             <version>1.5.8</version>  
  34.             <type>jar</type>  
  35.             <scope>compile</scope>  
  36.         </dependency>  
  37.     </dependencies>  
  38. </project>  

 2.下载 thrift 编译工具,该工具可将 thrift 脚本文件编译成 java 文件,下载地址:http://mirror.bit.edu.cn/apache//thrift/0.8.0/thrift-0.8.0.exe(该文件为编译工具,不是安装文件)

 3.创建 Hello.thrift 脚本文件,具体代码如上一章节所述,进入 thrift-0.8.0.exe 所在目录,执行命令"thrift-0.8.0.exe -gen java x:\Hello.thrift",在当前运行盘符下,可看见 gen-java 目录,进入目录可看到生成的 Java 代码。更多 thrift 的命令内容,请参考 thrift 自带的 help 命令

4.编写服务端和客户端代码,完成 thrift 的安装和部署

 

手动安装:

Apache Thrift 的官方网站为:http://thrift.apache.org/tutorial/,具体安装步骤如下:

  1. 下载 thrift 源文件(http://svn.apache.org/repos/asf/thrift/tags/thrift-0.6.1/
  2. 将 thrift 源文件导入 eclipse,进入 /lib/java 目录,使用 ant 编译 build.xml 获得 libthrift-0.6.1-snapshot.jar
  3. 将 libthrift-0.6.1-snapshot.jar、slf4j-api-1.5.8.jar、slf4j-log4j12-1.5.8.jar 和 log4j-1.2.14.jar 导入 eclipse 开发环境
  4. 下载 thrift 编译工具,该工具可将 thrift 脚本文件编译成 java 文件,下载地址:http://apache.etoak.com//thrift/0.6.0/thrift-0.6.1.exe
  5. 创建 Hello.thrift 脚本文件,具体代码如上一章节所述,进入 thrift-0.6.1.exe 所在目录,执行命令"thrift-0.6.1.exe -gen java x:\Hello.thrift",在当前运行盘符下,可看见 gen-java 目录,进入目录可看到生成的 Java 代码。更多 thrift 的命令内容,请参考 thrift 自带的 help 命令
  6. 编写服务端和客户端代码,完成 thrift 的安装和部署

基于 Apache Thrift 框架生成的服务包括客户端和服务器端,具体的部署模式如下所示:


图 5. 部署图
图 5. 部署图 

从图中我们可以看到,客户端和服务器端部署时,需要用到公共的 jar 包和 java 文件,如图“Common file”区域,其中 Hello.java 由 Hello.thrift 编译而来。在服务器端,服务必须实现 Hello.Iface 接口,同时要包括服务器的启动代码 HelloServiceServer.java。在客户端,包括客户端调用服务的代码 HelloServiceClient.java。客户端和服务器通过 Hello.java 提供的 API 实现远程服务调用。

总结

本文介绍了 Apache Thrift 的安装部署和架构,并通过大量实例介绍了在不同情况下如何使用 Apache Thrift 来构建服务,同时着重介绍了 Thrift 异步客户端的构建,希望能给读者带来一些帮助。

 

参考资料

学习

 

分享到:
评论

相关推荐

    Apache Thrift - 可伸缩的跨语言服务开发框架(代码已修正)

    Apache Thrift 是一个开源的跨语言服务开发框架,它由Facebook于2007年创建,现由Apache软件基金会维护。Thrift的主要目标是解决在分布式系统中不同编程语言之间高效、安全的数据通信问题。通过Thrift,开发者可以...

    Apache Thrift——可伸缩的跨语言服务开发框架

    Apache Thrift——可伸缩的跨语言服务开发框架 Apache Thrift 是 Facebook 实现的一种高效的、支持多种编程语言的远程服务调用框架。它采用接口描述语言定义并创建服务,支持可扩展的跨语言服务开发,所包含的代码...

    thrift-0.9.1.exe和thrift-0.9.2.exe

    Thrift是一种开源的软件框架,由Facebook开发,用于构建跨语言的服务。它的核心理念是提供一个高效的、可扩展的、定义良好的接口描述语言(IDL),允许开发者定义服务,然后自动生成在各种编程语言中的客户端和...

    spring-cloud-starter-thrift:spring-cloud-starter-thrift提供SpringCloud对可伸缩的跨语言服务调用框架Apache Thrift的封装和集成

    spring-cloud-starter-thrift简介spring-cloud-starter-thrift提供Spring Cloud对可伸缩的跨语言服务调用框架Apache Thrift的封装和集成。spring-cloud-starter-thrift包括客户端spring-cloud-starter-thrift-client...

    thrift-0.13.0.zip

    Thrift是一种开源的跨语言服务开发框架,由Facebook于2007年创建,现在是Apache软件基金会的项目。它的主要目标是通过定义一种中间语言(IDL,Interface Definition Language)来简化不同编程语言之间的通信,使得...

    thrift-0.9.3.exe

    Thrift是一种开源的跨语言服务开发框架,由Facebook于2007年设计并发布,后来成为Apache软件基金会的顶级项目。"thrift-0.9.3.exe"是Thrift框架的一个特定版本(0.9.3)的可执行文件,主要用于Windows操作系统。这个...

    thrift总结 - 跨语言服务开发

    Thrift是一种开源的跨语言服务开发框架,由Facebook于2007年创建,后来贡献给了Apache基金会,成为Apache顶级项目。它旨在提供一个高效、轻量级的机制,允许编程语言之间进行定义良好、类型安全、高性能的RPC...

    Laravel开发-thrift-laravel

    Thrift则是一个跨语言的服务框架,由Facebook开源,用于实现高性能、可扩展的服务通信。Thrift-Laravel项目是将Thrift与Laravel框架结合,使得在Laravel应用中可以轻松地实现Thrift服务的创建和消费。 一、Thrift...

    maven-thrift-server

    在软件开发中,Thrift是一种高效的跨语言服务开发框架,由Facebook开发并开源。它允许定义数据类型和服务接口,然后自动生成各种编程语言的代码,使得不同语言的系统之间可以进行无缝通信。Maven作为Java项目管理...

    maven-thrift-plugin-0.1.11.jar

    maven-thrift-plugin-0.1.11.jar

    thrift-0.13.0在Windows上exe程序.rar

    Thrift是一种开源的跨语言服务开发框架,由Facebook于2007年创建,并贡献给了Apache软件基金会。它被设计用来高效地构建分布式系统中的可扩展且可维护的跨平台接口。Thrift通过定义一种中间表示(IDL,Interface ...

    thrift-0.9.1.exe和thrift-0.9.2.exe 含使用说明

    Thrift是一种开源的跨语言服务开发框架,由Facebook于2007年开发并开源,后来成为Apache软件基金会的顶级项目。它旨在提供一个高效、轻量级的机制,用于构建可扩展的服务,允许不同编程语言之间进行通信。Thrift通过...

    thrift-0.10.0.exe

    Thrift是一个软件框架,用来进行可扩展且跨语言的服务的开发。它结合了功能强大的软件堆栈和代码生成引擎,以构建在 C++, Java, Python, PHP, Ruby, Erlang, Perl, Haskell, C#, Cocoa, JavaScript, Node.js, ...

    thrift-0.13.0.tar.gz

    Thrift是一种开源的软件框架,由Facebook在2007年开发,用于构建高效、可扩展的跨语言服务。它的核心在于提供了一种接口描述语言(IDL)和一种高效的二进制通讯协议,使得开发者可以方便地定义服务,并在多种编程...

    thrift-0.9.0.tar.gz

    Thrift是一种开源的跨语言服务开发框架,由Facebook在2007年开源,其主要目的是为了高效地在不同编程语言之间进行数据序列化和远程过程调用(RPC)。Thrift-0.9.0是这个框架的一个版本,包含源代码,用户可以编译并...

    thrift 源码(一种可伸缩的跨语言服务的发展软件框架)

    thrift是一种可伸缩的跨语言服务的发展软件框架。它结合了功能强大的软件堆栈的代码生成引擎,以建设服务,工作效率和无缝地与C + +,C#,Java,Python和PHP和Ruby结合。thrift是facebook开发的,我们现在把它作为...

    thrift-0.9.2.tar.gz

    Apache Thrift 是一个开源的跨语言服务开发框架,它的核心在于提供了一种高效、灵活的序列化机制,以及一套强大的接口定义语言(IDL),用于构建可扩展的服务。Thrift 的设计目的是解决大型分布式系统中不同编程语言...

Global site tag (gtag.js) - Google Analytics