thrift与go语言,r语言与go语言

小程序：扫一扫查出行
【扫一扫了解最新限行尾号】
复制小程序

什么是Thrift

thrift是一个软件框架，用来进行可扩展且跨语言的服务的开发。它结合了功能强大的软件堆栈和代码生成引擎，以构建在 C++, Java, Go,Python, PHP, Ruby, Erlang, Perl, Haskell, C#, Cocoa, JavaScript, Node.js, Smalltalk, and OCaml 这些编程语言间无缝结合的、高效的服务。

thrift最初由facebook开发用做系统内各语言之间的RPC通信。

2007年由facebook贡献到apache基金，08年5月进入apache孵化器。

支持多种语言之间的RPC方式的通信：php语言client可以构造一个对象，调用相应的服务方法来调用java语言的服务，跨越语言的C/S RPC调用。

thrift允许定义一个简单的定义文件中的数据类型和服务接口，以作为输入文件，编译器生成代码用来方便地生成RPC客户端和服务器通信的无缝跨编程语言。

基于Zipkin的Thrift服务RPC调用链跟踪

我们现在所处的生产环境是一个集Nodejs, Go, Java, Ruby, Scala等多种语言程序的混合场景.Twitter的Finagle框架, 是一个基于Thrift协议的RPC框架,其中Zipkin是针对Finagle框架的一个基于Thrift协议的RPC调用链跟踪的工具，可搜集各服务调用数据，并提供分析查询展示功能。帮助识别分布式RPC调用链里，哪一个调用比较耗时，性能有问题，以及是否有异常等，使得诊断分布式系统性能成为可能。

一次服务调用追踪链路，由一组Span组成。需在web总入口处生成TraceID，并确保在当前请求上下文里能访问到

表示某个时间点发生的Event

存放用户自定义信息，比如：sessionID、userID、userIP、异常等

表示一次完整RPC调用，是由一组Annotation和BinaryAnnotation组成。是追踪服务调用的基本结构，多span形成树形结构组合成一次Trace追踪记录。Span是有父子关系的，比如：Client A、Client A - B、B -C、C - D、分别会产生4个Span。Client A接收到请求会时生成一个Span A、Client A - B发请求时会再生成一个Span A-B，并且Span A是 Span A-B的父节点

Trace的基本信息需在上下游服务之间传递，如下信息是必须的：

一个完整Trace 由一组Span组成，这一组Span必须具有相同的TraceID；Span具有父子关系，处于子节点的Span必须有parent_id，Span由一组 Annotation和BinaryAnnotation组成。整个Trace Tree通过Trace Id、Span ID、parent Span ID串起来的。

经过上述三条，用户任何访问所引起的后台服务间调用，完全可以串起来，并形成一颗调用树。通过调用树，哪个调用耗时多久，是否有异常等都可清晰定位到。

testService(Web服务) - OrderServ(Thrift) - StockServ PayServ(Thrift)。一共有四个服务，testService 调用 OrderServ、OrderServ同时调用 StockServ和PayServ。需生成的Trace信息如下：

我们针对跟踪数据的收集的统一接入点, 为kafka.所有应用产生的zipkin数据统一发送到Kafka集群中.具体的channel为: EAGLEYE_ZIPKIN_CHANNEL.

JSON串范例(格式化)：

备注: span信息的json,添加'span'头信息, 在通过kafka做收集时, 通过该头信息将span信息路由到独立的es的index中. 每一条span记录其实是半个span信息, 要么是client端产生的, 要么是server端产生的.

收集了Zipkin产生的RPC调用链信息,并给服务治理框架提供跟踪信息检索(双击某行有问题的Span记录可以查看某次调用链详情,了解具体的网络情况和业务执行情况)

如何用golang实现corba orb

生成go代码：thrift -o output directory{默认当前目录gen-py} -gen go {对应版本的hbase源码地址}\src\main\resources\org\apache\Hadoop\hbase\thrift2

thrift可以脱离boost库吗

1. 必须安装boost。最新的稳定版是1.48.0。

1.1.先下载：sourceforge.net/projects/boost/files/boost/1.48.0/

选择tar.gz包，

下载后我解压到了/usr/local/boost_1_48下：tar zxvf boost1.48.0 -C /usr/local/boost_1_48

1.2.安装过程和以前的老版本有些不同，看自带软件包里的index.html就可以了：

主要内容涉及到安装的就2步，很简单，进入一级目录：

$ ./bootstrap.sh //默认安装到/usr/local/include/boost 和/usr/local/lib下

$ ./b2 install

1.3接下来设置环境变量自动导入：

先用vim创建文件：/etc/profile.d/boost.sh，（若不能执行的话使用chmod a+x boost.sh设置执行权限），

内容为：

#!/bin/sh

#boost settings

BOOST_ROOT=/opt/boost_1_48

BOOST_INCLUDE=/usr/local/include/boost

BOOST_LIB=/usr/local/lib

export BOOST_ROOT BOOST_INCLUDE BOOST_LIB

注意：

linux程序运行时加载共享库出现的错误:

"error while loading shared libraries: xxxx: cannot open shared object file: No such file or directory"

解决步骤：

1、使用find命令查找缺失的xxxx共享库文件所在位置。参考：#find 目录 -name "xxxx*"

2、将找到的目录位置写入 /etc/ld.so.conf 配置文件，这个文件记录了编译时使用的动态链接库的路径。

3、然后使用ldconfig命令，使配置生效。

2. 安装libevent（选择noblokingserver必须安装libevent，如果出现noblokingserver相关的错误就是没有安装libevent）。

我安装的版本是最新的libevent1.4.13：

wget

tar xvzf libevent-1.4.13-stable.tar.gz

cd libevent-1.4.13-stable

./configure make

make install

3. 接下来就是安装thrift，我下载的是最新的thrift0.8.0版本，进入thrift0.8.0目录：

因为我只需要编译cpp，用以下命令：（编译选项可以参考）：

./configure --with-cpp --with-boost --without-python --without-csharp --without-java --without-erlang --without-perl --without-php --without-php_extension --without-ruby --without-haskell --without-go

#make

make

#install

make install

如果还需要编译java或者别的语言，还需要提前安装别的包，具体参考：

C++

Boost 1.33.1+

libevent (optional, to build the nonblocking server)

zlib (optional)

Java

Java 1.5+

Apache Ant

Apache Ivy (recommended)

Apache Commons Lang (recommended)

SLF4J

C#: Mono 1.2.4+ (and pkg-config to detect it) or Visual Studio 2005+

Python 2.4+ (including header files for extension modules)

PHP 5.0+ (optionally including header files for extension modules)

Ruby 1.8+ (including header files for extension modules)

Erlang R12 (R11 works but not recommended)

Perl 5

Bit::Vector

Class::Accessor

安装完thrift先试验一下。进入thrift下的tutorial，编译给出的例子：

thrift -r --gen cpp tutorial.thrift，

会在gen-cpp目录下生成一些文件。然后进入CPP目录，进行编译：

make

有可能遇到错误，提示： hton* declarations will not be visible to the compiler。这是thrift的一个bug，可能有的版本没有该错误，但是我安装的这个版本有。解决的办法是：

使用g++编译时加入 -DHAVE_NETINET_IN_H

这样可以使预处理器include进 netinet/in.h in thrift/protocol/TPrototol.h, 这样 hton* declarations will be visible to the compiler.

下面是一个老外对这个bug的说明：

TProtocol.h has the following lines which cause the compiler error when HAVE_NETINET_IN_H is not defined.

#ifdef HAVE_NETINET_IN_H

#include netinet/in.h

#endif

This might be a bug in the Thrift configure script which somehow skips the define.

针对上面的那个例子，修改CPP文件夹里的Makefile，在编译行加入相应的参数：

g++ -DHAVE_NETINET_IN_H -o CppServer -I${THRIFT_DIR} -I${BOOST_DIR} -I../gen-cpp -L${LIB_DIR} -lthrift CppServer.cpp ${GEN_SRC}

再进行make，得到两个可执行文件，先执行CppServer,再启动CppClient。

到此，thrift安装完毕。

如何使用go语言来运行PHP

Apache / Nginx 好好的为什么要用 Go 重写？

你要达到什么目的？

如果网站的主要部分还是 PHP，其中 PHP 脚本需要用到某些其它功能，听起来应该是：要么写个服务（HTTP / Thrift / ...）从 PHP 里调用，要么写个 PHP 扩展提供几个模块函数接口给 PHP 脚本直接调用。第一个效率较低但是实现方便灵活性高，Golang 确定没问题；第二个调用效率较高，实现较难，不确定 Golang 可以做到。