golang动态加载原生代码思路

update: 实现在此,欢迎star: https://github.com/dearplain/goloader

实现后的一些介绍:http://www.cnblogs.com/dearplain/p/8543804.html

 

golang动态加载原生代码思路(非plugin,非so文件。使用mmap形式运行机器码,可释放)

 

1.用go tool objdump,可以看到任意函数的机器码、汇编指令、偏移。(go源码下面有一个cmd/internal/goobj包,可以读到.o文件的重定向信息,更好。)

2.修改里面的golang内部函数的相对跳转,指向加载者相同的函数的地址(可以用cmd/internal/goobj包读取所有函数的地址),常见的有runtime.newobject、runtime.convT2Eslice、runtime.panicindex、runtime.morestack_noctxt等runtime系列函数。

3.修改golang类型指针偏移(当对象转换成interface{}时候,需要一个类型指针),指向加载者相同的类型。

4.修改指向字符串,全局变量,自定义函数的偏移(一般都是相对偏移)。还有其他的一些信息,这个可以做实验发现。

5.写入mmap,并执行。

 

整体思路是,通过修改偏移,复用加载者所用到的函数、golang内部函数、golang类型信息等。

 

缺点:

1.可以自定义类型,但是不能将这些类型的对象赋值到interface{}(加载者已定义的类型可以),比如使用fmt.Println打印这些对象(但是可以打印这些对象的成员)。因为golang内部的一些全局变量(比如golang类型)可能存在指针,而且开始就初始化了。

2.不能在函数外初始化全局变量。(可能的解决方法:定义一个入口函数,在里面初始化,或者读取main.init函数,取出初始化代码。)

 

优点:

仍然使用golang和golang编译工具。

速度极快,体积极小。相当于复用了golang内部的调度器、内存分配器、类型系统等。

可以自定义。golang函数内的汇编足够简单,可以开发自己的工具来实现上面的思路。

 

用途:

一些过滤,路由,缓存,前端逻辑。有很多逻辑直接在前端处理更好。

直接处理,不想放到后端,不想重启程序的服务,类似openresty。

「京东开涛」使用Nginx+Lua(OpenResty)开发高性能Web应用

京东三级列表页持续架构优化—Golang+Lua(OpenResty)最佳实践
 
原文地址:https://www.cnblogs.com/dearplain/p/8145985.html