20

图解go反射实现原理

 4 years ago
source link: https://i6448038.github.io/2020/02/15/golang-reflection/
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.

Go反射的实现和 interfaceunsafe.Pointer 密切相关。如果对golang的 interface 底层实现还没有理解,可以去看我之前的文章: Go语言interface底层实现unsafe.Pointer 会在后续的文章中做介绍。

(本文目前使用的Go环境是Go 1.12.9)

interface回顾

首先我们简单的回顾一下interface的结构,总体上是:

YJFZJzb.png!web

细分下来分为有函数的 iface 和无函数的 eface (就是 interface{} );

无函数的 eface

fM7ruif.png!web

有函数的 iface

iyU3mqY.png!web

静态类型(static interface type)和动态混合类型(dynamic concrete type)

Go语言中,每个变量都有唯一个 静态类型 ,这个类型是编译阶段就可以确定的。有的变量可能除了静态类型之外,还会有 动态混合类型

例如以下例子:

//带函数的interface
var r io.Reader 


tty, err := os.OpenFile("/dev/tty", os.O_RDWR, 0)
if err != nil {
    return nil, err
}


r = tty


//不带函数的interface
var empty interface{}
empty = tty

有函数的 iface 的例子

我们一句一句来看:第1行, var r io.Reader

rQn2Uvm.png!web

第4行至第七行就是简单的赋值,得到一个 *os.File 的实例,暂且不看了。最后一句第十句 r = tty

EjiYfyQ.png!web

无函数的 eface 的例子

我们接着往下看, var empty interface{}

IRfAf2z.png!web

最后是 empty = tty

6NFRFjr.png!web

但是记住:虽然有 动态混合类型 ,但是对外”表现”依然是静态类型。

Go反射简介

Go反射有三大法则:

//接口数据  =====》 反射对象
1. Reflection goes from interface value to reflection object.

//反射对象 ===> 接口数据
2. Reflection goes from reflection object to interface value.

// 倘若数据可更改,可通过反射对象来修改它
3. To modify a reflection object, the value must be settable.

Go 的反射就是对以上三项法则的实现。

Go的反射主要由两部分组成: TypeValueTypeValue 是俩结构体:(这俩结构体具体内容可以略过不看,知道有这回事儿就行了)

Type:

type Type interface {
    Align() int
    FieldAlign() int
    Method(int) Method
    MethodByName(string) (Method, bool)
    NumMethod() int
    Name() string
    PkgPath() string
    Size() uintptr
    String() string
    Kind() Kind
    Implements(u Type) bool
    AssignableTo(u Type) bool
    ConvertibleTo(u Type) bool
    Comparable() bool
    Bits() int
    ChanDir() ChanDir
    IsVariadic() bool
    Elem() Type
    Field(i int) StructField
    FieldByIndex(index []int) StructField
    FieldByName(name string) (StructField, bool)
    FieldByNameFunc(match func(string) bool) (StructField, bool)
    In(i int) Type
    Key() Type
    Len() int
    NumField() int
    NumIn() int
    NumOut() int
    Out(i int) Type
    common() *rtype
    uncommon() *uncommonType
}

Value:

type Value struct {
    typ *rtype
    ptr unsafe.Pointer
    flag
}

你会发现反射的实现和interface的组成很相似,都是由“类型”和“数据值”构成,但是值得注意的是:interface的“类型”和“数据值”是在“一起的”,而反射的“类型”和“数据值”是分开的。

TypeValue 提供了非常多的方法:例如获取对象的属性列表、获取和修改某个属性的值、对象所属结构体的名字、对象的底层类型(underlying type)等等

Go中的反射,在使用中最核心的就两个函数:

  • reflect.TypeOf(x)
  • reflect.ValueOf(x)

这两个函数可以分别将给定的数据对象转化为以上的 TypeValue 。这两个都叫做 反射对象

Reflection goes from interface value to reflection object(法则一)

给定一个数据对象,可以将数据对象转化为反射对象 TypeValue

7RRJzaR.png!web

事例代码:

package main

import (
    "fmt"
    "reflect"
)

func main() {
    var x float64 = 3.4

    t := reflect.TypeOf(x)
    v := reflect.ValueOf(x)

    fmt.Println("type:", t)   //type: float64

    fmt.Println("value:", v.String())  //value: <float64 Value>
    fmt.Println("type:", v.Type()) // type: float64
    fmt.Println("kind is float64:", v.Kind() == reflect.Float64) //kind is float64: true
    fmt.Println("value:", v.Float()) //value: 3.4

}

由代码17行可以看出: Value 还可以获取到当前数据值的 Type

所以,法则一的图应为:

jeEfmaE.png!web

Reflection goes from reflection object to interface value.(法则二)

给定的反射对象,可以转化为某种类型的数据对象。即法则一的逆向。

3yeMrif.png!web

注意 Type 是没法逆向转换的,仔细想想也合理,如果可逆类型转化成什么呢?(#^.^#)

承接法则一的代码:

package main

import (
    "fmt"
    "reflect"
)

func main() {
    var x float64 = 3.4

    t := reflect.TypeOf(x)
    v := reflect.ValueOf(x)

    ...

    o := v.Interface().(float64) // 法则2代码
    fmt.Println(o)

}

To modify a reflection object, the value must be settable.(法则三)

法则三是说:通过反射对象,可以修改原数据中的内容。

这里说的反射对象,是指 Value ,毕竟 Type 只是表示原数据的类型相关的内容,而 Value 是对应着原数据对象本身。

在目前以上的所有例子中,反射得到的 Value 对象的修改,都是无法直接修改原数据对象的。

package main

import (
    "fmt"
    "reflect"
)

func main() {
    var x float64 = 3.4

    t := reflect.TypeOf(x)
    v := reflect.ValueOf(&x)

    ....

    o := v.Interface().(float64)
    fmt.Println(o)

    v.SetFloat(5.4) //此行会报错
    fmt.Println(x)

}

这段代码20行会报一个panic

reflect: reflect.Value.SetFloat using unaddressable value

这句话的意思并不是地址不可达,而是:对象 v 不可设置( settable )。

我们可以通过 Value 结构体的 CanSet() 方法来查看是否可以设置修改新值。

通过以下代码可以知道 CanSet() 返回值是false。

fmt.Println(v.CanSet()) // false

如何通过反射对象来修改原数据对象的值呢?

如何才能可以通过反射对象来修改原数据对象的值或者说为什么不能设置呢?

原因简单且纯粹:在Go中,任何函数的参数都是值的拷贝,而非原数据。

反射函数 reflect.ValueOf() 也不例外。我们目前得到的反射对象,都是原对象的copy的反射对象,而非原对象本身,所以不可以修改到原对象;即使可以修改,修改一个传参时候的副本,也毫无意义,不如报错儿。Go反射第三法则中的制定的 settable 属性就由此而来,还延伸出了类似于 CanSet() 的方法。

那如何修改呢?

首先,在Go中要想让函数“有副作用“,传值必须传指针类型的。

...

var x float64 = 3.4
v := reflect.ValueOf(&x)

...

此时还不行,因为这样反射对象对应的是原数据对象的指针类型,必须要拿到当前类型的值类型(*v),如何做?

Go提供了另外一个方法 Elem()

...

var x float64 = 3.4
v := reflect.ValueOf(&x)

p := v.Elem()
fmt.Println(p.CanSet()) // true

p.SetFloat(7.1)
fmt.Println(x) // 7.1

看以上代码,就可以修改原数据了。

反射原理

不难发现,go的反射和interface在结构上是如此的相近!都分为两部分:一部分是 Type 一部分是 value

反射会不会是比着interface来实现的?

反射是什么意思?反射的意思是在运行时,能够动态知道给定数据对象的类型和结构,并有机会修改它!

现在一个数据对象,如何判断它是什么结构?

数据interface中保存有结构数据呀,只要想办法拿到该数据对应的内存地址,然后把该数据转成interface,通过查看interface中的类型结构,就可以知道该数据的结构了呀~

其实以上就是Go反射通俗的原理。

图可以展示为:

M3yeYv7.png!web

图中结构中牵扯到的指针,都是 unsafe.Pointer 指针,具体这是个什么指针,后续的文章中会有介绍,在此,你就姑且认为是可以指向Go系统中任意数据的指针就可以。

源码部分 (以下部分可以忽略,是我在查阅代码时候遇到的一点点坑。)

我们来看看具体的源码:源码在”GO SDK/src/refelct“包中,具体主要是包中的”type.go”和”value.go”这两个文件。

可以简单的认为,反射的核心代码,主要是 reflect.ValueOf()reflect.TypeOf() 这两个函数。

先看类型转换: reflect.TypeOf()

// TypeOf returns the reflection Type that represents the dynamic type of i.
// If i is a nil interface value, TypeOf returns nil.
func TypeOf(i interface{}) Type {
    eface := *(*emptyInterface)(unsafe.Pointer(&i))
    return toType(eface.typ)
}
其中出现了两种数据结构,一个是 Type ,一个是 emptyInterface

分别看看这两者的代码:

emptyInterface 在 ”GO SDK/src/reflect/value.go“文件中

// emptyInterface is the header for an interface{} value.
type emptyInterface struct {
    typ  *rtype
    word unsafe.Pointer
}

// nonEmptyInterface is the header for an interface value with methods.
type nonEmptyInterface struct {
    // see ../runtime/iface.go:/Itab
    itab *struct {
        ityp *rtype // static interface type
        typ  *rtype // dynamic concrete type
        hash uint32 // copy of typ.hash
        _    [4]byte
        fun  [100000]unsafe.Pointer // method table
    }
    word unsafe.Pointer
}

仔细一看,是空接口和包含方法的interface的两个结构体。且和 efaceiface 内容字段一致!不是有 efaceiface 了吗?这两者有什么不同??

经过查阅代码,发现:

interface源码(位于”Go SDK/src/runtime/runtime2.go“)中的 efaceiface 会和 反射源码(位于”GO SDK/src/reflect/value.go“)中的 emptyInterfacenonEmptyInterface 保持数据同步!

此外,还有interface源码(位于”Go SDK/src/runtime/type.go“)中的 _type 会和 反射源码(位于”GO SDK/src/reflect/type.go“)中的 rtype 也保持数据同步一致!

更多精彩内容,请关注我的微信公众号 互联网技术窝 或者加微信共同探讨交流:

z6V3iiJ.jpg!web


Recommend

  • 36

    前言 互联网的原始目的,就是为了传输文本(文本对话)。那我们使用浏览器发送请求后页面是如何呈现在我们面前的呢? 接下来由图片介绍下URL到呈现页面的过程。 一、文本对话--从请求到响应 我们在浏览器中输入一个 URL,回车之后便会在浏览器中观察到页面内容。实...

  • 58
    • www.cnblogs.com 5 years ago
    • Cache

    深入理解java反射原理

    反射是java的一个特性,这一特性也使得它给了广大的第三方框架和开发过者很大的想像空间。 通过反射,java可以动态的加载未知的外部配置对象,临时生成字节码进行加载使用,从而使代码更灵活!可以极大地提高应用的扩展性!...

  • 46
    • www.tuicool.com 4 years ago
    • Cache

    Go 编程:图解反射

    在使用反射之前,此文 The Laws of Reflection 必读。网上中文翻译版本不少,可以搜索阅读。 开始具体篇幅之前,先看一下反...

  • 25
    • www.gitdig.com 4 years ago
    • Cache

    Go 编程:图解反射 – GitDiG

    知识共享许可协议 4.0用一张图让你了解 Golang 中的反射是什么。1. 图解反射 在使用反射之前,此文

  • 68
    • draveness.me 4 years ago
    • Cache

    Go 语言反射的实现原理

    Go 语言反射的实现原理4.3 反射反射是 Go 语言比较重要的特性。虽然在大多数的应用和服务中并不常见,但是很多框架都依赖 Go 语言的反射机制实现简化代码的逻辑。因为 Go 语言的语法元素很少、设计简单,...

  • 53

    Hi,大家好,我是明哥。 在自己学习 Golang 的这段时间里,我写了详细的学习笔记放在我的个人微信公众号 《Go编程时光...

  • 1

    反射在Java中非常重要,是Java区别于其他编程语言的一大特性。Java中的AOP切面、动态代理等看起来像黑魔法一样的技术,就离不开反射、字节码等。这些技术能在不侵入原有代码的情况下,做一些增强的非功能性需求。多提一句,千万不要把业务逻辑放在AOP切面、动态代理...

  • 4

    一、什么是java反射?在java的面向对象编程过程中,通常我们需要先知道一个Class类,然后​​new 类名()​​方式来获取该类的对象。也就是说我们需要在写代码的时候(编译期或者编译期之前)就知道我们要实例化哪一个类...

  • 1

    图解ReentrantLock底层公平锁和非公平锁实现原理

  • 1

    反射是 Java 面试中必问的面试题,但只有很少人能真正的理解“反射”并讲明白反射,更别说能说清楚它...

About Joyk


Aggregate valuable and interesting links.
Joyk means Joy of geeK