C++反射:深入探究function实现机制!

Posted QcloudCommunity

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了C++反射:深入探究function实现机制!相关的知识,希望对你有一定的参考价值。

导语 | 本文将深入Function这部分进行介绍,主要内容是如何利用模板完成对C++函数的类型擦除,以及如何在运行时调用类型擦除后的函数。有的时候我们需要平衡类型擦除与性能的冲突,所以本文也会以lua function wrapper这种功能为例,简单介绍这部分。

在上篇《C++反射:全面解读property的实现机制!》中我们对反射中的Property实现做了相关的介绍,本篇将深入Function这部分进行介绍。

一、 Function示例代码

//-------------------------------------
//declaration
//-------------------------------------
class Vector3 
 public:
  double x;
  double y;
  double z;
 public:
  Vector3() : x(0.0), y(0.0), z(0.0) 
  Vector3(double _x, double _y, double _z) : x(_x), y(_y), z(_z) 
  double DotProduct(const Vector3& vec) const;
;


//-------------------------------------
//register code
//-------------------------------------
__register_type<Vector3>("Vector3")
    .constructor()
    .constructor<Real, Real, Real>()
    .function("DotProduct", &Vector3::DotProduct);


//-------------------------------------
//use code
//-------------------------------------
auto* metaClass = __type_of<framework::math::Vector3>();
ASSERT_TRUE(metaClass != nullptr);


auto obj = runtime::CreateWithArgs(*metaClass, Args1.0, 2.0, 3.0);
ASSERT_TRUE(obj != UserObject::nothing);


const reflection::Function* dotProductFunc = nullptr;
metaClass->TryGetFunction("DotProduct", dotProductFunc);
ASSERT_TRUE(dotProductFunc != nullptr);
math::Vector3 otherVec(1.0, 2.0, 3.0);
auto dotRet = runtime::Call(*dotProductFunc, obj, otherVec);
ASSERT_DOUBLE_EQ(dotRet.to<double>(), 14.0);

(一)注册的代码

上述代码中,我们通过__register_type<T>()创建的ClassBuilder提供的。function(name,func)函数来完成注册。

__register_type<Vector3>("Vector3").function("DotProduct", &Vector3::DotProduct);

上例中我们就将Vector3::DotProduct()函数注册到MetaClass中了。

(二)使用的代码

运行时我们获取到的也是类型擦除后的Function对象,如上例中的 dotProductFunc,所以运行时我们需要通过runtime命名空间下提供的辅助设施runtime::call()来完成对应函数的调用,c++的动态版函数类型擦除后的入口参数是统一的Args,出口参数是Value,runtime::call()提供了任意输入参数到Args的转换,如下所示, 我们即可完成对obj对象上的DotProduct函数的调用:

auto dotRet = runtime::Call(*dotProductFunc, obj, otherVec);

(三)整体文章的展开思路

本篇文章的展开思路与Property那篇基本保持一致:

  • 一些基本知识。

  • 运行时函数的表达-Function类。

  • 反射函数的注册。

  • Lua版本反射函数的实现。

  • 反射函数的运行时分析。

二、 基本知识

Function Traits和Type Traits在c++11推出后都逐渐变得成熟,一个适配C++14/17的函数&类型萃取库对于像反射这种库也是至关重要的,但Function Traits和Type Traits本质还是依赖SIFINAE做各种类型特化和推导,属于细节非常多但真正的技巧比较少的部分,本文就直接略过对Function Traits和Type Traits细节的分析推导,假定Function Traits和Type Traits已经是成熟稳定的代码部分,我们基于这部分稳定代码做上层的设计编码。

另外本文主要分析函数部分的处理过程,所以主要关注Function Traits的提供的特性,而不对每种函数的特化实现进行展开。

反射库所使用的TFunctionTratis包含的主要信息如下图所示:

(一)TFunctionTraits<>::kind

FunctionKind枚举,主要有以下值:

/**
 * \\brief Enumeration of the kinds of function recognised
 *
 * \\sa Function
 */
enum class FunctionKind

    kNone,               ///< not a function
    kFunction,           ///< a function
    kMemberFunction,     ///< function in a class or struct
    kFunctionWrapper,    ///< `std::function<>`
    kBindExpression,     ///< `std::bind()`
    kLambda              ///< lambda function `[]()`
;

 (二)TFunctionTraits<>::ExposedType

返回值类型。

(三)TFunctionTraits<>::Details::FunctionCallTypes

std::tuple<>类型,函数所有参数的tuple<>类型,注意类的成员函数首个参数是类对象本身。

三、 运行时函数的表达——Function类

为了实现类中函数的动态调用过程,我们需要对类的成员函数进行类型擦除,形成统一的MetaFunction后,方便运行时获取和调用,以获得运行时的动态调用能力。在framework反射库的实现中,Function是一个虚基类,定义如下(节选):

class Function : public Type 
 public:
  inline IdReturn name() const  return name_; 


  inline IdReturn class_name() const  return class_name_; 


  FunctionKind kind() const  return kind_; 


  ValueKind return_type() const;


  policy::ReturnKind return_policy() const;


  virtual size_t GetParamCount() const = 0;


  virtual ValueKind GetParamType(size_t index) const = 0;


  virtual std::string_view GetParamTypeName(size_t index) const = 0;


  virtual TypeId GetParamTypeIndex(size_t index) const = 0;


  virtual TypeId GetParamBaseTypeIndex(size_t index) const = 0;


  virtual TypeId GetReturnTypeIndex() const = 0;


  virtual TypeId GetReturnBaseTypeIndex() const = 0;


  virtual bool ArgsMatch(const Args& arg) const = 0;
;

接口包括获取函数名,父类名,也包括像获取调用参数个数,类型,返回值类型这些常规方法,不一一列举了。需要注意的是并没有Invoke的方法,这个主要是因为不同用途(如纯C++的调用,和for lua的Invoke,类型擦除后的调用方式会略有差异)。C++的调用(依托Args和Value来完成调用参数和返回值类型的统一):

virtual Value Execute(const Args& args) const = 0;

lua的调用(依托Lua虚拟机的调用机制来完成函数类型的统一):

virtual int CallStraight(lua_State* L) const = 0;

四、反射函数的注册

函数的注册过程本质上是类的成员函数,经由类型擦除后,变为统一的类型(上一节中Function对象)存入MetaClass中组织起来,方便运行时动态使用的过程。大致流程如下(略过declare<>获取ClassBuilder的这步)

(一)从ClassBuilder创建一个function说起

template <typename T>
template <typename F, typename... P>
ClassBuilder<T>& ClassBuilder<T>::function(IdRef name, F function, P... policies)

    // Construct and add the metafunction
    return addFunction(detail::newFunction(name, function, policies...));

(二)由newFunction()到FunctionImpl(),真正实现函数类型擦除的地方

// Used by ClassBuilder to create new function instance.
template <typename F, typename... P>
static inline Function* newFunction(IdRef name, F function, P... policies)

    typedef detail::FunctionTraits<F> FuncTraits;
    
    static_assert(FuncTraits::kind != FunctionKind::None, "Type is not a function");
    
    return new FunctionImpl<FuncTraits, F, P...>(name, function, policies...);

(注意此处对FuncTraits的使用,另外框架相关单元测试里也给出了大量的Ponder Type Traits的测试代码。)

(三)FunctionImpl()的具体实现

FunctionImpl(IdRef name, F function, P... policies) : Function(name)

    m_name = name;
    m_funcType = FuncTraits::kind;
    m_returnType = mapType<typename FuncTraits::ExposedType>();
    m_returnPolicy = ReturnPolicy<typename FuncTraits::ExposedType, P...> ::kind;
    m_paramInfo = FunctionApplyToParams<typename FuncTraits::Details::ParamTypes,
    FunctionMapParamsToValueKind<c_nParams>>::foreach();
    Function::m_usesData = &m_userData;


    processUses<uses::Uses::eRuntimeModule>(m_name, function);
    PONDER_IF_LUA(processUses<uses::Uses::eLuaModule>(m_name, function);)

注意ponder实现函数多用途的方式,用了一个枚举的模板和相关的特化实现,打开Lua支持后,会执行两次processUses<>,分别对应processUses<uses::Uses::eRuntimeModule>()和processUses< uses::Uses::eLuaModule >,一个用来实现标准的C++反射支持,另外一个则是用于Lua的导出支持。

这个地方的实现比较复杂,Ponder借助了一些辅助的设施来完成同一函数不同用途的注册方式的分离,我们先来看一下这些辅助设施的定义,再结合processUses<>()简单说明实现机制:

/**
 * \\brief Global information on the compile-time type Uses.
 *
 *  - This can be extended for other modular uses
 */
struct Uses

    enum 
        eRuntimeModule,                 ///< Runtime module enumeration
        PONDER_IF_LUA(eLuaModule,)      ///< Lua module enumeration
        eUseCount
    ;
    
     /// Metadata uses we are using.
    typedef std::tuple<RuntimeUse
                       PONDER_IF_LUA(,LuaUse)
                      > Users;


    /// Type that stores the per-function uses data
    typedef std::tuple<
            runtime::detail::FunctionCaller*
            PONDER_IF_LUA(,lua::detail::FunctionCaller*)
        > PerFunctionUserData;
    
    // Access note:
    //  typedef typename std::tuple_element<I, PerFunctionUserData>::type PerFunc_t;
    //  PerFunc_t* std::get<I>(getUsesData());
;

此处定义了两个tuple,根据相关的定义也能大概猜到,大致是通过定义的enum值去匹配相关tuple中不同位置type的一种做法,能够比较好的实现基于enum->tuple index->types的一种dispatcher,compiler阶段就能完成的匹配,还是比较巧妙的,后续会结合具体的代码说明这部分的详细使用。

(四)processUse<>的具体实现

processUses<>的代码实现如下:

uses::Uses::PerFunctionUserData m_userData;


template <int M>
void processUses(IdRef name, F function)

    typedef typename std::tuple_element<M, uses::Uses::Users>::type Processor;


    std::get<M>(m_userData) =
        Processor::template perFunction<F, T, FuncPolicies>(name, function);

主要是对上文中的Uses结构体中的两个tuple类型的使用(Uses::PerFunctionData,Uses::Users),以枚举值 eRuntimeModule,eLuaModule作为processUses的非类型模板参数,两次调用该模板函数,我们即可得到两个不同类型的FunctionCaller存储至m_userData,这部分只包含了对tuple的访问(std::tuple_element<>,std::get<>()),通过Uses结构体的特殊构造和tuple的辅助函数,可以借助不同的enum值来完成不同用途和不同类型的FunctionCaller的生成和存储。大部分是编译期行为,很值得借鉴的一种方式。

下面我们来具体看一下Ponder完成函数类型擦除的过程,也就是上述Process::template perFunction<>()的具体实现 (注意此处template关键字的作用是告诉编译器perFunction本身也是模板函数,不加在GCC等编译器上可能会报错)。

(五)C++版本反射函数的实现(RuntimeUse::perFunction())

我们先来看一下RuntimeUse::perFunction()的实现:

struct RuntimeUse

    /// Factory for per-function runtime data
    template <typename F, typename FTraits, typename Policies_t>
    static runtime::detail::FunctionCaller* perFunction(IdRef name, F function)

        return new runtime::detail::FunctionCallerImpl<F, FTraits, Policies_t>(name, function);
    
;

perFunction的作用主要是完成对不同函数(参数与返回值可能都不一样)的类型擦除,形成统一类型的FunctionCaller。下面我们具体来看一下FunctionCallerImpl<>的具体实现。

Ponder C++反射实现函数类型擦除的方式比较特殊,不是通过得到一个统一类型的函数对象来实现的类型擦除,而是通过类继承和虚函数的方式来实现的类型擦除,代码如下:

//-----------------------------------------------------------------------------
// Base for runtime function caller


class FunctionCaller

public:
    FunctionCaller(const IdRef name) : m_name(name) 
    virtual ~FunctionCaller() 


    FunctionCaller(const FunctionCaller&) = delete; // no copying
    
    const IdRef name() const  return m_name; 
    
    virtual Value execute(const Args& args) const = 0;
    
private:
    const IdRef m_name;
;


// The FunctionImpl class is a template which is specialized according to the
// underlying function prototype.
template <typename F, typename FTraits, typename FPolicies>
class FunctionCallerImpl final : public FunctionCaller

public:


    FunctionCallerImpl(IdRef name, F function)
    :   FunctionCaller(name)
    ,   m_function(function)
    
    
private:


    typedef typename FTraits::Details::FunctionCallTypes CallTypes;
    typedef FunctionWrapper<typename FTraits::ExposedType, CallTypes> DispatchType;
    
    typename DispatchType::Type m_function; // Object containing the actual function to call
    
    Value execute(const Args& args) const final

        return DispatchType::template
            call<decltype(m_function), FTraits, FPolicies>(m_function, args);
    
;

如上所示,特化的FunctionCallerImpl<>会实现基类的Value excute(const Args& args)方法,基类的excute方法的参数和返回值是固定的,这样我们针对不同的函数会最终得到一个有统一excute()函数的FunctionCaller对象,间接完成了函数的类型擦除。(另外一种方式是通过模板推导存储一个固定参数表和返回值的lambda,也可以完成函数的类型擦除)

我们上述仅介绍了ponder内部最终存储函数的方式和基本的使用形式( 统一的excute()接口),具体的函数到最终存储形式的过程被忽略了,这里基于前文提到的成熟的Function Traits功能展开一下中间的处理部分。

  • FunctionWrapper<>模板类

通过FunctionWrapper<>模板类完成std::function<>函数对象的生成以及统一参数和返回值的call<>()方法的支持。注意FunctionCallerImpl中对FunctionWrapper类的使用:

typedef typename FTraits::Details::FunctionCallTypes CallTypes;
typedef FunctionWrapper<typename FTraits::ExposedType, CallTypes> DispatchType;

注意此处使用Function Traits直接为FunctionWrapper提供参数列表和返回值(FunctionTraits<>::Details::FunctionCallTypes和FunctionTraits<>::ExposedType)。

FunctionWrapper的代码以及使用到的CallHelper的实现代码如下:

template <typename R, typename FTraits, typename FPolicies>
class CallHelper

public:


    template<typename F, typename... A, size_t... Is>
    static Value call(F func, const Args& args, std::index_sequence<Is...>)

        typedef typename ChooseCallReturner<FPolicies, R>::type CallReturner;
        return CallReturner::value(func(ConvertArgs<A>::convert(args, Is)...));
    
;
//-----------------------------------------------------------------------------
// Convert traits to callable function wrapper. Generic for all function types.
template <typename R, typename A> struct FunctionWrapper;
template <typename R, typename... A> struct FunctionWrapper<R, std::tuple<A...>>

    typedef typename std::function<R(A...)> Type;
    
    template <typename F, typename FTraits, typename FPolicies>
    static Value call(F func, const Args& args)

        typedef std::make_index_sequence<sizeof...(A)> ArgEnumerator;
        return CallHelper<R, FTraits, FPolicies>::template
            call<F, A...>(func, args, ArgEnumerator());
    
;

此处重点关注std::make_index_sequence<>和std::index_sequence<>的使用,借助index_sequence相关的函数,我们可以很方便的对varidic template进行处理,此处通过index_sequence的使用,我们可以很好的完成args中包含的arg到函数需要的正确类型参数的转换:

ConvertArgs<A>::convert(args, Is)...

ConvertArgs<>和ChooseCallReturner<>一个是将从args中取到的Value置换为具体类型的参数,一个是将具体类型的返回值置换为Value,通过这种方式,最终实现了函数的调用参数和返回值的统一,通过这段代码,我们也能看到在C++14/17后,相关的函数类型擦除的代码对比原来的实现会简化非常多,已经很容易理解了。

另外,对于没有返回值的函数,也有专门特化的CallHelper,代码如下:

// Specialization of CallHelper for functions returning void
template <typename FTraits, typename FPolicies>
class CallHelper<void, FTraits, FPolicies>

public:


    template<typename F, typename... A, size_t... Is>
    static Value call(F func, const Args& args, PONDER__SEQNS::index_sequence<Is...>)

        func(ConvertArgs<A>::convert(args,Is)...);
        return Value::nothing;
    
;

对比有返回值的版本,差异主要是直接返回Value::nothing,所以我们也可以简单的通过call的返回值是否为Value::nothing来判断反射函数是否有返回值,这也是Rpc库使用的方式。

上面我们有提到ConvertArgs<>和ChooseCallReturner<>,通过这两者我们很好的实现了调用函数的参数统一以及返回值统一,这里我们也对其实现做一下具体的拆解,当然, 主要的类型转换的实现其实更多的是依赖Value和UserObject本身的实现,此处我们不对这两者做具体的展开,与Function Traits一样,我们把这两者当成即有成熟功能,来方便理清函数类型擦除相关的核心代码。

  • ConvertArgs<>模板类

CovertArgs<>整体实现代码如下:

//-----------------------------------------------------------------------------
    
/*
 * Helper function which converts an argument to a C++ type
 *
 * The main purpose of this function is to convert any BadType error to
 * a BadArgument one.
 */
template <int TFrom, typename TTo>
struct ConvertArg

    typedef typename std::remove_reference<TTo>::type ReturnType;
    static ReturnType
    convert(const Args& args, size_t index)

        try 
            return args[index].to<typename std::remove_reference<TTo>::type>();
        
        catch (const BadType&) 
            PONDER_ERROR(BadArgument(args[index].kind(), mapType<TTo>(), index, "?"));
        
    
;


// Specialisation for returning references.
template <typename TTo>
struct ConvertArg<(int)ValueKind::User, TTo&>

    typedef TTo& ReturnType;
    static ReturnType
    convert(const Args& args, size_t index)

        auto&& uobj = const_cast<Value&>(args[index]).ref<UserObject>();
        if (uobj.pointer() == nullptr)
            PONDER_ERROR(NullObject(&uobj.getClass()));
        return uobj.ref<TTo>();
    
;


// Specialisation for returning const references.
template <typename TTo>
struct ConvertArg<(int)ValueKind::User, const TTo&>

    typedef const TTo& ReturnType;
    static ReturnType
    convert(const Args& args, size_t index)

        auto&& uobj = args[index].cref<UserObject>();
        if (uobj.pointer() == nullptr)
            PONDER_ERROR(NullObject(&uobj.getClass()));
        return uobj.cref<TTo>();
    
;


//-----------------------------------------------------------------------------
// Object function call helper to allow specialisation by return type. Applies policies.


template <typename A>
struct ConvertArgs

    typedef typename ponder::detail::DataType<A>::Type Raw;
    static constexpr ValueKind kind = ponder_ext::ValueMapper<Raw>::kind;
    typedef ConvertArg<(int)kind, A> Convertor;
    
    static typename Convertor::ReturnType convert(const Args& args, size_t index)

        return Convertor::convert(args, index);
    
;

首先是template<int TFrom,typename TTo>struct ConvertArg的实现,前面的TForm是ValueKind值,后面的TTo是目标类型,对于非User类型的Value,模板推导出的是最前面的实现,最后直接执行Value::to<>()模板函数来完成Value到目标类型的转换,注意此处对于Covert错误的处理是直接抛异常。后续的两个特化实现分别针对reference和const reference,主要依赖UserObject的ref<>()和cref<>()模板函数,最后就是CallHelper<>模板类使用到的的template<typename A>struct ConvertArgs实现,其实就是对template<int TFrom,typename TTo>struct ConvertArg的简单包装。

  • ChooseCallReturner<>模板类

ChooseCallReturner<>的具体实现代码如下:

//-----------------------------------------------------------------------------
// Handle returning copies
    
template <typename R, typename U = void> struct CallReturnCopy;


template <typename R>
struct CallReturnCopy<R, typename std::enable_if<!ponder::detail::IsUserType<R>::value>::type>

    static inline Value value(R&& o) return Value(o);
;


template <typename R>
struct CallReturnCopy<R, typename std::enable_if<ponder::detail::IsUserType<R>::value>::type>

    static_assert(!std::is_pointer<R>::value, "Cannot return unowned pointer. Use ponder::policy::ReturnInternalRef?");
    static inline Value value(R&& o) return Value(UserObject::makeCopy(std::forward<R>(o)));
;


//-----------------------------------------------------------------------------
// Handle returning internal references
    
template <typename R, typename U = void> struct CallReturnInternalRef;


template <typename R>
struct CallReturnInternalRef<R,
    typename std::enable_if<
        !ponder::detail::IsUserType<R>::value
        && !std::is_same<typename ponder::detail::DataType<R>::Type, UserObject>::value
    >::type>

    static inline Value value(R&& o) return Value(o);
;


template <typename R>
struct CallReturnInternalRef<R,
    typename std::enable_if<
        ponder::detail::IsUserType<R>::value
        || std::is_same<typename ponder::detail::DataType<R>::Type, UserObject>::value
    >::type>

    static inline Value value(R&& o) return Value(UserObject::makeRef(std::forward<R>(o)));
;


//-----------------------------------------------------------------------------
// Choose which returner to use, based on policy
//  - map policy kind to actionable policy type
    
template <typename Policies_t, typename R> struct ChooseCallReturner;


template <typename... Ps, typename R>
struct ChooseCallReturner<std::tuple<policy::ReturnCopy, Ps...>, R>

    typedef CallReturnCopy<R> type;
;


template <typename... Ps, typename R>
struct ChooseCallReturner<std::tuple<policy::ReturnInternalRef, Ps...>, R>

    typedef CallReturnInternalRef<R> type;
;


template <typename R>
struct ChooseCallReturner<std::tuple<>, R> // default

    typedef CallReturnCopy<R> type;
;


template <typename P, typename... Ps, typename R>
struct ChooseCallReturner<std::tuple<P, Ps...>, R> // recurse

    typedef typename ChooseCallReturner<std::tuple<Ps...>, R>::type type;
;

此处注意注意Return Policy的实现,通过policy::ReturnCopy和policy::ReturnInternalRef我们可以控制Value的创建方式,默认是Copy方式创建Value,其余的主要是Value本身支持从不同类型T构造的特性来完成的。

Value对不同类型T的支持特性可以自行查阅Value的实现,目前版本的Value的内部通过ponder自己实现的variants来完成对不同类型T的存取,但其实第一版的ponder重度依赖boost,所以第一版的实现也是直接使用的boost::variants,后续V2版本解除了对boost的依赖,但variants的实现也大量参考了boost的实现,所以对这部分细节感兴趣的可以直接查阅boost::variants相关的文档和源码,更容易理解其中的细节。

五、 Lua版本反射函数的实现

 ——LuaUse::perFunction()

LuaUse::perFunction()的目的与C++反射函数的目的一致,也是完成对普通函数的类型擦除,形成统一的函数对象类型,只是生成的统一FunctionCaller对象不同。

struct LuaUse

    /// Factory for per-function runtime data
    template <typename F, typename FTraits, typename Policies_t>
    static lua::detail::FunctionCaller* perFunction(IdRef name, F function)

        return new lua::detail::FunctionCallerImpl<F, FTraits, Policies_t>(name, function);
    
;

具体的实现与上一节的很多地方都一样,我们主要关注针对Lua的那部分特性。

// Base for runtime function caller
class FunctionCaller

public:
    FunctionCaller(const IdRef name, int (*fn)(lua_State*) = nullptr)
        :   m_name(name)
        ,   m_luaFunc(fn)
    
    
    FunctionCaller(const FunctionCaller&) = delete; // no copying
    virtual ~FunctionCaller() 
    
    const IdRef name() const  return m_name; 


    void pushFunction(lua_State* L)

        lua_pushlightuserdata(L, (void*) this);
        lua_pushcclosure(L, m_luaFunc, 1);
    
    
private:
    const IdRef m_name;
    int (*m_luaFunc)(lua_State*);
;


// The FunctionImpl class is a template which is specialized according to the
// underlying function prototype.
template <typename F, typename FTraits, typename FPolicies>
class FunctionCallerImpl : public FunctionCaller

public:
    FunctionCallerImpl(IdRef name, F function)
    :   FunctionCaller(name, &call)
    ,   m_function(function)
    
private:
    typedef FunctionCallerImpl<F, FTraits, FPolicies> ThisType;
    
    typedef typename FTraits::Details::FunctionCallTypes CallTypes;
    typedef FunctionWrapper<typename FTraits::ExposedType, CallTypes> DispatchType;
    
    typename DispatchType::Type m_function; // Object containing the actual function to call
    
    static int call(lua_State *L)

        lua_pushvalue(L, lua_upvalueindex(1));
        ThisType *self = reinterpret_cast<ThisType*>(lua_touserdata(L, -1));
        lua_pop(L, 1);
        
        return DispatchType::template
            call<decltype(m_function), FTraits, FPolicies>(self->m_function, L);
    
;

首先看到的差异点是FunctionCaller对象上的m_luaFunc成员:

int (*m_luaFunc)(lua_State*);

以及pushFunction()成员函数:

void pushFunction(lua_State* L)
    
        lua_pushlightuserdata(L, (void*) this);
        lua_pushcclosure(L, m_luaFunc, 1);
    

先忽略类型擦除的过程,我们先来看Lua版的FunctionCaller,对比C++的FunctionCaller,差异之处为所有函数会被处理为标准Lua C函数的类型(lua_CFunction类型,int为返回值,lua_State*作为入口参数),另外通过额外多出来的pushFunction()函数可以将m_luaFunc作为c closure入栈,当然FunctionCaller本身的this指针被当成light userdata作为这个c closure的up value被传入lua虚拟机中。

我们接下来看看FunctionCallerImpl,对比C++版的实现,区别最大的是call函数,此处的call函数也是个lua_CFunction类型的函数,同时我们也很容易观察到生成的静态call函数被当成构造函数的参数,最终赋值给了FunctionCaller内的m_luaFunc,我们知道Lua与C++的交互主要是通过lua_State来完成的,要在Lua中调用C++函数,我们需要间接的通过lua_State来传入参数和输出返回值,所以对应的FunctionWrapper对比C++版本也是特殊实现的,并且都带入了lua_State作为额外的参数。类同上文第二部分第四小节, 我们也深入分析FunctionWrapper的实现以及从Lua虚拟机上传入参数以及传出返回值的过程。

(一)FunctionWrapper<>模板类

template <typename R, typename FTraits, typename FPolicies>
class CallHelper

public:
    
    template<typename F, typename... A, size_t... Is>
    static int call(F func, lua_State* L, std::index_sequence<Is...>)

        typedef typename ChooseCallReturner<FPolicies, R>::type CallReturner;
        return CallReturner::value(L, func(ConvertArgs<A>::convert(L, Is)...));
    
;
//-----------------------------------------------------------------------------
// Convert traits to callable function wrapper. Generic for all function types.
template <typename R, typename P> struct FunctionWrapper;
template <typename R, typename... P> struct FunctionWrapper<R, std::tuple<P...>>

    typedef typename std::function<R(P...)> Type;
    
    template <typename F, typename FTraits, typename FPolicies>
    static int call(F func, lua_State* L)

        typedef std::make_index_sequence<sizeof...(P)> ArgEnumerator;
        
        return CallHelper<R, FTraits, FPolicies>::template call<F, P...>(func, L, ArgEnumerator());
    
;

与C++版本一致的部分我们不再展开讲解,首先我们注意到与C++版本一样,FunctionCallerImpl中存储的std::function函数对象类型与C++版本实现一致,同样,CallHelper也有无返回值的版本,主要差别是CovertArgs<>()和ChooseCallReturner<>()的实现,都变成了带lua_State参数的版本,原因也是显而意见的,需要通过lua_State来交换需要的数据,Lua版与C++版本的实现主要的差异也在这里,我们接下来具体看看这两个模板函数的实现。

(二)CovertArgs<>模板类

//-----------------------------------------------------------------------------
// Object function call helper to allow specialisation by return type. Applies policies.
template <typename P>
struct ConvertArgs

    typedef LuaValueReader<P> Convertor;
    
    static typename Convertor::ParamType convert(lua_State* L, size_t index)

        return Convertor::convert(L, index+1);
    
;

很容易发现Lua版的ConvertArgs仅是对LuaValueReader<>的简单包装和使用,而阅读LuaValueReader的实现发现是对各种数据类型的特化实现,包含了各种lua c api的访问,比较特殊的是对lua table,c++侧的UserObject等的处理,熟悉lua c api的话这些代码都比较容易读懂,此处不再展开了,仅给出string_view的实现供参考:

template <>
struct LuaValueReader<ponder::detail::string_view>

    typedef ponder::detail::string_view ParamType;
    static inline ParamType convert(lua_State* L, size_t index)

        return ParamType(luaL_checkstring(L, (int)index));
    
;

(三)ChooseCallReturner<>模板类

// Handle returning copies
template <typename R, typename U = void> struct CallReturnCopy;
template <typename R>
struct CallReturnCopy<R, typename std::enable_if<!ponder::detail::IsUserType<R>::value>::type>

    // "no member named push" error here means the type returned is not covered.
    static inline int value(lua_State *L, R&& o) return LuaValueWriter<R>::push(L, o);
;

ChooseCallReturner<>因为Policy的存在,实现版本较多,此处仅贴出其中一个实现供参考。与CovertArgs一样,ChooseCallRetruner<>也是对LuaValueWriter<>模板类的包装和使用,我们同样给出其中一个LuaValueWriter的实现供参考:

template <typename T>
struct LuaValueWriter<T, typename std::enable_if<std::is_floating_point<T>::value>::type>

    static inline int push(lua_State *L, T value)

        return lua_pushnumber(L, value), 1;
    
;

(四)小结

其实对于c++ ->lua的Wrapper,我们当然可以复用第4节的设施,直接针对:

virtual Value Execute(const Args& args) const = 0;

包装lua c function,也是极简单的,但考虑到性能,ponder的做法是复用了相关的Traits实现,重新包装了第5节的Function实现,这样可以得到更高性能的跨语言调用设施。所以很多时候,我们应该是在整个系统不同层面去衡量性价比,像上述代码实现不那么繁复,又能够得到更好的性能的实现,我们肯定会更多考虑。

通过上述C++版和Lua版的函数反射实现,我们其实可以发现在Ponder已有的设施下,实现不同目的反射函数变得相当的简单,基于C++版本反射函数的实现思路,可以非常方便的实现其他目的版本的反射函数(如Lua版),这也是Ponder本身实现的完备和强大之处。

另外对于lua bridge来说,光一个function的实现肯定是不够的,后续将会相对完整的介绍怎么基于已有的c++反射特性来实现一个项目级的lua bridge。

六、 反射函数的运行时分析


(一)c++::function的执行分析

与Property篇类同,我们也给出一个运行时的分析,方便大家更好的了解整个Function机制的运转方式。运行时的测试选用的依然是最前面示例的代码:

math::Vector3 otherVec(1.0, 2.0, 3.0);
auto dotRet = runtime::Call(*dotProductFunc, obj, otherVec);

简洁起见,仅给出最顶层call stack的展开:

相关的最顶层代码:

最终执行的模板实例格式化后如下所示:

framework::reflection::runtime::detail::TCallHelper<
    double /*return value type*/ ,framework::reflection::detail::TFunctionTraits<  //deduced TFunctionTraits<>
        double (__cdecl framework::math::Vector3::*)(framework::math::Vector3 const &)const>, //Vector3::DotProduct() type
    std::tuple<>
>::Call<
    std::function<double __cdecl(framework::math::Vector3 const &,framework::math::Vector3 const &)>,
    framework::math::Vector3 const &,
    framework::math::Vector3 const &,0,1
>(  //argument list
    const std::function<double __cdecl(framework::math::Vector3 const &,framework::math::Vector3 const &)> & func, 
    const framework::reflection::Args & args, 
    std::integer_sequence<unsigned __int64,0,1> __formal)

通过层层嵌套的模板特化,我们最后完成了运行时函数的动态调用。

(二)lua::function的执行分析

lua::function的执行与c++::function的执行过程非常类同,这里不重复展开,有兴趣的同学可以自行尝试。

七、 总结

至此整体反射的实现的理论介绍已经靠一段路,本系列文章后续会继续介绍剩下更侧重应用的几篇:

  • C++反射深入浅出 - lura的前世今生

  • C++反射深入浅出 - 反射信息的自动生成

  • C++反射深入浅出 - 反射的其他应用

  • C++反射深入浅出 - c++20 concept改造

参考资料:

1.[github ponder库] 

https://github.com/billyquith/ponder

 作者简介

沈芳

腾讯后台开发工程师

IEG研发效能部开发人员,毕业于华中科技大学。目前负责CrossEngine Server的开发工作,对GamePlay技术比较感兴趣。

 推荐阅读

C++反射:全面解读property的实现机制!

C++反射:深入浅出剖析ponder库实现机制!

拥抱云原生!COS数据湖加速器GooseFS存算分离实践及性能优化

微前端究竟是什么?微前端核心技术揭秘!

以上是关于C++反射:深入探究function实现机制!的主要内容,如果未能解决你的问题,请参考以下文章

C++反射:深入浅出剖析ponder库实现机制!

C++中事件机制的简洁实现

深入理解Java类型信息(Class对象)与反射机制

Java基础 -- 深入理解Java类型信息(Class对象)与反射机制

android 消息传递机制EventBus的深入探究

深入理解java的反射机制