实现 C++14 make_integer_sequence

Posted

技术标签:

【中文标题】实现 C++14 make_integer_sequence【英文标题】:Implementation C++14 make_integer_sequence 【发布时间】:2013-06-29 18:07:21 【问题描述】:

我尝试实现了C++14别名模板make_integer_sequence,它简化了类模板integer_sequence的创建。

template< class T, T... I> struct integer_sequence

    typedef T value_type;
    static constexpr size_t size() noexcept  return sizeof...(I) ; 

;

template< class T, T N>
using make_integer_sequence = integer_sequence< T, 0,1,2, ... ,N-1 >; // only for illustration.

要实现make_integer_sequence,我们需要一个辅助结构make_helper

template< class T , class N >
using make_integer_sequence = typename make_helper<T,N>::type;

实现make_helper 并不太难。

template< class T, T N, T... I >
struct make_helper

   typedef typename mpl::if_< T(0) == N,  
                  mpl::identity< integer_sequence<T,I...> >,
                  make_helper< T, N-1, N-1,I...> 
               >::type;
;

为了测试make_integer_sequence我做了这个主函数:

int main()

    #define GEN(z,n,temp)   \
     typedef make_integer_sequence< int, n >  BOOST_PP_CAT(int_seq,n) ;

   BOOST_PP_REPEAT(256, GEN, ~);

我在具有 8GB 内存的四核 i5 系统上使用 GCC 4.8.0 编译了该程序。 成功编译耗时 4 秒。

但是,当我将 GEN 宏更改为:

int main() 

#define GEN(z,n,temp) \
typedef make_integer_sequence< int, n * 4 > BOOST_PP_CAT(int_seq, n) ;

BOOST_PP_REPEAT(256, GEN, ~ );

编译不成功,输出错误信息:

虚拟内存耗尽。

有人能解释一下这个错误吗?是什么原因造成的?

编辑:

我将测试简化为:

int main()

   typedef make_integer_sequence< int, 4096 > int_seq4096;

然后我使用 GCC 4.8.0 -ftemplate-depth=65536 成功编译。

但是第二次测试:

int main()

    typedef make_integer_sequence< int, 16384 > int_seq16384;

没有使用 GCC 4.8.0 -ftemplate-depth=65536 编译,导致错误:

虚拟内存耗尽。

那么,我的问题是,如何减少模板深度实例化?

问候, 胡尔希德。

【问题讨论】:

在 S.T.Lavavej 的一次谈话中,我想我听说微软编译器有一个钩子可以自动生成make_integer_sequence,(基本上?)在 O(1) 中。具有讽刺意味的是,为了实现这一点,编译器可能会自己产生很多东西。 【参考方案1】:

这是一个log N 实现,它甚至不需要增加模板实例化的最大深度并且编译速度非常快:

// using aliases for cleaner syntax
template<class T> using Invoke = typename T::type;

template<unsigned...> struct seq using type = seq; ;

template<class S1, class S2> struct concat;

template<unsigned... I1, unsigned... I2>
struct concat<seq<I1...>, seq<I2...>>
  : seq<I1..., (sizeof...(I1)+I2)...>;

template<class S1, class S2>
using Concat = Invoke<concat<S1, S2>>;

template<unsigned N> struct gen_seq;
template<unsigned N> using GenSeq = Invoke<gen_seq<N>>;

template<unsigned N>
struct gen_seq : Concat<GenSeq<N/2>, GenSeq<N - N/2>>;

template<> struct gen_seq<0> : seq<>;
template<> struct gen_seq<1> : seq<0>;

【讨论】:

非常好!我只想说实例化的深度是O(log N)(操作数是O(N))。无论如何,这是一个非常快速的实现。 @Xeo 我会将Concat 解读为“获取两个列表并将它们一个接一个地放置”。将“并将最左边列表的长度添加到最右边列表的内容”到 Concat 所做的事情会让我感到惊讶。 template&lt;class S, unsigned I=1&gt; struct inc; template&lt;unsigned... Is, unsigned I&gt; struct inc&lt;seq&lt;Is...&gt;, I&gt;:seq&lt;(Is+I)...&gt; ; template&lt;class S, unsigned I=1&gt; using Inc=Invoke&lt;inc&lt;S,I&gt;&gt;; 然后是template&lt;unsigned N&gt;struct gen_seq:Concat&lt;GenSeq&lt;N/2&gt;, Inc&lt;GenSeq&lt;N-N/2&gt;,N/2&gt;&gt;;,其中Concat 不会在第二个列表中添加任何内容,这将使该操作与串联分离。 我在使用此代码时遇到了问题,然后意识到我应该使用GenSeq,而不是gen_seq,用于make_index_sequence 通过类似实现的实验,我发现concat 中的sizeof...(I1) 效率很低(至少对于g++ 而言),可以通过将该数字传递给concat 而不是重新计算来改进它它。 我可以请求一个如何使用它的例子吗!【参考方案2】:

这基本上是我在破解 Xeo 的解决方案:制作社区 wiki - 如果欣赏,请为 Xeo 投票

...只是修改,直到我觉得它不能变得更简单,重命名并根据标准添加 value_typesize()(但只做 index_sequence 而不是 integer_sequence),以及使用 GCC 的代码5.2 -std=c++14 可以在我坚持使用的旧/其他编译器下运行,否则不会改变。可能会节省一些时间/混乱。

// based on http://***.com/a/17426611/410767 by Xeo
namespace std  // WARNING: at own risk, otherwise use own namespace

    template <size_t... Ints>
    struct index_sequence
    
        using type = index_sequence;
        using value_type = size_t;
        static constexpr std::size_t size() noexcept  return sizeof...(Ints); 
    ;

    // --------------------------------------------------------------

    template <class Sequence1, class Sequence2>
    struct _merge_and_renumber;

    template <size_t... I1, size_t... I2>
    struct _merge_and_renumber<index_sequence<I1...>, index_sequence<I2...>>
      : index_sequence<I1..., (sizeof...(I1)+I2)...>
     ;

    // --------------------------------------------------------------

    template <size_t N>
    struct make_index_sequence
      : _merge_and_renumber<typename make_index_sequence<N/2>::type,
                            typename make_index_sequence<N - N/2>::type>
     ;

    template<> struct make_index_sequence<0> : index_sequence<>  ;
    template<> struct make_index_sequence<1> : index_sequence<0>  ;

注意事项:

Xeo 解决方案的“魔力”在于 _merge_and_renumber(在他的代码中为 concat)的声明中只有两个参数,而规范化有效地公开了它们各自的参数包

typename...::type 在...

struct make_index_sequence
  : _merge_and_renumber<typename make_index_sequence<N/2>::type,
                        typename make_index_sequence<N - N/2>::type>

    避免错误:

invalid use of incomplete type 'struct std::_merge_and_renumber<std::make_index_sequence<1ul>, std::index_sequence<0ul> >'

【讨论】:

为什么是index_sequence 而不是integer_sequence @einpoklum:因为integer_sequence 必须将数据类型作为模板参数,而我已经硬编码size_t,这在当时非常适合我......跨度> @einpoklum 为 Tony 的回复添加一点细节:您不能部分专注于模板类型的模板参数。您不能以这种方式实现 integer_sequence。获得 integer_sequence 的最好方法是完全专门化每种整数类型。 (每个整数类型的代码长度)【参考方案3】:

我发现make_index_sequence 的实现非常快速且不必要的深度递归版本。在我的 PC 中,它使用 N = 1 048 576 编译,时间为 2 秒。 (PC:Centos 6.4 x86、i5、8 Gb RAM、gcc-4.4.7 -std=c++0x -O2 -Wall)。

#include <cstddef> // for std::size_t

template< std::size_t ... i >
struct index_sequence

    typedef std::size_t value_type;

    typedef index_sequence<i...> type;

    // gcc-4.4.7 doesn't support `constexpr` and `noexcept`.
    static /*constexpr*/ std::size_t size() /*noexcept*/
     
        return sizeof ... (i); 
    
;


// this structure doubles index_sequence elements.
// s- is number of template arguments in IS.
template< std::size_t s, typename IS >
struct doubled_index_sequence;

template< std::size_t s, std::size_t ... i >
struct doubled_index_sequence< s, index_sequence<i... > >

    typedef index_sequence<i..., (s + i)... > type;
;

// this structure incremented by one index_sequence, iff NEED-is true, 
// otherwise returns IS
template< bool NEED, typename IS >
struct inc_index_sequence;

template< typename IS >
struct inc_index_sequence<false,IS> typedef IS type; ;

template< std::size_t ... i >
struct inc_index_sequence< true, index_sequence<i...> >

    typedef index_sequence<i..., sizeof...(i)> type;
;



// helper structure for make_index_sequence.
template< std::size_t N >
struct make_index_sequence_impl : 
           inc_index_sequence< (N % 2 != 0), 
                typename doubled_index_sequence< N / 2,
                           typename make_index_sequence_impl< N / 2> ::type
               >::type
       >
;

 // helper structure needs specialization only with 0 element.
template<>struct make_index_sequence_impl<0> typedef index_sequence<> type; ;



// OUR make_index_sequence,  gcc-4.4.7 doesn't support `using`, 
// so we use struct instead of it.
template< std::size_t N >
struct make_index_sequence : make_index_sequence_impl<N>::type ;

//index_sequence_for  any variadic templates
template< typename ... T >
struct index_sequence_for : make_index_sequence< sizeof...(T) >;


// test
typedef make_index_sequence< 1024 * 1024 >::type a_big_index_sequence;
int main()

【讨论】:

【参考方案4】:

您在这里缺少-1

typedef typename mpl::if_< T(0) == N,  
              mpl::identity< integer_sequence<T> >,
              make_helper< T, N, N-1,I...> 
           >::type;

特别是:

typedef typename mpl::if_< T(0) == N,  
              mpl::identity< integer_sequence<T> >,
              make_helper< T, N-1, N-1,I...> 
           >::type;

接下来,第一个分支不应该是integer_sequence&lt;T&gt;,而是integer_sequence&lt;T, I...&gt;

typedef typename mpl::if_< T(0) == N,  
              mpl::identity< integer_sequence<T, I...> >,
              make_helper< T, N-1, N-1,I...> 
           >::type;

这应该足以编译您的原始代码。

一般来说,在编写严肃的template 元编程时,您的主要目标应该是降低template 实例化的深度。思考这个问题的一种方法是想象你有一台无限线程的计算机:每个独立的计算都应该被洗牌到它自己的线程上,然后在最后一起洗牌。您有一些需要 O(1) 深度的操作,例如 ... 扩展:利用它们。

通常,拉取对数深度就足够了,因为900 深度允许2^900 大小的结构,而其他东西首先会中断。 (公平地说,更有可能发生的是 90 个不同层的 2^10 大小的结构)。

【讨论】:

【参考方案5】:

这是Xeo 的对数答案的另一个稍微更一般的变体,它为任意类型提供make_integer_sequence。这是通过使用std::integral_constant 来完成的,以避免可怕的“模板参数涉及模板参数”错误。

template<typename Int, Int... Ints>
struct integer_sequence

    using value_type = Int;
    static constexpr std::size_t size() noexcept
    
        return sizeof...(Ints);
    
;

template<std::size_t... Indices>
using index_sequence = integer_sequence<std::size_t, Indices...>;

namespace

    // Merge two integer sequences, adding an offset to the right-hand side.
    template<typename Offset, typename Lhs, typename Rhs>
    struct merge;

    template<typename Int, Int Offset, Int... Lhs, Int... Rhs>
    struct merge<
        std::integral_constant<Int, Offset>,
        integer_sequence<Int, Lhs...>,
        integer_sequence<Int, Rhs...>
    >
    
        using type = integer_sequence<Int, Lhs..., (Offset + Rhs)...>;
    ;

    template<typename Int, typename N>
    struct log_make_sequence
    
        using L = std::integral_constant<Int, N::value / 2>;
        using R = std::integral_constant<Int, N::value - L::value>;
        using type = typename merge<
            L,
            typename log_make_sequence<Int, L>::type,
            typename log_make_sequence<Int, R>::type
        >::type;
    ;

    // An empty sequence.
    template<typename Int>
    struct log_make_sequence<Int, std::integral_constant<Int, 0>>
    
        using type = integer_sequence<Int>;
    ;

    // A single-element sequence.
    template<typename Int>
    struct log_make_sequence<Int, std::integral_constant<Int, 1>>
    
        using type = integer_sequence<Int, 0>;
    ;


template<typename Int, Int N>
using make_integer_sequence =
    typename log_make_sequence<
        Int, std::integral_constant<Int, N>
    >::type;

template<std::size_t N>
using make_index_sequence = make_integer_sequence<std::size_t, N>;

演示:coliru

【讨论】:

【参考方案6】:

简单的实现 O(N)。对于大 N 可能不是您想要的,但我的应用程序仅用于调用具有索引参数的函数,并且我不希望 arity 超过大约 10。我没有填写 integer_sequence 的成员。我期待使用标准库实现并对此进行核对:)

template <typename T, T... ints>
struct integer_sequence
 ;

template <typename T, T N, typename = void>
struct make_integer_sequence_impl

    template <typename>
    struct tmp;

    template <T... Prev>
    struct tmp<integer_sequence<T, Prev...>>
    
        using type = integer_sequence<T, Prev..., N-1>;
    ;

    using type = typename tmp<typename make_integer_sequence_impl<T, N-1>::type>::type;
;

template <typename T, T N>
struct make_integer_sequence_impl<T, N, typename std::enable_if<N==0>::type>
 using type = integer_sequence<T>; ;

template <typename T, T N>
using make_integer_sequence = typename make_integer_sequence_impl<T, N>::type;

【讨论】:

【参考方案7】:

这里是另一种实现技术(T=size_t),它使用 C++17 折叠表达式和按位生成(即O(log(N)):

template <size_t... Is>
struct idx_seq 
  template <size_t N, size_t Offset>
  struct pow2_impl 
    using type = typename idx_seq<Is..., (Offset + Is)...>::template pow2_impl<N - 1, Offset + sizeof...(Is)>::type;
  ;
  template <size_t _> struct pow2_impl<0, _>  using type = idx_seq; ;
  template <size_t _> struct pow2_impl<(size_t)-1, _>  using type = idx_seq<>; ;

  template <size_t Offset>
  using offset = idx_seq<(Offset + Is)...>;
;

template <size_t N>
using idx_seq_pow2 = typename idx_seq<0>::template pow2_impl<N, 1>::type;

template <size_t... Is, size_t... Js>
constexpr static auto operator,(idx_seq<Is...>, idx_seq<Js...>)
  -> idx_seq<Is..., Js...>
 return ; 

template <size_t N, size_t Mask, size_t... Bits>
struct make_idx_seq_impl 
  using type = typename make_idx_seq_impl<N, (N >= Mask ? Mask << 1 : 0), Bits..., (N & Mask)>::type;
;

template <size_t N, size_t... Bits>
struct make_idx_seq_impl<N, 0, Bits...> 
  using type = decltype((idx_seq<>, ..., typename idx_seq_pow2<Bits>::template offset<(N & (Bits - 1))>));
;

template <size_t N>
using make_idx_seq = typename make_idx_seq_impl<N, 1>::type;

【讨论】:

【参考方案8】:

这里是一个非常简单的解决方案,使用基于标签调度的递归实现

template <typename T, T M, T ... Indx>
constexpr std::integer_sequence<T, Indx...> make_index_sequence_(std::false_type)

    return ;


template <typename T, T M, T ... Indx>
constexpr auto make_index_sequence_(std::true_type)

    return make_index_sequence_<T, M, Indx..., sizeof...(Indx)>(
            std::integral_constant<bool, sizeof...(Indx) + 1 < M>());


template <size_t M>
constexpr auto make_index_sequence()

    return make_index_sequence_<size_t, M>(std::integral_constant<bool, (0 < M)>());

但是,此解决方案无法扩展到 C++11。

【讨论】:

以上是关于实现 C++14 make_integer_sequence的主要内容,如果未能解决你的问题,请参考以下文章

C++14 中 main() 的合法定义

C++14 或 C++1z 是不是已经或将不再定义调用委托类成员函数指针?

理顺软件开发各个环节-14(开发管理-编程实现)

如何在 C 中实现多分支树结构

C语言第三天笔记2016年01月14日(周四)P.M

c++读写锁实现