第十六周 项目2--大数据集上排序算法性能的体验

Posted zxt17853535692

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了第十六周 项目2--大数据集上排序算法性能的体验相关的知识,希望对你有一定的参考价值。

问题及代码:

/*     
*烟台大学计算机与控制工程学院      
*作    者:张晓彤    
*完成日期:2016年12月9日  
*问题描述:设计一个函数,产生一个至少5万条记录的数据集合。在同一数据集上,用直接插入排序、冒泡排序、快速排序、直接选择排序、堆排序、归并排序、基数排序等算法进行排序,记录所需要的时间,经过对比,得到对复杂度不同的各种算法在运行时间方面的感性认识。  
 
  提示1:这一项目需要整合多种排序算法,可以考虑先建设排序算法库,作为我们这门课算法库的收官之作;   
  提示2:本项目旨在获得对于复杂度不同算法的感性认识,由于数据分布特点、计算机运行状态等不同,其结果并不能完全代替对算法复杂度的理论分析;   
提示3:由于C语言标准提供的时间函数只精确到秒,几种O(nlog 2 n) 级别的算法,在5万条记录的压力下,并不能明显地看出优劣,可以忽略直接插入排序、冒泡排序、直接选择排序这三种相对低效率的算法(以节约时间。若能够忍受他们长时间地运行,请自便。),成10倍地加大数据量,然后进行观察。  
*/   
(1)sort.h
//下面的符号常量和结构体针对基数排序    
#define Radix 10           //基数的取值    
#define Digits 10          //关键字位数    
    
typedef int KeyType;    //定义关键字类型    
typedef char InfoType[10];    
typedef struct          //记录类型    
    
    KeyType key;        //关键字项    
    InfoType data;      //其他数据项,类型为InfoType    
 RecType;              //排序的记录类型定义    
    
typedef struct node    
    
    KeyType data;      //记录的关键字,同算法讲解中有差别    
    struct node *next;    
 RadixRecType;    
    
void InsertSort(RecType R[],int n); //直接插入排序    
void ShellSort(RecType R[],int n);  //希尔排序算法    
void BubbleSort(RecType R[],int n); //冒泡排序    
void QuickSort(RecType R[],int n);  //快速排序    
void SelectSort(RecType R[],int n);  //直接选择排序    
void HeapSort(RecType R[],int n);  //堆排序    
void MergeSort(RecType R[],int n); //归并排序    
    
//下面函数支持基数排序    
void CreateLink(RadixRecType *&p,RecType R[],int n);   //创建基数排序用的链表    
void DestoryLink(RadixRecType *&p); //释放基数排序用的链表    
void RadixSort(RadixRecType *&p); //基数排序    

#include "sort.h"    
#include <malloc.h>    
    
//1. 对R[0..n-1]按递增有序进行直接插入排序    
void InsertSort(RecType R[],int n)    
    
    int i,j;    
    RecType tmp;    
    for (i=1; i<n; i++)    
        
        tmp=R[i];    
        j=i-1;            //从右向左在有序区R[0..i-1]中找R[i]的插入位置    
        while (j>=0 && tmp.key<R[j].key)    
            
            R[j+1]=R[j]; //将关键字大于R[i].key的记录后移    
            j--;    
            
        R[j+1]=tmp;      //在j+1处插入R[i]    
        
    
    
    
//2. 希尔排序算法    
void ShellSort(RecType R[],int n)    
    
    int i,j,gap;    
    RecType tmp;    
    gap=n/2;                //增量置初值    
    while (gap>0)    
        
        for (i=gap; i<n; i++) //对所有相隔gap位置的所有元素组进行排序    
            
            tmp=R[i];    
            j=i-gap;    
            while (j>=0 && tmp.key<R[j].key)//对相隔gap位置的元素组进行排序    
                
                R[j+gap]=R[j];    
                j=j-gap;    
                
            R[j+gap]=tmp;    
            j=j-gap;    
            
        gap=gap/2;  //减小增量    
        
    
    
//3. 冒泡排序    
void BubbleSort(RecType R[],int n)    
    
    int i,j,exchange;    
    RecType tmp;    
    for (i=0; i<n-1; i++)    
        
        exchange=0;    
        for (j=n-1; j>i; j--)   //比较,找出最小关键字的记录    
            if (R[j].key<R[j-1].key)    
                
                tmp=R[j];  //R[j]与R[j-1]进行交换,将最小关键字记录前移    
                R[j]=R[j-1];    
                R[j-1]=tmp;    
                exchange=1;    
                
        if (exchange==0)    //没有交换,即结束算法    
            return;    
        
    
    
//4. 对R[s]至R[t]的元素进行快速排序    
void QuickSortR(RecType R[],int s,int t)    
    
    int i=s,j=t;    
    RecType tmp;    
    if (s<t)                //区间内至少存在两个元素的情况    
        
        tmp=R[s];           //用区间的第1个记录作为基准    
        while (i!=j)        //从区间两端交替向中间扫描,直至i=j为止    
            
            while (j>i && R[j].key>=tmp.key)    
                j--;        //从右向左扫描,找第1个小于tmp.key的R[j]    
            R[i]=R[j];      //找到这样的R[j],R[i]"R[j]交换    
            while (i<j && R[i].key<=tmp.key)    
                i++;        //从左向右扫描,找第1个大于tmp.key的记录R[i]    
            R[j]=R[i];      //找到这样的R[i],R[i]"R[j]交换    
            
        R[i]=tmp;    
        QuickSortR(R,s,i-1);     //对左区间递归排序    
        QuickSortR(R,i+1,t);     //对右区间递归排序    
        
    
    
//4. 快速排序辅助函数,对外同其他算法统一接口,内部调用递归的快速排序    
void QuickSort(RecType R[],int n)    
    
    QuickSortR(R, 0, n-1);    
    
    
//5. 直接选择排序    
void SelectSort(RecType R[],int n)    
    
    int i,j,k;    
    RecType temp;    
    for (i=0; i<n-1; i++)           //做第i趟排序    
        
        k=i;    
        for (j=i+1; j<n; j++)   //在当前无序区R[i..n-1]中选key最小的R[k]    
            if (R[j].key<R[k].key)    
                k=j;            //k记下目前找到的最小关键字所在的位置    
        if (k!=i)               //交换R[i]和R[k]    
            
            temp=R[i];    
            R[i]=R[k];    
            R[k]=temp;    
            
        
    
    
//6. 堆排序辅助之——调整堆    
void sift(RecType R[],int low,int high)    
    
    int i=low,j=2*i;                        //R[j]是R[i]的左孩子    
    RecType temp=R[i];    
    while (j<=high)    
        
        if (j<high && R[j].key<R[j+1].key)  //若右孩子较大,把j指向右孩子    
            j++;                                //变为2i+1    
        if (temp.key<R[j].key)    
            
            R[i]=R[j];                          //将R[j]调整到双亲结点位置上    
            i=j;                                //修改i和j值,以便继续向下筛选    
            j=2*i;    
            
        else break;                             //筛选结束    
        
    R[i]=temp;                                  //被筛选结点的值放入最终位置    
    
    
//6. 堆排序    
void HeapSort(RecType R[],int n)    
    
    int i;    
    RecType temp;    
    for (i=n/2; i>=1; i--) //循环建立初始堆    
        sift(R,i,n);    
    for (i=n; i>=2; i--) //进行n-1次循环,完成推排序    
        
        temp=R[1];       //将第一个元素同当前区间内R[1]对换    
        R[1]=R[i];    
        R[i]=temp;    
        sift(R,1,i-1);   //筛选R[1]结点,得到i-1个结点的堆    
        
    
    
//7.归并排序辅助1——合并有序表    
void Merge(RecType R[],int low,int mid,int high)    
    
    RecType *R1;    
    int i=low,j=mid+1,k=0; //k是R1的下标,i、j分别为第1、2段的下标    
    R1=(RecType *)malloc((high-low+1)*sizeof(RecType));  //动态分配空间    
    while (i<=mid && j<=high)       //在第1段和第2段均未扫描完时循环    
        if (R[i].key<=R[j].key)     //将第1段中的记录放入R1中    
            
            R1[k]=R[i];    
            i++;    
            k++;    
            
        else                            //将第2段中的记录放入R1中    
            
            R1[k]=R[j];    
            j++;    
            k++;    
            
    while (i<=mid)                      //将第1段余下部分复制到R1    
        
        R1[k]=R[i];    
        i++;    
        k++;    
        
    while (j<=high)                 //将第2段余下部分复制到R1    
        
        R1[k]=R[j];    
        j++;    
        k++;    
        
    for (k=0,i=low; i<=high; k++,i++) //将R1复制回R中    
        R[i]=R1[k];    
    
    
//7. 归并排序辅助2——一趟归并    
void MergePass(RecType R[],int length,int n)    //对整个数序进行一趟归并    
    
    int i;    
    for (i=0; i+2*length-1<n; i=i+2*length)     //归并length长的两相邻子表    
        Merge(R,i,i+length-1,i+2*length-1);    
    if (i+length-1<n)                       //余下两个子表,后者长度小于length    
        Merge(R,i,i+length-1,n-1);          //归并这两个子表    
    
    
//7. 归并排序    
void MergeSort(RecType R[],int n)           //自底向上的二路归并算法    
    
    int length;    
    for (length=1; length<n; length=2*length) //进行log2n趟归并    
        MergePass(R,length,n);    
    
    
//以下基数排序,为了统一测试有改造    
//8. 基数排序的辅助函数,创建基数排序用的链表    
void CreateLink(RadixRecType *&p,RecType R[],int n)   //采用后插法产生链表    
    
    int i;    
    RadixRecType *s,*t;    
    for (i=0; i<n; i++)    
        
        s=(RadixRecType *)malloc(sizeof(RadixRecType));    
        s->data = R[i].key;    
        if (i==0)    
            
            p=s;    
            t=s;    
            
        else    
            
            t->next=s;    
            t=s;    
            
        
    t->next=NULL;    
    
    
//8. 基数排序的辅助函数,释放基数排序用的链表    
void DestoryLink(RadixRecType *&p)    
    
    RadixRecType *q;    
    while(p!=NULL)    
        
        q=p->next;    
        free(p);    
        p=q;    
        
    return;    
    
    
//8. 实现基数排序:*p为待排序序列链表指针,基数R和关键字位数D已经作为符号常量定义好    
void RadixSort(RadixRecType *&p)    
    
    RadixRecType *head[Radix],*tail[Radix],*t; //定义各链队的首尾指针    
    int i,j,k;    
    unsigned int d1, d2=1;   //用于分离出第i位数字,见下面的注释    
    for (i=1; i<=Digits; i++)                  //从低位到高位循环    
        
        //分离出倒数第i位数字,先通过对d1=10^i取余,得到其后i位,再通过整除d2=10^(i-1)得到第i位    
        //例如,分离出倒数第1位,即个位数,先对d1=10取余,再整除d2=1    
        //再例如,分离出倒数第2位,即十位数,先对d1=100取余,再整除d2=10    
        //循环之前,d2已经初始化为1,在这一层循环末增加10倍    
        //下面根据d2,得到d1的值    
        d1=d2*10;    
        for (j=0; j<Radix; j++)                 //初始化各链队首、尾指针    
            head[j]=tail[j]=NULL;    
        while (p!=NULL)                 //对于原链表中每个结点循环    
            
            k=(p->data%d1)/d2;           //分离出第i位数字k    
            if (head[k]==NULL)          //进行分配    
                
                head[k]=p;    
                tail[k]=p;    
                
            else    
                
                tail[k]->next=p;    
                tail[k]=p;    
                
            p=p->next;                  //取下一个待排序的元素    
            
        p=NULL;                         //重新用p来收集所有结点    
        for (j=0; j<Radix; j++)             //对于每一个链队循环    
            if (head[j]!=NULL)          //进行收集    
                
                if (p==NULL)    
                    
                    p=head[j];    
                    t=tail[j];    
                    
                else    
                    
                    t->next=head[j];    
                    t=tail[j];    
                    
                
        t->next=NULL;                   //最后一个结点的next域置NULL    
        //下面更新用于分离出第i位数字的d2    
        d2*=10;    
        
    

(3)main.cpp

#include <stdio.h>    
#include <malloc.h>    
#include <stdlib.h>    
#include <time.h>    
#include "sort.h"    
    
void GetLargeData(RecType *&R, int n)    
    
    srand(time(0));    
    R=(RecType*)malloc(sizeof(RecType)*n);    
    for(int i=0; i<n; i++)    
        R[i].key= rand();  //产生0~RAND_MAX间的数    
    printf("生成了%d条记录\\n", n);    
    
    
//调用某一排序算法完成排序,返回排序用时    
long Sort(RecType *&R, int n, void f(RecType*, int))    
    
    int i;    
    long beginTime, endTime;    
    RecType *R1=(RecType*)malloc(sizeof(RecType)*n);    
    for (i=0;i<n;i++)    
        R1[i]=R[i];    
    beginTime = time(0);    
    f(R1,n);    
    endTime = time(0);    
    free(R1);    
    return endTime-beginTime;    
    
    
//调用基数排序算法完成排序,返回排序用时    
long Sort1(RecType *&R, int n)    
    
    long beginTime, endTime;    
    RadixRecType *p;    
    CreateLink(p,R,n);    
    beginTime = time(0);    
    RadixSort(p);    
    endTime = time(0);    
    DestoryLink(p);    
    return endTime-beginTime;    
    
    
int main()    
    
    RecType *R;    
    int n = MaxSize;   //测试中, MaxSize取50W    
    GetLargeData(R, n);    
    printf("各种排序花费时间:\\n");    
    printf("  直接插入排序:%ld\\n", Sort(R, n, InsertSort));    
    printf("  希尔排序:%ld\\n", Sort(R, n, ShellSort));    
    printf("  冒泡排序:%ld\\n", Sort(R, n, BubbleSort));    
    printf("  快速排序:%ld\\n", Sort(R, n, QuickSort));    
    printf("  直接选择排序:%ld\\n", Sort(R, n, SelectSort));    
    printf("  堆排序:%ld\\n", Sort(R, n, HeapSort));    
    printf("  归并排序:%ld\\n", Sort(R, n, MergeSort));    
    printf("  基数排序:%ld\\n", Sort1(R, n));    
    free(R);    
    return 0;    
    




运行结果:


学习心得:

学起来好难


以上是关于第十六周 项目2--大数据集上排序算法性能的体验的主要内容,如果未能解决你的问题,请参考以下文章

第十六周 项目3--归并排序算法改进

第十六周 项目3--归并排序算法改进

第十六周 项目1--验证算法--冒泡排序

第十六周 项目1--验证算法--堆排序

第十六周 项目1--验证算法--堆排序

第十六周 项目1--验证算法--快速排序