标签:命令编译 list 参考资料 call 区间 tab -- pdf 转换
之前介绍过如果使用C++编写一个R包,其中主要是用到了Rcpp。请参考链接:那么如何用C语言写一个R包呢?本文的重点不放在R包的编写和发布上,而是如何在R中调用C编写的函数。当然,如果你知道了如何调用C函数,那么发布一个C编写的R包也就没有什么难度了。
为什么要用C语言写?应为C快!尤其是对于循环,C的速度优势体现的极为明显。很多R包或者函数都是用C语言写的,比如我现在几乎每次打开R都用导入的data.table包,本以为是用C++写的,没想到也是用C语言写的。
同时,理解R语言中的C API有助于我们理解R中函数的运行方式和使用方法。
在R语言中调用C函数,最简单的是.C(),除此之外,还可以使用.Call()和.External()调用C函数。
.C()是最基础的调用方法,使用.C()要注意以下几个问题:
1)R语言中的变量必须以指针的方式传递给C函数;
2)C函数的返回类型类型必须是void
3)C中没有返回语句,C运行的结果通过修饰参数返回给R
4)R以列表list的形式承接C函数返回内容
下面是R中数据形式对应到C函数的参数的形式:
注意,如果要使用复数形式,那么在C语言中应该加上#include <R.h>的文件头。另外,R中字符串是对应到C函数中是char **,是二级指针形式。
以具体例子来看如何在R中调用C函数。
#include <stdio.h>
void addme(int * a, int * b )
{
int c;
c = *a + *b;
printf("%d\n",c);
}
将上述保存为myC.c的源文件,下面我们要做的是将该源文件编译成.so的共享对象文件。在终端上使用下列命令编译,注意大小写:
R CMD SHLIB myC.c
编译完成,如果提示没有错误,应该有一个myC.so的文件产生。
然后我们就可以在R中调用该函数了,具体如下:
dyn.load("myC.so")
.C("addme", as.integer(1),as.integer(3))
输出结果如下,
4
[[1]]
[1] 1
[[2]]
[1] 3
结果中不光有我们需要的部分,还有一些返回的列表。这个时候我们就需要把这个C函数进行包装了,也就是写一个wrapper.
myadd <- function(a,b){
ret <- .C("addme",as.integer(a), as.integer(b))
}
通过这个wrapper可以像R函数那样使用:
myadd(1,3)
## 4
#include <stdio.h>
#include <string.h>
void rev(char ** aa, char **bb)
{
char * pa = *aa;
char * pb = *bb;
pa = pa + strlen(*aa) - 1;
for (int i = 0; i < strlen(*aa); ++i)
{
*pb++ = *pa--;
}
}
为该C函数写一些R的wrapper
myRev <- function(aa){
bb <- paste(rep("0",nchar(aa)),collapse="")
ret <- .C("rev", as.character(aa), as.character(bb))
return(ret[[2]])
}
下面我们就比较一个R代码和C代码的速度。
# 创建一个A-Z的长字符串
aa <- paste(rep(LETTERS,1000),collapse="")
# 在R中,用最基础的方法到逆序该长字符串
start.r <- proc.time()
a1 <- strsplit(aa,"")[[1]]
a1.rev <- rev(a1)
a1.out <- paste(a1.rev, collapse="")
end.r <- proc.time()
print(end.r - start.r)
# 使用C函数
start.c <- proc.time()
tt <- myRev(aa)
end.c <- proc.time()
print(end.c - start.c)
结果用R函数运行时间为0.007秒,用C函数运行时间为0.031秒!
嗯哼??翻车了?图片图片R语言比C还快?这个问题我们后面再说。
上面的两个例子展示了如何写简单的C函数,如何使用.C()调用该函数,包括如何写一个函数包装。
.C()调用的函数是很简单初级的C函数,只有简单的数据类型可以从R语言传递给C函数,而且内存的申请必须在R语言中进行。相比之下, .Call()就显得高级多了。通过.Call()调用的C函数中,可以有复杂的数据类型,可以有返回值,可以在该函数中申请新的内存,不需要对实参进行复制,甚至某些语句可以使用简单的R语言来写。
且看下面的几个例子:
#include <R.h>
#include <Rinternals.h>
SEXP myadd(SEXP a, SEXP b)
{
SEXP result = PROTECT(allocVector(REALSXP,1));
REAL(result)[0] = asReal(a) + asReal(b);
UNPROTECT(1);
return result;
}
注意,在上述代码中多了SEXP这类变量类型,其意思为S-expression的简写,该种变量类型在头文件Rinternals.h中有定义,它是R语言和C语言之间变量传递的纽带。
R语言中的变量必须以SEXP变量类型传递给C函数,C函数的返回值类型必须以SEXP类型返回给R语言。实际上,SEXP是一个结构体的指针。其中包含了具体的变量类型,与R中数据类型的对应关系如下:
REALSXP : 实数向量
INTSXP : 整数向量
LGLSXP : 逻辑向量
STRSXP : 字符向量
VECSXP : 列表
CLOSXP : 函数
ENVSXP : 环境变量
2.正数加一
#include <R.h>
#include <Rinternals.h>
// 定义一个加一函数,传入类型SEXP,返回类型SEXP
SEXP addone(SEXP innum)
{
SEXP out = PROTECT(allocVector(INTSXP,1));
INTEGER(out)[0] = *INTEGER(innum) + 1;
UNPROTECT(1);
return(out);
}
使用allocVector申请内存空间,其有两个参数,一个是变量类型,一个是变量数量,如上例子中,使用INTSXP表示申请内存空间为整型,1表示申请内存空间的大小为1个整型空间大小。
PROTECT()用于保护在C函数中创建的变量,如果没有该语句,R语言的内存管理会将所有内存回收,我们要返回的变量会被删除。
UNPROTECT()函数用于去除相应内存的保护,以便系统将内存回收。其只有一个参数,即需要去保护的变量的数量。上例子中,我们只申请了一个被保护变量,所以这儿只填入1作为参数就可以了。
因为C函数传入和返回的参数都是以SEXP结构体的形式进行的,所以在C函数中对这些数据进行操作时,关键是要把数据形式转换成C语言自身的数据类型。如上例中,从R中传入的参数为innum,我们使用INTERGER(innum)来说明该参数为整型【实际上,就一个整型指针】,然后我们通过*对该地址取值,然后加一,然后将该整型结果赋于返回变量out,由于out是一个整型列表,所以使用[0]表示将加一之后的结果放在第一个列表元素中。注意,C语言中的计数是从0开始的,R语言是从1开始的。
然后和.C()的方法一样,对该C函数文件进行编译,然后再R中直接使用,比如.Call("addone",3),就可以了。
当然, 你可以写一个wrapper,将该C函数包装成R语言函数调用。
其他类型数据,请参考:
http://tolstoy.newcastle.edu.au/R/e17/devel/att-0724/R_API_cheat_sheet.pdf
#include <R.h>
#include <Rinternals.h>
SEXP hit(SEXP start, SEXP end, SEXP point)
{
int m = length(start);
int n = length(point);
int *ps = INTEGER(start);
int *pe = INTEGER(end);
int *pp = INTEGER(point);
SEXP out = PROTECT(allocVector(INTSXP,n));
int *pout = INTEGER(out);
memset(pout,0,n*sizeof(int));
for (int i = 0; i < n; ++i)
{
for (int j = 0; j < m; ++j)
{
if(pp[i]>=ps[j] && pp[i]<=pe[j])
{
pout[i] = 1;
break;
}
//pout[i] = 0;
}
}
UNPROTECT(1);
return out;
}
如上,如果传入的是含有多个元素的向量,建议转换成C语言指针,这样能够大大加快运行速度,特别是含有较多的元素的时候。
将上述脚本保存为myhit.c,在终端中:
R CMD SHLIB myhit.c
下面是我们在R中创建不同大小的模拟数据集,然后调用上述C函数。同时,为了比较运行速度,此处加入了R语言函数,以及一个C++写的函数【参考:install_github("Yiguan/CheckOverlap")】。这3种方法都采用了完全相同的实现方式,即两个for语句的嵌套循环。下面比较一下它们的运行速度。
library(data.table)
df <- data.table()
for(ss in 1:5){ #每个样本大小进行5次随机模拟
set.seed(ss)
for (tt in seq(2.5,4.5,0.2)){
# 创建模拟数据集
test.size = ceiling(10^tt)
test.upper = test.size*10
seg.start <- sample(1:test.upper,test.size)
seg.end <- seg.start + sample(1:100,test.size, replace = T)
point <- sample(1:test.upper,test.size)
point.out <- rep(0,test.size)
# 使用R循环
r.s <- proc.time()
for(i in 1:length(point)){
for(j in 1:length(seg.start)){
if((point[i] >= seg.start[j]) & (point[i] <= seg.end[j])){
point.out[i] <- 1
break
}
}
}
r.e <- proc.time()
r.t <- r.e-r.s
# 调用C函数循环
dyn.load("myhit.so")
c.s <- proc.time()
tmp.c <- .Call("hit",as.integer(seg.start),as.integer(seg.end),as.integer(point))
c.e <- proc.time()
c.t <- c.e - c.s
# 调用C++函数
# 本函数已经发布在github上
# library(devtools)
# install_github("Yiguan/CheckOverlap")
# library(CheckOverlap)
cpp.s <- proc.time()
tmp.cpp <- CheckPoint(point,seg.start, seg.end)
cpp.e <- proc.time()
cpp.t <- cpp.e - cpp.s
tmp <- data.table("size" = ceiling(10^tt), "times" = ss, "Rlang" = as.numeric(r.t[3]),
"Clang" = as.numeric(c.t[3]), "Cpplang" = as.numeric(cpp.t[3]))
df <- rbind(df,tmp)
}
}
下图为三种语言在不同样本量大小的情况下的运行时间(秒):
【3种语言耗时比较,横坐标为测试样本量,纵坐标为耗时(秒)】
比较一下,可以发现,C/C++几乎是一条水平直线,即随着运算量增大,它们的耗时依旧很少;相比之下,R语言的运行速度远远落后于C/C++,速度大小能够相差100倍!C和C++速度几乎相当,但是仔细看,C似乎比C++能够快一小点儿。
#include <R.h>
#include <Rinternals.h>
SEXP s2c2(SEXP ss)
{
SEXP out = PROTECT(allocVector(STRSXP,1));
const char *p = CHAR(STRING_ELT(ss,1));
SET_STRING_ELT(out,0,mkChar(p));
UNPROTECT(1);
return out;
}
本文主要介绍了R语言中的C的API,即如何写一个可以在R语言中调用的C函数。
.C()调用C函数的方式简单直接,但是实现的功能有限,难以写太复杂的函数。.Call()定义了R语言和C函数之间的变量SEXP,实用性和功能性丰富了很多,但是有一定的学习成本。不过如果是写比较的大,或者功能比较复杂的C函数,使用.Call()还是一个不错的选择。
另外,本文再次比较了R语言和C/C++的运行效率。对于普通R函数,比如是一些R基础包中的函数,这些函数已经是做过极大程度的性能优化了,其中很多也是用C语言写的,所以速度是有保证的。有时候它们比我们自己写的C函数还要快,所以对于这类R函数直接用应该没问题。但是对于循环,尤其是在循环次数非常多的时候,R语言的软肋就表现的很明显了,其运行速度远远慢于C/C++。
对于R语言的使用者来说,能不用循环就不用循环。如果觉得用C/C++写函数有难度,那么可以使用”向量化“的处理来代替循环,或者使用apply家族的一类函数,或者使用data.table这样的R包,也能够大大提高运行速度。
《谢谢阅读,欢迎转发分享》
参考资料:
http://adv-r.had.co.nz/C-interface.html
http://mazamascience.com/WorkingWithData/?p=1099
http://mazamascience.com/WorkingWithData/?p=1067
标签:命令编译 list 参考资料 call 区间 tab -- pdf 转换
原文地址:https://blog.51cto.com/15069450/2577095