箭头是一种内存格式,所以我可以在 Python 中有一个由箭头格式支持的数据框。所以数据帧位于内存中,我可以直接从 R 使用该数据帧而不复制数据帧吗?想象一下,如果数据帧的大小为 100G,那么复制效率非常低。
我在 Arrow 的文档中读到存在零拷贝流,但没有办法使整个数据帧可用。
箭头是一种内存格式,所以我可以在 Python 中有一个由箭头格式支持的数据框。所以数据帧位于内存中,我可以直接从 R 使用该数据帧而不复制数据帧吗?想象一下,如果数据帧的大小为 100G,那么复制效率非常低。
我在 Arrow 的文档中读到存在零拷贝流,但没有办法使整个数据帧可用。
目前还没有,但希望很快。https://issues.apache.org/jira/browse/ARROW-3750正在进行中,希望能在未来几周内解决。