Ibis是一个新的Python数据分析框架,目标是让数据科学家和数据工程师们处理大型数据时,能够像处理小中型数据一样的高效。为了实现这个目标,我们将启用Python来作为ApacheHadoop的第一级别语言,并不在功能性,可用性或性能上妥协。过去十年,在花了很多时间来提高单节点的Python体验的可用性(还有pandas等项目)。当前,我们正在致力实现:
100%Pythonend-to-end用户的工作流程
给广泛的用例本地硬件速度(Nativehardwarespeedsforabroadsetofusecases)
完全保真的数据分析,无需撷取(extractions)和取样。
大数据可伸缩性
与现有的Python数据生态系统集成(pandas,scikit-learn,NumPy,等等)
评论