[IT 용어] 아파치 애로우(Apache Arrow)
정의아파치 애로우는 메인 메모리 수준에서 데이터를 빠르게 복사 및 처리하기 위한 소프트웨어를 개발할 수 있는 프레임워크이다. 주요 기술에는 'in-memory columnar format'이 있으며 Apache Spark, PySpark, sparklyr, Google BigQuery, TensorFlow, AWS Athena 에서 사용한다.참고문서"Apache Arrow Overview", 아파치 애로우 홈페이지. @원문보기"Apache Arrow: High Performance Columnar Data Framework", Wes McKinney, 2021년 12월 11일. @원문보기"[Spark] Apache Arrow란? (Zero-Copy 직렬화에 대하여)", 타르타르소스, 2021년 12월 3..
2025. 1. 7.