Efficient saving/reading of data frames containing rvars?

Đang mở
#307 4 bình luận 0 reaction 0 người được giao Xem trên GitHub

Chưa có ai nhận issue này.

Đánh giá

Độ khó
4/5
Thời gian dự kiến
3-5 ngày
Mức phù hợp với người mới
35/100
Loại issue
Lỗi
Độ rõ ràng
Khá rõ ràng
Mức độ hoạt động
Đình trệ
Công nghệ
r
Lĩnh vực
data, performance

Hướng nghiên cứu

Tái hiện hành vi saveRDS đã được báo cáo bằng một data frame khoảng 700 hàng chứa một cột rvar 1d duy nhất, đồng thời đo thời gian và kích thước đã được tuần tự hóa. Bắt đầu bằng cách truy vết cách các rvars được biểu diễn trong quá trình saveRDS và so sánh các cách tiếp cận save/read khả dĩ. Được xem là hoàn tất khi đã ghi lại tài liệu hoặc triển khai một cách hiệu quả hơn đáng kể để lưu và tải lại dữ liệu này.

Do mô hình lập chỉ mục viết ra từ nội dung của issue.

Mô tả

Thank you so much for this fantastic package, especially the rvars data type which I really enjoy using. I've recently run into a situation where I would like to save a data frame (about 700 rows by 10 variables) that contains a single 1d rvar column from one script and read it in for use in another script. When I try to save the data frame with saveRDS, however, it takes 6+ minutes to complete the operation and the resulting object, which is ~20 MB in R, is 1.5+ GB in size. While this is workable, I was wondering if there are know solutions or recommended alternatives to saveRDS when working with rvars in this way. Thank you!

Ngôn ngữ chính
R
Star
172
Fork
27
Merge trung bình
5 ngày 12 giờ
Pull request đã merge (30 ngày)
5

Chuẩn bị môi trường

Bắt đầu từ đâu

  1. Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
  2. Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
  3. Fork repository và làm thay đổi trên một nhánh.
  4. Mở pull request có tham chiếu số hiệu của issue.

Issue khác của stan-dev/posterior

Tất cả issue của stan-dev/posterior

Issue tương tự

Thêm issue về R

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.