Tìm hiểu Pandas (Bài 2): Cấu trúc dữ liệu của Pandas

I. Numpy

a. Giới thiệu NumPy

Có thể nói, kiến thức về NumPy ndarrays cực kì có ích, vì đó là nền tảng cơ bản đối với cấu trúc dữ liệu của pandas. Ngoài ra NumPy có thể thực thi việc vector hoá trên các mảng NumPy hay như các hoạt động lặp, duyệt mảng trên Python, nhưng nhanh hơn rất nhiều. NumPy là một thư viện quan trọng cho việc tính toán trên Python. Các thuộc tính cơ bản của NumPy bao gồm:

Kiểu mảng numpy.adarray đa chiều và đồng nhất

Có thể sử dụng một số lượng lớn các hàm toán học – Đại số tuyến tính, thống kê, …

Tương thích với cả C, C++ và Fortran

Chú ý: Cấu trúc dữ liệu cơ bản của NumPy là mảng (ndarray), là một mảng đa chiều đồng nhất, nó cũng được đánh chỉ mục (index) bằng số int như những mảng bình thường. Tuy nhiên numpy.ndarray thì hoàn toàn khác so với mảng array.array cơ bản của Python (mảng của python thì ít chức năng hơn)

b. Thao tác với NumPy

Khởi tạo

Mảng của NumPy được đánh chỉ số từ 0, giống như các ngôn ngữ phổ biến như Python, java, C++, không giống như Fortran, Matlab và Octave, bắt đầu bằng 1.

NumPy thao tác trực tiếp trên mỗi phần tử của mảng với các toán tử +, -, *, /, **

Ngoài ra ta còn có thể thao tác các toán tử logic, sắp xếp, thống kê trên NumPy, …

II. Pandas

Pandas. đã được Web McKinney xây dựng nên vào năm 2008, nguyên do là ông đã cảm thấy quá thất vọng khi làm việc với R. Pandas được xây dựng dựa trên các thuộc tính của NumPy và cung cấp các tính năng mà trên NumPy không có, và tất nhiên là pandas cũng cấp cấu trúc dữ liệu với ưu điểm nhanh và dễ sử dụng hơn, lấp đầy khoảng cách giữa hai ngôn ngữ thống kê là Python đối với R.

Cấu trúc dữ liệu cơ bản của Pandas bao gồm: Series, DataFrame, Panel

a. Series

Series là mảng một chiều giống như mảng Numpy, nhưng nó bao gồm thêm một bảng đánh label. Series có thể được khởi tạo thông qua NumPy, kiểu Dict hoặc các dữ liệu vô hướng bình thường



Series có các thao tác gán, logic, tính toán với các biểu thức toán học hay thống kê bình thường như đã thao tác với NumPy.

b. DataFrame

DataFrame là mảng hai chiều được gán nhãn, nhưng không giống như NumPy, kiểu dữ liệu các cột là không đồng nhất, cấu trúc dữ liệu thì giống với NumPy nhưng có khả năng thay đổi. DataFrame gồm các thuộc tính như sau:
  • Có khái niệm như một Table hoặc  SpreadSheet dữ liệu
  • Tương tự với mảng NumPy nhưng không phải là subclass của np.ndarray
  • Các cột dữ liệu là các kiểu không đồng nhất: float64, int, bool, …
  • Các cột của DataFrame là cấu trúc của Series
  • Nó có thể xem như một kiểu dữ liệu Dict của một cấu trúc Series nhưng cả hai cột và hàng đều được đánh chỉ mục (index)
  • Kích thước table có thể thay đổi: các cột có thể thêm hoặc xoá đi
Với mỗi chiều của Series/DataFrame được đánh chỉ mục, dù bất kể là mặc định hay không. Các chỉ mục là cần thiết cho việc tim kiếm hoặc để kết nối dữ liệu phù hợp trong pandas. Các trục cần được đặt tên, ví dụ như mảng của các tháng “month” bao gôm các giá trị [Jan, Feb, … Dec]. Đây là cách DataFrame biểu diễn các chỉ mục, tên cột và tên các cột chỉ mục với các kí tự V, W, X, Y, Z:
  • DataFrame được khởi tạo thông qua nhiều cách khác nhau như
  • Dict của mảng một chiều, list, dic hoặc cấu trúc Series
  • Mảng NumPy hai chiều
  • Cấu trúc hoặc các bản ghi của ndarray
  • Cấu trúc Series
  • Các DataFrame khác
Các nhãn của chỉ mục hay nhãn của cột có thể chỉ định theo dữ liệu, nếu không chỉ định thì sẽ được tựd động sinh ra



Ta có thể dễ dàng lấy ra các cột giá trị

Thêm cột mới bằng cách gán

Ta cũng có thể sử dụng các toán tử để thao tác lên dữ liệu như:

c. Panel

Panel là mảng 3 chiều. Panel thì không được sử dụng rãi như như Series hay DataFrame và nó cũng không dễ hiển thị hay trừu tượng hoá như màn một chiều và hai chiều. Cấu trúc của Panel:
  • items: Đây là axis 0. Mỗi phần tử thì tương ứng với DataFrame.
  • major_axis: Đây là axis 1. Mỗi phần tử tương ứng với một hàng của DataFrame
  • minor_axis: Đây là axis 2. Mỗi phần tử tương ứng với một cột của DataFrame

Ngoài ra vẫn có thể tạo Panel từ Dict của các DataFrame hay từ chính các DataFrame

III. Kết luận

Có thể thấy rằng NumPy là một cấu trúc dữ liệu nền tảng cho cấu trúc dữ liệu của Pandas. Pandas cá cấu trúc bao gồm mảng NumPy và các mảng được gán nhãn. Pandas gồm 3 cấu trúc chính là Series là các mảng một chiều, DataFrame là mảng hai chiều, và Panel là 3 chiều. Có thể nhận thấy DataFrame được sử dụng nhiều nhất do tính tương đồng với cấu trúc Table và SpreadSheet. Nhưng ở chương này không quá đi sâu vào việc thao tác với dữ liệu mà chỉ dừng lại ở mức khởi tạo để người đọc có cái nhìn so sánh tổng quan. Nhưng có thể nói Pandas và NumPy là các công cụ rất mạnh để thao tác và xử lý dữ liệu như tính toán, thống kê.

Add a Comment

Your email address will not be published.