Tổng Quan Về Dự Án

Skyrim là một dự án mã nguồn mở được thiết kế để tối ưu hóa việc chạy các mô hình thời tiết quy mô lớn trên các phần cứng GPU dành cho người dùng cuối. Mục tiêu chính của hệ thống này là xây dựng một hạ tầng dễ bảo trì, giúp phổ biến hóa các mô phỏng thời tiết dựa trên nền tảng mở. Skyrim hỗ trợ tích hợp nhiều mô hình lớn như Pangu và có khả năng thu thập dữ liệu điều kiện ban đầu từ các nguồn uy tín như NOAA GFS hoặc ECMWF.

Ngôn ngữ lập trình chủ đạo được sử dụng để xây dựng dự án này là Python.

Hệ Sinh Thái Công Nghệ

Để vận hành hiệu quả, Skyrim dựa trên các thư viện và công cụ cốt lõi sau:

• PyTorch: Framework học sâu dùng để xây dựng và huấn luyện các mạng nơ-ron phức tạp.
• xarray: Công cụ xử lý và phân tích dữ liệu mảng đa chiều, đặc biệt hữu ích trong tính toán khoa học.
• zarr: Định dạng lưu trữ tối ưu cho các dataset khoa học lớn, cho phép truy cập và ghi dữ liệu mảng hiệu quả.
• Docker: Giải pháp container hóa giúp đồng bộ hóa môi trường triển khai trên nhiều hệ thống khác nhau.

Yêu Cầu Hệ Thống Và Cài Đặt

Trước khi tiến hành cài đặt, hãy đảm bảo máy tính của bạn đáp ứng các cấu hình tối thiểu sau:

• Python phiên bản 3.10 trở lên.
• PyTorch đã được cài đặt cùng phiên bản CUDA tương thích.
• Card đồ họa NVIDIA có bộ nhớ tối thiểu 24GB.
• Công cụ Git đã được cấu hình.

Quy Trình Thiết Lập

1. Tải mã nguồn

   Sử dụng terminal để sao chép repository về máy cục bộ:

   git clone https://github.com/secondlaw-ai/skyrim.git skyrim_weather
   cd skyrim_weather

2. Cấu hình môi trường ảo

   Bạn có thể chọn một trong hai cách dưới đây để cô lập môi trường làm việc:

   Sử dụng Conda:

   conda create -y -n skyrim_dev python=3.10
   conda activate skyrim_dev
   conda install eccodes python-eccodes -c conda-forge

   Sử dụng Virtualenv:

   python -m venv venv_skyrim
   source venv_skyrim/bin/activate
   pip install eccodes

3. Cài đặt các gói phụ thuộc

   Trong môi trường đã kích hoạt, tiến hành cài đặt các thư viện cần thiết:

   pip install -e .
   pip install -r requirements.txt

4. Cấu hình Modal (Tùy chọn)

   Nếu bạn có ý định chạy dịch vụ trên đám mây thông qua Modal, hãy khởi tạo API key:

   modal setup

   Làm theo các hướng dẫn trên màn hình để hoàn tất xác thực.

5. Thực thi dự báo mẫu

   Để chạy thử nghiệm qua Modal, sử dụng lệnh:

   modal run skyrim/modal/forecast.py

   Hoặc nếu muốn chạy trực tiếp trên máy cục bộ, bạn có thể sử dụng đoạn script Python sau:

   from skyrim.core import Skyrim
   
   def execute_forecast():
       # Khởi tạo đối tượng mô hình
       weather_model = Skyrim("pangu")
       
       # Cấu hình tham số chạy
       config = {
           "date": "20240501",
           "time": "0000",
           "lead_time": 12,
           "save": True
       }
       
       # Thực thi dự báo
       prediction_data, output_files = weather_model.predict(**config)
       return prediction_data, output_files
   
   if __name__ == "__main__":
       execute_forecast()

   Lưu ý điều chỉnh ngày giờ khởi tạo trong đoạn mã trên phù hợp với dữ liệu bạn cần xử lý.