Xây dựng Trình trích xuất danh sách bài viết blog bằng Python
Bài viết này sẽ hướng dẫn cách xây dựng một công cụ đơn giản bằng Python để trích xuất danh sách các bài viết từ một blog cá nhân, bao gồm tiêu đề và URL tương ứng. Chúng ta sẽ bắt đầu bằng việc thiết lập môi trường Python cơ bản, cài đặt các thư viện cần thiết, sau đó đi sâu vào logic phân tích và thu thập dữ liệu từ trang web.
Thiết lập ...
Đăng vào ngày 21 tháng 7 lúc 19:11
Xây dựng công cụ cào dữ liệu truyện chữ bằng Python
Việc tự động hóa quá trình thu thập nội dung từ các trang web truyện chữ là một bài tập thực hành phổ biến để làm quen với kỹ thuật Web Scraping. Bằng cách sử dụng ngôn ngữ Python cùng các thư viện như requests và BeautifulSoup, chúng ta có thể dễ dàng trích xuất hàng ngàn chương truyện một cách nhanh chóng.
1. Thu thập danh sách liên kết các ...
Đăng vào ngày 14 tháng 7 lúc 01:41
Lấy Dữ Liệu Chi Tiết Sản Phẩm Từ Amazon Sử Dụng Python
Trong lĩnh vực thương mại điện tử, việc thu thập thông tin chi tiết về sản phẩm là một bước quan trọng để thực hiện phân tích thị trường, đánh giá đối thủ cạnh tranh và lên kế hoạch kinh doanh. Với lượng lớn thông tin sản phẩm, Amazon là một trong những nền tảng thương mại điện tử hàng đầu thế giới. Bài viết này sẽ hướng dẫn cách sử dụng Python ...
Đăng vào ngày 13 tháng 7 lúc 09:18
So Sánh Cách Gửi Yêu Cầu HTTP Sử Dụng http.client, urllib.request và Thư Viện requests Trong Python
Gửi Yêu Cầu GET Không Tham Số
GET http://httpbin.org/get
Python3 sử dụng http.client
import http.client as hconn
# 1. Thiết lập kết nối HTTP
client = hconn.HTTPConnection("httpbin.org")
# 2. Gửi yêu cầu GET với đường dẫn cụ thể
client.request("GET", '/get')
# 3. Nhận phản hồi
response = client.getresponse()
# 4. Xử lý dữ li ...
Đăng vào ngày 9 tháng 7 lúc 09:00
Sử Dụng Thư Viện Requests trong Python để Thu Thập Dữ Liệu Web
Requests là thư viện bên thứ ba của Python để thực hiện các yêu cầu HTTP, được đánh giá cao trong lĩnh vực thu thập dữ liệu web. Thư viện này nổi bật với cú pháp đơn giản và hiệu quả, cho phép truy xuất tài nguyên web chỉ bằng một dòng lệnh.
Cài đặt Thư viện Requests
Thực hiện câu lệnh sau trong terminal:
pip install requests
Kiểm tra hoạt độ ...
Đăng vào ngày 30 tháng 6 lúc 03:12
Ứng dụng nâng cao của module requests
Mục lục
Ứng dụng nâng cao của module requests
Giải quyết vấn đề HttpConnectionPool
Sử dụng proxy IP
Cách sử dụng proxy đơn giản
Sử dụng proxy trong mã crawler
Thiết lập proxy trên trình duyệt
Tạo pool proxy
Tác dụng của pool proxy
Triển khai đơn giản một pool proxy
Xây dựng một pool proxy
Xử lý cookie
Thu thập thông tin tin tức từ trang chủ củ ...
Đăng vào ngày 26 tháng 6 lúc 06:07
Sử dụng Python để tải tile từ ArcGIS Server
Giới thiệu về tile map và ArcGIS Server
Trong lĩnh vực Hệ thống Thông tin Địa lý (GIS), ArcGIS Server là một công cụ mạnh mẽ, cung cấp các dịch vụ bản đồ hiệu quả. Tile map (bản đồ dạng mảnh ghép) là phương pháp hiển thị bản đồ phổ biến, giúp cải thiện đáng kể tốc độ tải và khả năng phản hồi. Bài viết này hướng dẫn bạn cách sử dụng Python để tư ...
Đăng vào ngày 22 tháng 6 lúc 06:24
Giới thiệu về web scraping
Web scraping là kỹ thuật sử dụng các chương trình máy tính để thu thập thông tin từ internet.
Yêu cầu: Tạo một chương trình để mô phỏng hành vi của trình duyệt, truy cập một địa chỉ URL và thu thập nội dung từ địa址 đó.
I. Chương trình cơ bản
# Sử dụng urlopen để lấy dữ liệu
from urllib.request import urlopen
url = "http://www.baidu.com&qu ...
Đăng vào ngày 20 tháng 6 lúc 04:25
Thực chiến Phi-4-mini-reasoning: Xây dựng client gọi API ổn định bằng Python requests
1. Giới thiệu mô hình và yêu cầu
Phi-4-mini-reasoning là mô hình ngôn ngữ nhỏ gọn 3.8 tỷ tham số do Microsoft phát triển, chuyên xử lý các tác vụ logic phức tạp như giải toán, lập luận và phân tích đa bước. Mô hình sở hữu các đặc điểm nổi bật:
Hiệu năng cao: Vượt trội trong giải toán và phân tích mã nguồn
Tiết kiệm tài nguyên: Kích thước chỉ 7 ...
Đăng vào ngày 19 tháng 6 lúc 22:09
Khung Kiểm Thử Giao Diện Dựa Trên JSON
Cách Thực Hiện
Tình Huống Yêu Cầu:
Công ty sử dụng chữ ký số cho các giao diện microservices. Khi sử dụng Postman để kiểm thử, mỗi lần đều cần chỉnh sửa mã nguồn để tắt tạm thời việc kiểm tra chữ ký, nhưng điều này làm cho các microservices khác không thể gọi dịch vụ đó.
Các tham số giao diện lấy từ ELK cần được định dạng JSON. Thông thư ...
Đăng vào ngày 16 tháng 6 lúc 08:40