← Back to Jobs
Viecoi.vn | Hanoi, Vietnam | Posted June 09, 2026
Position Overview
Mô tả công việc: NỘI DUNG CÔNG VIỆC
1. Phát Triển Hệ Thống Scraping Chuyên NghiệpYêu Cầu Kỹ Thuật: Kiến Trúc Hệ Thống:
- Thiết kế script Python crawling đa nền tảng
- Xây dựng hệ thống có khả năng mở rộng
- Phát triển giải pháp crawling song song
- Quản lý luồng dữ liệu lớn, đa luồng
Công Nghệ:- Scrapy, BeautifulSoup
- Selenium
- Asyncio, Multiprocessing
- Proxy management
- IP rotation techniques
2. Xử Lý và Chuẩn Hóa Dữ LiệuPhương Pháp Xử Lý:- Phát triển quy trình làm sạch dữ liệu API
- Thuật toán chuyển đổi dữ liệu
- Kiểm tra tính toàn vẹn
- Loại bỏ dữ liệu nhiễu
Công Cụ:- Pandas
- Data validation techniques
- Machine Learning preprocessing
3. Quản Lý Cơ Sở Dữ LiệuKỹ Năng Chuyên Môn: ...