Data Crawler Staff

  • CÔNG TY CỔ PHẦN WEBIFY GROUP
  • Ngày đăng: 11/02/2025

19 Ho Van Hue, Ward 9, Phu Nhuan District , Hồ Chí Minh

Mô tả công việc

1. Professional Scraping System Development

Technical Requirements:

        System Architecture:

  • Design cross-platform Python crawling scripts

  • Build scalable systems

  • Develop parallel crawling solutions

  • Manage large, multi-threaded data streams

Technologies:

  • Scrapy, BeautifulSoup

  • Selenium

  • Asyncio, Multiprocessing

  • Proxy management

  • IP rotation techniques

2. Data Processing and Normalization

Processing Methods:

  • Develop API data cleaning processes

  • Data transformation algorithms

  • Integrity checks

  • Remove noisy data

Tools:

  • Pandas

  • Data validation techniques

  • Machine Learning preprocessing

3. Database Management

Specialized Skills:

    Advanced SQL:

  • Complex queries

  • Performance optimization

4. Monitoring & Optimization

Strategy:

  • Manage scraping system operations.

  • Track scraping performance

  • Challenge handling:

  • IP blocking

  • Speed ​​limiting

  • CAPTCHA

Yêu cầu ứng viên

 PROFESSIONAL REQUIREMENTS

Education

  • Bachelor's degree (GPA > 3.0)

  • Major:

  • Data science

  • Computer engineering

  • Data related fields

  • English: TOEIC > 700 of  IELTS >5.5

Technical Skills

Python Ecosystem

  • Asyncio, Multiprocessing

  •  Data cleaning techniques

  • Machine Learning preprocessing

  • Advanced error handling

Database & Big Data

  • SQL (Intermediate to Advanced)

  • NoSQL database management

  • PySpark

  • Data warehousing

In-depth Experience

  • Minimum 1-2 years

  • Project implementation:

  • Web scraping

  • Automatic data processing

  • Big data crawlin

  • SOFT SKILLS

System analysis

Problem solving

Independent & team working

Time management

Logical thinking

NICE TO HAVE EXPERIENCES

Big Data experience

Data pipeline design

Working with diverse APIs

Professional certifications

Creativity and initiative in proposing ideas

 

Quyền lợi được hưởng

  • Enjoy full social insurance, health insurance, labor contracts, vacation days and other benefits according to state regulations.
  • Parking allowance
  • Regular annual salary increase
  • Training and capacity development to meet job requirements and promotion path
  • Participate in courses when necessary
  • Weekly/monthly/quarterly/yearly bonuses and project bonuses
  • Holiday/Tet bonuses
  • Young, friendly and dynamic working environment.
  • Travel: 1 time/year

CÔNG TY CỔ PHẦN WEBIFY GROUP

Địa chỉ: 19 Hồ Văn Huê, P9, Quận Phú Nhuận, HCM, Hồ Chí Minh

Website: webify.com.vn

CÔNG TY CỔ PHẦN WEBIFY GROUP
Công ty Cổ phần Webify Group, thành lập vào tháng 6/2022, là một thành viên quan trọng của hệ sinh thái của Webify Global Pte. Ltd. có trụ sở Singapore. Chúng tôi hoạt động chuyên sâu trong lĩnh vực phát triển Website và Ứng dụng Di động, đem đến cho khách hàng những giải pháp công nghệ hiệu quả và đổi mới.

Hướng dẫn nộp hồ sơ

Ứng viên nộp hồ sơ trực tuyến bằng cách bấm vào nút "Nộp hồ sơ".

Trước khi nộp hồ sơ, ứng viên cần có tài khoản và tạo hồ sơ trên website viecTOP.

Xem hướng dẫn đăng ký tài khoản và tạo hồ sơ tại đây.

Cùng ngành nghề

Vina Group's Client (HBB_H1056/2023)
Vina Group's Client (HBB_H1056/2023)
Vina Group's Client (HBB_H1056/2023)
LINAGORA
Công ty TNHH Thương mại Dịch vụ Web Ideas
CenNext Careers
Nền tảng việc làm viecTOP được phát triển bởi:
CÔNG TY TNHH VINA GROUP
  • Số 86 đường N11, KP. Phước Lai, P. Trường Thạnh, TP. Thủ Đức, TP. Hồ Chí Minh
  • Số 81 Tuệ Tĩnh, Quận Hai Bà Trưng, Hà Nội
Hotline: 028 627 825 86 - 0939037456
Follow us: f  in

Đăng ký nhận tin

Để là người đầu tiên nhận được những thông tin tuyển dụng từ viecTOP

Chính sách

Copyright © 2020 ViecTop. All rights reserved.