داده پردازی رسپینا

توسعه دهنده پایتون (Web Scraping)

داده پردازی رسپینا

حداقل سابقه کار
مهم
موقعیت مکانی
تهران
نوع همکاری
تمام وقت
خدمت سربازی
مهم نیست

مهارت های موردنیاز

  • Elasticsearch
  • HTTP
  • MongoDB

در این جایگاه، مسئولیت طراحی و پیاده‌سازی راهکارهای جمع‌آوری و استخراج داده از منابع مختلف وب و شبکه‌های اجتماعی را بر عهده خواهید داشت. تمرکز اصلی این نقش بر توسعه Scraperها و Crawlerها، طراحی زیرساخت‌های استخراج داده و مدیریت Pipeline های داده در مقیاس بالا است.

مسئولیت‌های کلیدی

  • طراحی، توسعه و نگهداری Crawlerهای خودکار برای جمع‌آوری داده از وب‌سایت‌ها و شبکه‌های اجتماعی.
  • پیاده‌سازی راهکارهای عبور از سیستم‌های Anti Bot مانند: Captcha، Rate Limiting، IP Blocking و Browser Fingerprinting.
  • مدیریت دوره‌ای فرآیندهای استخراج داده و تضمین کیفیت و صحت داده‌های جمع‌آوری‌شده.
  • طراحی و پیاده‌سازی زیرساخت‌های مقیاس‌پذیر برای ذخیره‌سازی داده‌های استخراج‌شده.
دانش و مهارت‌های مورد نیاز

  • تسلط عمیق بر پایتون.
  • تسلط بر فریمورک های Web Scraping شامل: Scrapy، Selenium، Playwright و BeautifulSoup.
  • تسلط کامل بر مفاهیم HTTP/HTTPS و مدیریت Sessionها، Cookieها و Headerها.
  • تجربه عملی در کار با پروکسی ها، ابزارهای حل Captcha و مدیریت User Agent.
  • تسلط بر پایگاه‌های داده رابطه‌ای و غیررابطه‌ای مانند: PostgreSQL، MongoDB و Elasticsearch.
  • آشنایی با داکر برای داکرایز کردن Crawlerها و مدیریت استقرار آن‌ها.
  • تجربه کار با Message Brokerهایی مانند RabbitMQ یا Kafka.
  • آشنایی با ابزارهای مانیتورینگ و لاگینگ برای پایش سلامت Crawlerها.
  • آشنایی با Airflow.
شایستگی‌های فردی

  • توانایی حل مسئله در مواجهه با تغییرات ساختار وب‌سایت‌ها.
  • دقت بالا در تضمین کیفیت و صحت داده‌ها.
  • توانایی مستندسازی فنی و گزارش‌دهی دوره‌ای.
  • روحیه همکاری و کار تیمی.
شرایط همکاری

محل کار: میدان آرژانتین.

ساعات کاری: شنبه تا سه‌شنبه: ۸:۰۰ تا ۱۷:۰۰، چهارشنبه: ۸:۰۰ تا ۱۶:۰۰، پنج‌شنبه‌ها تعطیل.

مزایا: بیمه تکمیلی SOS، وام سازمانی، هدایای مناسبتی.

رشد، فراتر از نقش ها
توسعه شما، بخشی از مسیر توسعه سازمان است. در رسپینا تلاش می‌کنیم محیطی فراهم کنیم تا در کنار ایفای نقش حرفه‌ای خود، فرصت یادگیری مستمر، توسعه توانمندی‌ها و اثرگذاری بیشتر را داشته باشید.

اگر به دنبال فرصتی برای به‌کارگیری تجربه و رشد در مسیر حرفه‌ای خود هستید، مشتاق آشنایی با شما هستیم.



درباره شرکت

شرکت داده‌پردازی رسپینا، به عنوان بزرگ‌ترین اپراتور FCP در حوزه ارائه پهنای باند اختصاصی، طی ۲۳ سال فعالیت و با حضور در ۳۱ استان کشور، خدمات اینترنتی و ارتباطی خود را به بیش از ۸۰۰۰ سازمان ارائه کرده است. هدف ما، تأمین جامع، تخصصی و نوآورانه نیازهای ارتباطی کسب و کارهاست.



نقش‌آفرینی در رسپینا

در رسپینا باور داریم نقش امروز شما، سقف توانمندی فردای شما نیست.

امروز بیش از ۴۰۰ همکار متخصص، با دانش، تجربه و همکاری، در مسیر خلق ارزش برای مشتریان و پایداری ارتباطات کسب و کارها نقش‌آفرینی می‌کنند.

از نگاه ما، رشد تنها به تغییر عنوان شغلی یا ارتقای سمت محدود نمی‌شود. توسعه تخصص، یادگیری در مواجهه با مسائل واقعی، انتقال دانش، افزایش دامنه اثرگذاری و آمادگی برای پذیرش مسئولیت‌های بزرگ‌تر، همگی بخشی از مسیر رشد حرفه‌ای در رسپینا هستند.

این نگاه تنها یک وعده نیست؛ بیش از ۸۵ درصد مدیران کنونی رسپینا، مسیر رشد حرفه‌ای خود را از درون سازمان طی کرده‌اند. این یعنی شما در کنار مدیرانی کار خواهید کرد که خودشان روزی مسیر امروز شما را پیموده‌اند.

در رسپینا، هر نقش می‌تواند نقطه آغاز مسیری بزرگ‌تر باشد.

رشد، فراتر از نقش‌ها

Grow Beyond Roles

آماده‌اید تا در کنار ما، مرزهای توانمندی خود را گسترش دهید؟