پروژه 03
دانلودر داده تیک JForex
دانلودر خودکار دادههای تیکبهتیک از Dukascopy (JForex) با ذخیرهسازی Parquet و پشتیبانی Docker.

درباره پروژه
معرفی پروژه
یک دانلودر خودکار، مقاوم و بهینه که دادههای تاریخی در سطح تیک (قیمت خرید و فروش) را از فید عمومی JForex شرکت Dukascopy دریافت میکند و در فایلهای بسیار بهینه Parquet ذخیره میکند.
مناسب برای معاملهگران کمّی، بکتستکنندهها و هر کسی که به داده تیک تمیز و قابل اعتماد نیاز دارد.
قابلیتهای اصلی
- داده تیک با دقت بالا (bid و ask)
- بهروزرسانی افزایشی؛ فقط دادههای جاافتاده دانلود میشوند
- ذخیرهسازی ساعتی در Parquet (فشردهسازی عالی و کوئری سریع)
- نگهداری قابل تنظیم داده (فقط N روز اخیر)
- زمانبندی هوشمند با منطق توقف و ادامه
- پشتیبانی کامل از Docker و docker-compose
- سیستم لاگ متمرکز
نکات فنی
- ساختهشده با Python و Pandas
- فرمت Parquet برای سریهای زمانی حجیم
- مدیریت خطا و تلاش مجدد قابل اتکا
- پشتیبانی از جفتارزهای اصلی فارکس و فلزات
- آماده استقرار با Docker
این ابزار زیرساخت دادهای مطمئنی برای سیستمهای معاملاتی و پژوهشهای الگوریتمی فراهم میکند.
فناوریها
PythonPandasScrapingParquetDockerDukascopy APIRequests
نقش من
طراحی و توسعه کامل
سال
2026