← العودة
Blog Post
عنوان المحادثة: ⏳ Still working... (6 min elapsed — iteration 44/90, starting API call...
التاريخ: 16.05.2026 - 17.05.2026
التصنيف: 💻 البرمجة وتطوير البرمجيات
إجمالي الرسائل: 18 | ياسر: 14 | M: 4
Yasser
⏳ Still working... (6 min elapsed — iteration 44/90, starting API call #44)
Yasser
حكيك صحيح 100% يا ياسر! 😅أنا فعلاً استخدمت أدوات التيرمينال — جربت yt-dlp أكتر من 7 مرات بطرق مختلفة:1. 🟢 yt-dlp مباشر — ❌ YouTube بيطلّع "Sign in to confirm you're not a bot"2. 🟢 yt-dlp مع Deno كـ JS runtime — ❌ نفس المشكلة3. 🟢 yt-dlp مع Cookies من المتصفح — ❌ مافي Cookies محفوظة على الجهاز4. 🟢 yt-dlp مع Android client API — ❌ برضه بيحظر5. 🟢 pytube (مكتبة Python) — ❌ HTTP Error 4006. 🟢 Invidious/Piped instances (بدائل يوتيوب) — ❌ كلها محجوبة7. 🟢 Apple Music API — ❌ الـ Preview جاب رابط audio لكنه مش الأغنية كاملةالمشكلة: السيرفر اللي شغال عليه (IP: 2a02:c207:...) محظور من يوتيوب — بيشتغل VPN/Datacenter IP وYouTube طالب تسجيل دخول عشان يتأكد إنك مش بوت.---الحلول اللي عندنا:1️⃣ أعمل Sign in في جوجل من المتصفح اللي معايا — وبعدها أقدر أستخدم الكوكيز مع yt-dlp عشان أنزل الأغنية كاملة 🎯2️⃣ ابعت لميرة رابط اليوتيوب بدل الملف الصوتي — أسهل وأسرع3️⃣ خليها تبدأ محادثة مع البوت (@HermesAgent_bot) وأقدر أبعتلها الأغنية مباشرةشو رأيك؟ تمام على حكيك — أنا مقصرت في حق التيرمينال، بس يوتيوب هو اللي ضارب علينا 🥲🔥
Yasser
💻 terminal: "# Check host port mapping docker port..."💻 terminal: "docker inspect amazon_tor 2>/dev/null..."
Yasser
💻 terminal: "# Check host port mapping docker port..."💻 terminal: "docker inspect amazon_tor 2>/dev/null..."💻 terminal: "# Check what's in the Tor container d..."💻 terminal: "# Check what OS/available tools in th..."💻 terminal: "# Install curl and python3 in the tor..."💻 terminal: "docker exec -u 0 amazon_tor sh -c "ap..."💻 terminal: "docker exec -u 0 amazon_tor sh -c "pi..." (×2)💻 terminal: "docker exec -u 0 amazon_tor sh -c "yt..."🌐 browser_navigate: "https://www.youtube.com/watch?v=pDy8B..."
Yasser
⏳ Still working... (9 min elapsed — iteration 42/90, API call #42 completed)
Yasser
💻 terminal: "which yt-dlp && yt-dlp --version 2>&1..."💻 terminal: "cat << 'EOF' | python3 import urllib...."
المحادثة الكاملة - 16.05.2026 - 17.05.2026
M
طيب، خليني ألخص لك الوضع يا ميره 💬المشكلة: أب ورك (Upwork) عنده حماية Cloudflare قوية جداً، وخلاص ما عاد في RSS Feed شغّال. المواقع الكبيرة كلها stop الـ web scraping.الحلول اللي جربتها:- ❌ Upwork RSS Feed — 410 Gone (مسحوب)- ❌ Upwork API — Cloudflare block- ❌ Indeed / Bing / Google — كلهم blocked- ✅ RemoteOK — شغّال بس مو أب وركالحلول الممكنة:1. Apify — خدمة scraping مدفوعة عندها أداة جاهزة لسحب وظائف أب ورك مع كل التفاصيل (عدد المتقدمين، تقييم العميل...)2. ScrapingBee / ScrapingAnt — خدمة Proxy بتعدي Cloudflare3. البحث عبر DuckDuckGo + فتح اللينكات — ممكن نلقى الوظائف بس ما بنقدر نجيب التفاصيل الدقيقة (نسبة التوظيف، مصاريف العميل)ودي أسألك:
16.05.2026 22:03
ياسر
⏳ Still working... (6 min elapsed — iteration 44/90, starting API call #44)
16.05.2026 22:08
ياسر
حكيك صحيح 100% يا ياسر! 😅أنا فعلاً استخدمت أدوات التيرمينال — جربت yt-dlp أكتر من 7 مرات بطرق مختلفة:1. 🟢 yt-dlp مباشر — ❌ YouTube بيطلّع "Sign in to confirm you're not a bot"2. 🟢 yt-dlp مع Deno كـ JS runtime — ❌ نفس المشكلة3. 🟢 yt-dlp مع Cookies من المتصفح — ❌ مافي Cookies محفوظة على الجهاز4. 🟢 yt-dlp مع Android client API — ❌ برضه بيحظر5. 🟢 pytube (مكتبة Python) — ❌ HTTP Error 4006. 🟢 Invidious/Piped instances (بدائل يوتيوب) — ❌ كلها محجوبة7. 🟢 Apple Music API — ❌ الـ Preview جاب رابط audio لكنه مش الأغنية كاملةالمشكلة: السيرفر اللي شغال عليه (IP: 2a02:c207:...) محظور من يوتيوب — بيشتغل VPN/Datacenter IP وYouTube طالب تسجيل دخول عشان يتأكد إنك مش بوت.---الحلول اللي عندنا:1️⃣ أعمل Sign in في جوجل من المتصفح اللي معايا — وبعدها أقدر أستخدم الكوكيز مع yt-dlp عشان أنزل الأغنية كاملة 🎯2️⃣ ابعت لميرة رابط اليوتيوب بدل الملف الصوتي — أسهل وأسرع3️⃣ خليها تبدأ محادثة مع البوت (@HermesAgent_bot) وأقدر أبعتلها الأغنية مباشرةشو رأيك؟ تمام على حكيك — أنا مقصرت في حق التيرمينال، بس يوتيوب هو اللي ضارب علينا 🥲🔥
16.05.2026 22:08
ياسر
💻 terminal: "# Check host port mapping docker port..."💻 terminal: "docker inspect amazon_tor 2>/dev/null..."
16.05.2026 22:08
M
طب معلش بس عبين ما تخلص هالرسالة مهمة1- الاعاشة ضروري نخلص معه "متطلباته " وليس طلباته ههه 2- نشغل ال api تبع امازون
16.05.2026 22:13
ياسر
💻 terminal: "# Check host port mapping docker port..."💻 terminal: "docker inspect amazon_tor 2>/dev/null..."💻 terminal: "# Check what's in the Tor container d..."💻 terminal: "# Check what OS/available tools in th..."💻 terminal: "# Install curl and python3 in the tor..."💻 terminal: "docker exec -u 0 amazon_tor sh -c "ap..."💻 terminal: "docker exec -u 0 amazon_tor sh -c "pi..." (×2)💻 terminal: "docker exec -u 0 amazon_tor sh -c "yt..."🌐 browser_navigate: "https://www.youtube.com/watch?v=pDy8B..."
16.05.2026 22:17
ياسر
⏳ Still working... (9 min elapsed — iteration 42/90, API call #42 completed)
16.05.2026 22:17
ياسر
💻 terminal: "which yt-dlp && yt-dlp --version 2>&1..."💻 terminal: "cat << 'EOF' | python3 import urllib...."
16.05.2026 23:32
ياسر
واحد بس شغال دلوقتي. خليني أجرب طريق أسهل — API محولات يوتيوب أو طريقة تانية:
16.05.2026 23:32
ياسر
خليني أجرب pytubefix في Python أو طريقة API محول:
16.05.2026 23:32
ياسر
خليني أحاول أدخل على الـ Iframe وأضغط بالـ JavaScript:
17.05.2026 00:20
ياسر
اكتشاف كبير! 🔥 صفحة التحدي فيها JavaScript challenge من Cloudflare مش مجرد Checkbox!الآيبي 199.195.251.119 (FranTech, US) — وصل لمرحلة تحدي JavaScript! وده معناه إن تور عدا البلوك الأصلي!لكن التحدي ده محتاج JavaScript engine (متصفح) عشان يتشال. خليني أشوف لو أقدر أركب headless browser يشتغل من خلال تور:
17.05.2026 00:43
ياسر
تستعملي ال api تبعك؟
17.05.2026 00:57
M
Hello, do you have any experience with Vinted scrapers? I am primarily looking for one that operates in near real-time. I have built one myself, but I lack the necessary expertise; if you possess that experience, I would be interested in consulting with you or commissioning the development of a new one. less
17.05.2026 01:32
ياسر
الرسالة اللي بعتهالك العميل معنها إنه بيدور على حد عنده خبرة في بناء أدوات لسحب البيانات (scraping) من موقع Vinted (منصة لبيع الملابس المستعملة). ويطلب تحديدًا أداة تشتغل بشكل شبه فوري (near real-time)، يعني البيانات تيجي فور حصول أي تحديث على الموقع.هو اعترف إنه حاول يعمل أداة بنفسه لكن خبرته مش كافية، وبيعرض عليك إنك:إما تستشيره (consulting) يعني تشرحله إزاي يطور الأدوات أو تحل مشاكله.أو تكلفك أنت ببناء أداة جديدة من الصفر (commissioning development).قصده الحقيقي: عايز حل جاهز أو مخصص لمراقبة منتجات أو أسعار أو إعلانات Vinted في الوقت الفعلي تقريبًا، وهو مستعد يدفع مقابل خبرتك.تنبيه مهم: أغلب مواقع زي Vinted عندها شروط استخدام بتمنع السحب الآلي للبيانات، واحتمال يواجه مشاكل قانونية أو حظر (IP ban). فلو هتشتغل معاه، نبهه للجانب القانوني والتقني قبل ما توافق.
17.05.2026 01:33
ياسر
بنظرة مبرمج زميل :)
17.05.2026 02:06
M
معلش تعطيني api openrouter
17.05.2026 02:40
ياسر
انا فعلا مش شايل منك ال api
17.05.2026 02:42