محلل عناوين الأخبارجاهزة للاستخدام

محلل Python جاهز لعناوين مواقع الأخبار المفتوحة: العنوان والتاريخ والقسم ومقدمة قصيرة والرابط

جاهز عادةً خلال 15 دقيقةالتعديلات مشمولةفحص الجودة
الباقات
حماية الدفعالتفاصيل
  • التعديلات ضمن الباقة مجانية.
  • إذا لم تردّ خلال 3 أيام من التسليم، يُقبل العمل تلقائيًا.

يُحجز المبلغ عند الدفع ولا يُحوَّل إلا بعد قبولك العمل.

محلل Python جاهز لعناوين مواقع الأخبار المفتوحة: العنوان والتاريخ والقسم ومقدمة قصيرة والرابط

مثال على النتيجة

مثال على الباقة القياسية

محلل كتالوج مورّد أدوات الحدائق إلى Excel

شكل النتيجة

رقم الصنفالاسمالسعرمتوفرالوزنالصورة
GT-1042مقص تقليم، 20 مم18.90نعم0.24 كغ…/gt-1042.jpg
GT-1187منشار قابل للطي، 210 مم24.50نعم0.31 كغ…/gt-1187.jpg
GT-2210مقص تشذيب السياج، شفرة متموجة39.00لا1.10 كغ…/gt-2210.jpg
GT-3305مجرفة يدوية، فولاذ مقاوم للصدأ9.80نعم0.18 كغ…/gt-3305.jpg
GT-4120خرطوم حديقة 25 م، 1/2"42.00نعم2.90 كغ…/gt-4120.jpg

يضم الملف في هذا المثال 1,236 منتجًا من 52 صفحة قائمة.

جزء من الكود

def product_links(list_url: str) -> Iterator[str]:
    """روابط صفحات المنتجات من كل صفحات القائمة، مع اتباع رابط «التالي»."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """صفحة مفتوحة واحدة، بوتيرة مهذبة: فاصل زمني بين الطلبات وبضع محاولات عند الأخطاء."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s أجاب بالرمز %s، المحاولة %d من 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} لم تُفتح بعد 3 محاولات")

الملفات: أرشيف ZIP يضم scraper.py، وsettings.ini (صفحة البداية، والفاصل الزمني بين الطلبات، واسم الملف)، وrequirements.txt، وملف README عن التثبيت والتشغيل. يقرأ الصفحات المفتوحة فقط، صفحة كل ثانيتين، ويتحقق أولًا من ملف robots.txt الخاص بالموقع. يشغّله العميل على كمبيوتره الخاص.

العميل: متجر إلكتروني لمستلزمات الحدائق يعيد بيع أدوات أحد المورّدين؛ لدى المورّد كتالوج مفتوح على موقعه، لكن دون ملف لقائمة الأسعار. المهمة: المرور على صفحات قوائم الكتالوج، وفتح صفحة كل منتج، وحفظ رقم الصنف والاسم والسعر والتوفر والوزن ورابط الصورة الرئيسية في Excel، لمقارنة الأسعار مرة كل أسبوع.

العميل وجميع التفاصيل افتراضية.

عن هذه الخدمة

محلل عناوين أخبار جاهز: محلل Python معتاد محسوبة خطواته مسبقًا لصفحات الأخبار، مضبوط على موقع الأخبار أو القسم المفتوح الذي تحدده. يحفظ العنوان والتاريخ والوقت والقسم والوسوم والمقدمة القصيرة التي يعرضها الموقع والرابط: وهذا يكفي لمتابعة مجال عملك أو معرفة عدد مرات ظهور موضوع أو الاحتفاظ بقائمة قراءة لنشرة بريدية. لا ينسخ المقالات الكاملة التي هي ملك ناشريها؛ ويشير الجدول إليها بالرابط. وإذا كان للموقع موجز RSS يستطيع المحلل قراءته، وهذا ألطف بالموقع. ترسل روابط صفحة قسم ومقال واحد ونسخًا محفوظة منها والحقول التي تحتاجها. تشغّله بنفسك على حاسوبك. يقرأ الصفحات المفتوحة فقط بوتيرة مهذبة، ويتخطى كل ما وراء جدار دفع أو تسجيل دخول ولا يحفظ التعليقات أو أي شيء فيه أسماء القراء.

ما المشمول

  • ما تحصل عليهأرشيف ZIP يحتوي على محلل عناوين الأخبار الجاهز بلغة Python، وملف إعدادات بالعناوين والفاصل بين الصفحات، وREADME؛ وتظهر الشيفرة أيضًا في صفحة الطلب.
  • حقول العناوين جاهزةالعنوان والتاريخ والقسم والوسوم والمقدمة والرابط
  • روابط لا نصوص كاملةالمقالات تبقى لدى ناشريها
  • عدة مواقع معًاحتى 3 في جدول واحد، في الباقة المميزة
  • وتيرة مهذبةفاصل بين الصفحات، يُضبط في الإعدادات
  • دليل بسيطتثبيت Python وتشغيله، خطوة بخطوة

كيف يعمل

  1. 1
    الصفحاتتقدم الموقع والقسم والحقول والصفحات المحفوظة
  2. 2
    الإعدادنضبط المحلل الجاهز على تلك الصفحات ونكتب الدليل
  3. 3
    التشغيلتشغّله وتراجع الصفوف الأولى من الجدول
  4. 4
    التعديلاتتطلب تعديلات ضمن باقتك وترسل أي رسالة خطأ

ما نحتاجه منك

موقع الأخبار المفتوح والصفحات بدقة: رابط صفحة قسم أو وسم ورابط مقال واحد. والحقول التي تحتاجها بترتيب جدولك، مثل العنوان والتاريخ والقسم والمقدمة والرابط. وصفحة أو صفحتان منها محفوظتان من متصفحك (ملف > حفظ الصفحة باسم) أو لقطات شاشة، ورابط RSS إن وُجد للموقع. وملف النتائج: CSV أو Excel أو، في الباقة المميزة، JSON. وللباقة المميزة: المواقع الأخرى وكم مرة يعمل.

سنسألك:

  • أي موقع وأي قسم؟
  • الحقول التي تحتاجها
  • كلمات مفتاحية للإبقاء
  • ملف النتائج وكم مرة

قارن بين الباقات

الباقاتالأساسية‏16 US$القياسية‏31 US$المميزة‏56 US$
ما المشمولعناوين من صفحة واحدةالقسم والمقالاتحتى 3 مواقع أخبار
مدة التنفيذ1 يوم2 يوم3 أيام
التعديلات123
المواقع11حتى 3
أنواع الصفحات12 (قائمة ومنتج)حتى 3
الحقولحتى 10حتى 25حتى 25 في كل منها
يمر عبر صفحات قائمةلانعمنعم
ملف النتائجCSVExcel أو CSVExcel أو CSV أو JSON
تُزال المكررات ويستأنف من حيث توقفلالانعم
نسخة جاهزةعناوين الأخبارعناوين الأخبارعناوين الأخبار
اطلب الأساسيةاطلب القياسيةاطلب المميزة

حماية الدفع

تدفع عند الطلب، لكن المبلغ لا يُحوَّل إلا مقابل عمل قبلته.

  • سعر ثابتلا يتغير سعر الباقة بعد الدفع.
  • المبلغ محجوزعند الدفع، يُحجز المبلغ فقط. ولا يُحوَّل إلى Dleex إلا بعد قبولك العمل.
  • فحص قبل التسليمتخضع كل نتيجة لفحص الجودة قبل أن تصل إليك، وتراها في صفحة الطلب قبل قبولها.
  • تعديلات مجانيةاطلب تعديلات ضمن متطلبات طلبك بالعدد الذي تسمح به الباقة.
  • القبول بعد 3 أيامإذا لم تقبل العمل ولم تطلب تعديلات خلال 3 أيام من التسليم، يُقبل تلقائيًا. وإذا كتبت في محادثة الطلب بعد التسليم، يبقى الطلب قيد الانتظار؛ وبعد ردّنا، قد نعيد بدء مهلة 3 أيام وسنُعلمك بذلك في المحادثة.
  • إعادة التنفيذ أو استرداد المبلغ كاملًاإذا لم تطابق النتيجة متطلبات طلبك ولم تُصلحها التعديلات، أو استغرق العمل أكثر من ضعف مدة التنفيذ، فاكتب في محادثة الطلب: سنعيد تنفيذ العمل أو نردّ إليك المبلغ كاملًا.
كيف يعمل →

الأسئلة والأجوبة

هل يستطيع حفظ النص الكامل للمقالات؟

لا. المقالات عمل ناشريها. يحفظ المحلل العنوان والمقدمة القصيرة التي يعرضها الموقع والرابط، فتقرأ المقال في الموقع.

هل أستطيع إعادة نشر العناوين في موقعي؟

يتوقف ذلك على شروط الناشر وقانون بلدك، والقرار قرارك. صُمم المحلل لمتابعتك الخاصة وقوائم قراءتك.

ماذا لو غيّر الموقع تخطيطه؟

يعمل المحلل وفق الصفحات كما هي الآن. وبعد إعادة تصميم يحتاج إلى تحديث، وهو طلب جديد. يقرأ بوتيرة مهذبة ولا يتجاوز الحدود التي يضعها الموقع.

هل يُسمح لي بجمع هذه البيانات؟

جمع البيانات العامة مسموح في حالات كثيرة، لكن شروط المواقع وقوانين البيانات تختلف بين البلدان، لذا تقرر أنت هل يجوز لك جمعها واستخدامها. ولا يسجل المحلل الدخول ولا يتجاوز الحماية ولا يجمع بيانات شخصية أبدًا.

لماذا يكلف أقل من المحلل المخصص؟

هو محلل عناوين أخبار جاهز معتاد: حقوله وطريقة تنقله بين الصفحات محسوبة مسبقًا، ونضبطه على الموقع الذي تحدده وأعمدتك. أما المواقع والحقول غير المعتادة فهي خدمة المحلل المخصص.

لم تجد إجابتك؟

الباقات