โปรแกรมดึงหัวข้อข่าวพร้อมใช้งาน

พาร์เซอร์ Python สำเร็จรูปสำหรับหัวข้อข่าวจากเว็บไซต์ข่าวแบบเปิด: พาดหัว วันที่ หมวด ย่อหน้านำสั้น ๆ และลิงก์

ปกติเสร็จภายใน 15 นาทีรวมการแก้ไขตรวจสอบคุณภาพ
แพ็กเกจ
การคุ้มครองการชำระเงินรายละเอียด
  • การแก้ไขภายในแพ็กเกจไม่มีค่าใช้จ่าย
  • หากคุณไม่ตอบกลับภายใน 3 วันหลังส่งมอบ งานจะถูกยอมรับโดยอัตโนมัติ

เงินจะถูกพักไว้เมื่อคุณชำระ และจะถูกโอนก็ต่อเมื่อคุณยอมรับงานแล้วเท่านั้น

พาร์เซอร์ Python สำเร็จรูปสำหรับหัวข้อข่าวจากเว็บไซต์ข่าวแบบเปิด: พาดหัว วันที่ หมวด ย่อหน้านำสั้น ๆ และลิงก์

ตัวอย่างผลงาน

ตัวอย่างของแพ็กเกจสแตนดาร์ด

โปรแกรมดึงข้อมูลแคตตาล็อกของซัพพลายเออร์เครื่องมือทำสวนลง Excel

ผลลัพธ์ที่ได้

รหัสสินค้าชื่อราคามีสินค้าน้ำหนักรูป
GT-1042กรรไกรตัดกิ่ง 20 มม.18.90มี0.24 กก.…/gt-1042.jpg
GT-1187เลื่อยพับ 210 มม.24.50มี0.31 กก.…/gt-1187.jpg
GT-2210กรรไกรตัดแต่งพุ่มไม้ ใบมีดหยัก39.00ไม่มี1.10 กก.…/gt-2210.jpg
GT-3305เกรียงพรวนดิน สเตนเลส9.80มี0.18 กก.…/gt-3305.jpg
GT-4120สายยางรดน้ำ 25 ม. 1/2"42.00มี2.90 กก.…/gt-4120.jpg

ไฟล์ในตัวอย่างมีสินค้า 1,236 รายการจากหน้ารายการ 52 หน้า

ตัวอย่างโค้ดบางส่วน

def product_links(list_url: str) -> Iterator[str]:
    """ลิงก์หน้าสินค้าจากทุกหน้าของรายการ โดยกดไปตามปุ่ม 'ถัดไป'"""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """เปิดหน้าเว็บสาธารณะหนึ่งหน้าแบบไม่เร่งรีบ: เว้นช่วงระหว่างคำขอและลองใหม่สองสามครั้งเมื่อเกิดข้อผิดพลาด"""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s ตอบกลับ %s ครั้งที่ %d จาก 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} เปิดไม่ได้หลังลอง 3 ครั้ง")

ไฟล์ที่ส่งมอบ: ไฟล์ ZIP ที่มี scraper.py settings.ini (หน้าเริ่มต้น ช่วงเว้นระหว่างคำขอ ชื่อไฟล์) requirements.txt และ README อธิบายการติดตั้งและการรัน โปรแกรมอ่านเฉพาะหน้าที่เปิดสาธารณะ ทุก 2 วินาทีต่อหนึ่งหน้า และตรวจ robots.txt ของเว็บไซต์ก่อนเสมอ ลูกค้ารันโปรแกรมบนคอมพิวเตอร์ของตัวเอง

ลูกค้า: ร้านขายอุปกรณ์ทำสวนออนไลน์ที่นำเครื่องมือของซัพพลายเออร์มาขายต่อ ซัพพลายเออร์มีแคตตาล็อกเปิดบนเว็บไซต์แต่ไม่มีไฟล์รายการราคา งาน: ไล่ดูหน้ารายการของแคตตาล็อก เปิดทุกหน้าสินค้า แล้วบันทึกรหัสสินค้า ชื่อ ราคา สต็อก น้ำหนัก และลิงก์รูปหลักลง Excel เพื่อเทียบราคาสัปดาห์ละครั้ง

ลูกค้าและข้อมูลทั้งหมดเป็นเรื่องสมมติ

เกี่ยวกับบริการนี้

พาร์เซอร์หัวข้อข่าวสำเร็จรูป พาร์เซอร์ Python ทั่วไปที่ออกแบบไว้แล้วสำหรับหน้าข่าว ปรับให้เข้ากับเว็บไซต์ข่าวหรือหมวดแบบเปิดที่คุณระบุ บันทึกพาดหัว วันที่และเวลา หมวด แท็ก ย่อหน้านำสั้น ๆ ที่เว็บไซต์แสดง และลิงก์ เพียงพอสำหรับติดตามอุตสาหกรรมของคุณ ดูว่าหัวข้อหนึ่งปรากฏบ่อยแค่ไหน หรือเก็บรายการอ่านสำหรับจดหมายข่าว สคริปต์ไม่คัดลอกบทความเต็ม ซึ่งเป็นของผู้เผยแพร่ ตารางชี้ไปที่บทความด้วยลิงก์ หากเว็บไซต์มีฟีด RSS พาร์เซอร์อ่านฟีดนั้นได้ ซึ่งเบากว่าสำหรับเว็บไซต์ คุณส่งลิงก์หน้าหมวดและบทความหนึ่งบทความ สำเนาที่บันทึกของหน้าเหล่านั้น และช่องข้อมูลที่ต้องการ คุณรันเองบนคอมพิวเตอร์ของคุณ พาร์เซอร์อ่านเฉพาะหน้าเปิดด้วยความเร็วที่สุภาพ ข้ามสิ่งที่อยู่หลังเพย์วอลล์หรือการเข้าสู่ระบบ และไม่เก็บความคิดเห็นหรือสิ่งใดที่มีชื่อผู้อ่าน

สิ่งที่รวมอยู่ในบริการ

  • สิ่งที่คุณจะได้รับไฟล์ ZIP ที่มีพาร์เซอร์หัวข้อข่าวสำเร็จรูปด้วย Python ไฟล์ตั้งค่าที่มีที่อยู่เว็บและช่วงหยุดระหว่างหน้า และ README โค้ดแสดงอยู่ที่หน้าคำสั่งซื้อด้วย
  • ช่องข้อมูลหัวข้อข่าวพร้อมใช้พาดหัว วันที่ หมวด แท็ก ย่อหน้านำ ลิงก์
  • ลิงก์ ไม่ใช่ข้อความเต็มบทความอยู่กับผู้เผยแพร่
  • หลายเว็บไซต์ด้วยกันสูงสุด 3 เว็บไซต์ในตารางเดียว ในแพ็กเกจพรีเมียม
  • ความเร็วที่สุภาพหยุดระหว่างหน้า ตั้งค่าในไฟล์ตั้งค่า
  • คู่มือที่เข้าใจง่ายการติดตั้ง Python และการรัน ทีละขั้น

วิธีการทำงาน

  1. 1
    หน้าคุณระบุเว็บไซต์ หมวด ช่องข้อมูล และหน้าที่บันทึกไว้
  2. 2
    การตั้งค่าเราปรับพาร์เซอร์สำเร็จรูปให้เข้ากับหน้าเหล่านั้นและเขียนคู่มือ
  3. 3
    รันคุณรันและตรวจแถวแรกของตาราง
  4. 4
    การเปลี่ยนแปลงคุณขอแก้ไขได้ตามแพ็กเกจของคุณและส่งข้อความแสดงข้อผิดพลาด

สิ่งที่เราต้องการจากคุณ

เว็บไซต์ข่าวแบบเปิดและหน้าที่แน่นอน: ลิงก์หน้าหมวดหรือแท็กและบทความหนึ่งบทความ ช่องข้อมูลที่ต้องการตามลำดับของตาราง เช่น พาดหัว วันที่ หมวด ย่อหน้านำ และลิงก์ หน้าเหล่านั้นหนึ่งหรือสองหน้าที่บันทึกจากเบราว์เซอร์ (File > Save page as) หรือภาพหน้าจอ และลิงก์ RSS หากเว็บไซต์มี ไฟล์ผลลัพธ์: CSV, Excel หรือในแพ็กเกจพรีเมียม JSON สำหรับแพ็กเกจพรีเมียม เว็บไซต์อื่นและความถี่ในการรัน

เราจะถามคุณว่า:

  • เว็บไซต์ไหนและหมวดไหน
  • ช่องข้อมูลที่ต้องการ
  • คำสำคัญที่ต้องเก็บ
  • ไฟล์ผลลัพธ์และความถี่

เปรียบเทียบแพ็กเกจ

แพ็กเกจเบสิก฿544สแตนดาร์ด฿1,054พรีเมียม฿1,904
สิ่งที่รวมอยู่ในบริการหัวข้อข่าวจากหน้าเดียวหมวดและบทความสูงสุด 3 เว็บไซต์ข่าว
กำหนดส่ง1 วัน2 วัน3 วัน
การแก้ไข123
เว็บไซต์11สูงสุด 3
ประเภทหน้า12 (รายการและสินค้า)สูงสุด 3
ช่องข้อมูลสูงสุด 10สูงสุด 25สูงสุด 25 ในแต่ละประเภท
ไล่ดูหน้าของรายการไม่มีมีมี
ไฟล์ผลลัพธ์CSVExcel หรือ CSVExcel, CSV หรือ JSON
ลบรายการซ้ำ ทำต่อจากจุดที่หยุดไม่มีไม่มีมี
เวอร์ชันสำเร็จรูปหัวข้อข่าวหัวข้อข่าวหัวข้อข่าว
สั่งซื้อ เบสิกสั่งซื้อ สแตนดาร์ดสั่งซื้อ พรีเมียม

การคุ้มครองการชำระเงิน

คุณชำระเงินเมื่อสั่งซื้อ แต่เงินจะถูกโอนเฉพาะสำหรับงานที่ยอมรับแล้วเท่านั้น

  • ราคาคงที่ราคาแพ็กเกจจะไม่เปลี่ยนแปลงหลังจากคุณชำระเงิน
  • เงินถูกพักไว้เมื่อคุณชำระเงิน ยอดเงินจะถูกพักไว้เท่านั้น และจะถูกโอนออกเมื่อคุณยอมรับงานแล้ว
  • ตรวจสอบก่อนส่งมอบผลงานทุกชิ้นผ่านการตรวจสอบคุณภาพก่อนถึงมือคุณ และคุณจะเห็นผลงานในหน้าคำสั่งซื้อก่อนยอมรับงาน
  • แก้ไขฟรีขอแก้ไขภายในขอบเขตรายละเอียดงานของคุณได้ตามจำนวนครั้งที่แพ็กเกจกำหนด
  • ยอมรับงานหลัง 3 วันหากภายใน 3 วันหลังส่งมอบ คุณไม่ได้ยอมรับงานหรือขอแก้ไข งานจะถูกยอมรับโดยอัตโนมัติ หากคุณเขียนข้อความในแชทคำสั่งซื้อหลังส่งมอบ คำสั่งซื้อจะรอไว้ก่อน เมื่อเราตอบกลับแล้ว เราอาจเริ่มนับ 3 วันใหม่ และจะแจ้งให้ทราบในแชท
  • ทำใหม่หรือคืนเงินเต็มจำนวนหากผลงานไม่ตรงตามรายละเอียดงานและการแก้ไขยังไม่ช่วย หรืองานใช้เวลาเกินกำหนดส่งมากกว่าสองเท่า ให้เขียนแจ้งในแชทคำสั่งซื้อ เราจะทำงานใหม่หรือคืนเงินให้เต็มจำนวน
วิธีการทำงาน →

คำถามและคำตอบ

บันทึกข้อความเต็มของบทความได้ไหม

ไม่ได้ บทความเป็นผลงานของผู้เผยแพร่ พาร์เซอร์บันทึกพาดหัว ย่อหน้านำสั้น ๆ ที่เว็บไซต์แสดง และลิงก์ คุณจึงอ่านบทความบนเว็บไซต์

เผยแพร่พาดหัวซ้ำบนเว็บไซต์ของฉันได้ไหม

ขึ้นอยู่กับเงื่อนไขของผู้เผยแพร่และกฎหมายของประเทศคุณ และการตัดสินใจเป็นของคุณ พาร์เซอร์ทำมาสำหรับการติดตามและรายการอ่านของคุณเอง

ถ้าเว็บไซต์เปลี่ยนเลย์เอาต์ล่ะ

พาร์เซอร์ทำงานตามหน้าในปัจจุบัน หลังจากมีการรีดีไซน์ต้องอัปเดต ซึ่งเป็นคำสั่งซื้อใหม่ พาร์เซอร์อ่านด้วยความเร็วที่สุภาพและไม่หลบเลี่ยงข้อจำกัดที่เว็บไซต์ตั้งไว้

ฉันเก็บข้อมูลนี้ได้หรือไม่

การเก็บข้อมูลสาธารณะทำได้ในหลายกรณี แต่เงื่อนไขของเว็บไซต์และกฎหมายข้อมูลต่างกันในแต่ละประเทศ คุณจึงเป็นผู้ตัดสินว่าเก็บและใช้ได้หรือไม่ พาร์เซอร์ไม่ล็อกอิน ไม่หลบเลี่ยงการป้องกัน และไม่เก็บข้อมูลส่วนบุคคล

ทำไมถึงถูกกว่าพาร์เซอร์ที่ทำตามสั่ง

เป็นพาร์เซอร์หัวข้อข่าวสำเร็จรูปทั่วไป ช่องข้อมูลและวิธีไล่ดูหน้าออกแบบไว้แล้ว และเราปรับให้เข้ากับเว็บไซต์ที่คุณระบุและคอลัมน์ของคุณ เว็บไซต์และช่องข้อมูลที่ไม่ธรรมดาคือบริการพาร์เซอร์ที่ทำตามสั่ง

ไม่พบคำตอบใช่ไหม

แพ็กเกจ