โปรแกรมดึงแคตตาล็อกคอร์สพัฒนาและปรับแต่ง

โปรแกรมดึงข้อมูลด้วย Python สำหรับแคตตาล็อกคอร์สออนไลน์สาธารณะ: ชื่อคอร์ส สถาบัน ราคา ระยะเวลา และรูปแบบในตาราง

ปกติเสร็จภายใน 15 นาทีรวมการแก้ไขตรวจสอบคุณภาพ
แพ็กเกจ
การคุ้มครองการชำระเงินรายละเอียด
  • การแก้ไขภายในแพ็กเกจไม่มีค่าใช้จ่าย
  • หากคุณไม่ตอบกลับภายใน 3 วันหลังส่งมอบ งานจะถูกยอมรับโดยอัตโนมัติ

เงินจะถูกพักไว้เมื่อคุณชำระ และจะถูกโอนก็ต่อเมื่อคุณยอมรับงานแล้วเท่านั้น

โปรแกรมดึงข้อมูลด้วย Python สำหรับแคตตาล็อกคอร์สออนไลน์สาธารณะ: ชื่อคอร์ส สถาบัน ราคา ระยะเวลา และรูปแบบในตาราง

ตัวอย่างผลงาน

ตัวอย่างของแพ็กเกจสแตนดาร์ด

โปรแกรมดึงข้อมูลแคตตาล็อกของซัพพลายเออร์เครื่องมือทำสวนลง Excel

ผลลัพธ์ที่ได้

รหัสสินค้าชื่อราคามีสินค้าน้ำหนักรูป
GT-1042กรรไกรตัดกิ่ง 20 มม.18.90มี0.24 กก.…/gt-1042.jpg
GT-1187เลื่อยพับ 210 มม.24.50มี0.31 กก.…/gt-1187.jpg
GT-2210กรรไกรตัดแต่งพุ่มไม้ ใบมีดหยัก39.00ไม่มี1.10 กก.…/gt-2210.jpg
GT-3305เกรียงพรวนดิน สเตนเลส9.80มี0.18 กก.…/gt-3305.jpg
GT-4120สายยางรดน้ำ 25 ม. 1/2"42.00มี2.90 กก.…/gt-4120.jpg

ไฟล์ในตัวอย่างมีสินค้า 1,236 รายการจากหน้ารายการ 52 หน้า

ตัวอย่างโค้ดบางส่วน

def product_links(list_url: str) -> Iterator[str]:
    """ลิงก์หน้าสินค้าจากทุกหน้าของรายการ โดยกดไปตามปุ่ม 'ถัดไป'"""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """เปิดหน้าเว็บสาธารณะหนึ่งหน้าแบบไม่เร่งรีบ: เว้นช่วงระหว่างคำขอและลองใหม่สองสามครั้งเมื่อเกิดข้อผิดพลาด"""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s ตอบกลับ %s ครั้งที่ %d จาก 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} เปิดไม่ได้หลังลอง 3 ครั้ง")

ไฟล์ที่ส่งมอบ: ไฟล์ ZIP ที่มี scraper.py settings.ini (หน้าเริ่มต้น ช่วงเว้นระหว่างคำขอ ชื่อไฟล์) requirements.txt และ README อธิบายการติดตั้งและการรัน โปรแกรมอ่านเฉพาะหน้าที่เปิดสาธารณะ ทุก 2 วินาทีต่อหนึ่งหน้า และตรวจ robots.txt ของเว็บไซต์ก่อนเสมอ ลูกค้ารันโปรแกรมบนคอมพิวเตอร์ของตัวเอง

ลูกค้า: ร้านขายอุปกรณ์ทำสวนออนไลน์ที่นำเครื่องมือของซัพพลายเออร์มาขายต่อ ซัพพลายเออร์มีแคตตาล็อกเปิดบนเว็บไซต์แต่ไม่มีไฟล์รายการราคา งาน: ไล่ดูหน้ารายการของแคตตาล็อก เปิดทุกหน้าสินค้า แล้วบันทึกรหัสสินค้า ชื่อ ราคา สต็อก น้ำหนัก และลิงก์รูปหลักลง Excel เพื่อเทียบราคาสัปดาห์ละครั้ง

ลูกค้าและข้อมูลทั้งหมดเป็นเรื่องสมมติ

เกี่ยวกับบริการนี้

โรงเรียนออนไลน์ เว็บรวมคอร์ส และผู้ที่เปรียบเทียบการอบรมใช้โปรแกรมนี้นำแคตตาล็อกคอร์สสาธารณะมาใส่ในตาราง: ชื่อคอร์ส สถาบัน หัวข้อ ระดับ รูปแบบ ระยะเวลา วันเริ่ม ราคาและราคาเดิม จำนวนบทเรียน คะแนนตามที่แสดง และลิงก์ ส่งหน้าแคตตาล็อก หน้าคอร์สหนึ่งหน้า และหน้าหนึ่งหรือสองหน้าที่บันทึกจากเบราว์เซอร์ คุณจะได้โค้ด Python ไฟล์ตั้งค่า และ README และรันบนคอมพิวเตอร์ของคุณ โปรแกรมคัดลอกสิ่งที่หน้าเว็บเขียน ไม่ตัดสินคุณภาพของคอร์สหรือรับประกันผลของการอบรม ไม่เก็บชื่อผู้สอนและรีวิวของผู้เรียน ตารางจึงไม่มีข้อมูลส่วนบุคคล โปรแกรมอ่านหน้าที่เปิดสาธารณะด้วยความเร็วที่สุภาพ ไม่เข้าสู่ระบบ และไม่หลบเลี่ยงแคปช่าหรือระบบป้องกัน คุณเป็นผู้ตัดสินว่าข้อกำหนดของเว็บอนุญาตหรือไม่ หากเว็บเปลี่ยนเลย์เอาต์ภายหลังต้องมีการอัปเดต

สิ่งที่รวมอยู่ในบริการ

  • สิ่งที่คุณจะได้รับไฟล์ ZIP ที่มีโค้ด Python ไฟล์ตั้งค่า และ README พร้อมคำแนะนำทีละขั้นตอน โค้ดยังแสดงบนหน้าคำสั่งซื้อด้วย
  • ราคาสำหรับเปรียบเทียบราคา ราคาเดิม และการผ่อนชำระเป็นคอลัมน์แยกกัน
  • ระยะเวลาและรูปแบบสัปดาห์หรือชั่วโมง สอนสดหรือบันทึกไว้ ตามที่หน้าเว็บระบุ
  • หัวข้อและระดับอยู่ในคอลัมน์แยกกันสำหรับการกรอง
  • ความเร็วที่สุภาพเว้นช่วงระหว่างหน้า ตั้งได้ในไฟล์ตั้งค่า
  • รันบนคอมพิวเตอร์ของคุณWindows, macOS หรือ Linux พร้อม Python

วิธีการทำงาน

  1. 1
    แคตตาล็อกคุณให้แคตตาล็อกและหน้าคอร์สที่บันทึกไว้หนึ่งหน้า
  2. 2
    โปรแกรมดึงข้อมูลเราเขียนโค้ดและคู่มือการรัน
  3. 3
    รันคุณรันแล้วตรวจไม่กี่คอร์สเทียบกับเว็บ
  4. 4
    การแก้ไขคุณขอแก้ไขได้ภายในแพ็กเกจและส่งข้อความแจ้งข้อผิดพลาดมาหากมี

สิ่งที่เราต้องการจากคุณ

เว็บและหน้าที่ต้องการ: ลิงก์ไปยังแคตตาล็อกคอร์สและหน้าคอร์สหนึ่งหน้า และจำนวนคอร์สโดยประมาณ ฟิลด์ตามลำดับในตารางของคุณ เช่น ชื่อคอร์ส สถาบัน หัวข้อ ระดับ รูปแบบ ระยะเวลา วันเริ่ม ราคา ราคาเดิม ลิงก์ หน้าเหล่านั้นหนึ่งหรือสองหน้าที่บันทึกจากเบราว์เซอร์ (File > Save page as) หรือภาพหน้าจอ CSV หรือ Excel

เราจะถามคุณว่า:

  • เว็บและหน้าใด
  • ฟิลด์ที่คุณต้องการ
  • มีคอร์สประมาณกี่คอร์ส
  • เฉพาะบางคอร์สไหม

เปรียบเทียบแพ็กเกจ

แพ็กเกจเบสิกคอร์สจากลิงก์ของคุณ฿714สแตนดาร์ดทั้งแคตตาล็อก฿1,428พรีเมียมสถาบันไม่เกิน 3 แห่ง฿2,550
กำหนดส่ง1 วัน2 วัน3 วัน
การแก้ไข123
เว็บไซต์11ไม่เกิน 3
ประเภทของหน้า12 (แคตตาล็อกและหน้าคอร์ส)ไม่เกิน 3
ฟิลด์ไม่เกิน 10ไม่เกิน 25ไม่เกิน 25 ต่อแบบ
ไล่ดูหน้าต่าง ๆ ของรายการไม่มีมีมี
ไฟล์ผลลัพธ์CSVExcel หรือ CSVExcel, CSV หรือ JSON
ตัดรายการซ้ำ ทำต่อจากจุดที่หยุดได้ไม่มีไม่มีมี
สั่งซื้อ เบสิกสั่งซื้อ สแตนดาร์ดสั่งซื้อ พรีเมียม

การคุ้มครองการชำระเงิน

คุณชำระเงินเมื่อสั่งซื้อ แต่เงินจะถูกโอนเฉพาะสำหรับงานที่ยอมรับแล้วเท่านั้น

  • ราคาคงที่ราคาแพ็กเกจจะไม่เปลี่ยนแปลงหลังจากคุณชำระเงิน
  • เงินถูกพักไว้เมื่อคุณชำระเงิน ยอดเงินจะถูกพักไว้เท่านั้น และจะถูกโอนออกเมื่อคุณยอมรับงานแล้ว
  • ตรวจสอบก่อนส่งมอบผลงานทุกชิ้นผ่านการตรวจสอบคุณภาพก่อนถึงมือคุณ และคุณจะเห็นผลงานในหน้าคำสั่งซื้อก่อนยอมรับงาน
  • แก้ไขฟรีขอแก้ไขภายในขอบเขตรายละเอียดงานของคุณได้ตามจำนวนครั้งที่แพ็กเกจกำหนด
  • ยอมรับงานหลัง 3 วันหากภายใน 3 วันหลังส่งมอบ คุณไม่ได้ยอมรับงานหรือขอแก้ไข งานจะถูกยอมรับโดยอัตโนมัติ หากคุณเขียนข้อความในแชทคำสั่งซื้อหลังส่งมอบ คำสั่งซื้อจะรอไว้ก่อน เมื่อเราตอบกลับแล้ว เราอาจเริ่มนับ 3 วันใหม่ และจะแจ้งให้ทราบในแชท
  • ทำใหม่หรือคืนเงินเต็มจำนวนหากผลงานไม่ตรงตามรายละเอียดงานและการแก้ไขยังไม่ช่วย หรืองานใช้เวลาเกินกำหนดส่งมากกว่าสองเท่า ให้เขียนแจ้งในแชทคำสั่งซื้อ เราจะทำงานใหม่หรือคืนเงินให้เต็มจำนวน
วิธีการทำงาน →

คำถามและคำตอบ

เปิดบทเรียนภายในคอร์สได้ไหม

ไม่ได้ บทเรียนอยู่หลังการเข้าสู่ระบบของผู้เรียน และโปรแกรมไม่เข้าสู่ระบบ โปรแกรมอ่านเฉพาะแคตตาล็อกและหน้าคอร์สที่เปิดสาธารณะ

เก็บชื่อผู้สอนหรือรีวิวของผู้เรียนได้ไหม

ไม่ได้ ชื่อบุคคลเป็นข้อมูลส่วนบุคคลจึงไม่ถูกเก็บ ตัวเลขคะแนนเป็นคอลัมน์ได้เมื่อหน้าเว็บแสดงไว้

ถ้าราคาแสดงหลังเลือกแผนหรือสมัครสมาชิกเท่านั้นล่ะ

ราคาที่อยู่หลังการสมัครสมาชิกจะเข้าไม่ถึง ถ้าหน้าเว็บแสดงแผนเมื่อคลิกแท็บ โปรแกรมอ่านได้ด้วยไลบรารีเบราว์เซอร์ (Playwright)

เก็บแคตตาล็อกคอร์สได้ตามกฎหมายไหม

ข้อกำหนดของเว็บและกฎหมายข้อมูลแตกต่างกัน คุณจึงเป็นผู้ตัดสินว่าคุณเก็บและใช้ข้อมูลได้หรือไม่ ไม่ว่ากรณีใด Google, Amazon, LinkedIn และโซเชียลมีเดียอยู่นอกขอบเขต

ไม่พบคำตอบใช่ไหม

แพ็กเกจ