求人パーサー既製品

Pythonの既成パーサー:公開されている求人情報の職種、雇用主、都市、給与、日付、リンクを1つの表に

通常15 分で完成修正対応込み品質チェック
プラン
安心決済詳しく
  • プランの範囲内の修正は無料です。
  • 納品から3日以内にご対応がない場合、自動的に承認されます。

代金はお支払い時にお預かりし、納品を承認した時点ではじめて支払われます。

Pythonの既成パーサー:公開されている求人情報の職種、雇用主、都市、給与、日付、リンクを1つの表に

成果物の例

スタンダードパッケージの例

園芸用品の仕入れ先のカタログをExcelにするスクレイパー

結果のイメージ

品番商品名価格在庫重量写真
GT-1042剪定ばさみ、20 mm18.90あり0.24 kg…/gt-1042.jpg
GT-1187折りたたみのこぎり、210 mm24.50あり0.31 kg…/gt-1187.jpg
GT-2210刈込ばさみ、波刃39.00なし1.10 kg…/gt-2210.jpg
GT-3305移植ごて、ステンレス9.80あり0.18 kg…/gt-3305.jpg
GT-4120ガーデンホース 25 m、1/2"42.00あり2.90 kg…/gt-4120.jpg

例のファイルには、52の一覧ページから集めた1,236件の商品が入っています。

コードの一部

def product_links(list_url: str) -> Iterator[str]:
    """一覧の全ページから商品ページのリンクを取得し、「次へ」をたどります。"""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """公開ページを1つ、控えめなペースで取得します。リクエストの間に待ち時間を置き、エラー時は数回やり直します。"""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s の応答は %s、3回中%d回目の試行", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} は3回試しても開けませんでした")

ファイル: scraper.py、settings.ini(開始ページ、リクエスト間の待ち時間、ファイル名)、requirements.txt、インストールと実行の方法を説明したREADMEを含むZIPファイル。読み込むのは公開ページだけで、2秒に1ページのペースで、最初にサイトのrobots.txtを確認します。お客様ご自身のパソコンで実行していただきます。

お客様: 仕入れ先の道具を再販している園芸用品のネットショップ。仕入れ先のウェブサイトには公開カタログがありますが、価格表のファイルはありません。 ご依頼内容: カタログの一覧ページを巡回してすべての商品ページを開き、品番、商品名、価格、在庫、重量、メイン写真のリンクをExcelに保存して、週に1回価格を比べられるようにする。

お客様とすべての情報は架空のものです。

このサービスについて

既成の求人パーサーです。求人サイトやキャリアページ向けにすでに作り込まれた定番のPythonパーサーを、お客様が指定する公開サイトに合わせます。ログインなしで誰でも見られる各求人の項目、職種、雇用主、都市またはリモート、表示されている場合は給与、働き方、日付、リンクを保存します。ある職種の報酬や需要を調べたり、お住まいの地域の求人を追ったり、ご自身の転職活動用のリストを作ったりするのに十分です。検索ページと求人ページ1つのリンク、それらの保存したコピー、必要な項目をお送りください。実行は、お客様ご自身のパソコンで行います。求人を掲載した人の名前、メールアドレス、電話番号は集めず、ログインも、求人への応募も行いません。ログインが必要なサイトや、規約で禁止しているサイトは対象外です。サイトのレイアウトが変わると、パーサーの更新が必要です。

含まれる内容

  • お届け内容既成の求人パーサーのPython、アドレスとページ間の待ち時間を入れた設定ファイル、READMEを収めたZIPアーカイブです。コードは注文ページにも表示されます。
  • 求人の項目を用意済み職種、雇用主、都市、給与、働き方、日付、リンク
  • 個人の連絡先は対象外名前、メールアドレス、電話番号は保存しません
  • 検索全体検索結果のすべてのページをたどります、スタンダードから
  • 配慮したペースページ間の待ち時間を設定で指定
  • 分かりやすい手引きPythonのインストールと実行を、ステップごとに

ご利用の流れ

  1. 1
    ページサイト、検索条件、項目、保存したページをお知らせください
  2. 2
    設定既成のパーサーをそのページに合わせ、手引きを書きます
  3. 3
    実行実行して、表の最初の行をご確認ください
  4. 4
    修正プランの範囲内で修正をご依頼いただけ、エラーメッセージもお送りください

ご用意いただくもの

公開されている求人サイトと正確なページ:職種や都市などの絞り込みを含む検索またはカテゴリのリンクと、求人ページ1つのリンク。必要な項目を、表の順に。それらのページのうち1〜2つを、ブラウザから保存したもの(ファイル>名前を付けてページを保存)またはスクリーンショットで。結果のファイル形式:CSV、Excel、プレミアムではJSON。プレミアムでは、他のサイトと実行の頻度。

お伺いする内容:

  • どのサイトのどの検索ですか?
  • 必要な項目
  • おおよその求人数は?
  • 結果のファイル形式と頻度

プランを比較

プランベーシック¥2,480スタンダード¥4,790プレミアム¥8,810
含まれる内容リンクから求人を取得検索結果と求人最大3つの求人サイト
納期1日2日3日
修正回数123
サイト11最大3
ページの種類12(一覧と商品)最大3
項目最大10最大25それぞれ最大25
一覧のページをたどりますなしありあり
結果のファイルCSVExcelまたはCSVExcel、CSV、JSON
重複を除き、止まったところから再開なしなしあり
既成バージョン求人情報求人情報求人情報
注文する ベーシック注文する スタンダード注文する プレミアム

安心決済

お支払いは注文時ですが、代金が支払われるのは承認された納品に対してのみです。

  • 固定料金お支払い後にプランの料金が変わることはありません。
  • 代金はお預かりお支払い時、代金はお預かりするだけです。納品を承認した時点でサービス側に支払われます。
  • 納品前にチェックすべての成果物はお手元に届く前に品質チェックを受けます。承認前に注文ページで内容を確認できます。
  • 無料の修正依頼内容の範囲内で、プランで定められた回数まで修正を依頼できます。
  • 3日後に自動承認納品から3日以内に承認も修正依頼もない場合、自動的に承認されます。納品後に注文チャットでメッセージを送った場合、注文は保留されます。こちらから回答した後、3日間のカウントを再開することがあり、その際はチャットでお知らせします。
  • やり直しまたは全額返金結果が依頼内容と合わず修正でも解決しなかった場合、または作業に納期の2倍を超える時間がかかった場合は、注文チャットでご連絡ください。作業をやり直すか、代金を全額返金いたします。
詳しい仕組み →

質問と回答

雇用主の社員の連絡先も集めますか?

いいえ。雇用主の名前は掲載されているとおりに保存しますが、人の名前、メールアドレス、電話番号は保存しません。

求職者の履歴書を集められますか?

いいえ。履歴書には個人情報が含まれ、通常はログインが必要です。このパーサーが集めるのは、公開された求人情報だけです。

サイトのレイアウトが変わったらどうなりますか?

パーサーは現在のページの作りに合わせて動きます。サイトが一新されたら更新が必要で、それは新しいご注文になります。配慮したペースで読み、サイトが設ける制限は回避しません。

このデータを集めてもよいのですか?

公開データの収集は多くの場合認められますが、サイトの規約やデータに関する法律は国によって異なるため、集めて使ってよいかはお客様の判断です。パーサーは、ログイン、保護の回避、個人情報の収集を行いません。

オーダーメイドのパーサーより安いのはなぜですか?

すでに作り込まれた既成の定番の求人パーサーで、項目とページの移動のしかたは整っており、それをお客様が指定するサイトと列に合わせます。特殊なサイトや項目は、オーダーメイドのパーサーのサービスになります。

答えが見つかりませんか?

プラン