Description

The Hotmart Categories Spider automates scraping detailed product data from Hotmart marketplace categories, extracting titles, descriptions, ratings, prices, and more....

---

Hotmart Categories Spider

Introduction

The Hotmart Categories Spider is a powerful Apify Actor designed to scrape and extract detailed product information from Hotmart's marketplace categories. It automates the collection of product data such as titles, descriptions, ratings, and more, enabling efficient data gathering for analysis and insights. This tool is ideal for users seeking reliable, structured data from Hotmart's diverse product offerings without manual effort.

Features

• Comprehensive Data Extraction: Scrapes key product details including IDs, titles, descriptions, ratings, reviews, prices, and owner information.
• Flexible URL Configuration: Supports multiple start URLs for targeted scraping across different categories.
• High-Performance Scraping: Built for speed and reliability, handling large volumes of data with minimal downtime.
• Structured JSON Output: Delivers clean, machine-readable data perfect for integration into databases or analytics tools.
• Error-Resilient: Includes built-in handling for common scraping challenges like rate limits and network issues.
• Apify Integration: Seamlessly runs on the Apify platform with easy monitoring and export options.
• Customizable and Scalable: Adaptable for various use cases, from small queries to large-scale data collection.

Input Parameters

Parameter	Type	Required	Description	Example
StartUrls	array	No	An array of URLs to start scraping from. Each URL should point to a Hotmart category page. At least one URL is required for the actor to run.	["https://hotmart.com/pt-br/marketplace/categorias/animais-e-pets/pet"]

Example Usage

Input Configuration

{
  "StartUrls": [
    "https://hotmart.com/pt-br/marketplace/categorias/animais-e-pets/pet"
  ]
}

Output Example

[
  {
    "productId": 173373,
    "title": " CURSO ADESTRAMENTO ONLINE -  CWD 15X15",
    "slug": "adestramento-cwd-15x15",
    "description": "Você aprende a treinar 15 minutos por aula para ter 15 anos de sucesso na obediência do seu cão. É um curso com uma linguagem e um sistema fácil, moderno e eficaz. Abordado através de técnicas baseadas em leis e princípios da psicologia comportamental que regem o fenômeno da aprendizagem.\nCom esse curso, você será ouvido e respeitado pelo seu cão. Você deixará de ser refém dele.\nVocê irá ensinar pro teu cão exercícios funcionais para seu dia a dia, e também um módulo avançado é disponibilizado.Os funcionais são:\n- Fazer as necessidades no local adequado, não pular em você, não arrastar nos passeios, se comportando corretamente, além de comandos básicos como, sentar, deitar, e atender ao chamado.Os avançados: \"Junto alto nível\", targets, base de filhotes e colar eletrônico.\nE a técnica exclusiva da Escola Caio working dogs:\nAU-tomatiza-CÃO do cão para não fugir para rua, obedecendo ao som do portão automático.\nO seu cão vai obedecer ao som da máquina do portão da sua casa evitando fugas. \nProduzido pelo Campeão Brasileiro e juiz internacional Caio Alexandre",
    "avatar": "https://hotmart.s3.amazonaws.com/product_pictures/a000556c-4034-4f27-958c-e015804ebf1c/FOTOOFICIALDOCURSOCWD15X15ONLINE.jpg",
    "finalAvatar": "https://static-media.hotmart.com/aRBIabkvD9XOje8rYsqPbG6_g8M=/300x300/smart/filters:format(webp):background_color(white)/hotmart/product_pictures/a000556c-4034-4f27-958c-e015804ebf1c/FOTOOFICIALDOCURSOCWD15X15ONLINE.jpg",
    "category": "animals_and_plants",
    "rating": 4.683673469387755,
    "totalReviews": 294,
    "price": "",
    "ownerName": "Caio Working dogs",
    "videoLink": "https://www.youtube.com/watch?v=4magTOYM9Oc&feature=youtu.be",
    "actor_id": "3saGT7IWzGeJApSrv",
    "run_id": "n6LdkMg2qv2mo6Z2g"
  },
  {
    "productId": 1030128,
    "title": "Método Adestramento Inteligente",
    "slug": "metodo-alexandre-rossi",
    "description": "O Método Alexandre Rossi leva para sua casa os conceitos do Adestramento Inteligente ensinados pelo adestrador preferido das redes de televisão.\n\nCom o Método Alexandre Rossi qualquer pessoa da família pode aplicar as técnicas de Adestramento Inteligente e , com apenas 15min por dia, tornar a convivência com seu pet muito melhor. Além de aprender como solucionar comportamentos indesejados que só atrapalham a relação.",
    "avatar": "https://hotmart.s3.amazonaws.com/product_pictures/021bf065-e080-46a5-bc98-7f3f9f3365c5/WhatsAppImage20210805at105041.jpeg",
    "finalAvatar": "https://static-media.hotmart.com/ydPX9sFsCzTnPdf4T0oRlKxNHtI=/300x300/smart/filters:format(webp):background_color(white)/hotmart/product_pictures/021bf065-e080-46a5-bc98-7f3f9f3365c5/WhatsAppImage20210805at105041.jpeg",
    "category": "animals_and_plants",
    "rating": 4.8561643835616435,
    "totalReviews": 146,
    "price": "",
    "ownerName": "Alexandre Rossi Dr. Pet",
    "videoLink": "",
    "actor_id": "3saGT7IWzGeJApSrv",
    "run_id": "n6LdkMg2qv2mo6Z2g"
  },
  {
    "productId": 2165521,
    "title": "Curso de Banho e Tosa PET PRO",
    "slug": "curso-de-banho-e-tosa-pet-pro",
    "description": "🔥 VOCÊ AMA ANIMAIS? Transforme essa Paixão em uma Carreira de Sucesso! 🔥\n🐾 CURSO BANHO E TOSA PET PRO: Sua Porta de Entrada para um Mercado Lucrativo e em Expansão! 🐾\n\nChegou a sua chance de brilhar no mercado de banho e tosa! Quer começar do zero e se tornar um especialista? Ou já trabalha na área, mas sonha em elevar suas habilidades? Esse curso é feito para você!\n\nPOR QUE ESCOLHER O PET PRO?\nAulas em Alta Definição: Como se estivesse ao lado de um profissional, com clareza e qualidade para você aprender cada detalhe!\nAcesso Imediato: Confirmou a inscrição? Em segundos, você já estará aprendendo!\nCertificado Exclusivo: Reconhecido pela ABED, dando a você credibilidade nacional para se destacar no mercado!\nO QUE VOCÊ VAI APRENDER?\nDesde a introdução ao mercado até as técnicas mais avançadas, incluindo o cuidado especial para cada raça e, o melhor: como precificar seus serviços para lucrar de verdade!\n\nGARANTIA INCONDICIONAL: Satisfação 100% ou seu Dinheiro de Volta!\nOu você ama o curso, ou devolvemos seu investimento em até 7 dias, sem perguntas. Risco zero para você se sentir totalmente seguro(a)!\n\nA HORA É AGORA!\nNão perca a oportunidade de se tornar a referência em banho e tosa na sua cidade. Clique para se inscrever e dê o primeiro passo para o sucesso com o Curso Banho e Tosa Pet Pro!",
    "avatar": "https://hotmart.s3.amazonaws.com/product_pictures/11c65550-0322-46e7-ba0f-136dfc333ff4/CopiadeCopiadeCopiadeDesignsemnome.png",
    "finalAvatar": "https://static-media.hotmart.com/bXoFTxGFq_t4UnSC7m_vYokJg2o=/300x300/smart/filters:format(webp):background_color(white)/hotmart/product_pictures/11c65550-0322-46e7-ba0f-136dfc333ff4/CopiadeCopiadeCopiadeDesignsemnome.png",
    "category": "animals_and_plants",
    "rating": 4.557894736842106,
    "totalReviews": 190,
    "price": "",
    "ownerName": "WebHoje Cursos Online",
    "videoLink": "https://youtu.be/1vA0zJ56pUg",
    "actor_id": "3saGT7IWzGeJApSrv",
    "run_id": "n6LdkMg2qv2mo6Z2g"
  }
]

Use Cases

• Market Research: Analyze trends in product categories to identify popular niches and consumer preferences.
• Competitive Intelligence: Gather data on competitors' offerings, pricing, and ratings for strategic planning.
• Price Monitoring: Track product prices and availability across categories for dynamic pricing strategies.
• Content Aggregation: Collect product descriptions and media for creating content hubs or review sites.
• Academic Research: Study marketplace dynamics, such as rating distributions and category performance.
• Business Automation: Automate data feeds for CRM systems or e-commerce platforms integrating Hotmart data.

Installation and Usage

1. Search for "Hotmart Categories Spider" in the Apify Store.
2. Click "Try for free" or "Run".
3. Configure input parameters (e.g., add start URLs).
4. Click "Start" to begin extraction.
5. Monitor progress in the log.
6. Export results in your preferred format (JSON, CSV, Excel).

Output Format

The actor outputs an array of JSON objects, each representing a product. Key fields include:

• productId: Unique identifier for the product.
• title: Product name.
• slug: URL-friendly identifier.
• description: Detailed product description.
• avatar and finalAvatar: Image URLs.
• category: Product category.
• rating: Average user rating.
• totalReviews: Number of reviews.
• price: Product price (may be empty).
• ownerName: Seller's name.
• videoLink: Associated video URL (if available).
• actor_id and run_id: Metadata from the Apify run.

Data is structured for easy parsing and integration.

Error Handling

The actor handles common errors like invalid URLs, network timeouts, and rate limits by retrying requests and logging issues. If a URL fails, it skips and continues. Check the run log for details on failures. For persistent issues, ensure URLs are valid Hotmart category links.

Rate Limiting and Best Practices

Hotmart may impose rate limits; the actor includes delays to comply. Best practices: Limit concurrent runs, use valid URLs, and monitor logs. Avoid overloading the site; space out large extractions. For optimal performance, run during off-peak hours.

Limitations and Considerations

• Data accuracy depends on Hotmart's site structure; changes may require updates.
• Some fields like price may be unavailable.
• Scraping is subject to Hotmart's terms; use ethically.
• Large categories may take time; consider pagination limits.

Support

For custom/simplified outputs or bug reports, please contact:

• Email: support@getdataforme.com
• Subject line: "custom support"
• Contact form: https://getdataforme.com/contact/

We're here to help you get the most out of this Actor!

---