Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

google scraper doesn't return any results #86

Open
najibmargae opened this issue Mar 23, 2021 · 1 comment
Open

google scraper doesn't return any results #86

najibmargae opened this issue Mar 23, 2021 · 1 comment

Comments

@najibmargae
Copy link

najibmargae commented Mar 23, 2021

Since a while now i'm not getting any organic results anymore.

all i'm getting is some data from right_side_info_text and places.

{ results: { 'debouchage rapide bruxelles': { '1': { num_results: '', no_results: false, effective_query: '', right_info: {}, results: [], top_products: [], right_products: [], top_ads: [], bottom_ads: [], places: [ { heading: 'SD Débouchage Bruxelles', rating: '4,7 \n (136) · Plombier', contact: 'En activité depuis plus de 20 ans · Koekelberg · 0466 90 22 15', hours: 'Ouvert 24h/24' }, { heading: 'Debouchage Bruxelles', rating: '5,0 \n (7) · Plombier', contact: 'Zaventem · 0485 00 12 12', hours: 'Ouvert 24h/24' }, { heading: 'Débouchage Bruxelles', rating: '5,0 \n (40) · Plombier', contact: 'Bruxelles · 02 899 22 35', hours: 'Ouvert 24h/24' } ], time: 'Mon, 22 Mar 2021 20:38:05 GMT' } }, 'débouchage canalisations bruxelles': { '1': { num_results: '', no_results: false, effective_query: '', right_info: {}, results: [], top_products: [], right_products: [], top_ads: [], bottom_ads: [], places: [], right_side_info_text: 'Résultats complémentaires\nRésultat du Knowledge Graph\nVoir les photos\nSD Débouchage Bruxelles\nSite Web\nEnregistrer\n4,7\n136 avis Google\n Devis en ligne\nHoraires : \nOuvert 24h/24\nSanté et sécurité: Les employés portent des masques · Obligation pour le personnel de désinfecter les surfaces entre chaque client · Plus d\'informations\nTéléphone : 0466 90 22 15\nRendez-vous: sd-debouchage.be\nLes horaires ou les services proposés peuvent varier\nSuggérer une modification · Vous êtes le propriétaire de cet établissement ?\nQuestions et réponses\nPoser une question\nAfficher toutes les questions (2)\nAvis des internautes\nSOS-EXPRESS\n4/5\n107 avis\n\t\nSD Débouchage\n5/5\n321 avis\n\t\nSOS Plombier\n9,6/10\n845 votes\nAvis\nDonner un avis\nAjouter une photo\n136 avis Google\nSource : SD Débouchage Bruxelles\n"Entreprise spécialisée dans le débouchage des canalisations et la vidange de fosses septiques dans la région de Bruxelles et Wallonie."\nSD Débouchage Bruxelles\nsur Google\nTrès bon début de journée à tous nos clients 😊 L\'équipe SD Débouchage est à votre service 7j/7 et 24h/24 pour tous vos demandes de dépannages et de débouchage de canalisations.\n10 mars 2021\nEn savoir plus\nGrand merci à tous nos clients partout en Belgique pour la satisfaction qu\'ils témoignent à notre égard. On vous aime ♥️ L\'équipe SD Débouchage\n7 janv. 2021\nUne canalisation bouchée ou des sanitaires qui refoulent ? Pas de panique ! Faites appel aux experts de SD Débouchage. Ils interviendront rapidement chez vous pour un dépannage rapide et efficace. Contactez-nous et bénéficiez de l\'expertise SD Débouchage.\n6 janv. 2021\nEn savoir plus\nDépannage en débouchage des canalisations 7j/7 et 24h/24. SD Débouchage votre déboucheur de confiance sur la région de Bruxelles et Wallonie. 😊 Contactez-nous !\n3 janv. 2021\nEn savoir plus\nL\'équipe SD Débouchage vous souhaite une bonne année 2021 😊 Nous sommes à votre disposition en ce jour pour toutes vos demandes de dépannage et de débouchage des canalisations sur les régions de Bruxelles et de Wallonie. Très bonne journée L\'équipe SD Débouchage\n1 janv. 2021\nEn savoir plus\nService disponible pour toute demande en urgence en débouchage des canalisations. Zones : Région de Bruxelles Wallonie Appelez-nous maintenant ou faites votre demande en ligne.\n19 déc. 2020\nEn savoir plus\nSD Débouchage 1ère société de débouchage en Belgique. 😊\n9 déc. 2020\nEn savoir plus\nNos spécialistes du débouchage canalisations à Bruxelles et dans la région de Wallonie vous souhaite une bon début de journée. 😊😊\n7 déc. 2020\nBon dimanche à nos clients dans la région de Wallonie. N\'hésitez pas à nous contacter pour toutes demandes de débouchage des canalisations dans toute la région wallonne. Nos déboucheurs professionnels interviennent dans la majorité des communes de la région :…\n6 déc. 2020\nEn savoir plus\nPetit rappel : nos experts en débouchage des canalisations interviennent en urgence (30 min) ou sur rendez-vous dans les 19 communes de la région de Bruxelles-Capitale : 1 : Anderlecht 2 : Bruxelles (Brussel) 3 : Ixelles (Elsene) 4 : Etterbeek 5 : Evere 6 : Ganshoren 7 : Jette 8 :…\n6 déc. 2020\nEn savoir plus\nTout afficher\nRecherches associées\nVoir d\'autres éléments (plus de 1)\nExpress Plomberie Bruxelles\nBruxelles\nPlombier Bruxelles Service...\nBrico Plan‑it Anderlecht\nDistritherm S.A.\nÀ propos de ces données\nSignaler un problème', time: 'Mon, 22 Mar 2021 20:40:35 GMT' } },

run.js code:

const se_scraper = require('se-scraper');

(async () => {
    let browser_config = {
        debug_level: 1,
        output_file: 'pdetails/data.json',
        test_evasion: true,
        verbose: true,
    };

    let scrape_job = {
        search_engine: 'google',
    keywords:  ['wc ontstoppen kontich', 'ontstopping oudenburg', 'ontstopping wingene', 'radiator aansluiten', 'camera-inspectie mechelen', 'ontstopper leuven', 'camera-inspectie diest', 'camera-inspectie tienen', 'ontstopper mechelen'>
        num_pages: 1,
        sleep_range: [70,150],
        // add some cool google search settings
        google_settings: {
    gl: 'be',
    hl: 'nl',
            start: 0, // Determines the results offset to use, defaults to 0.
            num: 100, // Determines the number of results to show, defaults to 10. Maximum is 100.
        },
    };

    var scraper = new se_scraper.ScrapeManager(browser_config);

    await scraper.start();

    var results = await scraper.scrape(scrape_job);

    console.dir(results, {depth: null, colors: true});

    await scraper.quit();
})();

Any clues?

@nhupv
Copy link

nhupv commented Sep 14, 2022

Same problem. have you got a solution yet?

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
None yet
Projects
None yet
Development

No branches or pull requests

2 participants