requête MySQL ne parvient pas à exécuter

Question

Je suis en train d'interroger de grandes quantités de données sur un serveur, voici mon code pour cela:

$queryString = ""; 

$connect = mysqli_connect("localhost", "username", "password", "database"); 

$loopLength = 20; 
$currentGroup = 1; 
$currentLoopAmount = 0; 
$queryAmount = 5; 

for($v = 0; $v < ceil($loopLength/$queryAmount); $v++){ 
    //echo "Looping Main: " . $v . "<br>"; 
    //echo $loopLength - (($currentGroup - 1) * 10) . "<br>"; 
    if($loopLength - (($currentGroup - 1) * $queryAmount) >= $queryAmount){ 
     $currentLoopAmount = $queryAmount; 
    } 
    else{ 
     $currentLoopAmount = $loopLength - (($currentGroup - 1) * $queryAmount); 
    } 

    //echo $currentLoopAmount; 

    $queryString = ""; 

    for($q = (($currentGroup - 1) * $queryAmount); $q < $currentLoopAmount + (($currentGroup - 1) * $queryAmount); $q++){ 
     //echo "&nbsp;&nbsp;Looping Sub: " . $q . "<br>"; 
     $tempVariable = grabPageData($URLs[$q], $q); 

     $queryString .= $tempVariable; 
     if($q < $loopLength-1){ 
      $queryString .= ","; 
     } 
     else{ 
      $queryString .= ";"; 
     } 
    } 

    echo $queryString; 

    $query = "INSERT INTO PublicNoticesTable (url, county, paperco, date, notice, id) VALUES " . $queryString; 
    $result = mysqli_query($connect, $query); 

    if($result){ 
     echo "Success"; 
    } 
    else{ 
     echo "Failed : " . mysqli_error($connect) . "<br>"; 
    } 

    $currentGroup += 1; 
} 

La variable $loopLength est dynamique et peut être des milliers ou potentiellement centaines de milliers . J'ai conçu cette fonction pour diviser ce nombre massif en un lot de requêtes plus petites car je ne pouvais pas télécharger toutes les données en même temps sur mon service d'hébergement partagé via GoDaddy. La variable $queryAmount représente la taille des requêtes les plus petites.

Voici un exemple de l'un des ensembles de valeurs qui est inséré dans la table: Ce sont les données d'un avis public que mon code a été récupéré dans la fonction grabPageData().

('http://www.publicnoticeads.com/az/search/view.asp?T=PN&id=37/7292017_24266919.htm','Pima','Green Valley News and Sun','2017/07/30',' ___________________________ARIZONA SUPERIOR COURT, PIMA COUNTYIn the Matter of the Estate of:JOSEPH T, DILLARD, SR.,Deceased.DOB: 10/09/1931No. PB20170865NOTICE TO CREDITORS(FOR PUBLICATION)NOTICE IS HEREBY GIVEN that DANA ANN DILLARD CALL has been appointed Personal Representative of this Estate. All persons having claims against the Estate are required to present their claimswithin four months after the date of the firat publication of this notice or the claims will be forever barred. Claims must be presented by delivering or mailing a written statement of the claim to the Personal Representative at the Law Offices of Michael W. Murray, 257 North Stone Avenue, Tucson, Arizona 85701.DATED this 17th day of July, 2017./S/ Micahel W. MurrayAttorney for the Personal RepresentativePub: Green Valley News & SunDate: July 23, 30, August 6, 2017 Public Notice ID: 24266919',' 24266919'), 

Pour atteindre ces données, je l'exécute à travers une fonction qui parcourt la page et la saisit. Ensuite, je mets le code html page web grâce à cette fonction:

function cleanData($data){ 
    $data = strip_tags($data); 
    //$data = preg_replace("/[^a-zA-Z0-9]/", "", $data); 
    //$data = mysql_real_escape_string($data); 
    return $data; 
} 

Ce qui me donne le contenu sans balises que vous voyez ci-dessus. Voici le problème.

La fonction s'exécute et tout semble juste dandy. Ensuite, la fonction (en fonction de la variable $queryAmount que je ne garde pas plus de 10 pour cause de problème) les sorties, comme vous pouvez le voir dans la fonction serait quelque chose comme ...

Failed : You have an error in your SQL syntax; check the manual that corresponds to your MySQL server version for the right syntax to use near '' at line 1 

La partie étrange est que lorsque J'ai de grandes quantités de données comme dire la variable $loopLength est comme 116. Le résultat sera sortie, "Échec: (erreur) Échec: (Erreur) Fai ... (Erreur) Succès. Donc, il interroge seulement le dernier ensemble de données Je ne suis pas sûr de la façon de résoudre ce problème et je veux un oeil frais.Cela peut m'aider s'il vous plaît.J'y ai travaillé pendant plusieurs heures en essayant de trouver une solution

Désolé pour faire de cette question une douleur dans le cul :(

EDIT:

J'ai changé le code de précédemment utiliser des déclarations préparées mysql et ce qui ne ... Voir ci-dessous:

$grabDataResults = [ 
     "url" => "", 
     "county" => "", 
     "paperco" => "", 
     "date" => "", 
     "notice" => "", 
     "id" => "", 
    ]; 

$connect = mysqli_connect("localhost", "bwt_admin", "Thebeast1398", "NewCoDatabase"); 

if($stmt = mysqli_prepare($connect, "INSERT INTO PublicNoticesTable (url, county, paperco, date, notice, id) VALUES (?, ?, ?, ?, ?, ?)")){ 

mysqli_stmt_bind_param($stmt, 'ssssss', $grabDataResults["url"], $grabDataResults["county"], $grabDataResults["paperco"], $grabDataResults["date"], $grabDataResults["notice"], $grabDataResults["id"]); 

$loopLength = 1; 

for($v = 0; $v < $loopLength; $v++){ 
    $grabDataResults = grabPageData($URLs[$v], $v); 
    mysqli_stmt_execute($stmt); 
    printf("%d Row inserted.\n", mysqli_stmt_affected_rows($stmt)); 
    printf("Error:\n", mysqli_stmt_error($stmt)); 
    echo "(" . $grabDataResults["url"] . "," . $grabDataResults["county"] . "," . $grabDataResults["paperco"] . "," . $grabDataResults["date"] . "," . $grabDataResults["notice"] . "," . $grabDataResults["id"] . ")"; 
} 

mysqli_stmt_close($stmt); 

mysqli_close($connect); 
} 

Malheureusement, ce

est ce que je reçois de la sortie:

1 Row inserted. 0 Error: 

Pas d'erreur imprime réellement et la ligne est en inséré. Cependant, quand je navigue vers ma base de données, et regarde les valeurs qui ont été stockées .. Ils sont tous vides. Les sorties echo ceci:

(http://www.publicnoticeads.com/az/search/view.asp?T=PN&id=31/7292017_24266963.htm,Yuma,Sun (Yuma), The,2017/07/30,, 24266963) 

Je sais donc que toutes les variables contiennent quelque chose, sauf pour la variable $notice qui est détruit par ma cleanData() fonction pour une raison quelconque.

Answer 1

Vous devez lier les données après l'extraction et avant de l'exécuter ...

$loopLength = 1; 

for($v = 0; $v < $loopLength; $v++){ 
    $grabDataResults = grabPageData($URLs[$v], $v); 

    mysqli_stmt_bind_param($stmt, 'ssssss', $grabDataResults["url"], 
      $grabDataResults["county"], $grabDataResults["paperco"], 
      $grabDataResults["date"], $grabDataResults["notice"], 
      $grabDataResults["id"]); 

    mysqli_stmt_execute($stmt); 
    printf("%d Row inserted.\n", mysqli_stmt_affected_rows($stmt)); 
    printf("Error:\n", mysqli_stmt_error($stmt)); 
    echo "(" . $grabDataResults["url"] . "," . $grabDataResults["county"] . "," . $grabDataResults["paperco"] . "," . $grabDataResults["date"] . "," . $grabDataResults["notice"] . "," . $grabDataResults["id"] . ")"; 
} 

Answer 2

L'erreur principale que je peux voir sur votre requête, est la requête elle-même. Vous utilisez un INSERT INTO avec des champs et des valeurs séparés. Mais tu oublies d'utiliser la pharentesis sur les valeurs.

Rappelez-vous, l'utilisation d'INSERT INTO sont les suivantes:

First option: 
INSERT INTO table field1 = value1, field2 = value2; 

Second option: 
INSERT INTO table (field1, field2) VALUES (value1, value2); 

De plus, rappelez-vous d'échapper à tous les domaines et de la valeur pour éviter d'autres erreurs: Exemple:

First option: 
INSERT INTO `table` `field1` = 'value1', `field2` = 'value2'; 

Second option: 
INSERT INTO `table` (`field1`, `field2`) VALUES ('value1', 'value2'); 

Si vous utilisez pilote mysqli, pour plus de sécurité, vous pouvez utiliser des instructions préparées, pour obtenir vos valeurs automatiquement échappées. Dans ce cas, la syntaxe de la requête sont les suivantes:

First option: 
INSERT INTO `table` `field1` = ?, `field2` = ?; 

Second option: 
INSERT INTO `table` (`field1`, `field2`) VALUES (?, ?); 

En outre, au lieu d'utiliser mysqli_query(), vous devez utiliser mysqli_prepare(), mysqli_bind_param() et mysqli_execute(). Vous pouvez vérifier plus de données sur leur syntaxe ici: http://php.net/manual/en/mysqli.prepare.php

Au moins, vous pouvez utiliser la fonction mysqli_real_escape_string() pour obtenir votre entrée correctement échappée et vérifiée. Vous pouvez vérifier la documentation de cette fonction ici: http://php.net/manual/en/mysqli.real-escape-string.php

Answer 3

Votre code est correct. Juste vous devez ajouter() querystring Vous devez également supprimer ; à partir de la fin de la chaîne de requête. retirer SO condition suivante autre

else{ 
    $queryString .= ";"; 
} 

changement que vous requête comme:

$query = "INSERT INTO PublicNoticesTable (url, county, paperco, date, notice, id) VALUES (" . $queryString . ")"; 

En outre, il convient d'utiliser instructions préparées pour empêcher des injections sql