Jak w temacie, w jaki sposób to zrobić ?

kod wygenerować potrafię, dodać go do bazy o dziwo też. Ale ponieważ tego ma być dokładnie milion, to dodanie tego w ten sposób:

[PHP] pobierz, plaintext 
 
$kod = generujKod();
 
$istnieje = sprawdzCzyKodIstniejeWBazie();
 
if($istnieje)
{
   dodajKodDoBazy();
}
 
[PHP] pobierz, plaintext 

Moim zdaniem jest nieco kiepskim pomysłem.

Myślałem o tym, by generować powiedzmy 100 kodów i sprawdzać, które z nich istnieją, myślę,że takie hurtowe wysyłanie pójdzie nieco szybciej.

A co Wy proponujecie ?

A może tak:

[PHP] pobierz, plaintext 
$kod = sha1( time().microtime().''.($jakasLosowaLiczba * $jakasInnaLosowaLiczba / $jakasJeszczeInnaLosowaLiczba) );
[PHP] pobierz, plaintext 

Potem to puszczasz w pętli która wstawia to do bazy

To co masz z funkcji hashującej możesz w dowolnej kolejności mieszać, a kody zawszę będą mieć 40 znaków i będę na 99.(9)% unikalne

Pisałem, że kod potrafię wygenerować. I zrobię to innym sposobem (choćby dlatego, że chce mieć też duże znaki, których sha1 chyba nie posiada)
Problem jest w tym, żebby to wszystko wprowadzić do bazy.

Tablica w php chyba nie przetrzyma miliona rekordów (chyba, że się mylę);

Albo możesz też zrobić zapytania typu:

[SQL] pobierz, plaintext 
INSERT INTO kody VALUES ('sfdwfw'), ('wfwfe'), ('wefegf');
[SQL] pobierz, plaintext 

a myslales o przepuszczeniu tego przez pętle for i dodawac np po 10000 rekordow do bazy .?

Aby takie zapytanko wygenerować, musze mieć najpierw tablicę z tymi kodami.

Moja super maszyna za pomocą mojego super kodu w PHP, jest w stanie wygenerować jakieś 32k kodów w ciągu pierwszej minuty, zapisując je do tablicy i sprawdzając czy taki kod już istnieje. W kolejnych minuatach będzie pewnie trochę mniej generowanych kodów, bo sprawdzanie (za pomocą in_array) czy kod już istnieje będzie coraz wolniej działało wraz ze wzrostem elementów tablicy. Dlatego poszukuję lepszego rozwiązania.



Myślałem (przecież nawet o tym pisałem) ale wtedy musiałbym łączyć się z bazą i sprawdzać czy kod istnieje, co chyba trwa więcej niż sprawdzenie tego w tablicy php. Z drugiej strony, nie wiem czy jest możliwe utworzenie tak dużej tablicy

Jeżeli zależy ci na czasie to wymyśl taki algorytm tworzenie kodów, żeby się nie powtarzały.
Potem pętla na zasadzie takiej

[PHP] pobierz, plaintext 
$q = 'INSERT INTO kody VALUES ';
for($i=0; $i<1000000; $i++) {
$q .= '("'.generujKod().'"),';
}
$res = $db->query($q);
[PHP] pobierz, plaintext 

Do funkcji generujKod możesz przekazać licznik pętli i na podstawie jego utworzyć kod

Niestety, takiego algorytmu stworzyć nie potrafię (który byłby nie do rozszyfrowania przy okazji)

No to jak w końcu

Algorytm najlepiej zrób na podstawie time, microtime, rand. Potem to wszystko opakuj w sha1. Później możesz tego hasha przetransformować tak, żeby co losowo wygenerowany numerek (albo licznik pętli) robiło większą literę

1.Pisałem, że potrafię wygenerować losowy ciąg znaków (co nazywałem kodem), a nie potafię stworzyć algorytmu do generowania kodów, które by się nie powtarzały.

2. A jak zagwarantujesz, że Twój sposób zwróci mi milion unikalnych kodów ? Pozatym, długość tego mojego kodu ma być równa 10.

Kiedys na necie znalazlem taki oto kodzik do tworzenia kodow, moze Ci się kolego przyda

[PHP] pobierz, plaintext 
$letters = 'abcdefghijklmnopqrstuvwxyz';
$digits = '0123456789';
 
function password_letters($length) {
        global $letters;
        $array = str_split( $letters );
        shuffle( $array );
        return implode( array_slice( $array, 0, $length ) );
}
 
function password_digits($length) {
        global $digits;
        $array = str_split( $digits );
        shuffle( $array );
        return implode( array_slice( $array, 0, $length ) );
}
 
function password_combined($length) {
        global $letters, $digits;
        $array = str_split( $letters.$digits );
        shuffle( $array );
        return implode( array_slice( $array, 0, $length ) );
}
 
$haslo = password_combined(6);
[PHP] pobierz, plaintext 

To spytam trochę inaczej. Mogę dać do tabeli w bazie klucz UNIQUE.

Czy jest możliwość, wykonania zapytania typu

[sql]INSERT INTO `codes` VALUES ('kod1'), ('jakiś inny kod'), (...)[/code]
Załóżmy, że ma on 10k kodów i jeśli powiedzmy powtórzy się 100 kodów, to zamiast errora "duplicate entry..." po prostu pominie te duplikaty i doda 9900 kodów ?
//edit:: już wiem

edit://
@up, dzięki za chęci, ale się nie przyda.

Mój mały algorytm tworzy co prawda 40 znakowe kody, ale na pewno będę one unikalne, bo są zależne od czasu i kilku liczb losowych oraz ewentualnie licznika pętli

Co do tego, żeby kody miały tylko 10 znaków to już trudniejsza sprawa, ale jeżeli mają one być do potwierdzenia rejestracji konta to 40 a 10 znaków nie robi takiej różnicy, bo i tak kod jest wklepany w linku

Nie mają być do potwierdzenia rejestracji konta, uwierz mi, że do tego celu nie potrzebował bym generować tyle kodów jednocześnie.

Możesz w takim razie utworzyć zmienną zawierającą wszystkie znaki dostępne w kodzie (a-z A-Z 0-9) i w pętli 10 razy za pomocą liczby losowanej w każdej iteracji wyciągać jakiś znak w tej zmiennej. Wadą tego rozwiązania jest możliwość powtórzenia się kodów.

Ale kombinujecie. Tworzysz unikalną kolumnę w bazie, a przy wrzucaniu swoich rekordów ignorujesz duplikaty w sposób:

[SQL] pobierz, plaintext 
INSERT IGNORE INTO `nazwa_tabeli` ...
[SQL] pobierz, plaintext 

A najlepiej jakbyś zrobił sobie formularz do wpisania ilości generowanych rekordów, bo przyda się później. Pod koniec skryptu pobierasz ilość wszystkich rekordów:

[SQL] pobierz, plaintext 
SELECT COUNT(`id`) AS `ile` FROM `nazwa_tabeli`
[SQL] pobierz, plaintext 

i wyświetlasz sobie ile masz już rekordów, dzięki temu będziesz wiedział ile wpisać w pole formularza jeszcze.

Drogi Kolego zamper. Pisałem w pierwszym poście, o tym że jestem w stanie wygenerować sobie kod (w którymś z następnych postów dodałem, że ma mieć 10 znaków). I z mojego pierwszego postu wynika, że aby utworzyć za pomocą mojego sposobu milion unikalnyh kodów, muszę za każdym razem sprawdzać, czy wcześniej takiego kodu nie wygenerowałem. Zauważ więc, że Twój post nic nowego nie wnosi do tematu.


Zrobiłem kod, który generuje 1000 kodów, następnie wrzuca je do bazy, a baza danych zapisuje tylko te, których jeszcze nie ma w bazie (za pomocą INSERT IGNORE). Działąło by super.... tylko, że baza danych przyjmuje tylko 32768 rekordów. Czy jest na to jakiś sposób ?


@up. O tym, że dowiedziałem się, że jest coś takiego jak INSERT IGNORE dowiedziałęm się jakieś 20 minut temu (patrz post nr 12)

Za MySQL Change Log

Jakiego typu masz pola w bazie? Może używasz typu który ma ograniczenia?

Nie zauważyłem tego

Przyjmuje Ci MAKS 32768 rekordów, czy w jednej paczce tyle? Bo nie do końca zrozumiałem to co napisałeś. Miałem w sumie wrzucić tutaj przykładowy kod do poprzedniego postu, ale nie wiem czy jest Ci jeszcze potrzebny.

id to big int

typ bazy to MyIsam, przed chwilą miałem innoDb, ale na obu mam ten limit.

Paczki mam po 10k

Baza ma limit ~33k (2^15)

Nie wiem co to za limit, ja mam testową tabelę z polami id(unsigned int) i kod(varchar:10) i mam już ponad 500 tys. rekordów.

a jaki typ bazy danych ? (jak robię nową bazę to mam "mechanizm składowania"

InnoDB

Ograniczenia serwera? Gdzie testujesz?

testuje na localu. Jakimś cudem udało mi się upchać ~83 k rekordów. (tzn. jak sortuję po id DESC, to największe id to właśnie koło 83k)

Takie zapytanko

[SQL] pobierz, plaintext 
SELECT count( id ) 
FROM `codes` 
[SQL] pobierz, plaintext 

Pokazuje mi jednak 32768

Wszystko testuje na swoim localu najnowszy xampp (tzn. najnowszy był jak go ssałem ) + windows xp sp3

Spróbuj tego (chociaż nie wiem co za różnica, ale może coś źle robisz):

[SQL] pobierz, plaintext 
CREATE TABLE IF NOT EXISTS `kody` (
  `id` int(10) UNSIGNED NOT NULL AUTO_INCREMENT,
  `kod` varchar(10) NOT NULL,
  PRIMARY KEY (`id`),
  UNIQUE KEY `kod` (`kod`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8 AUTO_INCREMENT=1 ;
[SQL] pobierz, plaintext 

W core.php połączenie z bazą etc.

[PHP] pobierz, plaintext 
<form action="" method="post">
    <input type="text" name="ile" /> <input type="submit" value="ok" />
</form>
<?php
if(isset($_POST['ile']))
{
    require_once 'core.php';
 
    $query = "INSERT IGNORE INTO `kody` (`kod`) VALUES ";
 
    for($i = 0; $i < $_POST['ile']; $i++)
    {
        $query .= "('".substr(hash('sha1', microtime()), 0, 10)."'), ";
    }
 
    $query = trim($query, ', ');
 
    $query .= ';';
 
    $result = mysql_query($query) or die(mysql_error());
 
    $ile = "SELECT COUNT(`id`) as `ile` FROM `kody`";
    $ile = mysql_query($ile);
    $ile = mysql_fetch_assoc($ile);
 
    echo '<br /><br />W bazie jest juz: '.$ile['ile'].' rekordow.';
}
?>
[PHP] pobierz, plaintext 

yeah, udało się

Taka funkcja

[PHP] pobierz, plaintext 
	function generujKod()
	{
		$str = '';
		for($i =0; $i<10; $i++)
		{
			$str.= $this->chars[rand(0,57)];
		}
		if(!in_array($str,$this->codes ))
		{
			$this->codes[] = $str;
		}
	}
[PHP] pobierz, plaintext 

Generowała ~16k unikalnych znaków, więcej nie chciała.

funkcję rand() zamieniłem na

[PHP] pobierz, plaintext 
(microtime()*rand(1,99999))%58
[PHP] pobierz, plaintext 

I teraz jest gites, dociągnąłem do miliona

A po co w tym masz jeszcze sprawdzanie czy w tablicy znajdują się już takie wartości? Pisałem o tym wcześniej i też w moim przykładzie nigdzie nie używam tablic, a to dlatego, że robisz bezsensowną pracę. Masz nałożone UNIQUE w tabli, więc sprawdzanie tablicy po stronie PHP już nie jest potrzebne.

Ponieważ na początku przjąłem inną koncepcję (tzn. wygenerowanie kodów wszystkich i następnie ich załadowanie) potem się to zmieniło, a kod został. To wielkiego znaczenia nie ma, bo wygenerowaie tych kodów miałó być jednorazowe.