Mslim da ne valja jos uvek.
Ako bas oces JSON onda MongoDB

mysql podrzava insert sa vise vrednosti tako da sve mozes stavke uneti sa istim. JSON pakujes samo onda kada neces praviti nikakav upit po stavkama. Zamisli zapravo da stavis u varchar polje ceo json, to ti je to. Znaci overhead je prilicno veliki ako treba da dekodiras json pa onda vrsis upit,
i to bi radilo sporo.

Ima tu još jedan problem, i to veoma gadan :)

Podaci koji stoje unutar JSON kolone ne mogu da imaju foreign ključ! Znači nije ih moguće vezati relacijom za neki drugi podatak. Tako ispada da se u to polje može upisati "šta hoćeš" i nema načina sa MySQL server prilikom inserta radi proveru. Ako bih, po mojoj teoriji, unutar JSON-a držao stavke nekog dokumenta, svaka stavka bi imala recimo ID artikla koji ne bi bio ni u kakvoj vezi sa tabelom artikala. I to je baš bezveze.

Čudi me da se ni u novoj verziji MySQL-a nisu bolje potrudili pa da ovo podrže. Ovako taj JSON može da se koristi samo za neke manje bitne stvari, što kaže Branimir, više kao neka napomena nego mesto gde stoje ozbiljni podaci. Baš šteta jer mislim da taj koncept ima perspektivu.

noSQL (JSON) format je pogodan za podatke koji nisu relacione prirode i urpavo su takve strukture. Ne valja relacione podatke prebacivati u noSQL jer se onda gube sve pogodnosti relacionog modela.

Nije to pitanje ili-ili nego korsititi onakvu strukturu koja odgovara prirodi podataka sa kojima se radi.

Da, to je jasno, samo je pitanje što se nisu malo potrudili pa da celu stvar malo podinu na veći nivo. Koliko mi je poznato, davno sam gledao, MongoDB ima relacije za unutar JSON objekata. Ne vidim šta je ovima iz MySQL tima bio problem da dozvole definisanje ključeva nad poljima unutar JSON-a. Tako bih mogao da postavim da JSON key "artikal_id" bude foreign key i da se vezuje za tabelu artikala. I sada MySQL ima validaciju inputa JSON stringa stim što se proverava sintaksa a u ovom slučaju bi se proveravao i dotični ključ. Prosto mi je neverovatno da ovako nešto banalno nisu mogli da naprave. Dobili bi moćnu bazu gde bi korisnici mogli da imaju "mešoviti" model rada sa bazom, SQL i NoSQL, što sada nemaju ni MySQL i MongoDB.

Verovatno ce vremenom napraviti. MySQL ekipa svojevremeno nije htela da prihvati neke mnogo važnije koncepte pa je na kraju ipak legla na rudu.

Nisam nešto mnogo radio sa noSQL pa verovtno i ne razumem sve to najbolje, ali sam malo gledao kao to MongoDB radi jer smo radili jedan projekat koristeći ga i imam utisak da to što on radi je u stvari silovanje. Prosto nQSL struktura nije pogodna za neke stvari. Neki koncepri su po prirodi relacioni i da bi to radili optimalno i podaci treba da budu relacioni,

ovako da krenemo ispocetka


koliko oces, ako hoces performanse nemoj da koristis JSON (vazi za svaki rdbms ukljucujuci mysql)


format je takav da moze lakse da se parsira json drvo nista drugo, i dalje moras da radis full table scan



ne dobija se nista vezano za jednostavniji upis u bazu a gubi se uzasno mnogo na performansama kada pricamo o tome da je sa druge strana "validna aplikacija", kada sa druge strane imas polutadiran javascrip klijent kome je relativno svejedno onda dobijas na upisu a reporte svejedno ne radis na takvom klijentu pa je za citanje nebitno



ne resava ni mongo te probleme


nesto je manji overhead nego za varchar + imas funkcije koje sluze za manipulaciju json-om ali generalno da, json ne sluzi da radis upit po njemu


pa vidi, to je poenta json-a ... nemas strukturu, mozes da upises STA OCES u to polje, kako ocekujes foreign key iz polja koje nema strukturu u koje mozes da upises sta oces?

id artikla upises u normalno polje u istoj tabeli

nema sta to "bolje da se podrzi", gde si video foreign key sa podatkom koji je mozda tu a mozda nije
ako pogledas neke nosql-ove koji to kanda podrzavaju videces da moras da definises da to polje postoji a oni ga cuvaju kao posebno polje (i indexiraju) kao rdbms, znaci ako vec znas da uvek moras da ga imas onda ga upisi po tipu i imenu u red kao regularno polje a ne kao deo jsona


pa podigli smo za red velicine u odnosu na sve ostale + je funkcionalnost bliza standardu sada nego i na svim ostalim nosql bazama, mi implementiramo vise standarda nego bilo ko drugi trenutno (ne, da je to nesto preterano bitno ali ako pricamo o "Vecem nivou", u odnosu na minimalnu podrsku do podrske koja je bliza full standardu od svih ostalih je veliki korak).

to sto neki nosql daje mogucnost da definises obavezna polja u jsonu te pravi index nad njima je njihov dodatak za relacione podatke, mi vec imamo relacione podatke te se ocekuje da te polje upises u relacioni deo tabele.. teoretski mi bi mogli da dodamo vidljiva ili hidden polja koja bi ti kreirao sa extended create gde bi rekao u mom json-u mora bude polje x,y,z koje je u relaciji ovako ... i onda kad radis insert u json mi auto da parsiramo to i da popunimo ta polja .. no sto bi to radili kada je to mnogo jednostavnije uraditi na klijentu, najcesce i brze uraditi na klijentu (ti na klijentu vec tacno imas te vrednosti ne mora ih parsiras) pri insertu gde se daje mnogo veca sloboda na taj nacin .. svaki drugi nacin bi samo nepotrebno komplikovao stvari ... a ako oces sa klijenta automatski, ti uvek mozes da napises stored proceduru za insert koja ce ti popuniti auto ta polja iz jsona u relaciona polja, ili trigger ili ...




ne mysql ekipa nego Monti, on je covek bio protiv relacija, protiv innodb-a, protiv subselecta, protiv right joina, protiv materialized tabela, protiv testiranja, protiv open source-a i tako dalje i tako dalje .. ekipa kao ekipa je uvek za sto vise fancy opcija i mogucnosti i kako je Monti otisao doticne se dodaju nekim redom i brzinom koja je moguca sa kolicinom ljudstva koje imamo..

Namera JSON nije da cuvas podatke, vec da ga koristis kao externi interfejs. A ako dobro definises json, nema usporenja. To je sa ciljem da ne bi externim izvorima morao da omogucavas pristup bazi, vec samo api json.

json api je razlicit od json tipe podataka (mislim da je op explicitno
mislio na tip podataka obzirom na ime teme :D )... sto se json api-a
tice mysql trenutno od svih sql servera ima najjacu podrsku, overhead je
nikakav, radi 1/1 ... i za razliku od json tipa, json api je prilicno
korisna stvar :D

Da, upravo sam na ovo mislio. Prenost JSON-a je što je višedimenzionalan i što njegov ekvivalent u bazi predstavlja više tabela povezanih relacijama. Tako onda ispada da JSON koji dobijem od klijenta moram da razlažem, pretvaram u SQL komande i raspoređujem po tabelama a onda, u obrnutom smeru, da skupljam podatke po tabelama, sklapam u JSON i vraćam nazad. Zato i kažem, zar ne bi bilo logično da se i baza podataka malo "prilagodi" scenarijima realnog sveta pa da omogući nešto što bi bilo korisno? Naravno, ne smatram da ovim treba da se odustane od koncepta relacionih podataka već da se JSON podrška ponudi kao DODATAK pa onda da svako može da kombinuje sistem prema svojim potrebama.

Dakle, radilo bi tako da prilikom definisanja JSON tipa podaka, definišeš i njegove ključeve i relacije sa drugim podacima (kako prvim tabelama, tako i drugim JSON-ovima) i onda baza da vodi računa o integritetu (što joj je i posao). Naravno da to sve može na klijentu ali je besmisleno. Ako bi želeo da imam stavke fakture unutar JSON-a, malo je besmisleno da na klijent strani prvo povučem iz baze spisak ID-ova artikala, proverim JSON objekat i onda kad se uverim da je sve ok, pošaljem ga u bazu. Onda šta će mi baza ;)

Ideja iza cele ove priče je da se korisnici (koji to žele naravno), manje bave modeliranjem baze već da db server to uradi za njih. Dakle ako serveru pošaljem JSON određene strukture, koji je naravno višedimenzionalan, prethodno bazi dam neke smernice (koja polja su šta i koji su ključevi), da sama baza napravi sebi interne tabele sa relacijama gde će sve to da vodi. Drugim rečima, to bi zapravio bio jedan layer gde bi se podaci i čuvali interno u nekakvim virtuelnim tabelama a korisnicima predstavljali u vidu JSON objekata.

Naravno, opet ponavljam: Poenta ovoga nije da se zamene relacione baze i modeliranje. Mislim da je to neophodno da postoji i uvek će se koristiti, već da postoji alternativa pa da imamo veći izbor. Evo napraviću malu analogiju: ako fotograf hoće da pravi vrhunske slike, koristiće manuelna podešavanja na aparatu ali opet, ako je svestan da će u određenoj situaciji automatika više nego odlično odraditi posao, siguno neće biti mazohista pa da se petlja sa podešavanjima već će koristiti auto mod.

pa sad, "visedim.." je po meni pogresna definicija ovde, json je samo nacin/format zapisa drvenaste strukture, to je obican string, ovi razni nosql-ovi cuvaju key/value znaci ne razumeju strukturu tog drveta, tj i za njih je to obican string isto kao i za mysql ili psql ... jedini db server koji razume kako treba tu strukturu je ldap (razne verzije istog)... a najbrzi ldap na svetu je implementiran obicnom flat tabelom u ndbcluster-u ... znaci celo drvo je jedna flat tabela obicna.. mozemo da pricamo o prednostima drvene strukture u odnosu na relacionu strukturu, i jedna i druga imaju svoje prednosti, ali kada pricamo o sql i nosql serverima oni ne je123 tu drvenu strukturu 2% vec ceo taj json posmatraju kao jedan "dokument" i to je to... to je jedan string value... to sto imas par helper funkcija za parsiranje tog stringa je potpuno nebitno, i za jednu i za drugu seriju db servera to je string... svako ko misli da je drugacije ne razume kako db serveri rade


to iz onoga sto sam ja napisao nisi mogao da shvatis ako si procitao ono sto sam ja napisao pazljivo a ne po dijagonali


o mysql-u moze se prica sta oces ali to je jedini sistem koji je baziran samo na realnim scenarijima, ono sto se koristi to je uvek bilo implementirano a filozofija, teska matematika, i koncept koji koristi 1 promil developera je uvek ostavljan za posle (sada je i vecina toga implementirano u 8.0 posto je bilo prostora)... tako da to sto ti mozda ne razumes koncept ili ga posmatras iz ugla 1 promila korisnika ne znaci da je to "realni svet" :D vec da ti ne znas kako se to u realnom svetu implementira :D


nece u realnom svetu developer da definise tip i zeli da moze da ga promeni bez pipanja baze, to su "javascript developeri" koji nemaju pojma sta je to index


ne mozes iz "stringa" da vodis racuna o integritetu..
cela poenta je u tome, ako imas podatak koji je relacioni cuvaj ga u relacionom delu tabele, json nije tip tabele, to je tip polja znaci ti mozes da imas
id int, id_knjige int, id_biblioteke int, metadataoknjizi json
u metadataoknjizi mozes da imas negde i polje id_knjige i id_biblioteke ali ta dva polja izvuci u tabelu i koristi kako treba, ako neces sam svaki put da radis to, kao sto ces u mongu da definises da su ta dva polja indexirana tako u mysql-u uz definiciju tabele napises i triger (i jedno i drugo radis jednom) koji ce ti na insert/update da izvadi (imas json helper funkcije) tu datu iz matadataoknjizi i upise je u id_knjige i id_biblioteke ... (potpuno istu stvar radi i mongo, ne indexira on nod u json stablu vec kopira tu vrednost u obicnu tabelu sa btree indexom u kojoj je taj "dokument" (json) jedna vrednost a svi ti indexirani nodovi po jedna ..


ako to zelis onda koristis pogresan alat i vrlo verovatno se bavis pogresnom profesijom


za te "korisnike" koji ne razumeju rdbms i ne umeju da modeliraju bazu i ne zele to da nauce je i napravljen mongodb, nema takav sta da trazi sa rdbms-om



kao neko ko se 20+ godina bavi fotografijom mogu da ti kazem da ti analogija nema nikakvog smisla, tj. potpuno je pogresna.. meni, koji sam daleko od profi fotografa, aparat stoji zakucan na M (manuelni nacin rada) i odatle ne mrda, podesavanje aparata za svaku sliku traje milisekundu i potpuno je prirodno i logicno i potreba za "auto" (idiot) modom ne postoji... potpuno isto kao i kad modeliras bazu, kada znas kako se to radi ne pada ti na pamet da pustas bilo kakvu automatiku da to radi umesto tebe... nema tu nikakvog mazohizma, ili znas ili ne znas, ako ne znas onda trazis da ti sto vise posla uradi neka automatika, no to ne znaci da tako treba, nego da ne znas

btw @saja, mislim da je jasno da ne mislim nista lose i da ne napadam nikoga... to je sve samo moje misljenje, tvoje da se slozis ili ne sa njim

Bogdan ti je rekao šta treba da se radi sa stanovišta nekoga ko je razvijao DB, ja kao developer mogu samo da potvrdim.
Sve što stigne spolja kao JSON, XML, SWIFT ili bilo koja druga nestrukturisana "drvenasta" struktura, čuva se u bazi samo kao dokument, log i NE PRETRAŽUJE se.
Ono od struktrurnih podataka, staviš u tabelu, definišeš indekse kako treba, a originalnu poruku čuvaš samo kroz referencu na ulazni podatak, ako tamo ima nešto što nisi "strukturisao".
Tako rade i DMS, čuvaju dokument, a u relacionoj tabeli drže ključne reči, metapodatke o dokumentu, a kada mora, ide se na full text search, ako ne postoji podatak u metapodacima.

Kako izgleda ta tabela ? Znam da se npr. rdf graph cuva kao triple store.. json bi mozda isao name, value i neki pointer na parent ?

@dejanet, izgleda uber jednostavno

f1,f2,f3,f4,f4.....fmax

i ima primary key (f1,f2,f3....fmax)

sva polja su varchar

i to jeto .. nema velike pameti

ima ogranicenje na dubinu drveta, jer nemas gde da upises nista dublje
od fmax i to je to... obzirom da se ldap najvise koristi (oni su ga i
smislili) u telekomu njima  dubina od 8 uglavnom zavrsava posao posto
oni svejedno sharduju datu .. a 8 je relativno sitna vrednost za max :D
za bilo koji rdbms

index na mysql-u ide uvek a,* pa a,b,* pa a,b,c,* etc ... tako da je
idealan za ldap upite jer ti ne pravis nikad ldap upit koji je a=x, b=y,
c=*, d=z .. vec uvek imas pocetak i trazis sve "ispod" njega tako da su
upiti bezobrazno brzi (pk upit je svaki) ... imas malo "waste of space"
ali to se do jaja komprimuje ako ti je frka za space

Thanks man

Mislim da nije dobar primer kada se koristi JSON tip podataka gde imas dokument i gde imas stavke.
Meni se JSON tip podataka pokazao koristan kada npr imas formu sa dosta "on-off" elemenata pa ne moras za svaki element da pravis kolonu.
Mogu tu da se obace i ostali elementi forme samo je bitno da nema potrebe za nekom pretragom po tim elementima vec samo obicno cuvanje podatka.
Korisno mi je bilo kada sam imao neki proces koji je dobijao X poruka i onda sam te poruke cuvao u json formatu. To lici na ovo dokument-stavke ali je opet obicno citanje-pisanje i nista vise.

Da, to je i meni jasno, nažalost, i pokušao sam da pokrenem diskusiju u pravcu da se poveća vrednost tog formata ali đoka, koliko vidim, nema se mnogo razumevanja. Dok ja ovde pokušavam da "vučem ka napretku" kako bi baze "razumele" objektne podatke, ovde se cela stvar banalizuje tvrdnjom kako je to samo običan string ili dokument bez ikakvog ulaženja u suštinu objekta. Kako bez volje nema ni napretka, tako mi se čini da ćemo duže ostati na relacionim bazama o kojima inače nemam ništa protiv, samo mislim da sve to može bolje.

Relaciona baza treba da ima jednostavan i jasan interfejs i da izvršava komande pouzdano i što brže. To dolazi u koliziju sa željom da baza bude "pametna" i da razume "objektne podatke" (btw JSON nema veze sa objektima, iako mu ime to sugeriše).

Relaciona baza treba da ima jednostavan i jasan interfejs i da izvršava komande pouzdano i što brže. To dolazi u koliziju sa željom da baza bude "pametna" i da razume "objektne podatke" (btw JSON nema veze sa objektima, iako mu ime to sugeriše).

Na kraju krajeva, uvek može da se napiše proizvoljno "pametan" API layer iznad relacione baze, pretpostavljam da ih već ima po netu kolko hoćeš.

Takođe, JSON se vremenom nije baš najbolje pokazao za promet bogato struktuiranih podataka, GraphQL je the new sh*t.

(Izvinjavam se, greškom sam ostavio dve poruke umesto da editujem prvu).

Evo malo da ilustrujem poentu.

Ako u JSON kolonu ubacim string {"name":"John", "age":31, "city":"New York"}, to mu dođe ekvivalentno kao da sam u dotičnu tabelu dodao još 3 kolone, zar ne? Ovo bi database server mogao da interpretira tako što bi dodao te 3 kolone, virtuelne naravno, ali sa svim mogućnostima koje imaju i prave kolone.

Zatim, ako JSON ima sledeću strukturu (skidam primere sa neta):



To bi onda značilo da sam u glavnu tabelu dodao 2 kolone i da imam još jednu tabelu "cars" koja ima 3 kolone i ona je relacijom vezana za glavu tabelu. Po istom principu bi database server mogao da doda kolone, napravi virtuelnu tabelu i poveže ih u relaciju. Sve sam, na osnovu strukture JSON-a.

Koja je poenta? Pa da database server ne mora JSON da shvata kao dumb string već podatke može da rasčlanjuje po tabelama i da omogući korisniku podjednake performanse za obradu kao i u slučaju klasičnih relacionih tabela.

Ne znam dal je to posao database servera ili nekog frameworka sa strane...

Gledaj, to je JAKO puno heavy lifting-a, sve sa ciljem da ti ne mislis nista. Pri tom, DB je nesto sto, generalno, ne skalira sjajno horizontalno, vec uglavnom vertikalno. To sto ti zelis bi, eventualno, mogao neki ORM da ti obezbedi, a nikako baza.

Dodatno, te translacije nisu bas super-proste da se uvek upare, posebno kad u nekima fali neko polje. Sta onda? Da li praviti dve razlicite grupe tabela, ili trpati sve u iste tabele, ili hoces da svaka ide u svoju schema-u.... ? Previse je to "pameti" za upucati u bazu cak i da nije heavy lifting, a jeste.

Mogucnost da se ima document storage je ziva zgoda, jer mozes da izbacis mongo i slicne sisteme iz price, ako ti ne trebaju neke specificne varijante. Upit po json-u je i mongo-u neka olap-like varijanta koja vuce tezak full table scan i realno je i/o dependant. Ima smisla ponekad, ako mora, i samo za izvlacenje specificne date, nikako za redovan rad i updates. :)

@S A J A, jasno mi je to sto hoces, ali ti bukvalno hoces sebi da ustedis ovu liniju koda: db.Accounts.Add(JsonConvert.DeserializeObject<Account>(json))
A ne bi je ni ustedeo, samo bi je skratio.


Da se razumemo, ne kazem da treba spucavati ovako objekte u bazu direktno iz json-a vec svakako treba raditi validaciju ali ako je radis, onda si vec parsirao i obradjivao taj json, nema razloga da ne posaljes deserijalizovan objekat u bazu nego json string.
To sto bi ti hteo da bude implementirano u bazi je mnogo toga sto ne postize nikakvu ustedu.
Da ne kazem da za projekte kakve ti obicno radis, ne moras ni da pipnes bazu vec mozes da radis EF Code First.

Sajo. To sto ti hoces nije posao baze podataka. Ti zapravo zelis da prosledis JSON bazi a on da pravi virtuelne kolone. To je jako skupo.
Kako bi radio onda update, insert, delete? Npr najjednostavniji DELETE WHERE car='bmw' bi znacilo da zakljucava sve relacije, pa vadi sve key-eve iz virtualnih tabela, pa onda delete odradjuje na stvarnoj tabeli, zatim otkljucava relacije i opet kreira virtualnu tabelu.
Ovo je samo jedan najjednostavniji primer koji je jako skup.
Ne vidim gde je vrednost ove ideje kada ti sem upisa nista drugo ne radis kao da je json vec kao da su obicne tabele? Znaci ti niti vidis da je json, niti radis kao da je json niti ga gledas kao json a zelis da se pamti kao json?
Sta te briga u kojem formatu i kako se pamti? To nije tvoj posao. Bitno ti je da se to odradi kvalitetno.
Zasto nije jednostavnije taj json upisati u odredjenoj db strukturi i raditi sta zelis i onda ako zatreba iscitati i pretvoriti u json?
Ti ili tvoj FW ili ORM treba da poseduje tu funkcionalnost da pri upisu raspodeli json u tabele i da mozes odredjen rezultat querija pretvors u json.
To su dve vrlo jednostavne funkcije sa jedne strane i sa druge strane moze biti vrlo komplikovano i tesko za db.

Ovo što ti želiš nije posao baze nego data sloja u aplikaciji.

ne vuces ka napretku vec odbijas da razumes kako se nesto radi "kako treba". ti imas jedan poluprimer gde bi ti "pamet baze" ustedela 10 minuta posla utrosenih jednom i nikad vise. ta ista "pamet" bi osakatila feature (jer ostalih milijardu primera vise ne bi radilo) i onemogucila stotine hiljada drugih korisnika da sa tim rade nesto pametno a desetine hiljada drugih korisnika navela na pogresan nacin da rese realan problem... kao sto si ti sam sebe vec naveo da pogresan nacin da se resi problem pa sad ko martin po diviziji ne pustas jer mislis da ti je ideja do jaja, a nije

kao sto je vec napisano, to o cemu ti pricas se resava drugacije, ili tako sto imas jedan layer na samoj bazi koji to resava (triger) ili tako sto to resavas na data manipulation layer-u u aplikaciji..

a sad, ako si i dalje ubedjen da to tako treba, i mysql i postgresql imaju odlicnu podrsku za json i open source su, zaradices ogromne pare ako to napravis da radi i dovoljno ljudi se slozi sa tobom da je to korisno tako da, go for it :)