node.js server

[reyou]

https://firebase.googleblog.com/2017/10/introducing-cloud-firestore.html?utm_source=email&utm_medium=email&utm_campaign=firestore_launch

https://www.youtube.com/watch?v=QcsAb2RR52c&feature=youtu.be
https://www.youtube.com/watch?v=l-qmNMlYn5g

[Emre333]

nosql filan kısa bir süre denedim. sonra huzur sql de diyip geri döndüm. şimdi en ufak şey için bile sql kullanıyorum çünkü bazen bir şey ekleyeceğin tutuyor o da düzgün çalışmıyor diğer db lerle. en azından sağlam sql bilmek lazım her türlü

[Kojiroh]

Huzur read/write segregation ve eventual consistency'de. Kur abi arkaya bi Postgres, koy önüne adam gibi bi API, yap write'ları onlara, bi şeyler kaydettikçe bi RabbitMQ'ya mesaj yap şunu yaptım diye, Akka gibi hayvani scale olabilen stateless adamlarla bu mesajları işleyip at bi Elasticsearch'e, read yapacağın durumlarda Elasticsearch'e, write yapmadan önce yapacağın business logic kontrollerinde de Postgres'e gel oh mis.

Eğer time series şeklinde yazabilirsen elinin altında raporlama tool'u da oldu. Vur Kibana'yı, baktır Elasticsearch'e, güzel dashboard'lar hazırla, oh mis. Hatta millet anlık olarak neler olup bittiğini görsün diye ofisin sağına soluna ekran koyup onları da bu dashboard'lara baktır bitti gitti. 1 sene öncesine giden 350 milyon kaydı 4 field üzerinden aggregate ettirip toplamsal karşılıklarını almak 35 ms çünkü.

Ha yok ben verilerimin asla bozulmamasını istiyorum diyosan ve gücün de yetiyosa bi adım daha öteye git, yapıştır CQRS ve event sourcing'i.

[Emre333]

Kojiroh said:

pm2 akar

yalnız bu hayvani bir şeymiş.

console loglarında max 15 satır görebiliyorum bu arada? nasıl arttırabilirim bunu?

edit: pm2 logs --lines 250

bu şekil çalıştı gerek kalmadı. yalnız alet baya iyiymiş.

[Emre333]

madem sql dedik, sqlite3 ile ilgili bir problemim var şu an da.

doru düzgün bir documentation yok, olanlar da tamamen obsolote olmuş durumda yahut çalışmıyor.

serialization, commit,rollback filan nasıl oluyor node.js de bilen varsa küçük bir örnekle anlatabilir mi? stakoverflowdaki örnekler sorunumu çözmedi.

[zeawee]

abi sqlite'da neden bu tip feature'lara ihtiyacın var?

[Emre333]

sqlite da neden mi commit ihtiyacim var? bunu anlamadim

[reyou]

surdaki dokuman cok guzel anlatmis bence.
https://www.sqlite.org/atomiccommit.html

[Emre333]

sorun bu dokumantasyondaki stilde çalışmamasından dolayı zaten :)

edit : ya da olay node un asenkronize yapısından kaynaklanıyor.

[reyou]

git'e koyabilirsin cok gizli bi proje degilse. ordan daha iyi anlasilir, sorun sen de mi, node da mi, driver da mi.

[zeawee]

Emre333 said:

sqlite da neden mi commit ihtiyacim var? bunu anlamadim

evet bu feature'lara ihtiyacın olmadığını düşünüyorum. özellikle sqlite kullanarak yarattığın bir sistemde. ayrïca sqlite, en iyi open source projelerden biridir. dokümantasyonunun kötü olduğunu sanmıyorum.

sql commit'e neden ihtiyacın olduğunu düşünüyorsun mesela? ne yapmaya çalışıyorsun?

[Emre333]

sqlite ı daha önce (mobil)android de mi kullandın yoksa node.js de mi?

node.js de neden commit ve rollback gerektiğini gösteren örnek kod koyucam.

[Emre333]

aceleten bir örnek yazdım burdan bakabilirsin. ki aşşağıda yazdığımdan daha komplike şeyler var.

router.post("/test",function(req,res) {


db.run("INSERT INTO table_test bla bla ",function(err){

if(err) res.send("error when inserting bla bla");

else{ // ilk inserti yaptın, successfull diyelim.

db.run("INSERT INTO table_test2 bla bla",function(err){

if(err) res.send("error when inserting bla bla 2 "); // burada fail yaparsa rollback lazım çünkü bir üsttekini database e kaydetmiş oluyor.

else

res.render("success.ejs",{ message: message});

});

}
});

});

[reyou]

kardes yani sqllite transaction diye aratinca 2. link te direk ornek cikiyor

http://www.sqlitetutorial.net/sqlite-transaction/

hic mi denk gelmedi bir ornek? yani bunun cozumu icin bu kadar beklemis olamazsin sanirim.

	BEGIN TRANSACTION;

	 

	UPDATE accounts

	   SET balance = balance - 1000

	 WHERE account_no = 100;

	 

	UPDATE accounts

	   SET balance = balance + 1000

	 WHERE account_no = 200;

	 

	INSERT INTO account_changes(account_no,flag,amount,changed_at) 

	values(100,'-',1000,datetime('now'));

	 

	INSERT INTO account_changes(account_no,flag,amount,changed_at) 

	values(200,'+',1000,datetime('now'));

	 

	COMMIT;

	

	

[reyou]

Burda da direk paketin kendisi var.

https://www.npmjs.com/package/sqlite3-transactions

[Kojiroh]

anam babam query yazmak yerine knex de kullanabilirsin, yarın öbür gün SQLite'tan kurtulmak istersen orda da işine yarayabilir.

	knex.transaction(function(t) {

	    return knex('table1')

	        .transacting(t)

	        .insert({ foo: 'bar' })

	        .then(function(result) {

	            return knex('table2').insert({ baz: 'quux' });

	        })

	        .then(t.commit)

	        .catch(t.rollback);

	})

	.then(function() {

	    res.render('success.ejs', { message: 'oldu' })

	})

	.catch(function(err) {

	    console.error(err);

	    res.send({ error: ... });

	});

	

	

[Emre333]

reyou said:

kardes yani sqllite transaction diye aratinca 2. link te direk ornek cikiyor

http://www.sqlitetutorial.net/sqlite-transaction/

hic mi denk gelmedi bir ornek? yani bunun cozumu icin bu kadar beklemis olamazsin sanirim.

en sona bıraktım bu işi, en olmadı uzun yol bir çözüm var aklımda ama insert yavaşlıyor onda da.

küçük bir örnek veriyorum, test etmek için analiz_ismi NOT NULL UNIQUE olarak ayarladım. (aslında bu kısımda problem yok ama 3-4 tane insert olan kısımlar için transaction işini öğrenmem lazım)

baya da bir şey denedim ya beyin yandı resmen yahu.

router.post("/firmaAnalizleri",function(req,res){


db.beginTransaction(function(err,transaction){

for(var x=0; x
var optcount = x + 1;
var y=req.body['analiz'+optcount];


transaction.run("INSERT INTO FirmaAnaliz(firma_adi,analiz_ismi) VALUES (?,?)",req.body.firma,y,function(e){

if(e){

res.send("rollback here");

transaction.rollback(function(err) {
if (err) console.log("rollback failed"+ err);
console.log("rollback successfull");

});

}




});

}

transaction.commit(function(err) {
if (err) console.log("Commit failed"+ err);
console.log("Commit successfull");

});


});

});

bu da başka method, bu da çalışmadı. burda tek insert var gerçi 2 üstü olan yerlerde denemem lazım belki de ondan uğraşıyorum boşu boşuna.

router.post("/firmaAnalizleri",function(req,res){
db.serialize(function() {

db.run("BEGIN");

for(var x=0; x
var optcount = x + 1;
var y=req.body['analiz'+optcount];



db.run("INSERT INTO FirmaAnaliz(firma_adi,analiz_ismi) VALUES (?,?)",req.body.firma,y, function(err, row){

if (err){

console.log(err);

db.rollback;

res.send("Transaction cancelled");

}



});
}

db.run('commit');

res.send("Transaction succeed");
});
});

[reyou]

kolay gelsin.