FireBird Ne Kadar Yeterli

youutek · Mesaj gönderen **youutek** » 22 May 2006 03:57

slm..
arkadaşlar benim sorum şu: yaklaşık 100 bin sayfalık bir texti bir veri tabanına yükleyip bu veri tabanında sorgulamalar yapmam lazım örnegin girilen kelimenin geçtiği sayfaların numarasını listelemek gibi vebunu tabiki çok kısabi zamanda yapmak artı olalarak bu sayfalara yeni sayfaları internetten yükleye bilmek gibi özellikleri olmalı. bu iş için FireBird ü seçtim sizce yetermi FB kaldırırmı bunları

YouTube · Mesaj gönderen **Kuri_YJ** » 22 May 2006 05:12

Selamlar,

Bunun denemesini bizzat yapmıştım ve FB'yi tercih ettim. M$ SQL Server ile ikisini karşılaştırdım ve FB yeterince iyi çıktı. M$'a göre yer yer 10 kat performans farkı attı. FB 3.0 ile birlikte FTS (FullTextSearch) tam metin arama özelliği de eklenecek. Şu anda LIKE ile veya CONTAINING idi sanırım onu kullanarak arama yaptırabiliyorsunu, hızı gayet iyi.

Kolay Gelsin,

Not : Evet bizde yaklaşık 100,000 Adet dokumanı aktardık ve çalışıyoruz.

youutek · Mesaj gönderen **youutek** » 23 May 2006 09:31

Kuri_YJ teşekkür ederim yorumların için benim araştırmama görede fb iyi çık tı bakalım sonucu yaklaşık 2 ay sonra görecez teşekkürler

celalatak · Mesaj gönderen **celalatak** » 23 May 2006 03:29

Benzer bir proje ile bende uğraşıyorum. Hatta benim dökümanlarım daha büyük. Size küçük bir tavsiyem olacak en azından ben öyle yapıyorum. sayfaları zlib kütüphanesini kullanarak sıkıştrıp blob alanda saklıyorum veritabanının boyutu ciddi oranda küçülüyor.

YouTube · Mesaj gönderen **Kuri_YJ** » 24 May 2006 08:15

VT'nin büyüklüğünden çekinmeyin, eğer yavaş olması gibi bir endişeniz yoksa sıkıştırıp koymanız en mantıklı yol olabilir ama hız açısından sizi yavaşlatır.

Kolay Gelsin

Mesaj gönderen **name** » 24 May 2006 08:07

celalatak yazdı:Benzer bir proje ile bende uğraşıyorum. Hatta benim dökümanlarım daha büyük. Size küçük bir tavsiyem olacak en azından ben öyle yapıyorum. sayfaları zlib kütüphanesini kullanarak sıkıştrıp blob alanda saklıyorum veritabanının boyutu ciddi oranda küçülüyor.

@celalatak sayfaların sıkıştırılması sorgu işlemlerinin yapılamamasına sebep olacaktır. @youutek ise bu blob alanlarda sorgulamalar yapmak istiyor.

Ancak siz sorgu sırasında blob alanı bir UDF'a gönderip decode ediyor iseniz durum farklı tabiki. Eğer böyle bir kullanım yapıyor iseniz, ne kadarlık bir performans kaybı yaşana bileceğini de merak etmiyor değilim.

Mesaj gönderen **t-hex** » 25 May 2006 05:19

PostgreSQL seçeneğini de atlamayın derim

celalatak · Mesaj gönderen **celalatak** » 27 May 2006 03:59

Ben verileri sıkıştırmadan önce endeksliyorum (FullTextSearch) .Dolayısı ile kullanıcı arama işlemi yaptığında sadece gerekli kayıt decompress işlemine tabi tutuluyor. Program oldukça hızlı çalışıyor. VT sıkıştırılmış haliyle bile 1 GB yer kaplıyor.

YouTube · Mesaj gönderen **Kuri_YJ** » 29 May 2006 08:51

Selamlar,

FB'de mi FTS uyguluyorsun? Eğer FB'de yapıyorsan neyle Full Text Search işlemine tabi tutuyorsun? .Net için birşeyler var diye görmüştüm ben normal için hangi araç ile yapıyorsun?

Kolay Gelsin

shadowmann · Mesaj gönderen **shadowmann** » 29 May 2006 09:45

Postgre windows ta embedded server olarak çalışmıyor bildigim kadarıyla. Bu veritabanını kullananların (Dökümantasyon işinde) yorumlarını bekleriz.

celalatak · Mesaj gönderen **celalatak** » 29 May 2006 09:47

Ben programımı anlatayım size. Program avukatlara yönelik bir hukuk programı 2 önemli tablo var. Birinciside kanunlar, yönetmelikler, bakanlar kurulu kararları vs. tutuluyor 21.000 kayıt var. Diğer tabloda ise içtihatler (mahkeme kararları) tutuluyor 100.000 civarı kayıt var. Bu tablolardaki bazı kayıtlar 70-80 sayfada olabiliyor. Çoğu kullanıcının HD'i yetersiz. Bu yüzden verileri sıkıştırmak zorunlu. Kulanıcılar programda herhangi bir veri girişi yapmıyorlar. Endeksleme işini kendi bilgisayarımızda yapıyoruz. Güncellemeleri internet üzerinden gönderiyoruz.

Firebirdde FTS yapan bir bileşen buldum oda pahallı geldi o yüzden kodu kendim yazdım. Arama işlemini düşük konfigrasyonlu bilgisayarda bile hızlı biçimde yapıyor.

YouTube · Mesaj gönderen **Kuri_YJ** » 30 May 2006 08:56

Selamlar,

FTS olarak mevcut kelimelerden oluşan bir sözlük ve bu sözcüklerin geçtiği yerleri işaretleyen (gösteren bir MAP tablosu) şeklinde mi yaptın? Yoksa farklı bir meod mu izledin?

Kolay Gelsin

celalatak · Mesaj gönderen **celalatak** » 30 May 2006 09:57

Endeks tablosunda kelime ve kelimenin geçtiği metnin id si tutuluyor. Metinleri göstermek içinde WebBrowser componentini kullanıyorum. kelimemlerin metinde geçtiği yeride WebBrowser buldurma özelliklerini kullanarak karartıyorum. Metinde başka bir kanuna atıfta bulunuyorsa linkverip diğer id ye atlatıyorum.

Ottoman · Mesaj gönderen **Ottoman** » 31 May 2006 11:15

Selamlar.Benim bir firmada,şu ana kadar 25.000 kayıt'a ulaşmış bir tanesi ortalama 50-150 kb.jpeg formatlı,grafik ağırlıklı,1.6 GB yer kaplayan Firebird'de yapılmış,proğramım var ,gayet rahat çalışıyor.hiç bir problem yok,ayrıca 12 Terminalde çalışıyor.eee nede olsa Firebird.

Mesaj gönderen **Ali Erdoğan** » 01 Haz 2006 03:09

Ottoman yazdı:Selamlar.Benim bir firmada,şu ana kadar 25.000 kayıt'a ulaşmış bir tanesi ortalama 50-150 kb.jpeg formatlı,grafik ağırlıklı,1.6 GB yer kaplayan Firebird'de yapılmış,proğramım var ,gayet rahat çalışıyor.hiç bir problem yok,ayrıca 12 Terminalde çalışıyor.eee nede olsa Firebird.

Aman yedeklemeye dikkat edin ve sağlam bir güç kaynağı kullanın, en ufak bir elektrik kesintisinde 1.6 GB lık veriye elveda demek zorunda kalabilirsiniz.