public int kelimeSayisi(string html, string aranankelime, Htmlİslemleri Cek_veri, string etiket)
{
HtmlAgilityPack.HtmlDocument htmldoc = new HtmlAgilityPack.HtmlDocument();
htmldoc.LoadHtml(html);
aranankelime.ToLower();
aranankelime = turkcelestir(aranankelime);
HtmlNodeCollection basliklar = htmldoc.DocumentNode.SelectNodes(etiket);
List <string> liste = new List <string>();
if (basliklar != null)
{
foreach (var baslik in basliklar)
{
liste.Add(baslik.InnerText);
}
int y;
string[] stringDizi = new string[liste.Count];
for (int i = 0; i < liste.Count; i++)
{
stringDizi[i] = liste[i].ToString();
}
string tekstring;
tekstring = ConvertStringArrayToString(stringDizi);
tekstring = tekstring.ToLower();
turkcelestir(tekstring);
y = Cek_veri.FindWord(tekstring, aranankelime);
return(y);
}
return(0);
}
public List <double> puanHesapla(List <string> url_list)
{
#region tanımlamalar
Title title = new Title();
ahref a = new ahref();
List <int> list = new List <int>();
UrlPuan url_puan = new UrlPuan();
List <double> title_Puan = new List <double>();
List <double> ahref_Puan = new List <double>();
List <double> h1_Puan = new List <double>();
List <double> h2_Puan = new List <double>();
List <double> h3_Puan = new List <double>();
List <double> h4_Puan = new List <double>();
List <double> h5_Puan = new List <double>();
List <double> h6_Puan = new List <double>();
List <double> big_Puan = new List <double>();
List <double> bold_Puan = new List <double>();
List <double> em_Puan = new List <double>();
List <double> head_Puan = new List <double>();
List <double> label_Puan = new List <double>();
List <double> li_Puan = new List <double>();
List <double> link_Puan = new List <double>();
List <double> option_Puan = new List <double>();
List <double> p_Puan = new List <double>();
List <double> span_Puan = new List <double>();
List <double> strong_Puan = new List <double>();
List <double> th_Puan = new List <double>();
// List<double> toplamPuan = new List<double>();
double[] toplamPuan = new double[kelime_list.Count];
ahref ahref = new ahref();
h1 h1 = new h1();
h2 h2 = new h2();
h3 h3 = new h3();
h4 h4 = new h4();
h5 h5 = new h5();
h6 h6 = new h6();
Head head = new Head();
LabelHtml labelHtml = new LabelHtml();
Link link = new Link();
Span span = new Span();
Strong strong = new Strong();
Bold bold = new Bold();
Em em = new Em();
Li li = new Li();
Option option = new Option();
Th th = new Th();
LabelHtml labelhtml = new LabelHtml();
Htmlİslemleri Cek_veri = new Htmlİslemleri();
string htmlstring;
List <int> kelimeSayilari = new List <int>();
int KeyCount = 0;
List <double> standartSapmaListesi = new List <double>();
double standartSapma;
List <double> URLpuan = new List <double>();
double tekUrlPuan = 0;
#endregion
for (int j = 0; j < url_list.Count; j++)
{
htmlstring = Cek_veri.GetVeri(url_list[j]);
HtmlAgilityPack.HtmlDocument htmldoc = new HtmlAgilityPack.HtmlDocument();
htmldoc.LoadHtml(htmlstring);
#region etiketPuanlama
title_Puan = title.sıralamaPuan(url_list, kelime_list, Cek_veri, title.etiket, title.puan, htmldoc);
ahref_Puan = ahref.sıralamaPuan(url_list, kelime_list, Cek_veri, ahref.etiket, ahref.puan, htmldoc);
h1_Puan = h1.sıralamaPuan(url_list, kelime_list, Cek_veri, h1.etiket, h1.puan, htmldoc);
h2_Puan = h2.sıralamaPuan(url_list, kelime_list, Cek_veri, h2.etiket, h2.puan, htmldoc);
h3_Puan = h3.sıralamaPuan(url_list, kelime_list, Cek_veri, h3.etiket, h3.puan, htmldoc);
h4_Puan = h4.sıralamaPuan(url_list, kelime_list, Cek_veri, h4.etiket, h4.puan, htmldoc);
h5_Puan = h5.sıralamaPuan(url_list, kelime_list, Cek_veri, h5.etiket, h5.puan, htmldoc);
h6_Puan = h6.sıralamaPuan(url_list, kelime_list, Cek_veri, h6.etiket, h6.puan, htmldoc);
strong_Puan = strong.sıralamaPuan(url_list, kelime_list, Cek_veri, strong.etiket, strong.puan, htmldoc);
bold_Puan = bold.sıralamaPuan(url_list, kelime_list, Cek_veri, bold.etiket, bold.puan, htmldoc);
em_Puan = em.sıralamaPuan(url_list, kelime_list, Cek_veri, em.etiket, em.puan, htmldoc);
head_Puan = head.sıralamaPuan(url_list, kelime_list, Cek_veri, head.etiket, head.puan, htmldoc);
label_Puan = labelhtml.sıralamaPuan(url_list, kelime_list, Cek_veri, labelhtml.etiket, labelhtml.puan, htmldoc);
li_Puan = li.sıralamaPuan(url_list, kelime_list, Cek_veri, li.etiket, li.puan, htmldoc);
link_Puan = link.sıralamaPuan(url_list, kelime_list, Cek_veri, link.etiket, link.puan, htmldoc);
option_Puan = option.sıralamaPuan(url_list, kelime_list, Cek_veri, option.etiket, option.puan, htmldoc);
span_Puan = span.sıralamaPuan(url_list, kelime_list, Cek_veri, span.etiket, span.puan, htmldoc);
th_Puan = th.sıralamaPuan(url_list, kelime_list, Cek_veri, th.etiket, th.puan, htmldoc);
#endregion
tekUrlPuan = 0;
for (int i = 0; i < kelime_list.Count; i++)
{
KeyCount = Cek_veri.FindWord(htmlstring, kelime_list[i]);
if (kelimeSayilari.Count == kelime_list.Count)
{
kelimeSayilari.Clear();
}
kelimeSayilari.Add(KeyCount);
if (i == kelime_list.Count - 1)
{
standartSapma = 0;
standartSapma = standart(kelimeSayilari);
standartSapmaListesi.Add(standartSapma);
}
#region uzunifkontrolu
toplamPuan[i] = 0;
if (ahref_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + ahref_Puan[i];
}
if (title_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + title_Puan[i];
}
if (h1_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + h1_Puan[i];
}
if (h2_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + h2_Puan[i];
}
if (h3_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + h3_Puan[i];
}
if (h4_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + h4_Puan[i];
}
if (h5_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + h5_Puan[i];
}
if (h6_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + h6_Puan[i];
}
if (strong_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + strong_Puan[i];
}
if (bold_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + bold_Puan[i];
}
if (head_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + head_Puan[i];
}
if (label_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + label_Puan[i];
}
if (li_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + li_Puan[i];
}
if (link_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + link_Puan[i];
}
if (option_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + option_Puan[i];
}
if (span_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + span_Puan[i];
}
if (th_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + th_Puan[i];
}
#endregion
//2 kelime için puanı toplanıcak
tekUrlPuan = tekUrlPuan + toplamPuan[i];
}
if (kelime_list.Count == 1)
{
URLpuan.Add(tekUrlPuan);
}
else
{
URLpuan.Add(tekUrlPuan / standartSapmaListesi[j]);
}
}
return(URLpuan);
}
protected void btn_UrlSırala_Click(object sender, EventArgs e)
{
TextBox1.Text = "";
TextBox2.Text = "";
//Virgüle kadar ayırıyoruz.
string[] url_kumesi = UrlText.Text.Split(',');
//Textboxlara girilen verileri listeye attık.
for (int i = 0; i < url_kumesi.Count(); i++)
{
url_list.Add(url_kumesi[i]);
}
string[] kelime_kumesi = KelimeText.Text.Split(',');
for (int i = 0; i < kelime_kumesi.Count(); i++)
{
kelime_list.Add(kelime_kumesi[i]);
}
#region tanımlamalar
Title title = new Title();
ahref a = new ahref();
List <int> list = new List <int>();
UrlPuan url_puan = new UrlPuan();
List <string> Result = new List <string>();
List <double> title_Puan = new List <double>();
List <double> ahref_Puan = new List <double>();
List <double> h1_Puan = new List <double>();
List <double> h2_Puan = new List <double>();
List <double> h3_Puan = new List <double>();
List <double> h4_Puan = new List <double>();
List <double> h5_Puan = new List <double>();
List <double> h6_Puan = new List <double>();
List <double> big_Puan = new List <double>();
List <double> bold_Puan = new List <double>();
List <double> em_Puan = new List <double>();
List <double> head_Puan = new List <double>();
List <double> label_Puan = new List <double>();
List <double> li_Puan = new List <double>();
List <double> link_Puan = new List <double>();
List <double> option_Puan = new List <double>();
List <double> p_Puan = new List <double>();
List <double> span_Puan = new List <double>();
List <double> strong_Puan = new List <double>();
List <double> th_Puan = new List <double>();
double[] toplamPuan = new double[kelime_list.Count];
ahref ahref = new ahref();
h1 h1 = new h1();
h2 h2 = new h2();
h3 h3 = new h3();
h4 h4 = new h4();
h5 h5 = new h5();
h6 h6 = new h6();
Head head = new Head();
LabelHtml labelHtml = new LabelHtml();
Link link = new Link();
Span span = new Span();
Strong strong = new Strong();
Bold bold = new Bold();
Em em = new Em();
Li li = new Li();
Option option = new Option();
Th th = new Th();
LabelHtml labelhtml = new LabelHtml();
Htmlİslemleri Cek_veri = new Htmlİslemleri();
string htmlstring;
List <int> kelimeSayilari = new List <int>();
int KeyCount = 0;
List <double> standartSapmaListesi = new List <double>();
double standartSapma;
List <double> URLpuan = new List <double>();
double tekUrlPuan = 0;
#endregion
//Her url için html çekme ve puanlama işlemini yapıyoruz
for (int j = 0; j < url_list.Count; j++)
{
htmlstring = Cek_veri.GetVeri(url_list[j]);
HtmlAgilityPack.HtmlDocument htmldoc = new HtmlAgilityPack.HtmlDocument();
htmldoc.LoadHtml(htmlstring);
#region etiketPuanlama
title_Puan = title.sıralamaPuan(url_list, kelime_list, Cek_veri, title.etiket, title.puan, htmldoc);
ahref_Puan = ahref.sıralamaPuan(url_list, kelime_list, Cek_veri, ahref.etiket, ahref.puan, htmldoc);
h1_Puan = h1.sıralamaPuan(url_list, kelime_list, Cek_veri, h1.etiket, h1.puan, htmldoc);
h2_Puan = h2.sıralamaPuan(url_list, kelime_list, Cek_veri, h2.etiket, h2.puan, htmldoc);
h3_Puan = h3.sıralamaPuan(url_list, kelime_list, Cek_veri, h3.etiket, h3.puan, htmldoc);
h4_Puan = h4.sıralamaPuan(url_list, kelime_list, Cek_veri, h4.etiket, h4.puan, htmldoc);
h5_Puan = h5.sıralamaPuan(url_list, kelime_list, Cek_veri, h5.etiket, h5.puan, htmldoc);
h6_Puan = h6.sıralamaPuan(url_list, kelime_list, Cek_veri, h6.etiket, h6.puan, htmldoc);
strong_Puan = strong.sıralamaPuan(url_list, kelime_list, Cek_veri, strong.etiket, strong.puan, htmldoc);
bold_Puan = bold.sıralamaPuan(url_list, kelime_list, Cek_veri, bold.etiket, bold.puan, htmldoc);
em_Puan = em.sıralamaPuan(url_list, kelime_list, Cek_veri, em.etiket, em.puan, htmldoc);
head_Puan = head.sıralamaPuan(url_list, kelime_list, Cek_veri, head.etiket, head.puan, htmldoc);
label_Puan = labelhtml.sıralamaPuan(url_list, kelime_list, Cek_veri, labelhtml.etiket, labelhtml.puan, htmldoc);
li_Puan = li.sıralamaPuan(url_list, kelime_list, Cek_veri, li.etiket, li.puan, htmldoc);
link_Puan = link.sıralamaPuan(url_list, kelime_list, Cek_veri, link.etiket, link.puan, htmldoc);
option_Puan = option.sıralamaPuan(url_list, kelime_list, Cek_veri, option.etiket, option.puan, htmldoc);
span_Puan = span.sıralamaPuan(url_list, kelime_list, Cek_veri, span.etiket, span.puan, htmldoc);
th_Puan = th.sıralamaPuan(url_list, kelime_list, Cek_veri, th.etiket, th.puan, htmldoc);
#endregion
tekUrlPuan = 0;
for (int i = 0; i < kelime_list.Count; i++)
{
KeyCount = Cek_veri.FindWord(htmlstring, kelime_list[i]);
if (kelimeSayilari.Count == kelime_list.Count)
{
kelimeSayilari.Clear();
}
kelimeSayilari.Add(KeyCount);
if (i == kelime_list.Count - 1)
{
standartSapma = 0;
standartSapma = standart(kelimeSayilari);
standartSapmaListesi.Add(standartSapma);
}
#region uzunifkontrolu
toplamPuan[i] = 0;
if (ahref_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + ahref_Puan[i];
}
if (title_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + title_Puan[i];
}
if (h1_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + h1_Puan[i];
}
if (h2_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + h2_Puan[i];
}
if (h3_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + h3_Puan[i];
}
if (h4_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + h4_Puan[i];
}
if (h5_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + h5_Puan[i];
}
if (h6_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + h6_Puan[i];
}
if (strong_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + strong_Puan[i];
}
if (bold_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + bold_Puan[i];
}
if (head_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + head_Puan[i];
}
if (label_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + label_Puan[i];
}
if (li_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + li_Puan[i];
}
if (link_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + link_Puan[i];
}
if (option_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + option_Puan[i];
}
if (span_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + span_Puan[i];
}
if (th_Puan.Count != 0)
{
toplamPuan[i] = toplamPuan[i] + th_Puan[i];
}
#endregion
//2 kelime için puanı toplanıcak
tekUrlPuan = tekUrlPuan + toplamPuan[i];
}
if (kelime_list.Count == 1)
{
URLpuan.Add(tekUrlPuan);
}
else
{
URLpuan.Add(tekUrlPuan / standartSapmaListesi[j]);
}
Result.Add(url_list[j]);
Result.Add("puan: " + URLpuan[j].ToString());
for (int i = 0; i < kelime_list.Count; i++)
{
Result.Add(kelime_list[i] + ":" + kelimeSayilari[i].ToString());
}
}
double d = kelimeSayilari.Count / kelime_list.Count;
for (int c = 0; c < Result.Count; c++)
{
TextBox1.Text = TextBox1.Text + Result[c] + Environment.NewLine;
}
#region sıralama
List <string> sonuc = new List <string>();
sonuc.Add("Sıralanmış Hali:");
for (int i = 0; i < url_list.Count; i++)
{
for (int j = 1; j < url_list.Count - i; j++)
{
if (URLpuan[j] < URLpuan[j - 1])
{
double gecici = URLpuan[j - 1];
URLpuan[j - 1] = URLpuan[j];
URLpuan[j] = gecici;
string geciciURL = url_list[j - 1];
url_list[j - 1] = url_list[j];
url_list[j] = geciciURL;
}
}
}
url_list.Reverse();
URLpuan.Reverse();
for (int i = 0; i < url_list.Count; i++)
{
sonuc.Add(url_list[i]);
sonuc.Add("puan: " + URLpuan[i].ToString());
}
for (int c = 0; c < sonuc.Count; c++)
{
TextBox2.Text = TextBox2.Text + sonuc[c] + Environment.NewLine;
}
# endregion
}
public List <double> sıralamaPuan(List <string> url, List <string> aranankelime, Htmlİslemleri Cek_veri, string etiket, double puan, HtmlAgilityPack.HtmlDocument htmldoc)
{
List <double> etiketPuan = new List <double>();
double anlikPuan = 0;
HtmlNodeCollection basliklar = htmldoc.DocumentNode.SelectNodes(etiket);
for (int j = 0; j < aranankelime.Count; j++)
{
aranankelime[j].ToLower();
aranankelime[j] = turkcelestir(aranankelime[j]);
List <string> liste = new List <string>();
if (basliklar != null)
{
foreach (var baslik in basliklar)
{
liste.Add(baslik.InnerText);
}
double kelimeSayisi;
string[] stringDizi = new string[liste.Count];
for (int k = 0; k < liste.Count; k++)
{
stringDizi[k] = liste[k].ToString();
}
string tekstring;
tekstring = ConvertStringArrayToString(stringDizi);
tekstring = tekstring.ToLower();
tekstring = turkcelestir(tekstring);
kelimeSayisi = Cek_veri.FindWord(tekstring, aranankelime[j]);
/*
* if (kelimeSayisi>50)
* {
* kelimeSayisi = kelimeSayisi / 5;
* }
* else if (kelimeSayisi > 40)
* {
* kelimeSayisi = kelimeSayisi / 4;
* }
* else if (kelimeSayisi > 30)
* {
* kelimeSayisi = kelimeSayisi / 3;
* }
* else if (kelimeSayisi > 20)
* {
* kelimeSayisi = kelimeSayisi / 2;
* }
*/
anlikPuan = kelimeSayisi * puan;
etiketPuan.Add(anlikPuan);
}
else
{
continue;
}
}
return(etiketPuan);
}