парсинг или нет

[ForzaMetall]

Здравствуйте!Помогите!
Задача
сайт - http://www.057.ua/dosug/446
нужно взять информацию о кафе и барах с первой по последнюю страницы
Название,адрес,телефон и вывести в ричбокс с последующим сохранением в csv.
все что я самостоятельно смог осилить проект в архиве
Огромное пожалуйста)

[Пепел Феникса]

я бы забил на ручной парсинг а применил бы HTMLAgility, довольно просто выходит.

[ForzaMetall]

то что я навоял , первая кнопка - качается одна страничка,сохраняется и выводится в ричтекстбокс,вторая кнопка для редактирования(вытягивания нужной инфы)

 private void BStart_Click(object sender, EventArgs e)
        {
            
            WebRequest webReq = WebRequest.Create("http://www.057.ua/dosug/446");
            WebResponse webRes = webReq.GetResponse();
            Stream st = webRes.GetResponseStream();
            StreamReader sr = new StreamReader(st);
            StreamWriter sw = new StreamWriter(@"E:\Projects\Projects 2\FormParser\1.html");
            string response = sr.ReadToEnd();
            sw.WriteLine(response);
            sr.Close();
            sw.Close();
            richTextBox1.Text = File.ReadAllText(@"E:\Projects\Projects 2\FormParser\1.html");
        }

        private void Bremove_Click(object sender, EventArgs e)
        {
            HtmlAgilityPack.HtmlDocument doc = new HtmlAgilityPack.HtmlDocument();
            doc.Load(@"E:\Projects\Projects 2\FormParser\1.html");

        }

Что нужно,что бы качались все 8 страниц и сохранялись в файл для последующей обработки(или как качать не сохраняя,а сразу обрабатывать вытаскивать нужную инфу и только потом сохранять и выводить в ричтекстбокс?)
Как именно вытащить нужную инфу?
вот кусок странички с нужной инфой(обведена красным)
Если у вас есть время и желание помочь,можете дополнить мой код до рабочего состояния с оментариями,что бы я мог видя живой рабочий код конретно по моему примеру брать и изучать.

[Пепел Феникса]

или как качать не сохраняя

string response = sr.ReadToEnd();

вот тут у вас полный текст страницы, его можно передать в

HtmlDocument.LoadHtml(response);

c HtmlAgility сам код(HTML всмысле) вам не столь важен, важна иерархия обьектов и их черты(это мелочь по сравнению с листанием всего кода).
а далее посмотрите на XPath, можно взять коллекцию всего что нужно сразу и через foreach обработать(а так же выбрать линк на след страницу, если есть).

приме не могу пока дать, тока студию снес, но если не выйдет постараюсь завтра.

а иерархию хорошо видно в отладчиках у браузеров.

[ProX_Alex]

Сообщение от Пепел Феникса

string response = sr.ReadToEnd();

вот тут у вас полный текст страницы, его можно передать в

HtmlDocument.LoadHtml(response);

c HtmlAgility сам код(HTML всмысле) вам не столь важен, важна иерархия обьектов и их черты(это мелочь по сравнению с листанием всего кода).
а далее посмотрите на XPath, можно взять коллекцию всего что нужно сразу и через foreach обработать(а так же выбрать линк на след страницу, если есть).

приме не могу пока дать, тока студию снес, но если не выйдет постараюсь завтра.

а иерархию хорошо видно в отладчиках у браузеров.

Вот кодик

var doc = new HtmlAgilityPack.HtmlDocument();
            WebRequest reqGET = System.Net.WebRequest.Create("http://www.057.ua/dosug/446");
            System.Net.WebResponse resp = reqGET.GetResponse();
            Stream stream = resp.GetResponseStream();
            StreamReader sr = new StreamReader(stream, Encoding.GetEncoding(65001));
            string s = sr.ReadToEnd();
            doc.LoadHtml(s);
            HtmlNodeCollection Names = doc.DocumentNode.SelectNodes(@".//*[@id='all_body']/table/tr/td[2]/table/tr/td/h2/a");
            HtmlNodeCollection streetsandphone = doc.DocumentNode.SelectNodes(@".//*[@id='all_body']/table/tr/td[2]/table/tr/td/strong");

            List<string> itognames = new List<string>();
            List<string> itogphones = new List<string>();

            if (Names != null)
            {
                int i = 0;
                foreach (HtmlNode c in Names)
                {
                    itognames.Add(c.InnerText);
                }
                foreach (HtmlNode d in streetsandphone)
                {
                    itogphones.Add(d.InnerText);
                }

            }

[Пепел Феникса]

одно но, я бы советовал сначало привязаться к блоку содержащую обе нужные инфы, а уже от него искать конкретно, чтоб было меньше SelectNodes.
хотя это моя привычка конечно.

[ForzaMetall]

Спасибо!Буду пробовать использовать ваш код.
Вопрос - он работает со всеми страничками или только с первой?
как вывести полученную отредактированную инфу в ричтекстбокс и потом сохранить в csv у меня не получается засунуть отредактированные данные в один файл и с ним работать(

[ForzaMetall]

Код - берет только первую страницу и выбирает названия и описания

using System.Data;
using System.Drawing;
using System.Linq;
using System.Text;
using System.Windows.Forms;
using System.IO;
using System.Net;
using System.Threading;
using System.Text.RegularExpressions;

namespace WFParser
{
    public partial class Form1 : Form
    {
        public Form1()
        {
            InitializeComponent();
        }

        private void buttonGo_Click(object sender, EventArgs e)
        {
             var wc = new WebClient();
            wc.Encoding = Encoding.UTF8;
            String fp = wc.DownloadString("http://www.057.ua/dosug/446");
            if (!String.IsNullOrEmpty(fp))
            {
                var titlesMatch = Regex.Matches(fp,"<h2>[^<]*<a\\s+href=\"([^\"]+)\"[^>]+title=\"([^\"]+)\"",RegexOptions.IgnoreCase | RegexOptions.Compiled);
                var maxPage = Regex.Match(fp,"<a href=\"[^\"]+/(\\d+)\">\\1</a>[^<]+<\\!\\-\\-");
                if (titlesMatch.Count > 0)
                {
                    String titles="";
                    foreach(Match titleMatch in titlesMatch){
                        titles += titleMatch.Groups[1].Value + " => " + WebUtility.HtmlDecode(titleMatch.Groups[2].Value.Trim()) + "\n";
                    }
                    //MessageBox.Show("Загаловки: \n\n"+titles);
                    richTextBox1.Text = titles.ToString(); 
                }
           
            }
        

        }
    }
}

Что дописать что бы брало из всех страниц и +адреса и телефоны?
Огромное вам спасибо.

[ProX_Alex]

Сообщение от ForzaMetall

Код - берет только первую страницу и выбирает названия и описания

using System.Data;
using System.Drawing;
using System.Linq;
using System.Text;
using System.Windows.Forms;
using System.IO;
using System.Net;
using System.Threading;
using System.Text.RegularExpressions;

namespace WFParser
{
    public partial class Form1 : Form
    {
        public Form1()
        {
            InitializeComponent();
        }

        private void buttonGo_Click(object sender, EventArgs e)
        {
             var wc = new WebClient();
            wc.Encoding = Encoding.UTF8;
            String fp = wc.DownloadString("http://www.057.ua/dosug/446");
            if (!String.IsNullOrEmpty(fp))
            {
                var titlesMatch = Regex.Matches(fp,"<h2>[^<]*<a\\s+href=\"([^\"]+)\"[^>]+title=\"([^\"]+)\"",RegexOptions.IgnoreCase | RegexOptions.Compiled);
                var maxPage = Regex.Match(fp,"<a href=\"[^\"]+/(\\d+)\">\\1</a>[^<]+<\\!\\-\\-");
                if (titlesMatch.Count > 0)
                {
                    String titles="";
                    foreach(Match titleMatch in titlesMatch){
                        titles += titleMatch.Groups[1].Value + " => " + WebUtility.HtmlDecode(titleMatch.Groups[2].Value.Trim()) + "\n";
                    }
                    //MessageBox.Show("Загаловки: \n\n"+titles);
                    richTextBox1.Text = titles.ToString(); 
                }
           
            }
        

        }
    }
}

Что дописать что бы брало из всех страниц и +адреса и телефоны?
Огромное вам спасибо.

Вот вам всё регулярки нужны эти... Пустите свой код по циклу фор где i бедут равно от 1 до 8 включительно и подставляйте в адрес:
String fp = wc.DownloadString("http://www.057.ua/dosug/446/" + i);

[ForzaMetall]

ProX_Alex,спасибо вам,помогите еще чуть чуть:
что дописать что бы показывало в ричтекстбоксе - itognames + itogphones и также записывало в csv.
Заранее благодарен!

 
using System;
using System.Collections.Generic;
using System.ComponentModel;
using System.Data;
using System.Drawing;
using System.Linq;
using System.Text;
using System.Windows.Forms;
using System.IO;
using System.Net;
using System.Threading;
using HtmlAgilityPack;
namespace FormParserWorked_Version
{
    public partial class Form1 : Form
    {
        public Form1()
        {
            InitializeComponent();
        }

        private void button1_Click(object sender, EventArgs e)
        {
            for (int i = 0; i <= 8; i++)
            {
                var doc = new HtmlAgilityPack.HtmlDocument();
                WebRequest reqGET = System.Net.WebRequest.Create("http://www.057.ua/dosug/446");
                System.Net.WebResponse resp = reqGET.GetResponse();
                Stream stream = resp.GetResponseStream();
                StreamReader sr = new StreamReader(stream, Encoding.GetEncoding(65001));
                string s = sr.ReadToEnd();
                doc.LoadHtml(s);
                HtmlNodeCollection Names = doc.DocumentNode.SelectNodes(@".//*[@id='all_body']/table/tr/td[2]/table/tr/td/h2/a");
                HtmlNodeCollection streetsandphone = doc.DocumentNode.SelectNodes(@".//*[@id='all_body']/table/tr/td[2]/table/tr/td/strong");

                List<string> itognames = new List<string>();
                List<string> itogphones = new List<string>();

                if (Names != null)
                {
                    int j = 0;
                    foreach (HtmlNode c in Names)
                    {
                        itognames.Add(c.InnerText);
                    }
                    foreach (HtmlNode d in streetsandphone)
                    {
                        itogphones.Add(d.InnerText);
                    }
                }
            }

        }
    }
}