Изпечатай

[kennedy]

Здравейте,
Търся скрипт с който мога да сваля списъка с непрочетените теми тук във форума и да си ги направя на RSS .
Някакви идеи за това как да стане?

[b2l]

Здравейте,
Търся скрипт с който мога да сваля списъка с непрочетените теми тук във форума и да си ги направя на RSS .
Някакви идеи за това как да стане?

Защо трябва да използваш скрипт? Аз карам директно с Liferea.
(http://www.linux-bg.org/forum/index.php?type=rss;action=.xml)

[kennedy]

Защото ми трябва списъка с моите обновени теми, не общите.
А няма как да го извадя с вгета защото трябва да се логна преди това.

[b2l]

http://www.linux-bg.org/forum/index.php?action?board=72.0;sa=news;type=rss;action=.xml;u=[id]

Накрая ID го заменяш с твоето потребителското ID.

PS: пак не става... Моя грешка.

PS2: Оказва се, че самият RSS на форума не поддържа показване само на твоите теми. Дори и този за новините показва всички нови теми или теми в които е написан пост, без значение кой е автора.

[kennedy]

аз затова питам дали някой си е играл с wget например да свали страница от сайт като мине през идентификацията. има описани разни хватки със запазване на куки и т.н.
Идеята ми е като изтегля списъка с обновените ми теми да го прекарам през един пхп  скрипт и той да го преформатира като рсс и да си го лепна на десктопа.
Всъщност гледах нещо такова с curl,  но там ми е безкрайно мътна история.

[b2l]

Ами гледах POST заявката и има идин hidden параметър: hash_passwrd, който се изпраща и до тука съм стигнал, ама спрях понеже имам друга работа. Иначе гледах man-а на wget и на curl, но и на мен ми се видя малко мътна работа.

[PhrozenCrew]

С wget  би трябвало да стане така (в момента няма как да го тествам):

wget -O - --save-cookies=cookies.txt --keep-session-cookies --auth-no-challenge --no-check-certificate --post-data "user=ПОТРЕБИТЕЛСКОТО_ИМЕ&passwrd=ПАРОЛАТА&hash_passwrd=" "http://www.linux-bg.org/forum/index.php?action=login2"

wget -O - --keep-session-cookies --load-cookies=cookies.txt "http://STRANICATA_KOIATO_TI_YTIABVA"

---------
Можеш да ползваш и някой автоматизатор за браузване в Web. Тук съм насъбрал няколко, можеш да си харесаш нещо по-лесно за работа: http://blog.nediko.info/web-mechanize-engines

[b2l]

Да, при мен работи. Сега остава само парсъра.

[PhrozenCrew]

И с curl би трябвало да няма проблем. Примерно през конзолата би трябвало да е така:

Код:

curl --cookie cfile --cookie-jar cfile --data "user=ПОТРЕБИТЕЛСКОТО_ИМЕ" --data "passwrd=ПАРОЛАТА" --data "hash_passwrd=" --location "http://www.linux-bg.org/forum/index.php?action=login2"

curl --cookie cfile --output NIAKAKYV_FILE.html "http://www.linux-bg.org/STRANICATA"

Ако и това работи, ще е много лесно конзолната версия да се прехвърли към PHP (ако му е зареден cURL).

[VladSun]

Ами гледах POST заявката и има идин hidden параметър: hash_passwrd, който се изпраща и до тука съм стигнал, ама спрях понеже имам друга работа. Иначе гледах man-а на wget и на curl, но и на мен ми се видя малко мътна работа.

Да, но функцията за хеширане на паролата работи само при наличието на sha1_hex() функцията (която при мен FireBug я дава undefined), иначе паролата се предава некодирана.

Всъщност са се погрижили да може да се влиза във форума и с браузери без JS

[PhrozenCrew]

Еххх, най накрая съм с биричка на машина с конзола, с php и нефилтриран интернет 
Ей един вариант, който ми дойде на акъла:

Код

GeSHi (PHP):
<?php
function curl_get_links(){
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, 'http://www.linux-bg.org/forum/index.php?action=login2');
curl_setopt ($ch, CURLOPT_POST, 1);
curl_setopt ($ch, CURLOPT_POSTFIELDS, 'user=ПОТРЕБИТЕЛ&passwrd=ПАРОЛА');
curl_setopt ($ch, CURLOPT_COOKIEJAR, 'cookie.txt');
curl_setopt ($ch, CURLOPT_RETURNTRANSFER, 1);
$store = curl_exec ($ch);
curl_setopt($ch, CURLOPT_URL, 'http://www.linux-bg.org/forum/index.php?action=unread');
$content = curl_exec ($ch);
curl_close ($ch);
 
return $content;
}
 
// ############################# Извличане на всички линкове
 
$html = curl_get_links();
$links = array();
 
$dom = new DOMDocument();
@$dom->loadHTML($html);
 
$xpath = new DOMXPath($dom);
$hrefs = $xpath->evaluate("/html/body//a");
 
for ($i = 0; $i < $hrefs->length; $i++) {
    $href = $hrefs->item($i);
    $url = $href->getAttribute('href');
	if(preg_match('/\.0;topicseen$/',$url)){
		if(in_array($url, $links)) continue;
		$links[] = $url;
	}
}
foreach($links as $l) echo $l."\r\n";
?>

Това може да се вкара в някакъв аплет за десктопа примерно.

[b2l]

Код

GeSHi (PHP):
curl_setopt($ch, CURLOPT_URL, 'http://www.linux-bg.org/forum/index.php?action=unread');

Код

GeSHi (PHP):
curl_setopt($ch, CURLOPT_URL, 'http://www.linux-bg.org/forum/index.php?action=unreadreplies');

Tака трябва да е за отговори на теми в които си писал или си постнал.

[kennedy]

уау това проработи
Благодаря на всички !
Сега ще видя как ще го бодна на десктопа.

[kennedy]

Еххх, най накрая съм с биричка на машина с конзола, с php и нефилтриран интернет 
Ей един вариант, който ми дойде на акъла:

Код

GeSHi (PHP):
<?php
function curl_get_links(){
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, 'http://www.linux-bg.org/forum/index.php?action=login2');
curl_setopt ($ch, CURLOPT_POST, 1);
curl_setopt ($ch, CURLOPT_POSTFIELDS, 'user=ПОТРЕБИТЕЛ&passwrd=ПАРОЛА');
curl_setopt ($ch, CURLOPT_COOKIEJAR, 'cookie.txt');
curl_setopt ($ch, CURLOPT_RETURNTRANSFER, 1);
$store = curl_exec ($ch);
curl_setopt($ch, CURLOPT_URL, 'http://www.linux-bg.org/forum/index.php?action=unread');
$content = curl_exec ($ch);
curl_close ($ch);
 
return $content;
}
 
// ############################# Извличане на всички линкове
 
$html = curl_get_links();
$links = array();
 
$dom = new DOMDocument();
@$dom->loadHTML($html);
 
$xpath = new DOMXPath($dom);
$hrefs = $xpath->evaluate("/html/body//a");
 
for ($i = 0; $i < $hrefs->length; $i++) {
    $href = $hrefs->item($i);
    $url = $href->getAttribute('href');
	if(preg_match('/\.0;topicseen$/',$url)){
		if(in_array($url, $links)) continue;
		$links[] = $url;
	}
}
foreach($links as $l) echo $l."\r\n";
?>

Това може да се вкара в някакъв аплет за десктопа примерно.

а с тази магия как може да се извлече заглавието на темата?
абсолютно неразбираемо ми е как успява даже да извади баш на темите линковете   

[PhrozenCrew]

Ако решиш да ползваш DOM-модела, който за подобни случки ми се струва най-лек (и може би най-бърз, заради печения парсер на PHP), тогава извличаш името на линка с nodeValue. Примерно:
$title = $href->nodeValue;
Ам по-добре да видим целия код.

Код

GeSHi (PHP):
<?php
function curl_get_links(){
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, 'http://www.linux-bg.org/forum/index.php?action=login2');
curl_setopt ($ch, CURLOPT_POST, 1);
curl_setopt ($ch, CURLOPT_POSTFIELDS, 'user=ПОТРЕБИТЕЛ&passwrd=ПАРОЛА');
curl_setopt ($ch, CURLOPT_COOKIEJAR, 'cookie.txt');
curl_setopt ($ch, CURLOPT_RETURNTRANSFER, 1);
$store = curl_exec ($ch);
curl_setopt($ch, CURLOPT_URL, 'http://www.linux-bg.org/forum/index.php?action=unread');
$content = curl_exec ($ch);
curl_close ($ch);
 
return $content;
}
 
// ############################# Извличане на всички линкове
 
$html = curl_get_links();
$links = array();
 
$dom = new DOMDocument();
@$dom->loadHTML($html);
 
$xpath = new DOMXPath($dom);
$hrefs = $xpath->evaluate("/html/body//a");
 
for ($i = 0; $i < $hrefs->length; $i++) {
    $href = $hrefs->item($i);
    $url = $href->getAttribute('href');
    $title = $href->nodeValue;
 
	if(preg_match('/\.0;topicseen$/',$url)){
		if(in_array($url, $links)) continue;
		$links[] = $url;
		$titles[] = $title;
	}
}
foreach($links as $key=>$val){
 echo $val." - ".$titles[$key]."\r\n";
}
?>

Малко е дървено потока да се разделя в 2 масива, но пък е по-лесно за четене. Единия масив  са ти линковете, а другия масив заглавията, така, че да могат лесно да се напасват за всякакви нужди.