Автор Тема: Простой парсер HTML кода HTMLFILE (Прочитано 45245 раз)

CreatoR

Никак не могу понять, данный скрипт у меня периодический зависает:

$oHTML = ObjCreate('HTMLFILE')
If Not IsObj($oHTML) Then Exit

$sHTML = BinaryToString(InetRead('http://devid.info/en/search?text=dell'))

$oHTML.Write($sHTML)

$oList = $oHTML.GetElementById('os-list-6.1')
$oItems = $oList.childNodes

ConsoleWrite($oItems.length & @LF)

For $oItem In $oItems
    If $oItem.Attributes('class').Value == 'item-box' Then
        ConsoleWrite($oItem.innertext & @LF)
    EndIf
Next

Система Win7 X64 Rus (AutoIt 3.3.6.1 -> 3.3.12.0 x86, хотя и под x64 тоже самое).
IE8.
Кто то может проверить у себя? запускать по несколько раз, у меня раза со второго-третьего скрипт намертво повисает.

Русское сообщество AutoIt

firex

CreatoR
Виной тому InetRead. Меняйте на альтернативные методы.

CreatoR

firex [?]

Цитировать

Виной тому InetRead

Я записал в файл то что получил с инета, далее читаю с файла, но результат тот же.
В чём проблематичность InetRead?

Да и ещё, когда зависает, система иногда выдаёт вот такое сообщение:

Нажмите для отображения изображения в оригинальном размере.

Нажмите для отображения изображения в оригинальном размере.

CreatoR

Попробовал со всеми мне известными методами получения Html, вывод однозначный - дело не в этом.

Дело в размере получаемой информации, нужно проверить есть ли ограничения у этого объекта...

Обновление
Для инициализации Html, нужно использовать не .Write($sHtml), а .Body.InnerHtml = $sHtml!

Русское сообщество AutoIt

Garrett

CreatoR
Почему вы избегаете методов open и close?

Код: AutoIt [Выделить]

$oHTML.Open
$oHTML.Write($sHTML)
$oHTML.Close

Цитировать

Кто то может проверить у себя?

У меня скрипт отрабатывает без проблем. Win7 X64, WinXP SP2

Код: AutoIt [Выделить]

$oHTML = ObjCreate('HTMLFILE')
If Not IsObj($oHTML) Then Exit

$sHTML = BinaryToString(InetRead('http://devid.info/en/search?text=dell'))

$oHTML.Open
$oHTML.Write($sHTML)
$oHTML.Close

$oList = $oHTML.GetElementById('os-list-6.1')
$oItems = $oList.childNodes

ConsoleWrite($oItems.length & @LF)

For $oItem In $oItems
    If $oItem.Attributes('class').Value == 'item-box' Then
        ConsoleWrite($oItem.innertext & @LF)
    EndIf
Next

madmasles

Garrett [?]

Цитировать

У меня скрипт отрабатывает без проблем.

У меня тоже. Win7 X32, WinXP SP3 X32.

CreatoR

Garrett [?]

Цитировать

Почему вы избегаете методов open и close?

Я это использовал, просто в примере забыл указать.
У меня с этим скрипт зависает (не всегда).
А с .Body.InnerHtml = $sHtml - нет.

Garrett

CreatoR [?]

Цитировать

А с .Body.InnerHtml = $sHtml - нет.

Код: AutoIt [Выделить]

$oHTML = ObjCreate('HTMLFILE')
If Not IsObj($oHTML) Then Exit

$oHTML.Open

#Region Пример 1
;~ $oHTML.Write("<div>Hi!</div>")
#EndRegionПример 1

#Region Пример 2
$oHTML.Body.InnerHtml = "<p>Hi!</p>" ; НЕ правильно! (поэтому и не виснет)
#EndRegionПример 2

#Region Пример 3
;~ $oHTML.Body
;~ $oHTML.Write("<div>Hi!</div>")
#EndRegionПример 3

$oHTML.Close

ConsoleWrite(StringFormat("> Body Outer Html: --> %s\n", (Not StringStripWS($oHTML.Body.OuterHtml, 3)) ? "не правильно" : StringStripWS($oHTML.Body.OuterHtml, 3)))

Русское сообщество AutoIt

CreatoR

Ну а как оно работает если неправильно?

Код: AutoIt [Выделить]

$oHTML = ObjCreate('HTMLFILE')
If Not IsObj($oHTML) Then Exit

$oHTML.body.InnerHtml = "<p id='test'>Hi!</p><p id='0'>buy</p>"

ConsoleWrite($oHTML.GetElementById('test').innertext & @LF)

Просто Open/Close не нужно в этом случае.

CreatoR

В общем вот что из этого сделал: HtmlXPath - Обработка XPath запросов для Html

inververs

CreatoR [?]

Цитировать

$oHTML.body.InnerHtml = "<p id='test'>Hi!</p><p id='0'>buy</p>"

Уточнение, так можно сделать, если не нужен <head>

Код: AutoIt [Выделить]

$document = ObjCreate('HTMLFILE')
$html = "<html><head><meta http-equiv=""Content-Type"" content=""text/html; charset=UTF-8""></head><body><div>hello</div><p id='test'>Hi!</p><p id='0'>buy</p></body></html>"
$document.body.InnerHtml = $html
;~ $document.write($html)
ConsoleWrite($document.documentElement.outerHTML & @CRLF)

Через innerHtml

Код: [Выделить]

<html><head></head><body><div>hello</div><p id="test">Hi!</p><p id="0">buy</p></body></html>Через write

Код: [Выделить]

<html><head><meta http-equiv="Content-Type" content="text/html; charset=UTF-8"></head><body><div>hello</div><p id="test">Hi!</p><p id="0">buy</p></body></html>

CreatoR

inververs [?]

Цитировать

Уточнение, так можно сделать, если не нужен <head>

Head может и нужен, но что делать если скрипт зависает с $document.write($html)?

Garrett

CreatoR [?]

Цитировать

но что делать если скрипт зависает

IMHO это из-за JS скриптов. В частности document.write.

inververs

CreatoR [?]

Цитировать

Head может и нужен, но что делать если скрипт зависает с $document.write($html)?

Еще может зависнуть из-за ActiveX... Может зависнуть из-за любого диалога или предупреждения.
К примеру:

Код: AutoIt [Выделить]

<html><head><body><script>alert(0);</script></body></html>

, пока не закроешь, будет ждать.
Тут такое же поведения, как и в браузере, поэтому любо запрещать выполнения JS, либо перед записью чистить от скриптов, стилей, cddata, фреймов итп.

Garrett [?]

Цитировать

IMHO это из-за JS скриптов. В частности document.write.

+1

CreatoR

Хорошо, тогда как по отключать все эти обработчики?

Русское сообщество AutoIt

Тема / Автор	Ответов	Последний ответ
Парсер html файла Автор Vadimmm0072 Стол заказов	4 Ответов 7039 Просмотров	Апрель 23, 2012, 19:14:27 от ggzgamer
[Автоматизация] Парсер с EsiTronic Автор rivega Общие вопросы по AutoIt	5 Ответов 3107 Просмотров	Октябрь 31, 2014, 14:07:45 от denispuh
есть ли html парсер на autoit ? Автор mitiya Автоматизация IE и Web-интерфейса	1 Ответов 2497 Просмотров	Апрель 20, 2013, 21:12:41 от sngr
Парсер, но не Html, а десктопных программ, баз данных. Автор bdkitty Общие вопросы по AutoIt	3 Ответов 2123 Просмотров	Сентябрь 28, 2013, 13:38:52 от bdkitty
Парсер Esi Tronic Автор e.belykh Общие вопросы по AutoIt	0 Ответов 787 Просмотров	Июль 24, 2014, 19:17:23 от e.belykh
Как ускорить работу парсер-программы Автор Нубокодер Автоматизация IE и Web-интерфейса	6 Ответов 1970 Просмотров	Февраль 05, 2015, 11:44:42 от darkwhite
Парсер тхт файлов Автор Nosfer_x Стол заказов	8 Ответов 3014 Просмотров	Март 06, 2015, 21:17:45 от Nosfer_x
[Данные, строки] Парсер html страниц с заменой текста между известными тегами Автор Tapok « 1 2 3 » Регулярные выражения и прочее	30 Ответов 15151 Просмотров	Апрель 26, 2015, 11:54:58 от Garrett
Перенесено: [Данные, строки] Парсер html страниц с заменой текста между известными тегами Автор madmasles Общие вопросы по AutoIt	0 Ответов 1023 Просмотров	Апрель 22, 2015, 17:49:49 от madmasles
COM-объект HTMLFile - свойства, методы Автор pboy Автоматизация IE и Web-интерфейса	1 Ответов 3494 Просмотров	Июнь 22, 2015, 13:17:44 от madmasles

Новости:

Автор Тема: Простой парсер HTML кода HTMLFILE (Прочитано 45245 раз)

Русское сообщество AutoIt

Русское сообщество AutoIt

Русское сообщество AutoIt

Русское сообщество AutoIt

Похожие темы