_IENavigate и ошибка Invalid Object Type

Gealut · 9 Ноя 2011

У меня скрипт перебирает список ссылок из текстового файла, открывает каждую в эксплорере, считывает нужную информацию и записывает в выводной файл.

За открытие нужной страницы в эксплорере отвечает вот эта функция:

Код:

Func MyIENavigate($aI, $ssyl)
	While 1
		_IENavigate($aI, $ssyl, 0)
		If @error = 1 Or @error = 3 Or @error = 4 Or @error = 8 Then
			; 1 - General Error
			; 3 - Invalid Data Type
			; 4 - Invalid Object Type
			; 8 - Access Is Denied
			ErrorLogWrite("Ошибка _IENavigate (" & @error & ") открытия страницы " & $ssyl)
			Sleep(60000)
			$aI = _IECreate()
			Sleep(5000)
			ContinueLoop
		ElseIf @error = 6 Or @error = 9 Then
			; 6 - Load Wait Timeout
			; 9 - Client Disconnected
			ContinueLoop
		EndIf
		; Раз пришли сюда - ошибки не было
		; То есть надо только подождать
		_IELoadWait($aI, 1000, 10000)
		If @Error = 0 Then ExitLoop
		If @error = 1 Or @error = 3 Or @error = 4 Or @error = 8 Then
			; 1 - General Error
			; 3 - Invalid Data Type
			; 4 - Invalid Object Type
			; 8 - Access Is Denied
			ErrorLogWrite("Ошибка _IELoadWait (" & @error & ") открытия страницы " & $ssyl)
			Sleep(60000)
			$aI = _IECreate()
			Sleep(5000)
			ContinueLoop
		Else
			; 6 - Load Wait Timeout
			; 9 - Client Disconnected
			ContinueLoop
		EndIf			
	WEnd
	Return $aI
EndFunc

К сожалению, через каждые 1000-3000 ссылок возникает ошибка номер 4 (Invalid Object Type), в основном у _IENavigate, но иногда и у _IELoadWait. Я пытался ее победить путем создания новой копии IE, но не очень это помогает - после создания 3-4 копий эксплорер перестает вообще загружать ссылки. Вот кусочек сгенеренного функцией лога:

Код:

=== Start Program: 09.11.2011 15:18:12
09.11.2011 17:11:04   Ошибка _IENavigate (4) открытия страницы http://www.inmagine.com/ishop_single/bw0098067-photo
09.11.2011 17:12:16   Ошибка _IENavigate (4) открытия страницы http://www.inmagine.com/ishop_single/bw0098068-photo
09.11.2011 17:14:37   Ошибка _IENavigate (4) открытия страницы http://www.inmagine.com/ishop_single/bw0098069-photo
09.11.2011 17:16:12   Ошибка _IENavigate (3) открытия страницы http://www.inmagine.com/ishop_single/bw0098069-photo
09.11.2011 17:17:25   Ошибка _IENavigate (4) открытия страницы http://www.inmagine.com/ishop_single/bw0098070-photo
09.11.2011 17:50:11   Ошибка _IELoadWait (4) открытия страницы http://www.inmagine.com/ishop_single/bw0146068-photo
09.11.2011 17:51:24   Ошибка _IENavigate (4) открытия страницы http://www.inmagine.com/ishop_single/bw0146069-photo
09.11.2011 17:52:59   Ошибка _IENavigate (3) открытия страницы http://www.inmagine.com/ishop_single/bw0146069-photo
09.11.2011 18:13:45   Ошибка _IELoadWait (4) открытия страницы http://www.inmagine.com/ishop_single/bw0146070-photo
09.11.2011 18:18:09   Ошибка _IENavigate (4) открытия страницы http://www.inmagine.com/ishop_single/bw0146071-photo
09.11.2011 18:19:22   Ошибка _IENavigate (4) открытия страницы http://www.inmagine.com/ishop_single/bw0146072-photo

Пример списка ссылок:

http://www.inmagine.com/pdrb164/pdrb164001-photo
http://www.inmagine.com/pdrb164/pdrb164002-photo
http://www.inmagine.com/pdrb164/pdrb164003-photo
http://www.inmagine.com/pdrb164/pdrb164004-photo

Между открытиями страниц в скрипте задана пауза в 2 сек, перед открытием новой копии IE пауза на 60 сек.

Ошибка не привязана к работе с конкретным сайтом, при обработке других сайтов все тоже самое. У меня складывается впечатление, что ошибка как-то связана с какими-нибудь проблемами интернет-соединения, потому что на ноутах, работающих по вай-фаю ошибка появляется быстрее.

Может, кто-нибудь что-нибудь подскажет на эту тему? Не смог ничего внятного найти ни на этом форуме, ни на английском.

Спасибо.

shakur · 9 Ноя 2011

Я пытался ее победить путем создания новой копии IE, но не очень это помогает - после создания 3-4 копий эксплорер перестает вообще загружать ссылки

Обьекты IE остаются в памяти? выгружать хоть не забываете?

по-моему ф-ция бред, сорри если грубо) зачем такие сложности? для решения вашей задачи разве такого скрипта не достаточно?

Код:

#include <IE.au3>
#include <file.au3>

dim $url[1]

$oIE = _IECreate("about:blank",0,0)
_FileReadToArray ("файл ссылок",$url)

for $i = 1 to $url[0]
 _IENavigate($oIE, $url)
 ;sleep(1000)
if @Error then
 $i -= 1 
; пробуем еще раз...
; или 
 ContinueLoop ; пропускаем эту ссылку
 
endif
 ; считываем данные с веб-страницы....
 ;записываем в файл
Next
_IEQuit($oIE)

Gealut · 10 Ноя 2011

Особых отличий предложенного вами варианта от моего не вижу. Кроме того, что у вас ожидание окончания загрузки страницы возложено на _IENavigate. У меня тоже когда-то так было сделано в одной из старых версий (я этот скрипт уже года полтора как постоянно совершенствую). Но потом я от этого варианта отказался, сейчас уже не помню почему и перешел на ожидание окончания загрузки страницы через _IELoadWait.

В любом случае, речь идет именно о том, что _IENavigate не может загрузить какую-нибудь страницу. И дело не в странице - после перезапуска скрипта он эту страницу прекрасно обрабатывает. В последний раз когда скрипт так завис Internet Explorer не показывал никакой страницы, а при наведении курсора выдавал всплывающее сообщение, что он не может загрузить страницу.

И ошибка не стабильна - иногда скрипт получает ее через ~1000 открытых страниц, иногда после пары тысяч, а иногда может отработать файл с 20 тысячами ссылок без каких-либо ошибок. Скрипт эксплуатируется на 3-4 компьютерах одновременно, на ноуте по вай-фаю ошибки чаще.

В принципе, на английском форуме я нашел совет перейти на Autoit последней беты, так как проблема может быть в связке IE.au3 и Internet Explorer 9. Только не очень хочется этого делать, в скрипте на данный момент уже больше 3000 строк кода, а при переходе на бету могут полезть ошибки в других частях скрипта... :(

shakur · 10 Ноя 2011

пробывали работать с объектом Shell.Explorer.2? как он себя ведет?

Gealut · 10 Ноя 2011

Нет, не пробовал. Даже не думал о таком варианте. Буду курить доку, но проблем будет явно больше, чем есть сейчас: надо будет переписывать все куски кода, в которых используются такие функции как _IEImgGetCollection, _IETagNameGetCollection, _IETableGetCollection.

Сегодня утром откатил на одном ноуте (с win7) IE9 до IE8. С тех пор обработано примерно 6000 ссылок, ошибок не было. Это, конечно, на решение проблемы не тянет, только как временная "заплатка".

shakur · 10 Ноя 2011

надо будет переписывать все куски кода, в которых используются такие функции как _IEImgGetCollection, _IETagNameGetCollection, _IETableGetCollection

та ни чего не надо переписывать...

Код:

...
$Form1 = GUICreate("ы", 1190,1250,  @DesktopWidth/2-190, @DesktopHeight/2-250)
$oIE = ObjCreate("Shell.Explorer.2")
$GUIActiveX = GUICtrlCreateObj($oIE, 215, 0, 435, 600)
;GUISetState(@SW_SHOW)
...

а далее работаем с переменной $oIE, как мы бы и работали в случае

Код:

$oIE = _IECreate("about:blank",0,0)

Добавлено:
Сообщение автоматически объединено: 11 Ноя 2011

считывает нужную информацию

а кокого вида инфу вы считываете, мб не стоит загружать каждый раз URL в браузере?, а воспользоватся

Код:

_INetGetSource

получать исходный код страницы и ...

Gealut · 12 Ноя 2011

Спасибо за Shell.Explorer.2, не знал про такую возможность, интересный вариант.

Сделал так (размеры - чтобы выводить на инфпанель скрипта):

Код:

Global $MyIE = ObjCreate("Shell.Explorer.2")
...
$GUIActiveX = GUICtrlCreateObj ($MyIE, 8, 208, 369, 128)
$MyIE.navigate("about:blank")

и функцию открытия страниц:

Код:

Func MyIENavigate($ssyl)
	$MyIE.navigate($ssyl)
	While $MyIE.readyState <> 4
		Sleep(100)
	WEnd
EndFunc

Теперь надо время, чтобы потестилось. На трех компах уже запущен такой вариант. Завтра-послезавтра будет статистика, падает или нет.

Надо еще подумать нельзя ли масштабировать выводимые страницы до размеров созданного окна... Это так, пришло в голову пока писал пост... :smile:

Gealut · 13 Ноя 2011

В общем, решение оказалось довольно неплохое. Конечно, Shell.Explorer.2 более тормозной, чем IE, страницы в себя грузит медленнее, так что скрипт больше времени тратит на обработку каждой ссылки. Но это буду оптимизировать в дальнейшем, пока же главное, что не глючит.

Еще скрипт с использованием Shell.Explorer.2 начал есть лишнюю память, на ноуте чуть меньше чем за сутки обработал 9000 ссылок и сказал "Out of memory". Но я откопал на английском форуме функцию _ReduceMemory, она неплохо помогает. В любом случае, это уже другая тема.

Спасибо shakur за помощь.

madmasles · 13 Ноя 2011

Gealut [?]

откопал на английском форуме функцию _ReduceMemory

_WinAPI_EmptyWorkingSet() в WinAPIEx.au3. (см. мою подпись)

darkwhite · 23 Ноя 2011

пробывали работать с объектом Shell.Explorer.2? как он себя ведет?

В общем, решение оказалось довольно неплохое. Конечно, Shell.Explorer.2 более тормозной, чем IE, страницы в себя грузит медленнее, так что скрипт больше времени тратит на обработку каждой ссылки. Но это буду оптимизировать в дальнейшем, пока же главное, что не глючит.

Более чем странно )) ведь Shell.Explorer.2 урезанный по возможностям ( и то лишь по нескольким) IE ) :scratch:

Автор темы	Похожие темы	Форум	Ответы	Дата
T	Не работает _IENavigate()/$oIE.Navigate()	Общие вопросы по AutoIt	9	21 Июн 2015
G	[Ошибки] Некорректная работа _IENavigate	Автоматизация IE и Web-интерфейса	1	21 Мар 2015
J	Проблема с функцией _IENavigate	Автоматизация IE и Web-интерфейса	3	7 Дек 2014
Z	[Сеть, интернет] _IENavigate() затирает другие прорисованные элементы в окне при вызове	Автоматизация IE и Web-интерфейса	0	3 Ноя 2013
V	Ошибка при использовании _IENavigate	Автоматизация IE и Web-интерфейса	9	28 Фев 2013

Поиск

Поиск

_IENavigate и ошибка Invalid Object Type

Gealut

Новичок

shakur

Осваивающий

Gealut

Новичок

shakur

Осваивающий

Gealut

Новичок

shakur

Осваивающий

Gealut

Новичок

Gealut

Новичок

madmasles

Модератор

darkwhite

Знающий