На сервере 1С:Предприятия произошла неисправимая ошибка
Добавлено: 06 май 2022, 19:56
Всем привет!
прошу помощи и совета, три месяца бьемся с плавающей ошибкой
На сервере 1С:Предприятия произошла неисправимая ошибка. Приложение будет закрыто
Ошибка плавающая и возникает только при длительных операциях закрытия периода (больше часа)
Версия платформы 8.3.17.1851, также пробовали на 8.3.19.1467, 8.3.20.1710, ошибка воспроизводится
конфигурация 1С - сильно отраслевая, на БСП, написана франчем 1С
при этом rphost не падает, падает только клиент 1С
сервера СУБД и приложения разнесены, все на виртуалках
Сервер СУБД - MS SQL 2017 14.0.3421.10
ресурсов на серверах при воспроизведении проблемы достаточно - смотрели оперативную память, процессор, дисковую систему
серверная лицензия - уровня ПРОФ, пробовали регулировать настройки кластера 1С, не помогло
на сервере 1с воспроизведения ошибки один рабочий процесс, памяти отъедает порядка 6GB при последнем воспроизведении
лог тж
что пробовали:
1. Очистка пользовательского кэша
2. Очистка серверного кэша
3. Воспроизведение на другом контуре (другой сервер приложений и сервер СУБД)
4. Обновиться на тестовом сервере на платформу 8.3.19.1467 – ошибка воспроизвелась
5. Пробовали отключать флаг в настройках кластера 1С – принудительно завершать проблемные процессы
6. Тестирование и исправление базы 1С – не дало результатов, ошибка воспроизвелась
7. Приоритизация протокола IPv4 над IPv6 – не помогло
8. Расширение диапазона портов рабочего сервера 1с на 1560:1691 – не помогло
9. Кратное увеличение времени засыпания сеанса в параметрах ИБ – ошибка воспроизводится
10. Проверка на платформе 8.3.20.1710 - воспроизвелось
11. Проверка закрытия с исключениями в антивирусе и с удаленным антивирусом - ошибка воспроизводится
12. Правка реестра по SynAttackProtect на сервере приложения 1C - не помогло
13. С сетевиками смотрели траффик в wireshark - за 1.5 минуты до ошибки есть TCP Retransmission, но как сказали это норм
важный момент - ошибка не воспроизводится если запустить клиент 1С на сервере приложения 1С, отрабатывает без ошибок
при запуске из другого места клиента 1С - воспроизводится
подскажите в каком направлении копать или что еще дописать по окружению 1С
заранее спасибо
прошу помощи и совета, три месяца бьемся с плавающей ошибкой
На сервере 1С:Предприятия произошла неисправимая ошибка. Приложение будет закрыто
Ошибка плавающая и возникает только при длительных операциях закрытия периода (больше часа)
Версия платформы 8.3.17.1851, также пробовали на 8.3.19.1467, 8.3.20.1710, ошибка воспроизводится
конфигурация 1С - сильно отраслевая, на БСП, написана франчем 1С
при этом rphost не падает, падает только клиент 1С
сервера СУБД и приложения разнесены, все на виртуалках
Сервер СУБД - MS SQL 2017 14.0.3421.10
ресурсов на серверах при воспроизведении проблемы достаточно - смотрели оперативную память, процессор, дисковую систему
серверная лицензия - уровня ПРОФ, пробовали регулировать настройки кластера 1С, не помогло
на сервере 1с воспроизведения ошибки один рабочий процесс, памяти отъедает порядка 6GB при последнем воспроизведении
лог тж
- Код: выделить все
21:08.809002-0,CONN,0,process=rphost,OSThread=26492,Txt='Connection removed from ping direction on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c,clientID=68301'
21:08.809003-0,CONN,0,process=rphost,OSThread=26492,Txt='Ping direction closed on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c'
21:08.809004-0,CONN,0,process=rphost,OSThread=24200,ClientID=68301,Txt=Incomming connection closed: client disconnected after silence
21:08.809005-16005,CONN,0,process=rphost,OSThread=19512,t:clientID=68301,t:clientID=68301,t:computerName=,t:applicationName=1CV8C,t:connectID=0,Calls=1
21:10.324000-0,CONN,0,process=rphost,OSThread=29052,ClientID=68302,Protected=1,Txt='Accepted, client=(2)10.213.59.123:50744, server=(2)10.213.182.5:1560, marker=1'
21:10.324001-0,CONN,0,process=rphost,OSThread=29052,Txt='Ping direction opened on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c'
21:10.324002-0,CONN,0,process=rphost,OSThread=29052,Txt='Connection added to ping direction on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c,clientID=68302,address=10.213.59.123:50744'
21:10.418005-0,CONN,2,process=rphost,OSThread=19512,t:clientID=68302,Txt=Srvr: SrcUserName1:
21:10.418006-0,CONN,2,process=rphost,OSThread=19512,t:clientID=68302,Txt=Srvr: DstUserName1:
21:10.434000-0,EXCP,0,process=rphost,OSThread=29052,ClientID=68302,Exception=NetDataExchangeException,Descr='server_addr=(2)10.213.59.123:50744 descr=10054(0x00002746): An existing connection was forcibly closed by the remote host. line=1141 file=D:\Jenkins\ci_builder2\WindowsBuild2_FWYIWV43RY32\Platform\src\rtrsrvc\src\DataExchangeServerImpl.cpp'
21:10.434001-0,EXCPCNTX,0,ClientComputerName=,ServerComputerName=,UserName=,ConnectString=
21:10.434002-0,CONN,0,process=rphost,OSThread=29052,Txt='Connection removed from ping direction on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c,clientID=68302'
21:10.434003-0,CONN,0,process=rphost,OSThread=29052,Txt='Ping direction closed on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c'
21:10.434006-0,CONN,0,process=rphost,OSThread=24200,ClientID=68302,Txt=Incomming connection closed: client disconnected after silence
21:10.434007-16007,CONN,0,process=rphost,OSThread=19512,t:clientID=68302,t:clientID=68302,t:computerName=,t:applicationName=1CV8C,t:connectID=0,Calls=1
21:11.949000-0,CONN,0,process=rphost,OSThread=21192,ClientID=68303,Protected=1,Txt='Accepted, client=(2)10.213.59.123:50745, server=(2)10.213.182.5:1560, marker=1'
21:11.949001-0,CONN,0,process=rphost,OSThread=21192,Txt='Ping direction opened on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c'
21:11.949002-0,CONN,0,process=rphost,OSThread=21192,Txt='Connection added to ping direction on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c,clientID=68303,address=10.213.59.123:50745'
21:12.027005-0,CONN,2,process=rphost,OSThread=19512,t:clientID=68303,Txt=Srvr: SrcUserName1:
21:12.027006-0,CONN,2,process=rphost,OSThread=19512,t:clientID=68303,Txt=Srvr: DstUserName1:
21:12.027012-0,EXCP,0,process=rphost,OSThread=26492,ClientID=68303,Exception=NetDataExchangeException,Descr='server_addr=(2)10.213.59.123:50745 descr=10054(0x00002746): An existing connection was forcibly closed by the remote host. line=1141 file=D:\Jenkins\ci_builder2\WindowsBuild2_FWYIWV43RY32\Platform\src\rtrsrvc\src\DataExchangeServerImpl.cpp'
21:12.027013-0,EXCPCNTX,0,ClientComputerName=,ServerComputerName=,UserName=,ConnectString=
21:12.027014-0,CONN,0,process=rphost,OSThread=26492,Txt='Connection removed from ping direction on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c,clientID=68303'
21:12.027015-0,CONN,0,process=rphost,OSThread=26492,Txt='Ping direction closed on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c'
21:12.027016-0,CONN,0,process=rphost,OSThread=24200,ClientID=68303,Txt=Incomming connection closed: client disconnected after silence
21:12.027017-17,CONN,0,process=rphost,OSThread=19512,t:clientID=68303,t:clientID=68303,t:computerName=,t:applicationName=1CV8C,t:connectID=0,Calls=1
21:12.934000-0,CONN,0,process=rphost,OSThread=12100,Txt='Ping direction statistics: address=169.254.189.10:1541,pingTimeout=5000,pingPeriod=1000,period=10157,packetsSent=10,avgResponseTime=0,maxResponseTime=0,packetsTimedOut=0,packetsLost=1,packetsLostAndFound=1'
21:13.543000-0,CONN,0,process=rphost,OSThread=29052,ClientID=68304,Protected=1,Txt='Accepted, client=(2)10.213.59.123:50747, server=(2)10.213.182.5:1560, marker=1'
21:13.543001-0,CONN,0,process=rphost,OSThread=26492,Txt='Ping direction opened on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c'
21:13.543002-0,CONN,0,process=rphost,OSThread=26492,Txt='Connection added to ping direction on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c,clientID=68304,address=10.213.59.123:50747'
21:13.652005-0,CONN,2,process=rphost,OSThread=19512,t:clientID=68304,Txt=Srvr: SrcUserName1: mgmt-srv1cv8@AM.RU
21:13.652006-0,CONN,2,process=rphost,OSThread=19512,t:clientID=68304,Txt=Srvr: DstUserName1:
21:13.668000-0,EXCP,0,process=rphost,OSThread=21192,ClientID=68304,Exception=NetDataExchangeException,Descr='server_addr=(2)10.213.59.123:50747 descr=10054(0x00002746): An existing connection was forcibly closed by the remote host. line=1141 file=D:\Jenkins\ci_builder2\WindowsBuild2_FWYIWV43RY32\Platform\src\rtrsrvc\src\DataExchangeServerImpl.cpp'
21:13.668002-0,EXCPCNTX,0,ClientComputerName=,ServerComputerName=,UserName=,ConnectString=
21:13.668003-0,CONN,0,process=rphost,OSThread=21192,Txt='Connection removed from ping direction on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c,clientID=68304'
21:13.668004-0,CONN,0,process=rphost,OSThread=21192,Txt='Ping direction closed on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c'
21:13.668005-0,CONN,0,process=rphost,OSThread=2896,ClientID=68304,Txt=Incomming connection closed: client disconnected after silence
21:13.668006-16006,CONN,0,process=rphost,OSThread=19512,t:clientID=68304,t:clientID=68304,t:computerName=,t:applicationName=1CV8C,t:connectID=0,Calls=1
21:13.715002-16001,CLSTR,3,process=rphost,p:processName=ServerJobExecutorContext,OSThread=4644,t:clientID=21,t:applicationName=AgentStandardCall,t:computerName=1c-app-hf-01,Txt=cpu:22 QueueLength:0 queueLength/numCPU:0 memDur:15 file:26 sql:14 fsql:14 result:63
21:15.184001-0,CONN,0,process=rphost,OSThread=8856,ClientID=68305,Protected=1,Txt='Accepted, client=(2)10.213.59.123:50748, server=(2)10.213.182.5:1560, marker=1'
21:15.184002-0,CONN,0,process=rphost,OSThread=8856,Txt='Ping direction opened on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c'
21:15.184003-0,CONN,0,process=rphost,OSThread=8856,Txt='Connection added to ping direction on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c,clientID=68305,address=10.213.59.123:50748'
21:15.230000-0,CONN,0,process=rphost,OSThread=31356,Txt='Ping direction settings changed on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c,pingTimeout=15000,pingPeriod=3000'
21:15.340002-0,CONN,2,process=rphost,OSThread=19512,t:clientID=68305,Txt=Srvr: SrcUserName1: mgmt-srv1cv8@AM.RU
21:15.340003-0,CONN,2,process=rphost,OSThread=19512,t:clientID=68305,Txt=Srvr: DstUserName1:
21:15.355004-0,CONN,2,process=rphost,OSThread=24200,t:clientID=68305,t:applicationName=1CV8C,Txt=Srvr: DstUserName2:
21:15.402029-0,EXCP,2,process=rphost,p:processName=1C_BUH_DU_UKPN,OSThread=24200,t:clientID=68305,t:applicationName=1CV8C,t:computerName=1crds-inf-p-01,t:connectID=2995,SessionID=5,Usr=ФИО,AppID=1CV8C,Exception=e0417abc-63b4-461b-b1b6-01d2d2b0cca5,Descr='src\rserver\src\SrvrInfoBaseImpl.cpp(10054):
e0417abc-63b4-461b-b1b6-01d2d2b0cca5: На сервере 1С:Предприятия произошла неисправимая ошибка. Приложение будет закрыто'
что пробовали:
1. Очистка пользовательского кэша
2. Очистка серверного кэша
3. Воспроизведение на другом контуре (другой сервер приложений и сервер СУБД)
4. Обновиться на тестовом сервере на платформу 8.3.19.1467 – ошибка воспроизвелась
5. Пробовали отключать флаг в настройках кластера 1С – принудительно завершать проблемные процессы
6. Тестирование и исправление базы 1С – не дало результатов, ошибка воспроизвелась
7. Приоритизация протокола IPv4 над IPv6 – не помогло
8. Расширение диапазона портов рабочего сервера 1с на 1560:1691 – не помогло
9. Кратное увеличение времени засыпания сеанса в параметрах ИБ – ошибка воспроизводится
10. Проверка на платформе 8.3.20.1710 - воспроизвелось
11. Проверка закрытия с исключениями в антивирусе и с удаленным антивирусом - ошибка воспроизводится
12. Правка реестра по SynAttackProtect на сервере приложения 1C - не помогло
13. С сетевиками смотрели траффик в wireshark - за 1.5 минуты до ошибки есть TCP Retransmission, но как сказали это норм
важный момент - ошибка не воспроизводится если запустить клиент 1С на сервере приложения 1С, отрабатывает без ошибок
при запуске из другого места клиента 1С - воспроизводится
подскажите в каком направлении копать или что еще дописать по окружению 1С
заранее спасибо