Страница 1 из 1

На сервере 1С:Предприятия произошла неисправимая ошибка

СообщениеДобавлено: 06 май 2022, 19:56
alexkul
Всем привет!
прошу помощи и совета, три месяца бьемся с плавающей ошибкой
На сервере 1С:Предприятия произошла неисправимая ошибка. Приложение будет закрыто

Ошибка плавающая и возникает только при длительных операциях закрытия периода (больше часа)
Версия платформы 8.3.17.1851, также пробовали на 8.3.19.1467, 8.3.20.1710, ошибка воспроизводится
конфигурация 1С - сильно отраслевая, на БСП, написана франчем 1С
при этом rphost не падает, падает только клиент 1С
сервера СУБД и приложения разнесены, все на виртуалках
Сервер СУБД - MS SQL 2017 14.0.3421.10
ресурсов на серверах при воспроизведении проблемы достаточно - смотрели оперативную память, процессор, дисковую систему
серверная лицензия - уровня ПРОФ, пробовали регулировать настройки кластера 1С, не помогло
на сервере 1с воспроизведения ошибки один рабочий процесс, памяти отъедает порядка 6GB при последнем воспроизведении

лог тж
Код: выделить все
21:08.809002-0,CONN,0,process=rphost,OSThread=26492,Txt='Connection removed from ping direction on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c,clientID=68301'
21:08.809003-0,CONN,0,process=rphost,OSThread=26492,Txt='Ping direction closed on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c'
21:08.809004-0,CONN,0,process=rphost,OSThread=24200,ClientID=68301,Txt=Incomming connection closed: client disconnected after silence
21:08.809005-16005,CONN,0,process=rphost,OSThread=19512,t:clientID=68301,t:clientID=68301,t:computerName=,t:applicationName=1CV8C,t:connectID=0,Calls=1
21:10.324000-0,CONN,0,process=rphost,OSThread=29052,ClientID=68302,Protected=1,Txt='Accepted, client=(2)10.213.59.123:50744, server=(2)10.213.182.5:1560, marker=1'
21:10.324001-0,CONN,0,process=rphost,OSThread=29052,Txt='Ping direction opened on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c'
21:10.324002-0,CONN,0,process=rphost,OSThread=29052,Txt='Connection added to ping direction on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c,clientID=68302,address=10.213.59.123:50744'
21:10.418005-0,CONN,2,process=rphost,OSThread=19512,t:clientID=68302,Txt=Srvr: SrcUserName1:
21:10.418006-0,CONN,2,process=rphost,OSThread=19512,t:clientID=68302,Txt=Srvr: DstUserName1:
21:10.434000-0,EXCP,0,process=rphost,OSThread=29052,ClientID=68302,Exception=NetDataExchangeException,Descr='server_addr=(2)10.213.59.123:50744 descr=10054(0x00002746): An existing connection was forcibly closed by the remote host.  line=1141 file=D:\Jenkins\ci_builder2\WindowsBuild2_FWYIWV43RY32\Platform\src\rtrsrvc\src\DataExchangeServerImpl.cpp'
21:10.434001-0,EXCPCNTX,0,ClientComputerName=,ServerComputerName=,UserName=,ConnectString=
21:10.434002-0,CONN,0,process=rphost,OSThread=29052,Txt='Connection removed from ping direction on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c,clientID=68302'
21:10.434003-0,CONN,0,process=rphost,OSThread=29052,Txt='Ping direction closed on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c'
21:10.434006-0,CONN,0,process=rphost,OSThread=24200,ClientID=68302,Txt=Incomming connection closed: client disconnected after silence
21:10.434007-16007,CONN,0,process=rphost,OSThread=19512,t:clientID=68302,t:clientID=68302,t:computerName=,t:applicationName=1CV8C,t:connectID=0,Calls=1
21:11.949000-0,CONN,0,process=rphost,OSThread=21192,ClientID=68303,Protected=1,Txt='Accepted, client=(2)10.213.59.123:50745, server=(2)10.213.182.5:1560, marker=1'
21:11.949001-0,CONN,0,process=rphost,OSThread=21192,Txt='Ping direction opened on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c'
21:11.949002-0,CONN,0,process=rphost,OSThread=21192,Txt='Connection added to ping direction on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c,clientID=68303,address=10.213.59.123:50745'
21:12.027005-0,CONN,2,process=rphost,OSThread=19512,t:clientID=68303,Txt=Srvr: SrcUserName1:
21:12.027006-0,CONN,2,process=rphost,OSThread=19512,t:clientID=68303,Txt=Srvr: DstUserName1:
21:12.027012-0,EXCP,0,process=rphost,OSThread=26492,ClientID=68303,Exception=NetDataExchangeException,Descr='server_addr=(2)10.213.59.123:50745 descr=10054(0x00002746): An existing connection was forcibly closed by the remote host.  line=1141 file=D:\Jenkins\ci_builder2\WindowsBuild2_FWYIWV43RY32\Platform\src\rtrsrvc\src\DataExchangeServerImpl.cpp'
21:12.027013-0,EXCPCNTX,0,ClientComputerName=,ServerComputerName=,UserName=,ConnectString=
21:12.027014-0,CONN,0,process=rphost,OSThread=26492,Txt='Connection removed from ping direction on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c,clientID=68303'
21:12.027015-0,CONN,0,process=rphost,OSThread=26492,Txt='Ping direction closed on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c'
21:12.027016-0,CONN,0,process=rphost,OSThread=24200,ClientID=68303,Txt=Incomming connection closed: client disconnected after silence
21:12.027017-17,CONN,0,process=rphost,OSThread=19512,t:clientID=68303,t:clientID=68303,t:computerName=,t:applicationName=1CV8C,t:connectID=0,Calls=1
21:12.934000-0,CONN,0,process=rphost,OSThread=12100,Txt='Ping direction statistics: address=169.254.189.10:1541,pingTimeout=5000,pingPeriod=1000,period=10157,packetsSent=10,avgResponseTime=0,maxResponseTime=0,packetsTimedOut=0,packetsLost=1,packetsLostAndFound=1'
21:13.543000-0,CONN,0,process=rphost,OSThread=29052,ClientID=68304,Protected=1,Txt='Accepted, client=(2)10.213.59.123:50747, server=(2)10.213.182.5:1560, marker=1'
21:13.543001-0,CONN,0,process=rphost,OSThread=26492,Txt='Ping direction opened on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c'
21:13.543002-0,CONN,0,process=rphost,OSThread=26492,Txt='Connection added to ping direction on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c,clientID=68304,address=10.213.59.123:50747'
21:13.652005-0,CONN,2,process=rphost,OSThread=19512,t:clientID=68304,Txt=Srvr: SrcUserName1: mgmt-srv1cv8@AM.RU
21:13.652006-0,CONN,2,process=rphost,OSThread=19512,t:clientID=68304,Txt=Srvr: DstUserName1:
21:13.668000-0,EXCP,0,process=rphost,OSThread=21192,ClientID=68304,Exception=NetDataExchangeException,Descr='server_addr=(2)10.213.59.123:50747 descr=10054(0x00002746): An existing connection was forcibly closed by the remote host.  line=1141 file=D:\Jenkins\ci_builder2\WindowsBuild2_FWYIWV43RY32\Platform\src\rtrsrvc\src\DataExchangeServerImpl.cpp'
21:13.668002-0,EXCPCNTX,0,ClientComputerName=,ServerComputerName=,UserName=,ConnectString=
21:13.668003-0,CONN,0,process=rphost,OSThread=21192,Txt='Connection removed from ping direction on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c,clientID=68304'
21:13.668004-0,CONN,0,process=rphost,OSThread=21192,Txt='Ping direction closed on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c'
21:13.668005-0,CONN,0,process=rphost,OSThread=2896,ClientID=68304,Txt=Incomming connection closed: client disconnected after silence
21:13.668006-16006,CONN,0,process=rphost,OSThread=19512,t:clientID=68304,t:clientID=68304,t:computerName=,t:applicationName=1CV8C,t:connectID=0,Calls=1
21:13.715002-16001,CLSTR,3,process=rphost,p:processName=ServerJobExecutorContext,OSThread=4644,t:clientID=21,t:applicationName=AgentStandardCall,t:computerName=1c-app-hf-01,Txt=cpu:22 QueueLength:0 queueLength/numCPU:0 memDur:15 file:26 sql:14 fsql:14 result:63
21:15.184001-0,CONN,0,process=rphost,OSThread=8856,ClientID=68305,Protected=1,Txt='Accepted, client=(2)10.213.59.123:50748, server=(2)10.213.182.5:1560, marker=1'
21:15.184002-0,CONN,0,process=rphost,OSThread=8856,Txt='Ping direction opened on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c'
21:15.184003-0,CONN,0,process=rphost,OSThread=8856,Txt='Connection added to ping direction on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c,clientID=68305,address=10.213.59.123:50748'
21:15.230000-0,CONN,0,process=rphost,OSThread=31356,Txt='Ping direction settings changed on server: directionID=3cf205ac-087b-4b6b-bfe1-6c470cf0e74c,pingTimeout=15000,pingPeriod=3000'
21:15.340002-0,CONN,2,process=rphost,OSThread=19512,t:clientID=68305,Txt=Srvr: SrcUserName1: mgmt-srv1cv8@AM.RU
21:15.340003-0,CONN,2,process=rphost,OSThread=19512,t:clientID=68305,Txt=Srvr: DstUserName1:
21:15.355004-0,CONN,2,process=rphost,OSThread=24200,t:clientID=68305,t:applicationName=1CV8C,Txt=Srvr: DstUserName2:
21:15.402029-0,EXCP,2,process=rphost,p:processName=1C_BUH_DU_UKPN,OSThread=24200,t:clientID=68305,t:applicationName=1CV8C,t:computerName=1crds-inf-p-01,t:connectID=2995,SessionID=5,Usr=ФИО,AppID=1CV8C,Exception=e0417abc-63b4-461b-b1b6-01d2d2b0cca5,Descr='src\rserver\src\SrvrInfoBaseImpl.cpp(10054):
e0417abc-63b4-461b-b1b6-01d2d2b0cca5: На сервере 1С:Предприятия произошла неисправимая ошибка. Приложение будет закрыто'


что пробовали:
1. Очистка пользовательского кэша
2. Очистка серверного кэша
3. Воспроизведение на другом контуре (другой сервер приложений и сервер СУБД)
4. Обновиться на тестовом сервере на платформу 8.3.19.1467 – ошибка воспроизвелась
5. Пробовали отключать флаг в настройках кластера 1С – принудительно завершать проблемные процессы
6. Тестирование и исправление базы 1С – не дало результатов, ошибка воспроизвелась
7. Приоритизация протокола IPv4 над IPv6 – не помогло
8. Расширение диапазона портов рабочего сервера 1с на 1560:1691 – не помогло
9. Кратное увеличение времени засыпания сеанса в параметрах ИБ – ошибка воспроизводится
10. Проверка на платформе 8.3.20.1710 - воспроизвелось
11. Проверка закрытия с исключениями в антивирусе и с удаленным антивирусом - ошибка воспроизводится
12. Правка реестра по SynAttackProtect на сервере приложения 1C - не помогло
13. С сетевиками смотрели траффик в wireshark - за 1.5 минуты до ошибки есть TCP Retransmission, но как сказали это норм

важный момент - ошибка не воспроизводится если запустить клиент 1С на сервере приложения 1С, отрабатывает без ошибок
при запуске из другого места клиента 1С - воспроизводится

подскажите в каком направлении копать или что еще дописать по окружению 1С
заранее спасибо

Re: На сервере 1С:Предприятия произошла неисправимая ошибка

СообщениеДобавлено: 12 май 2022, 07:33
kauksi
Где то кривой запрос, сжирающий память скорее всего

Re: На сервере 1С:Предприятия произошла неисправимая ошибка

СообщениеДобавлено: 16 май 2022, 12:18
alexkul
Где то кривой запрос, сжирающий память скорее всего

дело в том что воспроизводится не только на одной конфигурации 1С
и НЕ воспроизводится если клиент 1С запустить на сервере приложения 1С

Re: На сервере 1С:Предприятия произошла неисправимая ошибка

СообщениеДобавлено: 16 май 2022, 13:08
Гилёв Вячеслав

Re: На сервере 1С:Предприятия произошла неисправимая ошибка

СообщениеДобавлено: 16 май 2022, 14:24
alexkul
Спасибо, попробуем сначала проверить на 8.3.21
отпишусь по результатам

Re: На сервере 1С:Предприятия произошла неисправимая ошибка

СообщениеДобавлено: 16 май 2022, 17:37
alexkul
на 8.3.21.1302 ошибка воспроизвелась

Re: На сервере 1С:Предприятия произошла неисправимая ошибка

СообщениеДобавлено: 16 май 2022, 17:59
Гилёв Вячеслав
думаю будет правильным научить фирму 1С вопрооизводить проблему

Re: На сервере 1С:Предприятия произошла неисправимая ошибка

СообщениеДобавлено: 27 май 2022, 09:22
alexkul
2022-05-27_9-20-25.png
firewall policy
2022-05-27_9-20-25.png (12.86 KiB) Просмотров: 12088
ошибку решили своими силами, 1с так и не ответила)
напишу для сообщества, может кому-то будет полезно

исправили настройками межсетевого фаервола (session TTL value)
когда клиент и сервер приложения были в разных подсетях, при длительных операциях клиент 1с не мог переподключиться к серверу приложения 1с - почему, вопрос

вот тут мануал по фаерволу
https://community.fortinet.com/t5/Forti ... a-p/198289

session-ttl поменяли с 0 на never
ошибка полностью ушла на всех контурах на всех базах

за информацию спасибо

СообщениеДобавлено: 27 май 2022, 16:45
Гилёв Вячеслав
так понимаю если у кого то будет установлен касперский с брэндмауэром, то "это" не сработает
и получается что вообще это ошибка не 1С, а некорректно настроенной среды рубящей сессии

Re: На сервере 1С:Предприятия произошла неисправимая ошибка

СообщениеДобавлено: 30 май 2022, 10:56
alexkul
Вячеслав, получается так
для информации - на машине с клиентом 1С Касперский установлен у нас

Re: На сервере 1С:Предприятия произошла неисправимая ошибка

СообщениеДобавлено: 30 май 2022, 11:16
Гилёв Вячеслав
речь о сервере, ведь инициатор сообщения сервер 1С "На сервере 1С:Предприятия произошла..."