Жизнь замечательных грибов
Сюда тащатся заметки из жизни
Перейдя с Windows на Linux, теряется возможность управлять сервером 1С Предприятие через консоль администрирования, через оснастку. Но! оказывается довольно давно уже в платформе зашита подобная же утилита, которая доступна через «Функции для технического специалиста»: Стандартные -> Управление серверами.
При запуске будет практически аналогичная функциональность доступная ранее через консоль:
Задача: распаралелить медленную вставку записей в БД 1С, при чтении файла Excel
Как ни странно, но такая возможность есть и работает начиная с версии платформы 8.3.8. Т.е. можно запустить фоновое задание внутри фонового задания….ну например по вставке в БД большого количества записей, которая выполняется весьма медленно. Полноценно этот процесс распаралелить можно например как-то так:
|
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 |
Функция СделатьЗаписьвБДПДЗФоново(парам) экспорт ... // делаем медленную запись в БД ... конецфункции // Просматриваем массив с идентификаторами фоновых заданий и удаляем те которые завершились Функция ПочиститьМассивОтЗавершенныхЗаданий(МассивФоновыхЗаданий) экспорт для каждого ФЗМ из МассивФоновыхЗаданий цикл ФЗ = ФоновыеЗадания.НайтиПоУникальномуИдентификатору(ФЗМ); если ФЗ.Состояние<>СостояниеФоновогоЗадания.Активно тогда МассивФоновыхЗаданий.Удалить(МассивФоновыхЗаданий.Найти(ФЗМ)); конецесли; конеццикла; возврат МассивФоновыхЗаданий; конецфункции // выполняем загрузку построчно файла Excel, запуская запись данных в БД // отдельным потоком. Количество потоков ограничивам 10 штуками Функция ВыполнитьЗагрузку(парам) экспорт МассивФоновыхЗаданий=Новый Массив(); МаксимумЗаданий=10; ... Для нСтрокаТФ = 2 ПО КолВоСтрокФайла Цикл .... МассивПараметров = Новый Массив; Параметры=Новый Структура("aa,bb,cc", 1, 2, 3, ); МассивПараметров.Добавить(Параметры); ФЗ = ФоновыеЗадания.Выполнить("ДлительныеОперации.СделатьЗаписьвБДПДЗФоново",МассивПараметров); МассивФоновыхЗаданий.Добавить(ФЗ.УникальныйИдентификатор); МассивФоновыхЗаданий=ПочиститьМассивОтЗавершенныхЗаданий(МассивФоновыхЗаданий); // ждём пока завершаться запущеные потоки, если их больше 10 пока МассивФоновыхЗаданий.Количество()>МаксимумЗаданий цикл МассивФоновыхЗаданий=ПочиститьМассивОтЗавершенныхЗаданий(МассивФоновыхЗаданий); конеццикла; .... конеццикла; конецфункции |
В ниже приведённом каркасе кода, фоново выполняется функция ВыполнитьЗагрузку(), которая читает большой файл Excel, затем каждый цикл вставки записи в БД запускает в свою очередь фоново, ограничивая в данном случае количество фоновых заданий 10 штуками.
Вот не писал бы, если бы не припекло. Бесконечно звонят, предлагают всякие услуги купить. Причем звонят не роботы, а люди. Каждый раз прошу и вежливо и руганью удалить меня из своих БД и больше не звонить НИКОГДА. Не понимают..
Да, зарегистрирован на сайте. Но не сам, а принудительно в школе. И нигде своего согласия не давал на спам звонки. И возможности отозвать у них «согласие» на сайте нет. И учётку удалить тоже нет возможности.
Задача: загрузить в табличный документ на форме файл большого размера, с индикацией прогресса загрузки с использованием фоновой работы.
Решение: если поддержка фоновой работы в 1С была уже довольно давно, то асинхронная загрузка файлов на сервер появилась лишь начиная с версии 8.3.15.1489 ,Ну тоже уже давно, но руки добрались начать использовать только сейчас, т.к. ранее было не критично — не настолько большие файлы загружал/обрабатывал.
Итак, сначала на форме разместим индикатор загрузки. Для этого в реквизитах формы необходимо создать переменную типа «число», и перетащив её на форму выбрать тип «индикатор»:
На кнопку «Загрузить ЛС» навесим открытие диалогового окна:
|
1 2 3 |
Фильтр = "Файл с лицевыми счетами(*.xlsx)|*.xlsx"; ПараметрыДиалога = новый ПараметрыДиалогаПомещенияФайлов("Выберите файлы XLSX", Истина, Фильтр); |
А чуть ниже определим обработчики оповещения о ходе загрузки файла на сервер и окончании загрузки файла, которые укажем при вызове процедуры «НачатьПомещениеФайлаНаСервер» (есть еще и «НачатьПомещениеФайловНаСервер»). В итоге код получится такой:
|
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 |
&НаКлиенте Процедура ЗагрузитьЛС(Команда) этаформа.ИндикаторЗагрузкиЛС=0; Фильтр = "Файл с лицевыми счетами(*.xlsx)|*.xlsx"; ПараметрыДиалога = новый ПараметрыДиалогаПомещенияФайлов("Выберите файлы XLSX", Истина, Фильтр); ОповещениеОЗавершении = новый ОписаниеОповещения("ПослеЗагрузкиФайлаЛС", ЭтаФорма); ОповещениеОХодеЗагрузки = новый ОписаниеОповещения("ОповещениеОХодеЗагрузкиЛС", ЭтаФорма); Этаформа.Элементы.ПояснениеКЗагрузкеЛС.Заголовок="Перемещаю файл на сервер.."; НачатьПомещениеФайлаНаСервер(ОповещениеОЗавершении,ОповещениеОХодеЗагрузки,,,ПараметрыДиалога, УникальныйИдентификатор); КонецПроцедуры &НаКлиенте Процедура ПослеЗагрузкиФайлаЛС (ОписаниеФайла, ДопПараметры) Экспорт Этаформа.Элементы.ПояснениеКЗагрузкеЛС.Заголовок="Файл загружен, обрабатываю.."; этаформа.ИндикаторЗагрузкиЛС=0; КонецПроцедуры &НаКлиенте Процедура ОповещениеОХодеЗагрузкиЛС (ПомещаемыйФайл, Помещено, ОтказОтПомещенияФайла,ДополнительныеПараметры) Экспорт этаформа.ИндикаторЗагрузкиЛС=Помещено; КонецПроцедуры |
В результате чего после выбора файла, по экрану побежит индикатор хода перемещения файла на сервер. Далее этот файл необходимо будет обработать на сервере фоново. И тут возникает один нюанс: мы не можем передать в фоновое задание ссылку на перемещенный файл во временном хранилище.Точнее можем, но фоновое задание это хранилище прочитать не может (это то ли глюк, то ли фича платформы — не понятно). Проблема.. Тогда делаем финт ушами: перед уходом в «фон», мы создадим временный файл во временной папке пользователя 1С, и передадим в фон уже не ссылку на него, а непосредственно имя временного файла. Для этого я просто написал функцию, которая на входе получает адрес загруженного файла, а на выходе даёт имя временного файла:
|
1 2 3 4 5 6 7 |
&НаСервере Функция СохранитьФайлНаСервере(АдресВременногоХранилища,расш) ДвоичныеДанные = ПолучитьИзВременногоХранилища(АдресВременногоХранилища); ИмяВременногоФайлаХар = ПолучитьИмяВременногоФайла(расш); ДвоичныеДанные.Записать(ИмяВременногоФайлаХар); возврат ИмяВременногоФайлаХар; КонецФункции |
Кроме того, чтобы мы могли передать результат в обработку по завершению фоновой работы, нам необходимо при запуске фонового задания передать в него некоторые параметры, а именно:
|
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 |
&НаКлиенте Процедура ПослеЗагрузкиФайлаЛС (ОписаниеФайла, ДопПараметры) Экспорт Этаформа.Элементы.ПояснениеКЗагрузкеЛС.Заголовок="Файл загружен, обрабатываю.."; этаформа.ИндикаторЗагрузкиЛС=0; инф=Новый Структура("ВременныйФайл,Расширение,ЛС_начало,ЛС_лс,ЛС_то,ЛС_дата_установки_пу,АдресВременногХранилища"); инф.ВременныйФайл=СохранитьФайлНаСервере(ОписаниеФайла.адрес,ОписаниеФайла.ссылканафайл.расширение); инф.Расширение=ОписаниеФайла.ссылканафайл.расширение; инф.ЛС_начало=объект.ЛС_начало; инф.ЛС_лс=объект.ЛС_лс; инф.ЛС_то=объект.ЛС_то; инф.ЛС_дата_установки_пу=объект.ЛС_дата_установки_пу; инф.АдресВременногХранилища=объект.ВрХранилищеФормы; КонецПроцедуры &НаСервере Процедура ПриСозданииНаСервере(Отказ, СтандартнаяОбработка) объект.ВрХранилищеФормы=ПоместитьВоВременноеХранилище(0); ЗапуститьФЗЗагрузкиЛС(инф); ПодключитьОбработчикОжидания("ИндикаторВыполненияЗагрузкиФайловЛС",1,ложь); КонецПроцедуры |
Функция которая будет работать фоново, должна размещаться в общем модуле. Это небольшой недостаток внешних обработок — фоново запускаются только процедуры-функции созданные внутри конфигурации. Но! до этого нам нужно опять же написать «обвязку» фонового задания, дабы мы имели возможность знать, работает или нет оно, а так-же на каком этапе. При запуске фонового задания, мы получаем идентификатор этого задания:
|
1 2 3 4 5 6 |
Функция ЗапуститьФЗЗагрузкиЛС(Параметры) МассивПараметров = Новый Массив; МассивПараметров.Добавить(Параметры); ФЗ = ФоновыеЗадания.Выполнить("СК_ГР_ДлительныеОперации.ЗагрузитьФайлыЛС",МассивПараметров); объект.ЛС_ФЗ = ФЗ.УникальныйИдентификатор; КонецФункции |
Который в дальнейшем будем использоваться для того чтобы «узнать» как поживает собственно это задание, подключив на клиенте обработчик ожидания, выполняющийся раз в секунду:
|
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 |
&НаКлиенте Процедура ИндикаторВыполненияЗагрузкиФайловЛС() Экспорт пр=КакДелаУФЗЗагрузкиФайловЛС(); если пр=неопределено тогда этаформа.ИндикаторЗагрузкиЛС=100; ОтключитьОбработчикОжидания("ИндикаторВыполненияЗагрузкиФайловЛС"); Этаформа.Элементы.ПояснениеКЗагрузкеЛС.Заголовок="Файлы обработаны"; иначе этаформа.ИндикаторЗагрузкиЛС=пр; конецесли; КонецПроцедуры &НаСервере Функция КакДелаУФЗЗагрузкиФайловЛС() ФЗ = ФоновыеЗадания.НайтиПоУникальномуИдентификатору(объект.идФЗ); если ФЗ=Неопределено тогда возврат неопределено; иначе если ФЗ.Состояние=СостояниеФоновогоЗадания.Завершено тогда возврат неопределено; конецесли; если ФЗ.Состояние=СостояниеФоновогоЗадания.ЗавершеноАварийно тогда Сообщить("Ошибка:"+ФЗ.ИнформацияОбОшибке.Описание); возврат неопределено; конецесли; конецесли; возврат 0; конецфункции |
Как видим, тут отслеживается состояние фонового задания (запущен, работает, завершен, завершен с ошибкой), но не отслеживается этап выполнения работ. Есть на самом деле два способа получения хода работы фонового задания:
Посему остаётся таки отлавливать сообщения сервера по известному идентификатору фонового задания:
|
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 |
&НаСервере Функция ПолучитьСообщенияФЗ(ФЗ, Состояние = Неопределено, УдалятьСообщения = Ложь) Экспорт Если Состояние = Неопределено Тогда Состояние = ФЗ.Состояние; КонецЕсли; МассивСообщений = Новый Массив; Сообщения = ФЗ.ПолучитьСообщенияПользователю(УдалятьСообщения); Если Сообщения <> Неопределено Тогда Для Каждого Сообщение Из Сообщения Цикл МассивСообщений.Добавить(Сообщение.Текст); КонецЦикла; КонецЕсли; Возврат МассивСообщений; КонецФункции |
А в самом фоновом здании, городить огород с выводом сообщений:
|
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 |
// На входе: // парам.ВременныйФайл // парам.Расширение // парам.ЛС_начало // парам.ЛС_лс // парам.ЛС_то // парам.ЛС_дата_установки_пу // парам.АдресВременногХранилища Функция ЗагрузитьФайлыЛСРасширенно(парам) экспорт Сообщить("0%читаю файл на сервере"); ТабличныйДокументХар = Новый ТабличныйДокумент; ТабличныйДокументХар.Прочитать(парам.ВременныйФайл,СпособЧтенияЗначенийТабличногоДокумента.Значение); стар=0; Для Каждого ОбластьТД ИЗ ТабличныйДокументХар.Области Цикл ОбластьФайла = ТабличныйДокументХар.ПолучитьОбласть(ОбластьТД.Имя); КолВоСтрокФайла = ОбластьФайла.ПолучитьРазмерОбластиДанныхПоВертикали(); КолВоКолонокФайла = ОбластьФайла.ПолучитьРазмерОбластиДанныхПоГоризонтали(); НачСтрока=парам.ЛС_начало;КонСтрока=0; НачСтрока = ?(НачСтрока = 0, 2, НачСтрока); КонСтрока = ?(КонСтрока = 0, КолвоСтрокФайла, КонСтрока); //перебираем все строки без первой строки Для нСтрокаТФ = НачСтрока ПО КонСтрока Цикл если стар<>Окр(нСтрокаТФ*100/КонСтрока) тогда Сообщить(Строка(Окр(нСтрокаТФ*100/КонСтрока))+"%обрабатываю файл"); стар=Окр(нСтрокаТФ*100/КонСтрока); конецесли; конеццикла; конеццикла конецфункции |
Посему модифицируем и обработчик ожидания, добавив парсинг сообщений сервера:
|
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 |
&НаКлиенте Процедура ИндикаторВыполненияЗагрузкиФайловЛС() Экспорт пр=КакДелаУФЗЗагрузкиФайловЛС(); если пр=неопределено тогда этаформа.ИндикаторЗагрузкиЛС=100; ОтключитьОбработчикОжидания("ИндикаторВыполненияЗагрузкиФайловЛС"); Этаформа.Элементы.ПояснениеКЗагрузкеЛС.Заголовок="Файлы обработаны"; иначе если пр.Количество()>0 тогда этаформа.ИндикаторЗагрузкиЛС=пр[0]; Этаформа.Элементы.ПояснениеКЗагрузкеЛС.Заголовок=пр[1]; конецесли; конецесли; КонецПроцедуры &НаСервере Функция КакДелаУФЗЗагрузкиФайловЛС() ФЗ = ФоновыеЗадания.НайтиПоУникальномуИдентификатору(объект.ЛС_ФЗ); если ФЗ=Неопределено тогда возврат неопределено; иначе если ФЗ.Состояние=СостояниеФоновогоЗадания.Завершено тогда возврат неопределено; конецесли; если ФЗ.Состояние=СостояниеФоновогоЗадания.ЗавершеноАварийно тогда Сообщить("Ошибка:"+ФЗ.ИнформацияОбОшибке.Описание); возврат неопределено; конецесли; ФСообщения=СК_ГР_ДлительныеОперации.ПолучитьСообщенияФЗ(ФЗ,,истина); Если ФСообщения.Количество() > 0 Тогда Для Каждого Сообщение Из ФСообщения Цикл Если СтрНайти(Сообщение,"%")>0 тогда возврат СтрРазделить(Сообщение,"%"); конецесли; КонецЦикла; КонецЕсли; конецесли; возврат Новый Массив(); конецфункции |
К сожалению пришла новость, что создатель сайта филибусты из-за тяжелой болезни скоро покинет наш мир. А вместе с ним и его детище. Очень жаль. Еще одна эпоха ушла, читал книги скачанные оттуда последние 10+ лет