| Предыдущая тема :: Следующая тема   | 
	
	
	
		| Автор | 
		Сообщение | 
	
	
		yaffil Профи
 
  Вступление в Клуб: 18.08.2011
  | 
		
			
				 Чт Ноя 26, 2015 15:48   ЕГРЮЛ. Ликвидированные организации | 
				     | 
			 
			
				Полезность: Нет оценки 
  | 
			 
			
				Всем привет. Когда запускаешь импорт - он делается 2 часа, при этом ЦФТ висит очень прилично.
 
Как узнать с чем связано кривая операция, слабое железо или настройки БД?
 
Железо вроде более чем достаточное.
 
У вас за сколько импортится и как себя ведёт ЦФТ при импорте? | 
			 
		  | 
	
	
		  | 
	
	
		Volod Эксперт
 
  Вступление в Клуб: 19.09.2007
  | 
		
			
				 Чт Ноя 26, 2015 16:27    | 
				     | 
			 
			
				Полезность: Нет оценки 
  | 
			 
			
				| Самописный импорт 1,5 часа. | 
			 
		  | 
	
	
		  | 
	
	
		Матвеев Евгений Профи
 
  Вступление в Клуб: 31.01.2012
  | 
		
			
				 Чт Ноя 26, 2015 21:02    | 
				     | 
			 
			
				Полезность: Нет оценки 
  | 
			 
			
				У нас тож своя...,
 
Клиента загрузки вешает полностью, 
 
со стороны других пользователей вроде жалоб не отмечено...работают
 
Загружаем в рабочее время, без job
 
По времени завтра напишу, давно это было)
 
Написал, потом другому сотруднику делегировал контроль версии файлов и загрузку... там периодичность обновления раз в месяц помоему | 
			 
		  | 
	
	
		  | 
	
	
		yaffil Профи
 
  Вступление в Клуб: 18.08.2011
  | 
		
			
				 Пт Ноя 27, 2015 09:17    | 
				     | 
			 
			
				Полезность: Нет оценки 
  | 
			 
			
				Волод, Евгений а чем вызвана необходимость своей, судя по времени 1,5 часа не далеко ушло от моих 2 штатной операцией.
 
 
Обновление у них по сроку как попало    | 
			 
		  | 
	
	
		  | 
	
	
		Матвеев Евгений Профи
 
  Вступление в Клуб: 31.01.2012
  | 
		
			
				 Пт Ноя 27, 2015 14:14    | 
				     | 
			 
			
				Полезность: Нет оценки 
  | 
			 
			
				Целиком свой продукт написан, свои ТБП, загрузка, проверки, отчетность, а то у ЦФТ такой комплект дороговат тогда был...
 
 
 	  | Цитата: | 	 		  | Волод, Евгений а чем вызвана необходимость своей, судя по времени 1,5 часа не далеко ушло от моих 2 штатной операцией.  | 	  
 
 
Дело не во времени загрузки, но в размере лицензионных отчислений
 
...как то так... | 
			 
		  | 
	
	
		  | 
	
	
		Volod Эксперт
 
  Вступление в Клуб: 19.09.2007
  | 
		
			
				 Пт Ноя 27, 2015 14:25    | 
				     | 
			 
			
				Полезность: Нет оценки 
  | 
			 
			
				| Аналогично | 
			 
		  | 
	
	
		  | 
	
	
		timochev Эксперт
 
  Вступление в Клуб: 02.07.2007
  | 
		
			
				 Пт Ноя 27, 2015 15:28    | 
				     | 
			 
			
				Полезность: Нет оценки 
  | 
			 
			
				
 
+1
 
 
0.5 часа
 
 	  | Цитата: | 	 		  22:00:02	26.11.2015 12:11:00 Начало импорта файла UL_LIQUIDATION.csv
 
22:00:02	26.11.2015 12:11:00 Очистка справочника "КОБ. Ликвидированные юридические лица" перед импортом
 
22:02:31	26.11.2015 12:11:00 В результате очистки удалено 4630632 записей
 
22:29:17	------------------------------------------------------------------------------------
 
22:29:17	++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++
 
22:29:17	  Создано           4,650,688 записей
 
22:29:17	  Не создано                0 записей
 
22:29:17	  Общее количество  4,650,688 записей
 
22:29:17	++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++
 
22:29:17	26.11.2015 12:11:00 Конец импорта файла UL_LIQUIDATION.csv
 
 | 	 
 
  Последний раз редактировалось: timochev (Пт Ноя 27, 2015 15:42), всего редактировалось 1 раз | 
			 
		  | 
	
	
		  | 
	
	
		Volod Эксперт
 
  Вступление в Клуб: 19.09.2007
  | 
		
			
				 Пт Ноя 27, 2015 15:33    | 
				     | 
			 
			
				Полезность: Нет оценки 
  | 
			 
			
				Я вставкой сделал.
 
С полной очисткой конечно быстрее. | 
			 
		  | 
	
	
		  | 
	
	
		yaffil Профи
 
  Вступление в Клуб: 18.08.2011
  | 
		
			
				 Пт Ноя 27, 2015 15:39    | 
				     | 
			 
			
				Полезность: Нет оценки 
  | 
			 
			
				 	  | Volod пишет: | 	 		  Я вставкой сделал.
 
С полной очисткой конечно быстрее. | 	  
 
 
ЦФТ тоже вставкой делают с полной очисткой, однако из 2х часов 1 час занимает удаление (коммит через 500тыс), второй час вставка    | 
			 
		  | 
	
	
		  | 
	
	
		Volod Эксперт
 
  Вступление в Клуб: 19.09.2007
  | 
		
			
				 Пт Ноя 27, 2015 15:44    | 
				     | 
			 
			
				Полезность: Нет оценки 
  | 
			 
			
				| execute immediate 'truncate table Z#UL_LIQUIDATION' мгновенно | 
			 
		  | 
	
	
		  | 
	
	
		yaffil Профи
 
  Вступление в Клуб: 18.08.2011
  | 
		
			
				 Пт Ноя 27, 2015 15:47    | 
				     | 
			 
			
				Полезность: Нет оценки 
  | 
			 
			
				Я прально понимаю что там ссылок никаких, разделитель TAB и, если нарушить регламент и сделать через SQLLDR с помощью управляющего файла - то будет минут 5-10     | 
			 
		  | 
	
	
		  | 
	
	
		Volod Эксперт
 
  Вступление в Клуб: 19.09.2007
  | 
		
			
				 Пт Ноя 27, 2015 15:49    | 
				     | 
			 
			
				Полезность: Нет оценки 
  | 
			 
			
				| Правильно. Но куда торопиться - обновление раз в месяц. | 
			 
		  | 
	
	
		  | 
	
	
		timochev Эксперт
 
  Вступление в Клуб: 02.07.2007
  | 
		
			
				 Пт Ноя 27, 2015 15:54    | 
				     | 
			 
			
				Полезность: Нет оценки 
  | 
			 
			
				 	  | yaffil пишет: | 	 		  | ЦФТ тоже вставкой делают с полной очисткой, однако из 2х часов 1 час занимает удаление (коммит через 500тыс) | 	  
 
у нас удаление 2.5 мин. одним delete | 
			 
		  | 
	
	
		  | 
	
	
		yaffil Профи
 
  Вступление в Клуб: 18.08.2011
  | 
		
			
				 Пт Ноя 27, 2015 16:22    | 
				     | 
			 
			
				Полезность: Нет оценки 
  | 
			 
			
				 	  | Volod пишет: | 	 		  | Правильно. Но куда торопиться - обновление раз в месяц. | 	  
 
 
Так я написал - жесть как весит систему, а ночью и в выходные я не хочу выходить   
 
 
 	  | timochev пишет: | 	 		  | у нас удаление 2.5 мин | 	  
 
 
А у ЦФТ вот так:
 
 	  | Код: | 	 		     for edt in ::[EGRUL_DATA] where edt.[IS_IMP] loop   
 
      &inc(cnt)
 
      begin
 
      --edt.[DELETE_AUTO];
 
      edt%delete; | 	  
 
  
 
И потому час нужен только на удаление | 
			 
		  | 
	
	
		  | 
	
	
		yaffil Профи
 
  Вступление в Клуб: 18.08.2011
  | 
		
			
				 Пт Ноя 27, 2015 16:24    | 
				     | 
			 
			
				Полезность: Нет оценки 
  | 
			 
			
				И, как я понимаю, кто делает delete - тот оставляет мусорные ссылки, если они были. Пофиг?
 
Чем генерите id,sn,su SQL ным запросом? Сча накатаю посмотрю сколько через SQLDR будет времени уходить. | 
			 
		  | 
	
	
		  | 
	
	
		 |