Русские символы при импорте CSV файла с помощью CSVImproved

radius

Давно я тут
550
45 / 0

Русские символы при импорте CSV файла с помощью CSVImproved

« : 29.09.2009, 19:34:09 »

На данный момент имеем отличный компонент для импорта данных в VirtueMart - CSVImproved. Но. Этот компонент не умеет менять кодировку русских символов из CP1251 в UTF-8 и обрезает русские символы в значениях полей файла CSV. В результате имеем гемморой с установкой Open Office вместо общераспространенного MS Excel, чтобы иметь возможность сохранить CSV файл в кодировке UTF-8 с полями, обрамленными в кавычки. Довольно проблематично объяснить заказчику, почему он должен устанавливать какой-то OpenOffice вместо MS Excel, чтобы иметь возможность импортировать данные в магазин. Хотя проблема решается добавлением двух строчек кода.
В файл administrator/components/com_csvimproved/helpers/csvi_class_file.php вставляем после строки 373 ( case 'csv': ) строку:

setlocale(LC_CTYPE, "ru_RU");

далее, после строки 390 ($newdata[$key+1] = $value;) вставляем строку:

$newdata[$key+1] = iconv('CP1251','UTF-8',$newdata[$key+1]);

Все. Никаких Open Offic`ов. Данные готовим в Excel`е, сохраняем в CSV и спокойно импортируем.

PS. Действительно для CSVImproved 1.8.1 и сайтов в UTF-8

Записан

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #1 : 20.11.2009, 20:20:18 »

У меня всё так, версия та же, но после 373 строки идут, вообще комментарии кода?

            /* File is always called content.xml */

            else $this->filename = $importfile;

            $this->data->read($this->filename);

            break;

      }

   }

   /**

    * Valitdate the file

    *
    * Validate the file is of the supported type
---Вот это 373 строчка?
    * Types supported are csv, txt, xls

    *

    * @return bool returns true if all fine else false

    */

   function ValidateFile() {

      $csvilog = JRequest::getVar('csvilog');

      $template = JRequest::getVar('template');

Записан

radius

Давно я тут
550
45 / 0

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #2 : 20.11.2009, 20:26:56 »

ищите в окрестностях строки 373 выражение "case 'csv':" и после него вставляйте. Так же со второй строкой.

Записан

cadet

Захожу иногда
239
17 / 0

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #3 : 26.11.2009, 15:08:07 »

Я бы ставил версию 1.7.1 т.к. с версией 1.8.1. много проблем.

Записан

nelepaya_smert

Осваиваюсь на форуме
17
4 / 1
Оупенсорсе, детка)

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #4 : 07.12.2009, 16:27:28 »

В догонку темы, чтобы еще и выводилось в нужной кодировке, допустим в windows-1251, нужно
найти в файле

Код: php

csvi_class_export.php

(в версии 0.8 он лежит в папке /components/com_csvimproved/classes)
строку

Код: php

echo $this->contents;

и ПЕРЕД ней вставить

Код: php

$this->contents = iconv('UTF-8','CP1251',$this->contents);

Записан

VZup

Осваиваюсь на форуме
27
0 / 0

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #5 : 18.12.2009, 14:11:09 »

И аналогично предыдущему сообщению для более поздних версий

в файле exportfile.php (лежит в /administrator/components/com_csvimproved/models/) находим строки:

Код

	public function writeOutput($contents) {
		$csvilog = JRequest::getVar('csvilog');
		$exportfilename = JRequest::getVar('exportfilename');
		
		switch(JRequest::getVar('exportto')) {
			case 'todownload':
				echo $contents;
				break;

и меняем на

Код

	public function writeOutput($contents) {
		$csvilog = JRequest::getVar('csvilog');
		$exportfilename = JRequest::getVar('exportfilename');
		
		switch(JRequest::getVar('exportto')) {
			case 'todownload':
				$contents = iconv('UTF-8','CP1251',$contents);
				echo $contents;
				break;

Записан

Deni

Захожу иногда
61
2 / 0

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #6 : 22.12.2009, 14:02:59 »

Смените кодировку в базе на УТФ (у таблиц и полей) и все будет работать

Записан

radius

Давно я тут
550
45 / 0

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #7 : 23.12.2009, 15:54:01 »

Цитата: Deni от 22.12.2009, 14:02:59

Смените кодировку в базе на УТФ (у таблиц и полей) и все будет работать

Это к чему??

Записан

Shunsui

Осваиваюсь на форуме
32
1 / 0

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #8 : 11.05.2010, 02:45:13 »

В CSV 1.9 тоже работает и импорт и экспорт, но возникла такая проблема, эксель почему-то после энного товара перестает ставить точку с запятой в конец строки и из-за этого после энного товара импорт товаров обрывается, и выдает ошибки на все оставшиеся строки Csv, можно как то модифицировать импорт ксв, чтобы он не обращал внимания на то что в конце строки не стоит точка с запятой?(ведь всеравно новая строка с новой строки начинается)

Записан

radius

Давно я тут
550
45 / 0

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #9 : 11.05.2010, 15:36:36 »

Excel не должен в конце строки вставлять точку с зяпятой при сохранении в CSV формат, если он так делает, значит вы вводили какие то данные в последнюю колонку, а потом их стерли. Excel считает что эта последняя колонка с пустыми значениями существует и обозначает ее как колонку с пустым значением (выглядит как будьто в конце строки точка с запятой). Вам нужно в Excel файле выделить последние пустые колонки и удалить их

Записан

loginbox

Захожу иногда
72
15 / 0

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #10 : 13.05.2010, 01:58:13 »

спасибо

Записан

История пишется царями, переписывается мошенниками, а изучается неудачниками...

dyominroma

Захожу иногда
124
6 / 0

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #11 : 03.06.2010, 21:32:34 »

А как быть с разделителями?

Записан

terveg

Захожу иногда
86
17 / 0
ставь "+" руки не отсохнут

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #12 : 04.06.2010, 01:05:33 »

Цитата: radius от 23.12.2009, 15:54:01

Это к чему??

у меня была проблема с экспортом товаров изз-за неправильной кодировки таблиц, заходим в БД jos_csvi_ и все таблицы (жмем закаладку операции) меняем кодировку Сравнение на УТФ-юникод-си. Мне помогло

Записан

Bugs_B

Осваиваюсь на форуме
27
0 / 0
http://sait-pro.ru

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #13 : 02.07.2010, 09:19:25 »

помогите исправить глюк в csv_imporved 1.8.1 при экспорте большого колличества товаров некоторые категории не отображаються на сайте а в админке они есть и на локалке тоже все норм и в админке и на сайте
причем заметил одну такую закономерность если удалить какойнибудь не угодный csv или виртуалу товар то бывает такое что товар в категории отображаеться
также в карточке товара товар отображаеться если принудительно вызывать его
помогите пожалуйста!

Записан

Bugs_B

Осваиваюсь на форуме
27
0 / 0
http://sait-pro.ru

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #14 : 06.07.2010, 08:04:39 »

Ну и опреративность,

Разве никто не сталкивался с таким, ну хотябы перенаправте меня туда где это еще обсуждаеться

Записан

Eholov

Захожу иногда
170
14 / 0

При импорте в CSVImproved русские символы на локальном хосте проходят, на сервере-нет

« Ответ #15 : 28.07.2011, 12:25:44 »

Была проблема в том, что на локальный хост проходили русские символы в полях товаров, а на сервер не проходили.
Версия CSV Improved 1.9
Помогло следующее:
Если вы импортируете данные в кодировке UTF-8, то в файл administrator/components/com_csvimproved/helpers/csvi_class_file.php вставляем перед строкой 376

Код

if (strtolower($template->field_delimiter) == 't') $field_delimiter = "\t";

строку:

setlocale(LC_CTYPE, "ru_RU.UTF-8");

Записан

uralmas

Захожу иногда
228
25 / 0

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #16 : 03.08.2011, 11:58:42 »

Цитата: Eholov от 28.07.2011, 12:25:44

Была проблема в том, что на локальный хост проходили русские символы в полях товаров, а на сервер не проходили.
Версия CSV Improved 1.9
Помогло следующее:
Если вы импортируете данные в кодировке UTF-8, то в файл administrator/components/com_csvimproved/helpers/csvi_class_file.php вставляем перед строкой 376
Код
if (strtolower($template->field_delimiter) == 't') $field_delimiter = "\t";
строку:

setlocale(LC_CTYPE, "ru_RU.UTF-8");

А у меня наоборот, если писать ru_RU.UTF-8, а не ru_RU - не проходят. CSVI 1.9

Записан

Tin Checher

Новичок
2
0 / 0

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #17 : 26.10.2011, 00:02:56 »

CSVI 1.9
setlocale(LC_CTYPE, "ru_RU") > работают таблицы из OO
добавляю
$newdata[$key+1] = iconv('CP1251','UTF-8',$newdata[$key+1]); >

ОШИБКА Сообщение
Не поддерживается :: Показать/Спрятать
FIELD_EMPTY
FOUND_FIELD_DELIMITER:
FOUND_TEXT_ENCLOSURE:
Do they match your template settings?

Ошибка :: Показать/Спрятать
Строка 2: Неверный счетчик столбцов: Конфигурация: 0 поля :: Файл: 7 поля
-------------------------------------------------------------------------
В импорте меняю разделитель полей (; для EXCEL), делаю соответств. *****.csv
setlocale(LC_CTYPE, "ru_RU") > вместо текста кубики
добавляю
$newdata[$key+1] = iconv('CP1251','UTF-8',$newdata[$key+1]); >

ОШИБКА Сообщение...........

Подскажите пожалуйста как настроится на csv из EXCEL

Записан

Galyanoff

Захожу иногда
252
7 / 0

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #18 : 23.11.2011, 04:12:58 »

У меня тоже ошибка импорта. Делал все по мануалу и по диску Куртеева. csvimproved 1.9

Ошибка 1
~product_sku~
FOUND_FIELD_DELIMITER:
FOUND_TEXT_ENCLOSURE: ~
Do they match your template settings?
~product_name~
FOUND_FIELD_DELIMITER:
FOUND_TEXT_ENCLOSURE: ~
Do they match your template settings?
~category_path~
FOUND_FIELD_DELIMITER:
FOUND_TEXT_ENCLOSURE: ~
Do they match your template settings?
~product_price~
FOUND_FIELD_DELIMITER:
FOUND_TEXT_ENCLOSURE: ~
Do they match your template settings?
~product_s_desc~
FOUND_FIELD_DELIMITER:
FOUND_TEXT_ENCLOSURE: ~
Do they match your template settings?
~product_packaging~
FOUND_FIELD_DELIMITER:
FOUND_TEXT_ENCLOSURE: ~
Do they match your template settings?
~product_unit~
FOUND_FIELD_DELIMITER:
FOUND_TEXT_ENCLOSURE: ~
Do they match your template settings?

Ошибка 2
Строка 2: Артикулов не найдено

что за фигня? уже голова не соображает совсем...

Записан

uralmas

Захожу иногда
228
25 / 0

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #19 : 23.11.2011, 12:41:25 »

Galyanoff
По-подробнее: какой импорт (CSV или XLS), колонки в файле импорта и в шаблоне, разделители

Записан

Galyanoff

Захожу иногда
252
7 / 0

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #20 : 23.11.2011, 17:39:41 »

Цитата: uralmas от 23.11.2011, 12:41:25

Galyanoff
По-подробнее: какой импорт (CSV или XLS), колонки в файле импорта и в шаблоне, разделители

Импорт CSV. Сохранял через Calc в формате UTF-8? разделители ^ и ~, они же в шаблоне.
Вот пример таблицы:

Вот строки шаблона:

Настройки шаблона:

Записан

uralmas

Захожу иногда
228
25 / 0

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #21 : 23.11.2011, 18:47:10 »

Цитировать

Импорт CSV. Сохранял через Calc в формате UTF-8? разделители ^ и ~, они же в шаблоне.

А в скриншоте шаблона у вас только ^. Скрипт ругается, что нашёл ~

Записан

Galyanoff

Захожу иногда
252
7 / 0

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #22 : 23.11.2011, 18:50:23 »

Цитата: uralmas от 23.11.2011, 18:47:10

А в скриншоте шаблона у вас только ^. Скрипт ругается, что нашёл ~

Точно! Забыл поставить. Теперь работает)
А вот как импортировать в нужного производителя? А то он все товары в одного производителя пихает?

Записан

uralmas

Захожу иногда
228
25 / 0

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #23 : 23.11.2011, 21:09:45 »

Это у него такой косяк - если в импорте нет производителя - он кидает их к первому в алфавитном списке. Надо сделать ещё одно поле - либо название производителя либо его id.

Записан

rewuxiin

Давно я тут
544
38 / 6

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #24 : 07.12.2011, 00:16:18 »

хы. а у меня вообще всё круто.
если воспользоваться данным решением VZup для 1.9 файл экспортируется с нормальным отображением но вот импортируется он же даже ни разу не измененный уже вся кириллица квадратиками

если же без хака то выгружается и загружается нормально но открывается в нормальной кодировке только в иекстовых редакторах.
кодировка на выходе UTF-8 без BOM.

Кстати как открыть файл в экселе что бы параметры были разбит на колонки, а не всё в кучу?

Записан

dkraev

Захожу иногда
148
7 / 0

Re: Русские символы при импорте CSV файла с помощью CSVImproved

« Ответ #25 : 18.12.2012, 14:14:30 »

Для версии 3,8,3:

Файл \administrator\components\com_csvivirtuemart\helpers\file\import\csv.php

Строка 176:

Код

$this->linepointer++;

Заменить на :

Код

foreach ($csvdata as $key => $value) {
    $csvdata[$key+1] = iconv('CP1251','UTF-8',$csvdata[$key+1]);
}

Записан

Ошибки при импорте товара Joomla 1.5.x + VM 1.1.9 + CSVI 1.9 Автор sda-sot	Ответов: 0 Просмотров: 4673	27.12.2014, 09:50:06 от sda-sot
При импорте пропадают категории товаров на сайте. Что это? Автор Naima	Ответов: 2 Просмотров: 1940	31.05.2014, 14:19:06 от Naima
Экспорт товаров с помощью CSVI Автор Катрин	Ответов: 4 Просмотров: 2492	22.04.2014, 10:06:25 от Vladmr163
CSVimproved автоматическая загрузка файла с сервера! Автор verbatum	Ответов: 4 Просмотров: 3347	15.08.2013, 18:31:32 от SlavaUkraine
Ошибка при импорте Автор sveneld	Ответов: 15 Просмотров: 7423	10.06.2013, 05:26:34 от dusha

Вышли релизы Joomla 6.1 и Joomla 5.4.5: новые возможности и стабильность

👩‍💻 Компонент "CS Афиши" для Joomla.

Яндекс выпустил инструмент Видимость сайта в Алисе AI.

Похожие темы