Импорт данных: загрузка товаров из gifts.ru, oasiscatalog.com, happygifts.ru, xindaorussia.ru
Технические данные
- Опубликовано:
- 02.03.2017
- Обновлено:
- 08.07.2024
- Версия:
- 23.0.4
- Установлено:
- 500 - 999 раз
- Подходящие редакции:
- «Старт», «Стандарт», «Малый бизнес», «Бизнес», «Интернет-магазин + CRM»
- Адаптивность:
- Да
- Поддержка Композита:
- Да
- Совместимо с Сайты24
- Нет
- Совместимо с PHP 8.1
- Да
Пользовательское соглашение
Описание
Внимание! В скором времени модуль будет окончательно снят с публикации, установить его будет невозможно, техподдержка осуществляться не будет.
Модуль «Импорт данных» создан для загрузки и обновления товаров на Ваш сайт от различных поставщиков. Вы сможете загрузить товары из следующих источников:
Gifts.ru (для подключения требуется логин и пароль),
Oasiscatalog.com (для подключения требуется API-ключ),
Happygifts.ru (работает без авторизации),
Xindaorussia.ru (работает без авторизации),
Excel.
Т.о. направление работы модуля - сувенирная продукция: он будет незаменим при запуске интернет-магазина сувенирной тематики. Используя «Импорт данных», Вы за короткое время загрузите десятки тысяч товаров от трёх наиболее востребованных поставщиков и сможете начать продавать уже в первые дни после запуска.
Модуль запускается автоматически, настроить расписание можно как удобно: например, каждую неделю, или каждый день, или даже два раза в день. Можно, например, запускать импорт вечером каждого воскресенья, или только по чётным дням месяца – всё это легко подстраивается под Вашу бизнес-логику.
Одна из основных особенностей модуля – огромное количество настроек, что позволяет максимально гибко настроить выгрузку по Ваши требования. Имеется возможность настроить сложные привязки (что может быть актуально для загрузки в уже действующий каталог), подходящую логику активации и деактивации товаров и разделов, включить или отключить загрузку торговых предложений и т.д.
Модуль загружает большие каталоги, которые содержат тысячи и десятки тысяч товаров и разделов. Виртуальный хостинг не подходит для таких задач: во-первых, из-за ограничений по нагрузке, во-вторых из-за небольшого объема диска (мы рекомендуем иметь как минимум 20Гб свободного места перед началом загрузки). Поэтому необходимо использовать VPS или облачные серверы, мы рекомендуем Timeweb – это одни из лидеров на рынке, с высоким соотношением «цена-качество», на которых модуль работает без проблем.
По имеющимся интеграциям модуль загружает более 40 тысяч товаров. При работе с таким большим каталогом товаров Вам будет крайне полезен другой наш модуль - Антирутин (модуль умеет массово перемещать товары или добавлять привязки к разделам, редактировать тексты в названиях и описаниях, изменять цены, ресайзить картинки, и многое-многое другое).
Внимание! С 01.12.2021 мы не оказываем услугу бесплатной настройки модуля в связи с тем, что в модуле имеется автонастройка профилей в 1 клик! Стандартную техподдержку модуля оказываем до 31.03.2022. После этого техподдержка не будет осуществляться.23.0.4 (08.07.2024) | - OasisСatalog: исправлена ошибка загрузки данных. |
23.0.3 (21.06.2024) | - OasisCatalog: исправлена ошибка загрузки данных по товару (т.к. в одном товаре поставщик указал вес "80±10"). |
23.0.2 (04.08.2023) | - Xindao: PDF-изображения теперь пропускаются при загрузке. |
23.0.1 (03.08.2023) | - Улучшения механизма автосоздания профилей. |
23.0.0 (01.08.2023) | - Xindao: плагин переведён на работу с новым источником FTP, - Oasiscatalog: модуль теперь учитывает пустые значения в изображениях, не приводя к ошибке. |
21.6.7 (04.07.2023) | - Исправлена ошибка в настройках модуля при работе на PHP8. |
21.6.6 (13.06.2023) | - Улучшение совместимости с PHP8. |
21.6.5 (10.06.2023) | - Улучшение совместимости с PHP8. |
21.6.4 (06.06.2023) | - Улучшение совместимости с PHP8. |
21.6.3 (06.06.2023) | - Улучшение совместимости с PHP8. |
21.6.2 (31.05.2023) | - Улучшение совместимости с PHP8. |
21.6.1 (22.05.2023) | - Исправлена ошибка совместимости интеграции happygifts с PHP8. |
21.6.0 (07.02.2023) | - Исправлена ошибка загрузки, возникающая в некоторых случаях для товаров из happygifts.ru. |
21.5.1 (15.11.2022) | - Незначительные улучшения. |
21.5.0 (15.11.2022) | - Gifts: добавлена поддержка всех новых полей (фильтров), они создаются автоматически только для новых профилей (по кнопке «Автосоздание профилей»), - добавлена поддержка PHP8. |
21.4.6 (12.11.2022) | - Улучшена работа модуля на редакциях 1С-Битрикс без интернет-магазина. |
21.4.5 (11.11.2022) | - Незначительные улучшения. |
21.4.4 (16.09.2022) | - oasiscatalog: решена проблема скачивания XML-файла товаров (в связи с долгим ответом сервера при скачивании файла). |
21.4.3 (16.09.2022) | - xindao: исправлена ошибка скачивания файла, возникшая в связи с переименованием XML-файла у поставщика. |
21.4.2 (06.07.2022) | - Различные исправления для обеспечения корректного импорта. |
21.4.1 (25.05.2022) | - Решена проблема с недостатком памяти для oasiscatalog.com (в случае, если в dbconn.php жёстко задано ограничение, например, 512Мб). |
21.4.0 (30.03.2022) | - Небольшие улучшения и исправления. |
21.3.1 (18.03.2022) | - Небольшие улучшения и исправления. |
21.3.0 (18.03.2022) | - Для oasiscatalog добавлено поле «Дефект», - небольшие улучшения и исправления. |
21.2.1 (22.02.2022) | - Исправления и уулчшения. |
21.2.0 (20.11.2021) | - Happygifts: добавлена поддержка загрузки дополнительных файлов (необходимо наличие включённого FTP-расширения в PHP!). |
21.1.7 (02.11.2021) | - Happygifts: исправлена проблема, возникающая из-за несоблюдения порядка товаров в XML. |
21.1.6 (02.11.2021) | - В запуск профилей добавлен конфиг default_charset, что решает проблемы с необходимостью донастройки сервера в тех случаях, когда в конфиге сервера это не настроено. |
21.1.5 (05.10.2021) | - Небольшие исправления для функционала автосоздания профилей. |
21.1.4 (03.10.2021) | - Небольшие исправления для функционала автосоздания профилей. |
21.1.3 (15.09.2021) | - В форме редактирования профиля добавлена кнопка для запуска. |
21.1.2 (29.08.2021) | - Исправлена ошибка для HappyGifts в режиме торговых предложений, - исправлена ошибка для xindaorussia с генерацией символьного кода для связанных элементов. |
21.1.1 (26.07.2021) | Для xindaorussia добавлена проверка статуса скачивания фотографии (некоторые фото отдают ошибку 404). |
21.1.0 (22.07.2021) | Добавлен функционал автосоздания профилей - теперь выполнить базовую настройку можно всего за несколько кликов. Имейте в виду, что после автосоздания требуется корректировка профилей - в первую очередь, указание всех необходимых свойств (модуль автоматически создает свойства [а также назначает их], но не все). |
21.0.1 (03.06.2021) | Исправлена ошибка проверки API-ключа для oasiscatalog.com. |
21.0.0 (23.05.2021) | Долгожданное обновление! Интеграция с Happygifts.ru теперь поддерживает торговые предложения! |
20.0.0 (28.03.2021) | - Добавлена интеграция с xindaorussia.ru (имейте в виду, что привязка разделов по названию нежелательна, т.к. имеются разделы с одинаковыми названиями). |
17.4.1 (03.02.2021) | - Улучшена проверка окружения для случая, когда конфиг PHP для cli содержит short_open_tag=Off. |
17.4.0 (03.02.2021) | - Улучшения и исправления для работы модуля после отказа 1С-Битрикс от mbstring.func_overload. |
17.3.20 (27.12.2020) | - Незначительные исправления. |
17.3.19 (16.12.2020) | - Интеграция с gifts.ru: исправлена ошибка, возникавшая (в редких случаях) при проверке логина/пароля. |
17.3.18 (07.06.2020) | - В интеграции с oasiscatalog.com актуализированы атрибуты. Также, атрибуты oasiscatalog.com (в выпадающем списке для каждого свойства) теперь выводятся по алфавиту. Не забудьте донастроить профиль интеграции с oasiscatalog.com, чтобы загружались все актуальные атрибуты. |
17.3.17 (13.03.2020) | - Для случаев ошибки проверки часового пояса (при запуске из командной строки и из планировщика) добавлена возможность отключить эту проверку (необходимо установить конфиг-параметр skip_check_date_timezone модуля webdebug.import равным Y): \Bitrix\Main\Config\Option::set('webdebug.import', 'skip_check_date_timezone', 'Y') |
17.3.16 (03.02.2020) | - Добавлено новое событие OnAfterPreProcessObject. |
17.3.15 (24.11.2019) | - Незначительные улучшения при проверке конфигурации. |
17.3.14 (17.11.2019) | - Улучшено автоматическое добавление команды запуска в планировщик. |
17.3.13 (21.03.2019) | - Исправлена ошибка загрузки картинок из Excel. |
17.3.12 (04.02.2019) | - Для интеграции с gifts.ru добавлено поле "Нанесение (коды + названия)" (напр., "F1 Флекс", "DTG2 Полноцвет водными чернилами" и т.д.). |
17.3.10 (15.01.2019) | - Исправлена ошибка проверки логина/пароля в связи с небольшим изменением на стороне поставщика (загрузка файлов работала как положено, проверка выдавала ошибку). |
17.3.9 (24.12.2018) | - Решена проблема, возникающая в некоторых случаях при использовании Curl, и выражающаяся в длительном скачивании каждой картинки (связано с CURLOPT_SSL_VERIFYPEER и CURLOPT_SSL_VERIFYHOST). |
17.3.8 (29.10.2018) | - Исправлена ошибка с загрузкой картинок для торговых предложений. |
17.3.7 (28.10.2018) | - Исправлена ошибка с деинсталляцией модуля. |
17.3.6 (11.10.2018) | - Исправлены незначительные ошибки, - убран тест max_input_vars. |
17.3.5 (24.08.2018) | - happygifts.ru: исправлена загрузка характеристики «Типы нанесения». Если эта характеристика ранее была настроена для загрузки, откройте настройки профиля и в соответствующем поле выберите в выпадающем списке «Типы нанесения (множ.)» или «Типы нанесения (через запятую)». |
17.3.4 (17.06.2018) | - oasiscatalog.com: цены теперь загружаются в валюте, выбранной в профиле как "Валюта по умолчанию" (т.е. появилась возможность автоконвертирования цен в нужную валюту), - oasiscatalog.com: добавлен атрибут, появившийся в выгрузке за последнее время: обхват головы. |
17.3.3 (23.11.2017) | - Исправлена ошибка с кодировкой некоторых полей при настройке gifts.ru. |
17.3.2 (15.11.2017) | - Исправлены замеченные ошибки. |
17.3.1 (07.11.2017) | - Исправления и улучшения. |
17.3.0 (04.11.2017) | - Добавлен загрузчик «HappyGifts», - исправления и улучшения. |
17.2.2 (29.10.2017) | - загрузчик «oasiscatalog.com»: исправлена ошибка с изменением символьных кодов. |
17.2.1 (24.10.2017) | - загрузчик «oasiscatalog.com»: исправлена ошибка с дублированием товаров при загрузке в режиме без торговых предложений и привязки по названию. |
17.2.0 (22.10.2017) | - загрузчик «gifts.ru»: добавлена проверка привязки IP, - загрузчик «gifts.ru»: исправлена работа в режиме без торговых предложений, - загрузчик «gifts.ru»: прерывание загрузки в случае неправильного логина/пароля, или без привязки IP (ранее выдавался статус «Загрузка успешно завершена»), - загрузчик «oasiscatalog.com»: отложенная загрузка картинок, - загрузчик «oasiscatalog.com»: исправлена ошибка с загрузкой копеек, - загрузчик «oasiscatalog.com»: удалено ошибочное поле «Символьный код» для товаров и ТП (это поле было добавлено в модуль по ошибке, поставщик его не предоставляет), - добавлены новые подсказки, улучшены имеющиеся, - улучшена автонастройка планировщика, добавлен вывод команды для ручной настройки (или ручного запуска), - добавлена возможность остановки процесса загрузки по кнопке, - другие улучшения и исправления. |
17.1.5 (09.10.2017) | - Исправление ошибок. |
17.1.4 (05.10.2017) | - Исправлена ошибка с производительностью при загрузке oasiscatalog.com. |
17.1.3 (04.10.2017) | - Добавлена опция поиска только в указанном разделе, - исправлены замеченные ошибки. |
17.1.2 (03.10.2017) | - Исправлена ошибка с выбором неактивного раздела, - исправлена ошибка с выбором HL-блока для свойства типа «Справочник». |
17.1.1 (26.09.2017) | - Улучшена проверка теста для «Настройка php для командной строки», - исправлена ошибка сохранения профилей для загрузчиков oasiscatalog и gifts. |
17.1.0 (11.07.2017) | - Добавлена интеграция с gifts.ru (пока в бета-версии), - добавлена поддержка загрузки файлов по FTP, - небольшие исправления. |
17.0.4 (05.05.2017) | Удален старый загрузчик Excel, который должен был быть удален в предыдущем обновлении. |
17.0.3 (03.05.2017) | Множественные улучшения и исправления в модуле:
|
17.0.2 (27.04.2017) | Добавлена возможность наценок и скидок. |
17.0.1 (18.03.2017) | Загрузчик «Oasiscatalog»:
|
Внимание! В скором времени модуль будет окончательно снят с публикации, установить его будет невозможно, техподдержка осуществляться не будет.
Внимание! Виртуальный хостинг не подходит для данного модуля! Причин много:
- блокировка длительных процессов импорта,
- низкие допустимые нагрузки на сервер,
- необходимость в большом объеме диска для загрузки изображений (условно, для загрузки товаров одного поставщика требуется 3-5 Гб места, затем необходимо учесть их обработку вашим шаблоном и хранение обработанных картинок - еще половина от указанного объема, и необходимо оставить место для создания хотя бы двух экземпляров резервных копий).
Для установки нажмите кнопку «Установить», затем на сайте нажать «Загрузить», а затем «Установить».
Ссылка на модуль («Импорт данных») находится в административном разделе в секции «Контент», в самом низу (пункт меню называется «Импорт данных»).
Кратко порядок работы с модулем следующий:
- необходимо создать и настроить профиль для загрузки данных. Профиль - это совокупность настроек, ориентированных на загрузку конкретного файла или конкретного набора файлов.
- после того, как профиль настроен, необходимо запланировать его выполнение планировщиком Cron. Некоторое время назад модуль научился автоматически ставить задачу планировщику. Поэтому, теперь про файл php.ini для модуля можно забыть.
- все, после настройки профиля и добавления команды планировщику модуль начинает свою работу в соответствии с параметрами профилей. Имейте ввиду, что одновременно не могут быть запущены два процесса загрузки. Лучше каждый профиль "вешать" на отдельное задание планировщика, но можно делать и несколько профилей на задание, и даже все сразу.
Внимание! Модуль не отвечает за вывод товаров в публичной части сайта, за это отвечает только шаблон Вашего сайта. Модуль загружает структуру так, как предлагает поставщик, в такую, какая является стандартной для 1С-Битрикс. Все остальное (группировки по артикулам/цветам, вывод характеристик, создание собственное иерархии разделов) - это все не относится к модулю, и не решается им. Это должен решать шаблон Вашего сайта.
По имеющимся интеграциям модуль загружает более 40 тысяч товаров. При работе с таким большим каталогом товаров Вам будет крайне полезен другой наш модуль - Антирутин (модуль умеет массово перемещать товары или добавлять привязки к разделам, редактировать тексты в названиях и описаниях, изменять цены, ресайзить картинки, и многое-многое другое).
Внимание! С 01.12.2021 мы не оказываем услугу бесплатной настройки модуля в связи с тем, что в модуле имеется автонастройка профилей в 1 клик! Стандартную техподдержку модуля оказываем до 31.03.2022. После этого техподдержка не будет осуществляться.
Внимание! В скором времени модуль будет окончательно снят с публикации, установить его будет невозможно, техподдержка осуществляться не будет.
Задать вопрос в техническую поддержку Вы можете:
- на нашем сайте www.webdebug.ru
- по электронной почте: info@webdebug.ru
- в Telegram: webdebug