Автоматическое копирование данных с сайта поставщика через телеграмм + n8n
В видео описано получение данных с любого статического сайта в один клик через ТГ-бота
На показанном примере реализации используется сайт поставщика как источник,
далее оператором отправляется код с использованием n8n + 1С http-Сервисы, для создания или обновления данных в нашей 1С и соответсвенно на нашем сайте.
С использованием этих технологий получается довольно интересный инструмент, который можно развивать под любые задачи парсинга и сбора информации в базы данных 1С\Сайт на Битриксе или любом другом движке или в документы excel \ google cheets.
Довольно просто отредактировать ИИ - агента например переписать описание товара либо дополнить его какой то дополнительной информацией, в том числе найденной на просторах сети интернет, что может позволить улучшить СЕО позиции сайта например.
Естественно, что в этом случае обязательно потребуется проверка внесенных данных.
На видео пример работы через ТГ-бота через n8n как самый простой способ отправить агенту артикул нужного товара и получить его в своей 1С или на своём сайте.
Фактически n8n - Бот парсер делает следующие действия:
- Получение входящих данных на примере просто вводим тг боту артикул позиции;
- парсинг страницы сайта исходника, получение нужных данных с сайта поставщика;
- Сбор в таблицу JSON и очистка данных, подготовка для размещения
Можно загружать данные сразу в 1С, а можно добавить промежуточный excel или что гораздо удобней google cheets (онлайн эксель)
- Возможен запрос, Запрос пользователю нужно ли Добавлять \ Обновлять позиции или прямая загрузка.
- Загрузка товара в 1С Предприятие в режиме онлайн - или Обновление Номенклатуры
- Обновляемые данные:
Тип товара, Наименование, Код, Артикул, Все фотографии найденные на сайте исходнике
Возможные дополнения:
- Полная автоматизация, проверка позиций по списку - если позиция есть автоматическая проверка и обновление цен\остатков.
- Подбор подходящей Группы номенклатуры (Каталога) через ИИ - Агента, по заранее предложенному списку
- Дополнение данными от ИИ - сбор дополнительной информации, приведение в порядок и \или дополнение описания в формате html
- Парсинг и добавление свойств и значений: Аналитика перечня нужных значений и заполнение их с использованием ИИ - агента.
Напишите нам какой вариант автоматизации вам было бы интерсно увидеть?
Распределение данных в 1С Предприятие
Весьма важны вопросы по распределению данных в 1С, например структура наших каталогов может не соответствовать "Номенклатуре" поставщика.
Основной вопрос, как выбирать папку в иерархии 1С, либо точно такая же "папка по наименованию" либо подключать ИИ агента который будет из 1С получать актуальный список папок... и "логически" выбирать подходящее
Идеальным вариантом будет как всегда некий комплекс действий, например:
в 1С Предприятие, создается специальный справочник соответствий который на "старте" заполняется аналогичными позициями с нашей стороны.
Но для этого потребуется сначала "спарсить" все существуюшие каталоги со стороны поставщика и проставить "соответствия" между своими каталогами и каталогами сайта.
Поэтому можно заставить например это "разово", или с некой переодичностью делать ИИ - сопоставлять каталоги, после чего уже только по совершенно новым каталогам нужно будет проверять как идет загрузка.
Полный парсинг или парсинг по большому списку
Для полного парсинга сайта, либо парсинга по заранее задуманному списку, больше подойдет немного другая схема работы
Для массового парсинга загрузки данных логично эти данные как минимум проверять, перед выгрузкой на сайт,
- Для чего идеальным будет сначала загрузить их в онлайн таблицу google cheets, что в целом с легкостью сделает наш n8n бот (видно на видео).
- После чего проверить в какие каталоги например ИИ предлагает разнести ваши товары, проверить цены и убедиться что описание было скопировано верно.
- И уже после чего можно запускать обновление \ корректировку данных в 1С.
Технических вопросов при работе с подобными системами много, поэтому важно составить правильный алгоритм действий, что-бы получить на выходе инструмент автоматический но легко управляемый и контролируемый.
Обращайтесь по вопросам размещения на наших серверах систем автоматизаций и запуска подобных систем сбора и обновления данных.