Как отправить в API Яндекс.Метрику данные о звонках?

Question

[Вадим Тимошенко]

На основе документации https://tech.yandex.ru/metrika/doc/api2/management... пытаюсь загрузить в яндекс метрику данные из примера:

UserId,DateTime,Price,Currency,PhoneNumber,TalkDuration,HoldDuration,CallMissed,Tag,FirstTimeCaller,URL,CallTrackerURL
133591247640966458,1481714026,678.90,RUB,+71234567890,136,17,0,,1,https://test.com/,https://test.com/
579124169844706072,1481718066,123.45,RUB,+70987654321,17,23,0,,2,https://test.com/,https://test.com/

Делаю вот так с помощью cURL:

$token  = "AAAAAAAAA";
    $counter_id = "XXXXXXXXXXXX";

    $url = 'https://api-metrika.yandex.ru/management/v1/counter/' . $counter_id . '/offline_conversions/upload_calls?client_id_type=USER_ID&oauth_token=' . $token;

    $file = "csv.csv";

    $curl = curl_init();

    curl_setopt($curl, CURLOPT_URL, $url);
    curl_setopt($curl, CURLOPT_POST, 1);
    curl_setopt($curl, CURLOPT_HTTPHEADER, ['Content-Type: text/csv']);

    $cfile = new CurlFile($file,  'text/csv');
    $data = array('data-binary' => $cfile);

    curl_setopt($curl, CURLOPT_POSTFIELDS, $data);
    curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1);

    $curl_response = curl_exec($curl);

    curl_close($curl);
    
    return $curl_response;

В тексте документации сказано: Данные передаются как multipart/form-data, в формате CSV, в первой строке необходимо передать названия колонок.". Но как передать сначала первую строку с названиями колонок? Где я думаю не правильно?)

Comments

[Максим Федоров]

В вашем коде не вижу csv файла, который вы передаете

[Вадим Тимошенко]

Максим Федоров, изменил код, теперь там csv файл должен отправляться. Но все равно пока работать не хочет.

Answer 1

[marxxt]

А, вы вынесли в отдельный вопрос)

Вобщем, StaticCall,UserId - обязательные колонки

Заголовки

Content-Type: multipart/form-data; boundary=------------------------boundary
Content-Length: 12345

Тело

--------------------------boundary\r\n
Content-Disposition: form-data; name="file"; filename="file.csv"\r\n
Content-Type: text/csv\r\n\r\n
ДАННЫЕ\r\n\r
--------------------------boundary--

Пример(для curl все тоже самое)

function request($url, $data, $headers){
  $opt = array(
    'http' => array(
      'method' => 'POST',
      'content' => $data,
      'header' => $headers
    )
  );

  $context = stream_context_create($opt);

  $response = @file_get_contents($url, FALSE, $context);
  
  return $response;
  
}

$oauth_token='xxx';
$boundary = "7zDUQOAIAE9hEWoV";
$filename = 'data.csv';

$calls = "StaticCall,UserId,DateTime,Price,Currency,PhoneNumber,TalkDuration,HoldDuration,CallMissed,Tag,FirstTimeCaller,URL,CallTrackerURL".PHP_EOL;
$calls .= "1,133591247640966458,1481714026,678.90,RUB,+71234567890,136,17,0,,1,https://test.com/,https://test.com/".PHP_EOL;
$calls .= "1,579124169844706072,1481718066,123.45,RUB,+70987654321,17,23,0,,2,https://test.com/,https://test.com/".PHP_EOL;
$calls .= "1,148059425477661429,1481718126,678.90,RUB,+71234509876,72,11,0,,0,https://test.com/,https://test.com/";

$data = "--------------------------$boundary\x0D\x0A";
$data .= "Content-Disposition: form-data; name=\"file\"; filename=\"$filename\"\x0D\x0A";
$data .= "Content-Type: text/csv\x0D\x0A\x0D\x0A";
$data .= $calls . "\x0A\x0D\x0A";
$data .= "--------------------------$boundary--";


$headers = array();
$headers[] = "Content-Type: multipart/form-data; boundary=------------------------$boundary";
$headers[] = 'Content-Length: '.strlen($data);
$headers = implode(PHP_EOL, $headers);

$url = "https://api-metrika.yandex.ru/management/v1/counter/39764535/offline_conversions/upload_calls?client_id_type=USER_ID&oauth_token=$oauth_token";

$result = request($url, $data, $headers);

var_dump($result);

Для curl типа того

CURLOPT_POSTFIELDS => $data
CURLOPT_HTTPHEADER => array(
    "Content-Type: multipart/form-data; boundary=------------------------$boundary",
    "Content-Length: " . strlen($data)

Comments

[Вадим Тимошенко]

Переделал код вот так:

$url = 'https://api-metrika.yandex.ru/management/v1/counter/' . $counter_id . '/offline_conversions/upload_calls?client_id_type=CLIENT_ID&oauth_token=' . $token;

  $curl = curl_init();

  curl_setopt($curl, CURLOPT_URL, $url);
  curl_setopt($curl, CURLOPT_POST, 1);

  curl_setopt($curl, CURLOPT_HTTPHEADER, ['Content-Type: multipart/form-data; boundary=------------------------$boundary']);

  $file = file('file.csv');
  
  curl_setopt($curl, CURLOPT_POSTFIELDS, ['file' => new CurlFile($file)]);
  
  curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1);

  $curl_response = curl_exec($curl);
  curl_close($curl);

  var_dump($curl_response);

До использования boundary выдавало - ошибка multipart запроса.
Теперь выдает:

string(202) "{"errors":[{"error_type":"invalid_uploading","message":"Не найден параметр запроса.","location":"file"}],"code":400,"message":"Не найден параметр запроса."}"

А вот что за параметр - голову ломаю, не пойму.

[marxxt]

Вадим Тимошенко,

Все таки curl попроще будет
У меня работает так

$filename = 'data.csv';
$url = "https://api-metrika.yandex.ru/management/v1/counter/39764535/offline_conversions/upload_calls?client_id_type=USER_ID&oauth_token=$oauth_token";

$curl = curl_init();
curl_setopt($curl, CURLOPT_URL, $url);
curl_setopt($curl, CURLOPT_POST, TRUE);

$args['file'] = new CurlFile($filename, 'text/csv');
curl_setopt($curl, CURLOPT_POSTFIELDS, $args);
$curl_response = curl_exec($curl);
var_dump($curl_response);

Ответ

{"uploading":{"id":37360378,"source_quantity":6,"line_quantity":6,"client_id_type":"USER_ID","status":"UPLOADED"}}

[Вадим Тимошенко]

xoo, круто! тоже сработало!

Только в метрике после такой загрузки звонки не появились, а у вас?

Я использовал реальные id (ClientId) посещения сайта и их даты в unix формате.
И галочку в настройках метрики "Включить увеличенный период учета конверсий" тоже проставил.

[marxxt]

Вадим Тимошенко, не, не появились)

но и просто конверсий тоже не появилось в отчетах, хотя они были загружены и через апи и вручную, и в истории загрузок все ровно

я помню, как в adwords'у скармливал такую информацию, он долго обновлялся) так что подождите просто

и учтите, что сегодня у яндекса технические проблемы

[Вадим Тимошенко]

xoo, появились данные спустя 30 минут, все работает! Еще раз спасибо.

[Вадим Тимошенко]

xoo, возник вопрос на будущее - а реально\возможно передать CLIENT_ID во время звонка?

К примеру есть 3 номера, которые меняются рандомно (или в зависимости от канала). Но ведь подцепить CLIENT_ID нереально такой подменой? Только если по времени звонка+выданному номеру фильтровать активные в этот момент клиенты.

Или есть еще варианты?

[marxxt]

Вадим Тимошенко, не очень понял, куда вы хотите передать clientid, опишите во всех подробностях)

выцепить clientid можно через yaCounterXXXXXX.getClientID()

Или вы хотите устроить деанон и, грубо говоря, увидеть номера звонивших в вебвизоре?
Если да, то clientid тут вообще не нужен)))

[Вадим Тимошенко]

xoo, проще говоря:

Я зашел на сайт и позвонил по выданному мне номеру. Как метрика проставит конверсию [звонок] именно под мое посещение?

Как понял я:

Мне, при посещении сайта, метрика выдала clientid. Колтрекинг должен связать этот clientid со звонком. Но как? Ведь я просто увидел телефон на экране и позвонил. Не диктовал никому никаких id.

Я думаю дело в выданном номере. Но если номеров к примеру 2-3, то каким образом отследить кто звонил? Вот это я пока до конца не понял как делать.

[marxxt]

Вадим Тимошенко, если я вас правильно понял, то дело тут в том, что

• коллтрекинг динамический
  
• выделяется пул номеров, 5-10 в зависимости от посещаемости сайта
  
• человек зашел - система выдает свободный номер на 5-10 минут
  
• ушел или прошло время закрепления - номер возвращается в пул
  

spoiler

Если вы нагоните ботов на сайт на сутки, коллтрекинг встанет)) в пуле не будет номеров

А как работают всякие трекинги типа calltouch, comagic?
Откуда они знают, что по ключевому слову "купить бмв" было 10 звонков, а по "купить мерседес" - 13?
Оттуда, что человек заходит с utm-меткой utm_keyword={купить бмв}, на этот ключ вешается номер, позвонил человек - система пишет +1.

То есть появляется пара keyword:телефон

Ну и вот, можно сделать пару clientid:телефон

Если я правильно ваш вопрос уловил))

[Вадим Тимошенко]

xoo, вот понять пары keyword:телефон и clientid:телефон у меня не совсем в голове получается.

Не догоняю алгоритм.

Я пониманию вот это:
Пусть весь процесс можно разделить на 3 шага:

1. Посетитель на сайте - подменился телефон
   
2. Звонок совершен - передана информация в скрипт
   
3. Скрипт получил данные и записал все в метрику
   

Пропустим шаг 1. Начиная с шага 2:
После того как звонок закончился (или начался) колтрекинг отправляет об этом информацию в мой скрипт. Вместе со всеми данными о звонке (время, номер и тд.). И вот эти данные я могу записать в метрику. Но как прикрепить эту информацию к конкретному CLIENT_ID? Ведь колтрекинг не передал мне CLIENT_ID.

Если он может передать мне CLIETN_ID - значит он как то должен получить сначала CLIENT_ID. И вот как он его получит я не догоняю)))

[marxxt]

Вадим Тимошенко, а как вы хотели свой трекинг делать тогда?)

Ладно, рассмотрим простой пример с ключевыми запросами.

Контекст задачи:
есть сайт-магазин, посещаемость 1 человек в час с контекста, для подмены используем 1 номер 79811234567 некоего коллтрекинга Х, а номер самого магазина 79214949499

Что происходит в браузере посетителя:

1. Выцепляется utm_keyword={купить бмв}
   
2. Отправляется запрос на сервер через xhr или еще как-нибудь
   phone = getPhoneFromServer({купить бмв});
   
3. Подмена
   

Что происходит на сервере:

1. В ответ на запрос из браузера выдается номер 79811234567 обратно в браузер
   
2. Сервер делает отметку в базе данных, что номер прикреплен к ключу {купить бмв}
   
3. Начинает ждать звонок
   
4. Ждет
   
5. Ждет
   
6. Ждет
   
7. Звонок!
   
8. Теперь сервер должен перенаправить звонок с 79811234567 на 79214949499, попутно записывая номер звонившего, время звонка и ключевой запрос, к которому прикреплен номер прямо сейчас
   
9. После 5-10 минут возвращает номер 79811234567 в пул свободных номеров, снимает отметку, что номер к чему-то прикреплен
   

Ну вот и все))

[Вадим Тимошенко]

xoo, База данных! Теперь понятно как связать client_id и номер!) Вот ответ на мой вопрос) Привык мыслить без всяких БД )) Спасибо!

[marxxt]

Вадим Тимошенко, обращайтесь)

[bismoney]

Вадим Тимошенко, уже 3 день ломаю голову что за параметр, пытаюсь сделать на node

[bismoney]

xoo, уже 3 день ломаю голову что за параметр, пытаюсь сделать на node )))