Разворачивание сокращенных ссылок из Твиттера

С появлением у Твиттера новой сокращалки ссылок t.co, меня, как соавтора Кросспостера из Твиттера во ВКонтакте, заспамили просьбами сделать развертывание этих ссылок, чтоб В Контакт публиковался чистый полный URL. Но я не видел в этом большой проблемы, пока супербезопасный ВКонтакте не начал считать все эти ссылки фишинговыми. Долго терпел, но теперь наконец набросал развертывание этих ссылок за каких-то минут пять.

Сперва хотел делать переход по ссылке, смотреть, куда переадресовывается. Но быстро откинул эту идею. Правильней же будет использовать API сокращалки. Но времени тратить на изучение ненужного в дальнейшем API не хотелось. К тому же у каждой сокращалки свой API, а не плохо было бы расшифровывать все сокращенные ссылки. Поэтому вместо сайта dev.twitter.com я полез в гугл и нашел прекрасный untiny.me - готовый сервис развертывания сокращенных URL. Ссылки "API" на нем я не заметил (хотя она есть), а полез сразу в исходники страницы - но и там всё достаточно просто и понятно.

Решено было не изобретать велосипед, а использовать их базу сокращалок. И вот первая и главная строчка решения проблемы готова:

$response = simplexml_load_file('http://untiny.me/api/1.0/extract/?url='.$short_url);

Теперь в переменной $response->org_url хранится длинная ссылка, полученная из короткой $short_url.

Дальше - просто отключим вывод ошибок (собачкой, на всякий пожарный - вдруг Untiny грохнется), обернем это в функцию и дело в шляпе.

Ах да, у многих же сохранилась привычка со времен "Твиттера без t.co" резать ссылки через сторонние bit.ly, goo.gl и прочие. Вместе с t.co получается, что ссылка сокращается не один раз, а два и даже больше. Некоторые спаммеры пропускают свою вредоносную ссылку через одну, вторую, третью резалку и только потом публикуют ее в Тви (который, наконец, пропускает уже сокращенную ссылку через свой t.co). Поэтому запустим рекурсию, пока Untiny не начнет выдавать ошибки вместо ссылок:

function untiny($short_url) {
  $response = @simplexml_load_file('http://untiny.me/api/1.0/extract/?url='.$short_url);
  $result = $response->org_url;
  if(strstr($result, 'http://'))
    return untiny($result);
  else
    return $short_url;
}

Со ссылкой разобрались, но нам же надо не просто её развернуть, а и найти её в сообщении, а потом заменить на "правильную" ссылку. Пишем вторую функцию.

На вход подаем сообщение, на выход - тоже сообщение, но с измененной ссылкой. Используем о ужас регулярки. =) Примерно так найдем t.co-ссылку:

preg_match("#http:\/\/t\.co\/(\w+)#", $message, $regex)

а потом заменим её на развернутую:

preg_replace("#http:\/\/t\.co\/(\w+)#", untiny($regex[0]), $message)

Почему именно t.co? А всё равно твиттер по своим API и RSS (как в случае с моим кросспостером) отдает все ссылки именно так.

А что же будет с сообщением, содержащим больше одной ссылки? Всё поломается - все ссылки будут развернуты так же, как первая. Это плохо. Добавляем в preg_replace последний параметр лимит и запускаем в цикл пока ссылки на t.co есть:

while(preg_match("#http:\/\/t\.co\/(\w+)#",$message, $regex)) {
  $short_url = $regex[0];
  $message = preg_replace("#http:\/\/t\.co\/(\w+)#", untiny($short_url), $message, 1);
}

Чтоб не страдать от отсутствия доступа в Untiny, искусственно лимитируем использование функции untiny() десятью запусками, и оборачиваем для удобства в функцию:

function untiny_message($message) {
  if(strstr($message, 'http://')) {
    $i = 10;
    while(preg_match("#http:\/\/t\.co\/(\w+)#",$message, $regex) && $i--) {
      $short_url = $regex[0];
      $message = preg_replace("#http:\/\/t\.co\/(\w+)#", untiny($short_url), $message, 1);
    }
  }
  return $message;
}

Теперь, достаточно передать в функцию untiny_message() сообщение из Твиттера и сохранить сообщение с развернутыми ссылками, которое вернет эта функция. Например, так:

$message = untiny_message($message);

Получилось местами не очень гуманно, но быстро в реализации, просто и понятно.

Кросспостер с этой функцией можно скачать здесь: tvkontakte 0.2i (инструкция тут).

Предыдущая версия по прежнему тут: tvkontakte 0.1i.

Приятного использования!

UPD: Реализовано и на ТуВконтакте.ру.
Инвайты:

• XHpJinnz3tOgAlq2g22dK6ZkmWz0eX4Y


• IWVjMEcs72owV0bt93InH9GUfv58tIO4


• V31kIrOnlFGlbe8fqMB1aOSVz1ZYyH8m


• 4G9JBZi1b78LI3L6rZQHohS9oKI5AXxn


• gSo4jVNw7CkdIL6Dt2ltta5iqbjqqdRM

UPD (26.03.2012): По всей видимости, ООО "ВКонтакте" отключило поддержку UserAPI. На всегда или нет - не известно, как и то, будет ли работа восстановлена позже. Но если работа сайта durov.ru не возобновится (на его основе и работает скрипт), то скорее всего шансов не останется... ТуВконтакте.ру аналогично не работает.