Como capturar o numero de inscrições de um canal do youtube em tempo real

Você pode usar Selenium p/ isso…
Mapeia a página, dando procurando pela div que possuia a class "odometer-inside"
Assim você pode dar um .text() e resgatar o valor.

Como é um site bem simples, dá p/ usar o driver headless mesmo… vai ficar bem rápido e bem facil de fazer…

Da uma estudada no selenium, você vai ver que é bem simples.

Ai depois com esse valor em mãos… a parte de escrever em TXT é mais fácil ainda…
Caso nunca tenha manipulado arquivos com Java… da uma estudada … no google ta cheio de material sobre isso com exemplos…

Abs

opa, obrigado vou dar uma olhada sim, e a parte do txt sei fazer sim, sem problemas.

Analisei o site que você passou e vi que o texto a ser capturado está dentro de um div que usa o canvas do HTML.

Se não fosse canvas eu indicaria o Selenium mesmo ou HttpClient, mas como usa o canvas dá uma pesquisa sobre “get text from canvas html5” ou então “get ocr from canvas”, algo do tipo.

Se esse site fosse HTML simples te mandava até o código

Ahhh analisando melhor o site descobri que ele usa o serviço do youtube para verificar informações sobre canais

https://www.googleapis.com/youtube/v3/channels?part=statistics&id=UCbdGvh1ETLb4dHLHXW4pQkQ&fields=items/statistics/subscriberCount&key=AIzaSyCRtJ2uhgYe7p3J-QkC6kHsm7KZz0bDIok

Onde:

• id=UCbdGvh1ETLb4dHLHXW4pQkQ = id do canal

• key=AIzaSyCRtJ2uhgYe7p3J-QkC6kHsm7KZz0bDIok = key de acesso a API google, acredito que pela página do Google Developer você consegue sua key de acesso também.

• fields=items/statistics/subscriberCount serve para navegar nos níveis dos dados retornados sobre o canal

Com essas informações é possível você conseguir buscar várias informações sobre o canal desejado.

Dá uma lida nesse link https://developers.google.com/youtube/v3/docs/

@Fabio_Bonnie , de qualquer forma… o selenium ainda seria uma saída… na estrutura do html, os textos estão hierarquizados em tags div… div dentro de div … mas mesmo assim… basta pegar a div “pai” e dat um text() que ele resolve…

Porém os links que passasse consumindo direto a API é bem melhor.

Então já usei várias vezes o Selenium para esse tipo de situação.

Mas analisando o site que @guilobo passou percebi que a informação que ele queria estava dentro de um canvas HTML5, e acho que não tem como pegar o valor através do Selenium (repetindo acho, tentei e não deu certo).

Se tiver alguma outra maneira posta, aí vai que um dia precisamos e não tenha o dados num webservice

Desde já valeu aí por tudo

Segue tentativa:

import java.util.concurrent.TimeUnit;

import org.openqa.selenium.By;

import org.openqa.selenium.WebDriver;

import org.openqa.selenium.WebElement;

import org.openqa.selenium.firefox.FirefoxDriver;

public class GetCanvasText {

private WebDriver driver;

private String baseUrl;

public static void main(String[] args) throws Exception {
	GetCanvasText t = new GetCanvasText();
	t.setUp();
	t.testE();
}

public void setUp() throws Exception {
	driver = new FirefoxDriver();
	baseUrl = "http://subs.nament.com.br/";
	driver.manage().timeouts().implicitlyWait(30, TimeUnit.SECONDS);
}

private void abrirLink(String url) {
	driver.get(url);
}

public void testE() throws Exception {
	abrirLink(baseUrl);
	WebElement canvas  = driver.findElements(By.tagName("canvas")).get(0);
	System.out.println(canvas.getText());
}

}

GetCanvasText.png1917×931 117 KB

@Fabio_Bonnie,

Que tal assim?

public class GetCanvasText {

	private WebDriver driver;
	private String baseUrl;

	public static void main(String[] args) throws Exception {
		GetCanvasText t = new GetCanvasText();
		t.setUp();
		t.testE();
	}

	public void setUp() throws Exception {
		driver = new FirefoxDriver();
		baseUrl = "http://subs.nament.com.br/";
		driver.manage().timeouts().implicitlyWait(30, TimeUnit.SECONDS);
	}

	private void abrirLink(String url) {
		driver.get(url);
	}

	public void testE() throws Exception {

		abrirLink(baseUrl);

		String XPATH = "//span[@class='odometer-digit']";
		
		/**
		 * Tive que usar Thread.sleep ao invés dos Waits "inteligentes"
		 */
		Thread.sleep(10000); // 10 segundos

//		WebDriverWait wait = new WebDriverWait(driver, 5);
//		wait.until(ExpectedConditions.presenceOfAllElementsLocatedBy(By.xpath(XPATH)));
		
		List<WebElement> elementos = driver.findElements(By.xpath(XPATH));
		StringBuilder sbConteudoSpan = new StringBuilder();

		for (WebElement span : elementos) {
			sbConteudoSpan.append(span.getText());
		}

		String contadorString = sbConteudoSpan.toString().trim();

		if (!contadorString.isEmpty()) {
			Integer contador = new Integer(sbConteudoSpan.toString().trim());
			System.out.println(">>> " + contador);
		} else {
			System.out.println(">>> Problemas ao resgatar o contador! Inspecione o DOM e avalie o XPATH.");
		}

		driver.quit();
	}

}

Funcionou numa boa…

Print:

debug.png1360×768 92.1 KB

Abs