internet e psicologia baseada em evidências: É hora de investirmos em intervenções...
DESCRIPTION
O curso apresenta conceitos introdutórios e necessários para o entendimento da psicologia baseada em evidências. São apontadas diversos tipos de metodologias, com ênfase nos ensaios clínicos randomizados e metanálises. Alguns princípios de estatística relcionados ao tema são abordados. Na segunda parte, os conceitos apresentados são utilizados para verificação das evidências de pesquisa na área das intervenções comportamentais via internet. Por fim, são apresentadas ferramentas gratuitas de desenvolvimento destas intervenções.TRANSCRIPT
Internet ePsicologia
@hpgomide
Internet e psicologia: e hora de investirmosem intervencoes comportamentais no Brasil?
Henrique Pinto GomidePrograma de Pos Graduacao em Psicologia UFJF
Centro de Pesquisa, Intervencao e Avaliacao em Alcool e outras Drogas
Internet ePsicologia
@hpgomide
Quem sou eu
I Psicologo formado pela UFJF,
I Estagio em avaliacao psicologica e em grupos detratamento de tabagismo,
I Experiencia com pesquisas na area de Psicologia Socialcognitiva e na area Drogas no CREPEIA.
I Linha de Pesquisa: ”E-health”
Internet ePsicologia
@hpgomide
CREPEIA
I Centro de Pesquisa, Intervencao e Avaliacao em Alcoole outras Drogas coordenado pelo Dr. Telmo Ronzani eDra. Laisa Sartes da UFJF.
I http://www.ufjf.br/crepeia
Internet ePsicologia
@hpgomide
Sumario
Definicoes introdutorias
Algumas definicoesCienciaPsicologiaA piramide das evidenciasEstatıstica aplicada
Estudos Clınicos Randomizados
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Introducao ao tema
Internet e psicologia: e hora de investirmos emintervencoes comportamentais no Brasil?
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Introducao ao tema (Cont.)
1. Como escolher entre investir no tratamento A e nao B?
2. Para investir e necessario avaliar...
3. Para avaliar, e preciso medir
4. Para medir, e preciso definir o que medir.
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Qual escolher?
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Qual escolher? (Cont.)
Voce foi diagnosticado uma doenca rara, existem doistratamentos disponıveis. Qual escolher?
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Qual escolher? (Cont.)
Um paciente apresenta o quadro de depressao aguda, qualtratamento indicar? TCC? Psicanalise? Medicamentos?
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Antes de responder estas questoes
Metodo Cientıfico
I Definicoes de desfechos,
I Metodos estatısticos para comparacao entretratamentos,
I Avaliacao crıtica dos resultados encontrados,
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Ciencia
I Para serem classificadas como cientıficas, as assertivasou sistemas de assertivas devem ser capazes de entrarem conflito com observacoes possıveis ou concebıveis(Popper).
I Uma teoria cientıfica deve ser um processo deconjecturas e refutacoes.
I Aproximacoes sucessivas da Realidade, nunca atingidapela limitacao do raciocınio indutivo.1
1Popper e a pesquisa em psicologia http://goo.gl/6ojKr
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Ciencia (Cont.)
Algumas caracterısticas geralmente atribuıdas ao metodocientıfico:
I Neutralidade
I Objetividade
I Experimentacao
I Generalizacao.
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Objetivos de Pesquisa em Ciencia das Saude
I Descrever fenomenos, identificando a frequencia eordem de ocorrencia
I Predizer fenomenos. Ex. O uso frequente de cigarropode gerar diversos tipos de cancer.
I Explicar fenomenos.
I Controlar fenomenos1.
I Aplicar os conhecimentos de pesquisa no mundo real.
1Assume proporcoes eticas e polıticas tambem
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Em qual categoria a Psicologia pertence?
I Ciencias Naturais: fısica, quımica, biologia...
I Ciencias Humanas: historia, literatura, sociologia...
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Psicologia Clınica
I Aplicacao das teorias psicologicas a problemas docotiano,
I Exemplos de abordagens clınicas: Psicanalise,Behaviorismo, Gestalt, Cognitiva, Humanista...
I Avaliacao sistematica das intervencoes atraves depesquisas clınicas
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Exemplos
I Freud e seus pacientes,
I Skinner, pombos e ratos,
I Piaget e seus filhos,
I ...
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Metodologias aplicadas a Psicologia
I Pesquisas com animais,
I Estudos de casos,
I Estudos de caso-controle,
I Estudos de coorte,
I Ensaios clınicos randomizados,
I Metanalises
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Pesquisas com animais
I Pesquisas conduzidas geralmente em ambientesaltamente controlados,
I Alto rigor experimental,
I Validade ecologica e generalizacao limitadas,
I Desempenha papel importantıssimo na testagem dedrogas e no desenvolvimento de areas como asneurociencias.
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Pesquisas com animais
Skinner
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Estudos de casos
I Diagnostico, tratamento e acompanhamento de umcaso individual.
I Vantagens: Descricao de casos raros e desenvolvimentode hipoteses de pesquisa.
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Estudos de Casos
Lineas Cage
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Estudos de coorte
I Sao um tipo especıfico de estudos longitudinais
I Avalia riscos comparando correlacoes entrecaracterısticas das populacoes,
I Foco no progresso e na mudanca de populacoesestudadas
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Estudos de coorte
Mortality in relation to smoking: 50 years’ observations onmale British doctors 2
Objetivo Comparar a mortalidade e os danos causadosem fumantes durante entre os anos de1951-2001.
Conclusoes Entre metade a 2/3 dos fumantes morre deuma doenca relacionada ao consumo decigarros.
2Doll, Richard, Richard Peto, Jillian Boreham, e Isabelle Sutherland.“Mortality in relation to smoking: 50 years’ observations on male Britishdoctors”. BMJ 328, no. 7455 (2004): 1519.
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Estudos Clınicos Randomizados
I Os participantes da pesquisa sao sorteados entre osgrupos que recebem tratamento,
I Geralmente um dos grupos e utilizado como controle,recebendo um placebo.
I Padrao Ouro. Se voce quer comercializar ummedicamento ou procedimento, voce precisa fazer estetipo de estudo.
I Sao geralmente muito caros.
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Estudos Clınicos Randomizados
Randomised controlled trial of non-directive counselling,cognitive-behaviour therapy, and usual general practitionercare for patients with depression. I: Clinical effectiveness 3
Objetivo Comparar a efetividade clınica de doistratamentos de TCC comparando-os a umcuidador de saude para pacientes comdepressao,
Conclusao Terapia psicologica foi mais efetiva durante osprimeiros meses de intervencao. Apos um ano,nao houve diferencas nas medidas avaliadas.
3http://www.ncbi.nlm.nih.gov/pmc/articles/PMC27542/
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Revisoes Sistematicas da Literatura
I Revisoes de literatura que avaliam dados de outrosartigos empıricos coletados atraves de forma sistematica
I Elas podem variar bastante entre si, sendo necessarioavaliar a qualidade.
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Revisoes Sistematicas da Literatura
Cognitive-behavioural psychotherapy: contributions of LatinAmerica4
Objetivo Avaliar a producao cientıfica brasileira em TCCnos principais indexadores cientificos domundo,
Conclusao Metade dos artigos encontrados eram derevisao de literatura e existe um padrao decrescimento na literatura em TCC no paıs.
4Souza, I. C., Ronzani, T.M., Velasques, F., Gomide, H. P., (2011), in CBTin Non-Western Cultures, Nova Science Publishers
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Metanalises
I Metodos sistematicos que utilizam tecnicas estatısticaspara combinar diversos estudos, buscando um efeitogeral destes estudos.
I Esta combinacao e geralmente oferece um resultadomais robusto que um estudo separado.
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Metanalises
Psychotherapy for depression in adults: a meta-analysis ofcomparative outcome studies.5
Objetivos Comparar 7 tipos diferentes de psicoterapiaspara o tratamento de depressao moderada
Conclusao O estudo sugere que nao ha grande diferencasentre as modalidades de tratamentopesquisadas.
5http://www.ncbi.nlm.nih.gov/pubmed/19045960
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
A piramide das evidencias
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Desafio 1
Um paciente apresenta o quadro de depressao aguda, qualtratamento indicar? Tratamento A ou B?
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Desafio 2
Um paciente apresenta o quadro de depressao aguda, qualtratamento indicar? Tratamento A ou B?
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Algumas definicoes basicas
I Medidas de tendencia central
I Correlacao vs. Causalidade
I Risco relativo, Risco absoluto
I Tamanhos de efeitos
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Medidas de tendencia central
I Existem diversas medidas de tendencia central (medias,mediana e moda)
I A medida que melhor representar seu conjunto de dadosdeve ser escolhida
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Media
I Existem varios tipos de media, a mais utilizada emestatıstica e a media aritmetica
I Pode ser definida, como a soma dos valores de umconjunto de dados divida pelo numero de elementos doconjunto
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Mediana
I A mediana pode ser definida como o valor que divideum conjunto de dados em uma metade inferior e outrasuperior
I Qual a mediana dos seguintes conjuntos de dados?I 98,101,105,106,185I 98,101,105,106,110, 185
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Moda
I A moda e o valor que mais se repete numa distribuicaode dados
I Qual a moda dos seguintes conjuntos de dados?I 98, 100, 100, 100, 101I 98, 98, 100, 100, 101
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Exercıcio
I Qual a medida de tendencia central que melhorrepresenta o ganho de quem vem a FAMINAS?
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Correlacao
I Correlacao e o grau de associacao entre duas variaveiscontınuas.
I Geralmente ela e expressa em um coeficiente que variade 0 a 1, onde zero significa nenhuma correlacao e 1perfeita correlacao.
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Correlacao (Cont.)
Figura: Coeficientes de 0,3; 0,6, 0,9 simulados usando R.
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Correlacao vs. Causalidade
I QI’s apresentam uma correlacao com horas de estudopor dia.
I O QI apresenta uma correlacao com o tamanho emcentımetros do pe.
I O uso de remedios de vermes esta associado com odesempenho escolar.
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Nos estudos de coorte...
Mortality in relation to smoking: 50 years’ observations onmale British doctors.
I O uso de cigarro esta relacionado a diversos tipos decancer. Metade dos medicos fumantes morreram deuma doenca relacionada ao cigarro.
I Problema de uma terceira variavel...
I Causalidade?
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Risco Relativo
I E a probabilidade e a razao da probabilidade de umevento (ou doenca) ocorrer em um grupo exposto a umacondicao quando comparado a outro grupo nao exposto.
I RR =pExposto
pNaoExposto
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Risco Relativo (Cont.)
Considerando a probabilidade de desenvolver cancer depulmao entre fumantes em 20% e nao fumantes 1%.
Tabela: Tabela de comparacao entre os riscos
Risco Status da DoencaPresente Nao Presente
Fumante a bNao Fumante c d
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Risco Relativo (Cont.)
RR = a/(a+b)c/(c+d) =
20/1001/100
I Concluımos que os fumantes apresentam 20 vezes maischances de desenvolver cancer do pulmao.
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Razao de chances (Odds Ratio)
I Definido como a razao entre a chance de um eventoocorrer em um grupo e a chance de ocorrer em outrogrupo.
I OR = p/(1−p)q/(1−q
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Odds Ratio (Cont.)
I Se o Odds Ratio for igual a 1, dizemos que o grupo temas mesmas chances,
I Se maior que 1, dizemos que a probabilidade e maior noprimeiro grupo,
I Se menor que 1, dizemos que a probabilidade doprimeiro grupo e menor.
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Odds Ratio (Cont.)
I Se em uma amostra de 100 homens, 80 fizeram usoabusivo de alcool nos ultimos sete dias e em um gruposemelhante de 100 mulheres, 20 fizeram uso abusivo nomesmo intervalo de tempo.
I OR = p/(1−p)q/(1−q) = 0,8/1−0,2
0,2/1−0,8 = 0,8x0,80,2x0,2 = 1,6
0,4 = 4
I Homens tem 4 vezes mais chances de fazer uso abusivode alcool que mulheres.
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Tamanhos de efeito
O glossario da Cochrane Library define:
1. Um termo generico para se estimar o efeito de umtratamento de um estudo,
2. Uma medida de efeito sem dimensao que e tipicamenteutilizada para dados contınuos quando diferentes escalassao utilizadas para medir um desfecho e e usualmentedefinido como a diferenca media entre a intervencao e ogrupo controle divido pelo controle ou ambos os grupos.
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Tamanhos de efeito
I Eles podem ser medidos como coeficientes de regressao,Riscos Relativos, Odds Ratio.
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Tamanho Grande de Efeito
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Tamanho de Efeito Medio
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Tamanho de Efeito Grande
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Estudos Clınicos Randomizados
I Padrao ouro em pesquisa clınica
I Seu objetivo e dar uma evidencia confiavel e valida queum tratamento apresenta evidencia de eficacia.
I E o metodo que permite afirmar causalidade se otratamento apresentou efeito.
I Existem algumas ameacas a validade desta metodologia,tambem no terreno de intervencoes psicossociais.
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Jonas Salk
”There is no patent. Couldyou patent the sun?”
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Ameacas a validade dos ECR
I Problemas conceituais
I Validade interna: precedencia temporal, selecao departicipantes, maturacao, regressao para as medias,desistencia dos participantes, testagem e instrumentos.
I Validade externa: caracterısticas da amostra, do localde estudo
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Ameacas a validade dos ECR (Cont.)
I Validade de constructo: Explicacao inadequada (termosgerais), expectativas dos pesquisadores, difusao dotratamento.
I Problemas estatısticos: poder estatıstico dos testes, altaheterogeneidade, problems no emprego de tratamentos.
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
CONSORT
I Significa Consolidated Standards of Reporting Trials,
I Objetivo: melhorar a qualidade dos estudos cientıficos,ECR’s principalmente,
I Existem diversos protocolos para conducao de pesquisas.
I http://www.consort-statement.org/
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Registros de Ensaios clınicos - Brasil
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Problemas com os estudos clınicos
I A sua saude nem sempre e o principal interesse daindustria farmaceutica,
I Nem todos os estudos clınicos tem seus dados abertospara avaliacao,
I Alguns estudos sao maquiados, fraudados e muita,muita gente morre!
I A literatura cientıfica esta enviesada!
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Caso Vioxx
I Droga utilizada como anti-inflamatorio nao esteroidepara tratamento de osteoartrite, dor aguda liberada peloFDA em 21 de maio.
I O artigo que apresenta suas vantagens clınicas naoreportou os problemas cardivasculares da pesquisa.
I E estimado que 55 mil pessoas prematuramente dederrames e ataques cardıacos devido ao uso domedicamento. Equivalente a 229 incendios da boate emSanta Maria.
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Colaboracao Cochrane
Figura: http://www.cochrane.org/
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
Duvidas, Sugestoes?
Internet ePsicologia
@hpgomide
Definicoesintrodutorias
Algumas definicoes
Ciencia
Psicologia
A piramide dasevidencias
Estatıstica aplicada
Estudos ClınicosRandomizados
SumarioIntervencoes para internet
DefinicaoPotenciais usosEvidencias de eficacia
Condicoes de SaudeTabagismoAlcoolTranstornos de ansiedadeDepressaoTranstornos alimentaresDorOutras condicoes
Desafios em Pesquisas
Brasil e o uso de tecnologias
Regulamentacoes existentes
Faca voce mesmo!
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Justificativa
I Transtornos mentais como ansiedade, depressao,doencas relacionadas ao uso de alcool e psicoses estaoentre as 20 maiores causas de incapacidade em todo omundo
I Aproximadamente metade da populacao mundial viveem paıses que, em media, possuem um psiquiatra paracada 200.000 pessoas.
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Justificativa (cont.)
I Dificilmente formaremos profissionais de saude emnumero adequado,
I Precisamos pensar alternativas para melhorar osservicos de saude no mundo,
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Definicao
I Intervencoes mediadas por internet tipicamente focamquestoes comportamentais com o objetivo de mudar umcomportamento e causar melhorias de sintomas,
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Potenciais usos
I Nenhum tratamento esta disponıvel, listas de espera.
I Adjunto ao tratamento padrao,
I Prevencao de recaıdas,
I Para aqueles que nao procuram devido ao estigma,
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Evidencias de eficacia
I Existem diversas evidencias de eficacia destasintervencoes para diversas condicoes de saude:
1. Uso de alcool e drogas2. Ansiedade3. Depressao4. Transtornos alimentares5. Estresse6. Dor7. ...
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Elas funcionam?
I Responder esta questao e tao difıcil quanto responder a”Terapias funcionam”?
I Que tipos de terapias? Qual a modalidade?
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Tabagismo
I Segundo a OMS, o uso de tabaco e responsavel porcinco milhoes de mortes anualmente, numero maior quea soma das mortes por tuberculose, HIV/AIDS emalaria.
I Diversos ensaios clınicos randomizados e metanalisesforam realizados buscando avaliar a eficacia dasintervencoes comportamentais computadorizadas paratabagismo (Rooke et al., 2010)
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Tabagismo (Cont.)
I Uma pesquisa de metanalise para avaliar a eficacia dasintervencoes comportamentais assistidas porcomputador para tabagismo revelou que essasapresentaram pequenos tamanhos de efeito (RiscoRelativo = 1,44) quando comparadas a gruposcontroles (Myung, McDonnell, Kazinets, Seo, &Moskowitz, 2009)
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Exemplo
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
No Brasil
Carlini, B. H., Ronzani, T. M., Martins, L. F., Gomide, H.P., & Souza, I. C. W. de. (2012). Demand for andavailability of online support to stop smoking. Revista deSaude Publica, 46(6), 1074–1081.doi:10.1590/S0034-89102012000600018
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Exemplo
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Alcool
I O abuso do uso de alcool e um dos maiores fatores derisco a saude. E fator causal para mais de 60 tipos dedoencas e acidentes, resultando em aproximadamente2,5 milhoes de mortes anualmente
I Foco: Reducao do uso de risco e nao na dependencia.
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Alcool (Cont.)
I Em um estudo de metanalise, foi verificado que asintervencoes sao mais eficazes que a simples avaliacaodo consumo atraves de um meio eletronico.
I Problemas metodologicos que comprometem a validadedos achados como amostras e medidas de tendenciacentral.
I Segundo Rooke et al. (2010), verificou-se que asintervencoes para alcool apresentam maiores tamanhosde efeito que controles (d = 0, 22).
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Exemplo
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
No Brasil
Figura:https://www.informalcool.org.br/content/beber-menos
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Transtornos de ansiedade
I Transtornos de ansiedade afetam uma a cada seispessoas durante o curso de suas vidas (Somers,Goldner, Waraich, & Hsu, 2006).
I Boa parte das pessoas nao procuram tratamento emsaude.
I Os resultados de metanalises apontam que ostratamentos sao superiores ao placebo, lista de espera.(d = 0, 95 e d = 0, 75 de Cuijpers et al., 2009)
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Transtornos de ansiedade (Cont.)
I Problemas nos estudos quanto as taxas de abandono,baixa qualidade metodologica.
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Exemplo
Figura: http://www.anxietyonline.org.au/home?op=auth;
method=createAccount
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Depressao
I Segundo a OMS (2008), a depressao e a terceira maiorcausa dos anos vividos com incapacidade e do tempoperdido devido a mortalidade prematura.
I Um estudo de metanalise com 15 intervencoesapresentou tamanho de efeito moderado (d = 0, 37),quando comparados os grupos intervencao e lista deespera (Andersson & Cuijpers, 2009).
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Depressao (Cont.)
I Tamanho de efeito inclusive comparavel a terapiacognitiva comportamental tradicional (d = 0, 39),quando comparados os grupos intervencao e lista deespera (Cuijpers, Smit, Bohlmeijer, Hollon, &Andersson, 2010)
I Devido a problemas de heterogeneidade da amostra ealtas taxas de abandono.
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Exemplo
Figura: http://www.beatingtheblues.co.uk/
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Transtornos alimentares, compulsao e obesidade
I Bulimia nervosa intervencoes como adjuntas aotratamento somente,
I Resultados preliminares para bulimia nervosa.
I Nao existem metanalises ainda.
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Exemplo
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Dor
I Uma metanalise somente (d = −0, 41)
I Estudos com metodologias razoavelmente fracas,problemas de validade externa.
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Outras condicoes
I Estresse no trabalho - programa complementar aoclınico apresentou evidencias quando comparados a listade espera (d = 0, 6).
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Desafios em pesquisas
1. Falta de um protocolo adequado para avaliacao daqualidade dos ECR’s. Existe um em fase de testes doCONSORT.
2. Alta perda de participantes durante os ECR’s
3. Falta de definicao conceitual das tecnicas empregadas edas teorias,
4. Falta de estudos sobre HCI
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Brasil e o uso de tecnologias
I O Brasil possui aproxidamente 80 milhoes de usuariosde internet.
I 35% dos usuarios de internet buscam informacoes emsaude.
I O paıs possui mais linhas de celulares que habitantes
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Regulamentacoes existentes
I Nao existem regulamentacoes especıficas
I Resolucao do CFM 1 639/2002 define as normastecnicas para utilizacao de prontuarios online,
I Existem 5 Resolucoes sobre o tema emitidas pelo CFP
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Resolucoes do CFP
I 002/95 Veda ao psicologo quaisquer tipos de prestacaode servicos online.
I 01/2012 Permite servicos psicologicos desde que sejampontuais, educativos, focados no tema proposto e naofujam do Codigo de Etica da profissao.
I Orientacoes pedagogicas (max. 20 sessoes), processosde selecao de pessoas, atendimento de clientes emtransito sao possıveis.
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
01/2012
Sobre utilizacao de softwares informativos e educativos comrespostas automatizadas
I Os psicologos precisam ser identificados atraves decredenciais dado por um selo do CFP
I O psicologo inscrito deve estar legalmente ligado a umConselho Regional de Psicologia
I Deve ser preenchido um formulario de requirimento
I O cadastro e anual
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Exemplo
Figura: http://selo.cfp.org.br/credenciamento/
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Faca voce mesmo
I LifeGuide Online e uma plataforma aberta paradesenvolvimento destas intervencoes,
I Existem intervencoes ja avaliadas utilizando estaplataforma em formas de ensaios clınicos randomizados
I Desenvolvido na University of Southampton
I Wordpress, Drupal, etc...
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Lifeguide Online
Ferramentas
I Desenvolvimento e cotacao de questionarios
I Automacao de e-mails e mensagens de textos
I Feedback personalizado de acordo com as respostas aquestionarios
I Randomizacao de participantes
I Registro de logs
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Lifeguide
Figura: https://www.lifeguideonline.org/
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Dicas
I Journal of Medical Internet Research -http://www.jmir.org/
I Dicas em Pesquisa -http://dicasempesquisa.tumblr.com/
I Portal Cochrane Summares -http://summaries.cochrane.org/
I TED talks - http://www.ted.com
I Livro gratuito - Testing Treatments -http://www.testingtreatments.org/the-book/
I Ingles - http://www.verbling.com
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Obrigado!
”Always do right. This will gratify some people, and astonishthe rest- Mark Twain
Internet ePsicologia
@hpgomide
Intervencoes parainternet
Definicao
Potenciais usos
Evidencias de eficacia
Condicoes deSaude
Tabagismo
Alcool
Transtornos deansiedade
Depressao
Transtornosalimentares
Dor
Outras condicoes
Desafios emPesquisas
Brasil e o uso detecnologias
Regulamentacoesexistentes
Faca voce mesmo!
Contato
I Twitter - @hpgomide
I Facebook - www.facebook.com/henriquepgomide
I E-mail - [email protected]